guide.md 497 B

  1. 分析构成列表查询的接口
    • 分页控制参数
    • 招标类型
  2. 采集详情页
    • 构造详情页url
    • 去重
  3. 清洗和转换
    • HTML类型数据,考虑在原来的基础上进行精简和资源url转换
    • json类型数据,考虑在模板HTML上填充数据
    • 展示招标必要信息即可
  4. 入库数据构造
    • jsoup提取html的数据
    • json数据
    • 正则表达式提取混在js或html属性中的数据
  5. 入库

    • jdbc