logo

分享做了一个政府公共资源采购信息的采集程序,方便跟踪和了解项目项目用

头像
willhuo
34阅读0评论3 个月前

采集程序分为2部分,一部分是借助了cef进行的数据采集,另外一部分是直接协议采集。

cef采集程序

针对数据采集来讲,协议不好才的,一定要用浏览器内核采集,不用管协议不协议的,可见即可得,我用这东西采集过小说,图片,商品等。

协议采集程序

每个城市可以设计一个采集规则,写一个后台服务,就可以自动采集并入库了

web前端可以自己查看自己采集的项目列表,也支持手机端

采集完的数据后,可以干自己想干的事情了

分享主题:
工具/资源
城市:
其他
加载中…
精选评论
暂无数据

暂无数据