露脸交友区爬取官网招聘数据是不是不容易实现

头像
贞观
108阅读8评论

想爬官网的招聘数据,一千多个网站。会不会好的方法?

城市:
深圳
职业:
产品
收藏
举报
加载中…
精选评论
头像
等级6

一般官网的招聘数据都有延迟 ,很多半年都不更新

了解了。这种聚合大量网站的是不是只能用笨功夫了?

如果你不在意他们更新慢就只能挨个匹配

嗯嗯。今日头条的原理也是这样?

今日头条官网的招聘数据也没那么实时吧

头像
等级6

而且你要处理的规则太多 ,需要定制很多很多脚本

是的,我也想不通。我看到有一个项目就是这么干的,不知道怎么实现的。

主要它的底层思想是官网的招聘数据实时同步,但一般都是官网的数据大多数时间都很久才更新一次