logo

招聘(爬虫小活预算3k~8k)用Go或Python爬取海关数据

头像
go_web3
987阅读27评论

初步预算:
3k~8k,若针对数据能提出更好的建议,预算可加(若价格偏离预期,低了或高了,能做的朋友可以直接在评论区报价留言),可以签电子合同保障双方权益。

注意:由于时间赶,有过海关数据爬取经验的朋友请联系我,无相关经验请勿联系,以免浪费彼此的电量值,感谢

需求如题:
爬取历年及最新海关数据,入库到MySQL或postgresql即可,Go或Python都可,Go尤佳。

交付时间:
一周内,越快越好

招聘类型:
外包零活
职业:
开发
工作方式:
线上兼职
城市:
广州郑州海外其他苏州武汉长沙南京西安上海北京杭州深圳成都厦门
需消耗电量 5
加载中…
精选评论
头像

哪个海关,是海关总署?能否给个链接

海关总署应该不行,数据以及字段不全;所以我才备注有爬取过海关数据的同学才可以。

那是哪里呢 麻烦给个目标我去看看

各国海关,或者比如美国的有这个网站免费提供数据https://www.importgenius.com/

如果之前没做过,爬取各个国家的会有些杂,因此希望是做过的,能清楚的知道每个国家分别用的哪个网址,或者某一个网站能长期稳定爬取

主要看你需要具体什么数据, 我之前也关注过, 类似数据 WTO 官方应该有, 甚至 worldbank data, ourworldindata 等都应该有大概的. 如果单个政府网站, 哪怕只有 G20 的, 一个个去抓也太费劲了

真的“可行”还是假的“可刑”😂

我似乎在QQ浏览器的一些小说评论里经常看到你

头像

找到没, 海关这种直接经验的比较难找, 我有122或者12123的经验, Go我也比较熟

虽然补充了简历加入了人才库, 我电量不够暂时联系不了 :) 还没细看社区规则好像是不是还不能在帖子里发联系信息, 虽然现在离职也有很多事, 社区规则还不大熟, 貌似有看到评论可能得电量的事也没得到一个, 晚点再研究

头像

不会违法把,刑不刑啊?是不是可铐啊

咋会违法呢?又不是爬海关总署

还真要看具体操作方式, 之前我负责公司爬虫团队, 公司律师也专门培训解读过相关边界, 大体上不绕过对方防范, 比如如果程序手段自动识别验证码可能就有问题, 主要看对方是否追究. 也研究了解过国内不上爬虫判例一般是有竞争和爬取对方网站导致对方服务处问题之类的

头像

Python有爬取数据经验,有意可聊,辛苦了!

你没有联系方式,加不上!可以留下📮!方便投递简历

尚未找到,可联系,主页联系方式是微信

头像
[评论已删除]

确实是,我也没有抱太大的希望

头像

爬虫爬的好,牢底坐穿😂

头像

给个预估数据量

头像

具体指海关的什么数据?ip数据、文书数据需要么?

头像

真刑,可拷,哈哈。