招聘需求
你将参与
- 负责爬虫系统的总体架构、爬取策略设计和研发;
- 负责反爬、风控对抗策略的研究与实现,提升抓取效率和质量;
- 根据业务需求实现 Web/App 端的主要是招聘网站职位数据抓取、清洗、存储等工作。
我们需要的技能
- 两年以上爬虫开发经验,精通常用的爬虫技术及架构,并能快速实现;
- 精通 Python/Go/Java 中的一种或多种,熟悉常用的数据存储(ES、NoSQL、MySQL 等);
- 熟悉主流爬取技术及工具,熟练使用 Selenium/Puppeteer/Scrapy/Splash/PhantomJS 等至少一种工具;
- 熟悉 HTTP/TCP 协议,熟悉 Fiddler/Charles/BurpSuite/TCPDump/Wireshark/Mitmproxy 等至少一种网络分析工具;
- 有较丰富反爬实践经验,能解决图片验证码/滑块/账号限制/IP 限制等问题;
- 良好的代码习惯,结构清晰,命名规范,逻辑性强,代码冗余率低;
- 强烈的自我驱动,学习能力强,靠谱。
以下是加分项
- 有国内外短视频平台或其他社媒、电商平台,招聘平台爬虫经验优先;
- 有大规模爬虫及风控对抗实践经验优先;
- 有 App 逆向经验,熟悉 Xposed 框架、常见 Hook技术,熟悉 Smali、Dedexer、Dexdump、Apktool、Dex2jar、IDA、OLLYDBG 等至少一种;
- 代码洁癖、严谨、刨根问底;
- 不喜欢卷,崇尚工具与效率、自由与责任。
- 熟悉像AWS,阿里云等云平台
#我们希望你?
- 学历本科以上,主动积极、吃苦耐劳、诚信踏实、
- 良好的沟通能力
- 一周工作时间10-15小时
- 准时交付任务
- 发薪方式,人民币发薪
招聘类型:
外包零活
职业:
开发
工作方式:
远程工作线上兼职
领域:
AI/人工智能工具/开源
做过三年Java 爬虫,前端也会,有过app逆向经验,有兴趣,可联系
怎么联系你呢?
微信可以吗,手机号就是微信号
技能很符合 熟悉python selenium 爬虫 ,欢迎联系
能否把简历发给我,或者简单介绍一下你的背景
有python,node.js爬虫经验,熟练js逆向,熟练使用selenium,playwright,puppeteer等浏览器框架.有丰富的海外社区爬取经验,twitter,youtube,facebook等.欢迎联系.
我会python scrapy 但是都是做的私活。可以吗?爬过抖音视频和评论数据。保存到mysql。
熟悉,可联系
能否把简历发给我,或者简单介绍一下你的背景
熟悉Python,Selenium, Requests,楼主看看我
可联系
多年爬虫,可联系
目前爬虫本职工作,采集过国内外主流网站帖子舆论,有解决验证码风控经验
还需要么?
还需要嘛
熟悉python,有丰富的爬虫经验,这个岗位还需要人吗,请联系我