【项目简介】
我们目前在开发一款营销工具,需要一名有经验的爬虫工程师加入,协助完成。
【岗位职责】
- 设计并开发高效、稳定的爬虫系统,针对目标网站进行数据抓取。
- 突破反爬限制(如IP封锁、验证码、动态加载等),确保数据获取的持续性和稳定性。
- 对抓取数据进行清洗、去重、结构化存储,输出可用性高的数据结果。
- 根据需求优化现有爬虫代码,提升效率和容错能力。
【任职要求】
-
硬性条件:
- 精通Python,熟练使用Scrapy、Requests、Selenium等工具
- 熟悉反爬应对策略(代理IP池、请求头伪装、动态JS解析等)
- 能独立完成从网页解析到数据存储的全流程开发
- 有实际项目经验,能提供代码案例或成果展示(重要!)
-
加分项:
- 熟悉分布式爬虫(如Scrapy-Redis)、异步框架(如aiohttp)
- 掌握数据清洗工具(Pandas、正则表达式)或数据库优化(MySQL/MongoDB/Redis)
【薪资待遇】
- 薪资面议
招聘类型:
职业:
工作方式:
城市:
领域:
您好,四年爬虫开发经验,逆向风控都能解决,可以联系一下
你好,我这边也有爬虫的需要。可以查看联系方式进一步沟通。
可以聊一下
爬虫经验实战6年
四年爬虫经验,三年全栈, 有一套完整的爬虫解决方案,期待合作
Python,目前从事爬虫相关工作,处理过较多的网站,搞过抖音、小红书、快手,能纯协议解决验证码,自动化操控都能处理。期待后续沟通
爬虫,项目经验丰富,可以聊一下
主要从事合规数据爬取,美国,欧洲电商数据