Hiring: AI Crawler / Job Intelligence Engineer(Remote)
【关于我们】
我们是一家聚焦北美市场的AI初创公司,正在打造下一代企业智能招聘与销售自动化助手。通过AI Agent自动化操作LinkedIn等平台,帮助企业精准触达目标人才或客户,并实现高效转化。同时,我们也在做帮助个人求职者求职提效的AI+求职产品。团队核心成员来自硅谷,现寻找中国的技术极客共同从0到1打造产品。
我们在做一套 AI 爬虫+ 职位监测系统:能对任何包含岗位信息的网站(官方招聘页、ATS、求职平台、社区帖、公司公告等)进行自动化抓取、解析、去重与变更监测,并把结构化职位推送到内部系统与订阅用户。
你将负责:
1.建立可扩展的站点适配 + 解析模板系统,覆盖 Greenhouse、Lever、Workday、SmartRecruiters、公司官网等
2.反爬与稳定性:remote browser 池、代理轮换、指纹与会话管理、自动重试
3.结构化抽取(LLM + 规则):标题、技能、薪资、签证、地点、级别、远程/混合等
4.变更监测:新增/下线/内容更新检测与通知
5.数据写入 Postgres/Elastic/BigQuery,并推送Slack/Email/Webhook/Sheets
我们期望你:
1.熟练:Playwright/Puppeteer/Selenium + Python/Node.js、分布式调度(Airflow/Celery/K8s Cron)、代理与指纹、反爬与渲染
2.有 LLM 提取与对齐(Guardrails/JsonSchema/Retry)经验更佳
3.对 robots.txt / ToS /合规敏感,能在灰度边界内稳健落地
技术栈(灵活):Playwright、Puppeteer、Selenium、Scrapy、Playwright-Docker、Selenium Grid、Browserless、K8s、Redis、Postgres、Elastic、Airflow、LangChain + GPT/Claude
备注:
1.线上面试、远程办公,工作时间地点灵活;
2.兼职,报酬面议;
3.如合适,可长期合作;
技术栈非常匹配,求联系
想跟你学技术~可以加微信不
我没电量了,你加我?
技术栈看着有点匹配,可以聊聊情况吗(熟悉Playwright、Puppeteer、DrissionPage,写过rpa集群项目;语言是java 转py+node
给企业做过类似HRAI相关的事,合适可以聊聊
薪资多少?