职位描述
职位描述:
FORESTOWN正在构建一个全球职位与招聘联系人数据库平台,需要一位技术核心成员。你将负责设计和开发分布式爬虫系统,抓取全球主要招聘网站、公司官网、LinkedIn 等数据源,并通过算法实现招聘职位与对接人的智能匹配。这是一个具有挑战性和创造性的岗位,你将直接参与核心产品的研发,为平台化猎头/招聘大数据系统打下基础。
负责内容:
1. 爬虫:XZ职位和招聘对接人及求职者需求、FT人选及潜在客户、HC客户需求、三个产品线的竞品信息
2. 数据库搭建
3. 与现有系统匹配
岗位职责:
1. 设计、开发并维护分布式爬虫系统,自动化采集海量招聘信息。
2. 解决复杂反爬机制(IP封锁、验证码、动态页面渲染等),保证高并发与稳定性。
3. 对采集数据进行清洗、结构化、标签化,存储并支持高效检索。
4. 利用NLP/AI 技术,完成职位 JD → 招聘负责人 → 联系方式的智能匹配。
5. 优化爬虫池、代理池,保证数据时效性、覆盖率与合法合规性。
6. 参与系统架构设计与技术选型,逐步推动产品化。
任职要求
1. 计算机/软件工程等相关专业,本科及以上学历。
2. 3年以上数据爬虫/分布式爬虫开发经验,有大规模抓取经验。
3. 精通 Python/Go/Node.js 其中至少一种,熟悉Scrapy/ Playwright/ Selenium等框架。
4. 熟悉 MongoDB、Elasticsearch、MySQL/Postgres 等数据库技术。
5. 具备反爬、动态渲染、代理池等高阶技术经验。
6. 对招聘网站、LinkedIn、社交媒体、企业官网数据有抓取经验者优先。
7. 有一定数据处理、NLP 或信息抽取经验者加分。
8. 独立负责过中型以上爬虫/数据项目者优先。
其他应聘加分项:
1. 有猎头、招聘、HR SaaS 相关行业经验。
2. 具备 AI/NLP 应用(JD解析、人名匹配、联系方式提取等)经验。
3. 有创业公司背景,能适应快速迭代。
我们提供:
1. 核心角色:作为首批技术团队成员,有机会参与系统架构与技术路线制定。
2. 成长空间:未来可晋升为技术负责人 / 技术合伙人。
3. 薪酬:年薪15~30。
4. 灵活的工作方式:支持远程办公。
5. 项目价值:全球招聘大数据,未来具备 SaaS 产品化潜力。
其他信息
语言要求:普通话
行业要求:人力资源服务,咨询服务,咨询服务
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕