职位详情
高级爬虫工程师
3-5万
福建五维发展集团有限公司
福州
5-10年
本科
04-25
工作地址

福建五维智讯电气有限公司

职位描述
岗位职责
1.负责制定和实施工程信息数据采集策略,开发并维护爬虫程序,从各类合法数据源高效抓取工程建设、招投标等相关数据。
2.深入分析目标网站的结构和反爬机制,不断优化爬虫算法,提高数据抓取的准确性、稳定性和效率,确保数据的及时更新。
3.协助进行数据清洗和预处理工作,保证采集到的数据质量,为后续的数据分析和服务提供坚实基础。
4.与团队成员紧密协作,根据业务需求不断扩展和优化数据采集的范围和深度,支持平台功能的升级和拓展。
任职要求
1.熟练掌握至少一种编程语言,如Python、Java等,具备扎实的编程基础和良好的代码规范。
2.精通网络爬虫技术,熟悉Scrapy、BeautifulSoup、Selenium等相关框架和工具。
3.了解常见的反爬虫策略,能够有效应对和处理各类反爬问题,如IP封禁、验证码识别等。
4.有工程信息、招投标数据采集或相关领域爬虫开发经验者优先,能够清楚了解数据来源和数据特征者更佳。
5.具备较强的问题解决能力和逻辑思维能力,能够独立分析和解决遇到的技术难题。
6.有良好的团队合作精神和沟通能力,能够承受一定的工作压力,适应项目节奏。
7.有工程信息聚合与招投标服务平台工作经验优先。
8.有颠覆性行业认知。

薪资待遇:专职50万;兼职30万。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

为您推荐更多相似职位
立即申请