1.具有1年以上Python编程经验，熟练掌握多线程技术。 2.精通正则表达式、CSS Selector、XPath等数据抽取技术，能够有效处理结构化和非结构化数据。 3.熟练操作MongoDB、MySQL、Redis等数据库系统。 4.精通至少一种主流开源爬虫框架（如Scrapy、Scrapy-Redis、Requests、Selenium等）。 5.拥有分布式爬虫、垂直网站抓取、APP数据分析，分布式爬虫架构经验优先