Show more filters
Job Type   /   Job Level
Full-time   /   Others/Any
Job Location
Beijing, Beijing, China
A free Jobstore account is required to proceed to the employer site.
职位来源于智联招聘。

岗位职责:

  • 根据业务需求,研究爬虫策略和防屏蔽规则,设计和开发分布式爬虫,支持高并发多平台抓取;
  • 负责网页信息抽取、简单清洗、数据入库等开发;
  • 提升爬虫稳定性及可扩展性,充分利用资源,优化爬虫效率和质量。

岗位要求:

  • 计算机软件及相关专业本科毕业;
  • 1年以上爬虫项目开发经验,优秀毕业生亦可;
  • 熟悉爬虫原理及常见的反爬虫技术,如cookie、js加密、base64等;
  • 熟练运用python及多进程、多线程开发;
  • 熟练使用scrapy、requests、selenium、pyppeteer等爬虫包;
  • 熟悉html,正则、xpath等提取技术;
  • 熟悉Mysql、Redis等数据库及相关操作;
  • 熟悉Linux基础命令;
  • 有Django/Flask等web框架开发经验者优先。

以担保或任何理由索要财物,扣押证照,均涉嫌违法。
A free Jobstore account is required to proceed to the employer site.
Jobs in China   »   Jobs in Beijing   »   Python爬虫工程师

More jobs

People also search