python后端工程师 数据爬虫

大数据挖掘分析平台和产品的建设。算法

工做职责:sql

  1. 独立完成软件系统代码的设计与实现;数据库

  2. 根据需求完成设计,代码编写,调试,测试和维护;编程

  3. 使用Python 语言对后台业务逻辑进行开发以及维护;设计模式

  4. 能根据实际需求,利用前沿第三方框架,如 Django、Flask等,实现各类功能。服务器

职位要求:网络

  1. 可以在 Unix/Linux进行服务器的开发;架构

  2. 精通Python语言;并发

  3. 精通MySQL/PostgreSQL数据库;框架

  4. 具备良好的沟通能力、团队合做精神、优秀的分析问题和解决问题的能力。

优先条件:

  1. 熟悉PEP8编程规范;
  2. 熟悉网页爬取/数据挖掘/数学建模/算法,熟悉Scrapy等相应的开源组件;

有良好的设计能力,熟悉经常使用的设计模式和设计原则。

一、参与爬虫系统的数据抓取架构设计与开发;
二、负责网页信息抽取、数据清洗等研发和优化工做;
三、参与爬虫核心算法的策略优化研究,提高网页抓取的效率和质量。

任职要求: 一、工做认真细致踏实,学习能力强,以解决技术难题为乐趣,有想法,勇于挑战; 二、熟练使用Python编程语言; 三、有网络爬虫、网页去重、网页信息抽取等相关经验者优先; 四、精通Mysql数据库开发,有对复杂Sql语句和存储过程等的开发与优化经验,有大数据量、高并发访问处理经验尤佳; 五、有大数据领域工做经验者优先。

相关文章
相关标签/搜索