岗位职责
1.负责部门数据服务模块后端开发工作，优化现有模块及功能，提升底层数据服务效能
2.负责底层业务数据的收集，同步，分类工作，提升数据的准确性，可用性及丰富性
3.维护平台各类任务、服务及脚本的开发维护工作
任职资格
1、精通python，使用过django, tornado和flask等框架，熟悉常用python库及工具
2、熟悉mysql，mongo，pgsql, redis等数据库，具备基本的sql及数据库优化能力，使用过elasticsearch和kibana进行日志分析，了解rabbitmq, kafka等消息队列服务
3、数据采集工作，使用python的request、selenium等工具进行爬虫的编写，掌握基本的pandas和numpy的用法进行数据采集、清洗和处理
4、有大数据平台（hadoop，hive，spark等等）使用经验优先考虑
5、有airflow等任务调度服务使用经验优先考虑