【岗位职责】
与研究人员合作,对数据质量进行持续分析、检查、快速解决投研任务中的数据问题;
负责整合公司现有的内外部数据,开发并维护数据的生产、清洗、仓储等流程;
负责数据类项目的需求分析,流程设计,代码开发及测试;
负责与生产系统相关的数据产线的运营和维护等生产运维工作
负责爬虫程序的开发及维护
【任职要求】
海内外知名高校本科及以上学历,计算机相关专业;
社招需要3年以上数据开发相关经验;对数据背后的业务逻辑有很高的兴趣,有很强的学习意愿;
精通Python,熟悉Numpy,Pandas,Cython,数据ETL处理流程,有数据清理,数据质量检查的开发和运维经验;
了解并熟悉Postgresql/SqlServer/ClickHouse 数据库,熟悉SQL,有一定的sql性能优化能力;
熟悉airflow调度工具,具备基于airflow实现调度流程的开发经验;
具有基于hadoop等大数据的环境搭建和开发经验;
具有2年以上证券,投资行业的数据项目的建设,实施经验
有责任心,能够承担关键任务的开发和复杂问题的定位和解决。具备基础的定量分析的能力,耐心细致,对于细节有很高的敏感度;
有较强的团队合作精神,面对问题具备较好的沟通技巧,与团队内外的相关人员进行问题交流,方案沟通,问题定位;
加分项
有金融数据处理相关经验
具有3年以上爬虫开发经验;
具有airflow二次开发经验;