工作职责:

1、负责集团大数据平台的部署和开发工作，日常运维大数据平台；

2、快速响应业务部门的数据需求，并及时给出技术解决方案；

3、制定集团大数据平台的开发标准和规范

4、负责集团大数据平台相关技术的培训工作

任职资格:

1、本科及以上学历，计算机相关专业，3年以上大数据平台开发经验，有至少2个完整的大数据项目经验，有车企项目经验优先；

2、掌握Hadoop、yarn、spark、hive、sqoop、zookeeper、kafka等分布式系统/组件，有CDH运维经验优先；

3、掌握大数据的完整处理流程，包括采集、清洗、预处理、存储、分析挖掘和可视化以及架构设计、开发、部署、运维工作；

4、掌握常用的数据库，如Oracle、MySQL、SQLServer等，熟悉SAP HANA数据库者优先 ；

5、掌握SQL和SQL常用优化策略；

6、熟悉Linux或Unix系统，熟悉Shell编程；

7、熟悉至少一种ETL工具，如Kettle、Talend、Informatica、Datax、DataStage等；

8、熟悉至少一种报表可视化工具，如tableau、帆软、PowerBI、Qlik等；

9、了解主流的编程语言和框架，熟悉Python者优先；

10、热爱大数据工作，关注并了解大数据的前沿技术。

职能类别：ETL开发工程师其他