采集运维岗位职责

大数据平台工程师Hadoop1、负责数据平台架构、数据处理、java研发;

2、负责集团数据湖(离线、实时)平台建设、开发和维护;

3、负责据开发框架落地,推进质量、采集、智能运维等数据仓库系统平台的落地。

4、负责数据开发团队的开发规范及

1、基础知识扎实,熟悉常用的算法和数据结构,熟练使用;

2、精通Hive及HBase等组件的使用及性能调优;

3、熟悉hadoop生态相关组件及其他数据平台相关产品项目;

4、扎实的编程基础,精通java开发语言,熟悉jvm、缓存,分布式架构、消息中间件等核心技术;

5、具备shell、python等一种脚本语言开发能力。

4、有数据仓库经验以及数据工具平台开发经验优先;

5、熟悉分布式计算优先,或有海量数据应用经验者优先;

6、良好的沟通表达能力和团队协作能力,对自己有较高的要求,喜欢有挑战的工作。偏向Hadoop生态1、负责数据平台架构、数据处理、java研发;

2、负责集团数据湖(离线、实时)平台建设、开发和维护;

3、负责据开发框架落地,推进质量、采集、智能运维等数据仓库系统平台的落地。

4、负责数据开发团队的开发规范及

1、基础知识扎实,熟悉常用的算法和数据结构,熟练使用;

2、精通Hive及HBase等组件的使用及性能调优;

3、熟悉hadoop生态相关组件及其他数据平台相关产品项目;

4、扎实的编程基础,精通java开发语言,熟悉jvm、缓存,分布式架构、消息中间件等核心技术;

5、具备shell、python等一种脚本语言开发能力。

4、有数据仓库经验以及数据工具平台开发经验优先;

5、熟悉分布式计算优先,或有海量数据应用经验者优先;

6、良好的沟通表达能力和团队协作能力,对自己有较高的要求,喜欢有挑战的工作。