数据开发架构师岗位职责

数据开发架构师数据开发架构师

Base:杭州工作年限:五年以上所属部门:数据中台

层级对标:P7

岗位描述:

1.为行业客户提供专业的数据采集、接入、计算、数据应用技术架构;

2.针对实际的数据业务场景述求,能支持售前业务架构师,分析用户需求,并提供有前瞻性的大数据解决方案;

3.与应用开发或者产品团队协作,整理和规范数据模型和体系,进行数据联调工作,部署数据任务,完成交付工作;

4.在客户现场发现并解决数据质量问题,推动客户整体数据质量提升,并且在必要时候承担核心开发工作。

岗位要求:

1.五年以上数据开发经验,熟练使用标准SQL语言,熟悉Python、Java开发语言优先;

2.使用过开源Hadoop/Hive分布式大数据处理平台,熟悉MapReduce/Spark开发框架优先;

3.熟练掌握Spark或Flink等流计算开发技术,熟悉Java开发语言和HBase数据库,有实时数据应用开发经验;

4.对于岗位要求2和3只要求掌握任何一个,要么具备超大规模离线数据开发技能,要么具备实时数据开发技能,熟悉两者更好;

5.对于分布式、可扩展、高可用、高内聚低耦合等大数据技术中间件需要有所了解。

6.熟练掌握数据仓库架构及ETL模型设计;

7.需要具备很强的责任心,做事细致、严谨,同时需要具备较强的沟通和快速学习能力,充满激情,乐于接受挑战,可培养和带动其他团队成员努力前行;

8.对互联网、零售、工业、物联网、政府等行业数据应用有经验者优先;

9.能够接受出差。数据开发架构师

Base:杭州工作年限:五年以上所属部门:数据中台

层级对标:P7

岗位描述:

1.为行业客户提供专业的数据采集、接入、计算、数据应用技术架构;

2.针对实际的数据业务场景述求,能支持售前业务架构师,分析用户需求,并提供有前瞻性的大数据解决方案;

3.与应用开发或者产品团队协作,整理和规范数据模型和体系,进行数据联调工作,部署数据任务,完成交付工作;

4.在客户现场发现并解决数据质量问题,推动客户整体数据质量提升,并且在必要时候承担核心开发工作。

岗位要求:

1.五年以上数据开发经验,熟练使用标准SQL语言,熟悉Python、Java开发语言优先;

2.使用过开源Hadoop/Hive分布式大数据处理平台,熟悉MapReduce/Spark开发框架优先;

3.熟练掌握Spark或Flink等流计算开发技术,熟悉Java开发语言和HBase数据库,有实时数据应用开发经验;

4.对于岗位要求2和3只要求掌握任何一个,要么具备超大规模离线数据开发技能,要么具备实时数据开发技能,熟悉两者更好;

5.对于分布式、可扩展、高可用、高内聚低耦合等大数据技术中间件需要有所了解。

6.熟练掌握数据仓库架构及ETL模型设计;

7.需要具备很强的责任心,做事细致、严谨,同时需要具备较强的沟通和快速学习能力,充满激情,乐于接受挑战,可培养和带动其他团队成员努力前行;

8.对互联网、零售、工业、物联网、政府等行业数据应用有经验者优先;

9.能够接受出差。