数据仓库研发工程师岗位职责

搜狗金融-数据仓库研发工程师-北京-02173(MJ001926)搜狗北京搜狗科技发展有限公司,北京搜狗科技,搜狗,搜狗科技,搜狗翻译,搜狗词典,搜狗岗位职责:

1、数据仓库、数据集市的数据模型设计

2、数据仓库ETL规则设计和开发

3、利用HQL进行数据清洗,根据应用场景建立数据集市。

4、数据仓库数据导入,建表,日常任务跑批,日志监控。

5、数据仓库需求调研和需求分析

任职条件:

1、熟悉python,熟练使用shell编程解决数据清洗;

2、熟练使用Hadoop、Hive、Sqoop,熟练使用hiveSQL并有一定编写map/reduce开发经验;

3、熟悉数据仓库建模理论,了解数据仓库数据分层架构,精通3NF和多维数据模型设计;

4、具备大中型数据仓库架构设计、模型设计、ETL设计的相关经验;

5、具备海量数据处理、有性能调优经、金融、电商、电信、互联网行业数据模型经验者优先

这是一款定位于服务平台互联网用户的金融产品,由搜狗公司内部孵化,深度挖掘搜狗在互联网端的用户规模优势以及多年的大数据能力积累。在当下大热的互联网金融领域,搜狗将发挥用户服务和智能算法优势,并结合平台的综合运营实力。