学习啦 > 实用范文 > 办公文秘 > 岗位职责 > 数据仓库工程师岗位的工作职责

数据仓库工程师岗位的工作职责

时间: 舒欣1213 分享

数据仓库工程师岗位的工作职责

  数据仓库需要参与公司大数据平台的建设,包括Sugar报表或神策接口配置,用户画像标签体系的开发等。下面是学习啦小编为您精心整理的数据仓库工程师岗位的工作职责。

  数据仓库工程师岗位的工作职责1

  职责:

  1、参与据仓库的长期架构规划,与数据开发,建设共享大数据平台;

  2、负责数据平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地;

  3、负责来自业务团队数据需求的研发支撑;

  4、大规模数据挖掘和机器学习算法的实现和维护;

  5、在线和离线海量数据分析平台的开发;

  6、负责数据仓库的建设和维护,包括需求调研分析、软件规划、概念模型、设计逻辑、物理模型、数据处理(抽取、清洗、转化)、项目实施管控等;

  7、负责制定数据接入和采集规范制定。

  任职要求:

  1、从事数据仓库领域工作2年以上;

  2、熟悉数据建模、ETL设计与应用、报表开发等,并有实际模型设计及ETL开发经验 ;具有良好的编程习惯和文档编写习惯;

  3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等;

  4、掌握大型数据库开发技术,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一种,灵活运用SQL实现海量数据ETL加工处理;

  5、了解大数据基础架构和平台 ,具备相关产品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)项目应用研发经验,有MapReduce开发的实战经验者优先考虑;

  6、熟悉linux系统;

  7、熟练掌握python语言;

  8、熟悉数据可视化的基本方法,有数据可视化的开发经验优先;

  9、对数据敏感,具有良好的逻辑分析、责任心强、良好的对外沟通和团队协作能力

  数据仓库工程师岗位的工作职责2

  职责:

  1. 负责数据仓库建设、设计、优化和落地

  2. 负责数据ETL任务开发及日常维护

  3. 对数据ETL任务进行性能调优及性能瓶颈分析

  4. 学习新技术,提高整个平台的计算能力和效率

  任职要求:

  1. 计算机相关专业,全日制本科及以上学历,2-5年工作经验

  2. 熟悉数据仓库理论基础,对数据模型建设、应用层建设有比较丰富的经验

  3. 熟练使用 SHELL或PYTHON

  4. 熟悉HADOOP相关的大数据技术:HDFS, MAPREDUCE, HIVE

  5. 能对HIVE进行性能分析及调优

  6. 有MAPREDUCE开发经验优先

  7. 良好的沟通能力、组织协调能力、应变能力, 极强的责任心、学习能力。

  数据仓库工程师岗位的工作职责3

  职责:

  参与数据仓库模型设计和开发工作;

  负责建立数据分析模型,设计前端报表,数据可视化开发;

  负责数据平台项目数据仓库的管理、性能监控及优化等;

  负责数据平台的日常运维及优化

  职位要求:

  大学本科以上学历,3年以上工作经验,包含2年以上数据仓库开发工作经验;

  精通数据仓库建设,熟悉常用的模型设计方法;

  对数据可视化有丰富的经验,熟悉常用的数据分析方法;熟悉至少一种报表工具开发;

  精通数据仓库领域知识和技能,包括元数据管理、主数据管理、数据质量管理等;

  熟练使用ETL工具如Kettle、SSIS等进行数据清洗、转换、整合;

  熟悉至少两种关系型数据库,如Oracle、SQL Server、PostgreSQL、MySql等主流数据库,精通SQL Server开发和运维者优先考虑;

  有完整的数据平台建设经验者优先;

  熟悉使用Linux系统及Shell脚本开发,熟练开发Python程序者优先;

  熟悉大数据开发框架者优先,如Spark,Flink等;

  对新技术好奇爱学习,主动性和责任心强,对数据敏感,逻辑性强,有良好的抗压能力;

  团队协作能力强

  数据仓库工程师岗位的工作职责4

  职责:

  1、基于互联网行业特点构建企业级数据仓库架构,建设PB级共享数据平台;

  2、负责数据平台相关数据研发及管理工作,参与制定EDW相关规范并推动实施落地;

  3、对海量数据处理的相关需求进行评估及方案设计;

  4、负责数据产品如用户画像等模型设计;

  5、了解行业前沿大数据处理方法。

  任职资格:

  1、8年以上数据仓库开发及管理经验,5年以上互联网/电商行业经验;

  2、精通数据仓库建设方法论,有大型数据仓库建设项目经验(PB级以上);

  3、熟悉HADOOP、HIVE、HBASE、SPARK、FLUME等工作原理;

  4、精通HiveSQL,有较丰富的HiveSQL性能调优经验;

  5、至少熟练使用Shell、Python、Perl等脚本语言之一;

  6、工作认真、负责,有良好的团队合作精神,良好的分析及沟通能力;

  数据仓库工程师岗位的工作职责5

  职责:

  1 负责大数据平台、数据仓库多维模型设计

  2 负责大数据平台相关生产系统数据的抽取、清洗、转换等工作

  3 负责BI平台设计与报表开发工作

  岗位要求:

  1、精通数据仓库建模理论,有参与过2个以上的数据仓库建设经验;

  2、精通ETL开发,熟悉数据的抽取、常用数据脚本编写、存储过程的编写;

  3、熟悉BI平台,有数据报表设计和开发经验;

  4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一种主流关系数据库;

  5、具备良好的团队协作精神,良好的沟通能力;

  6、供应链、物流行业数据从业经历者优先。

相关文章:

1.数据仓库工程师的岗位职责表述

2.数据仓库工程师的工作职责

3.数据仓库工程师的基本职责模板

4.大数据开发工程师岗位的工作职责说明

5.软件架构师的岗位职责描述

88889