学习啦 > 实用范文 > 办公文秘 > 岗位职责 > 大数据开发工程师岗位的工作职责说明

大数据开发工程师岗位的工作职责说明

时间: 舒欣1213 分享

大数据开发工程师岗位的工作职责说明

  大数据开发工程师负责大数据平台及应用场景的构建、部署、测试。以下是学习啦小编整理的大数据开发工程师岗位的工作职责说明。

  大数据开发工程师岗位的工作职责说明1

  职责:

  1、负责基于Hadoop框架的海量数据平台建设

  2、参与大数据平台的数据架构设计,完成从业务模型到数据模型的设计

  3、基于海量数据的数据仓库,为业务搭建通用的查询和分析解决方案

  4、管理并优化存储&计算资源利用效率、监控并维护例行ETL任务

  5、梳理整体业务指标,可视化报表开发

  应聘要求:

  1、计算机本科及以上学历,5年以上大型数据仓库架构设计、模型设计、ETL设计相关经验

  2、熟悉Hadoop生态,熟悉Oracle、SQL数据库中的一个或多个,有一定的性能优化经验

  3、熟练掌握Java语言,MapReduce编程,Python/Shell等脚本语言,Linux操作系统

  4、具备大数据云平台、计算存储平台、可视化开发平台经验

  5、业务理解力强,对数据敏感,有互联网行业产品数据分析经验者优先

  大数据开发工程师岗位的工作职责说明2

  职责:

  1、根据工作安排高效、高质地完成代码编写,确保符合规范的前端代码规范;

  2、负责公司现有项目和新项目的前端修改调试和开发工作;

  3、与设计团队紧密配合,能够实现实现设计师的设计想法;

  4、与后端开发团队紧密配合,确保代码有效对接,优化网站前端性能;

  5、页面通过标准校验,兼容各主流浏览器。

  任职要求:

  1. 本科及以上学历,熟悉j2ee,精通web开发有5年工作经验以上(学习能力好放宽至4年),熟悉jsp,spring框架;

  2.悉主流移动web开发框架,并有过实际项目开发经验;

  3.有kylin,atlas,oozie,azkaban,spark,ranger任意一种使用项目使用经验。

  大数据开发工程师岗位的工作职责说明3

  职责:

  1、负责公司大数据基础平台产品开发工作;

  2、完成产品/项目划分的研发任务,按需求规范进行研发;

  3、具备良好的需求分析能力、业务建模能力,参与产品和项目相关模块的需求讨论,概要、详细设计;

  4、具备良好的架构分析能力与设计能力,积极参与前期设计;

  5、能根据设计方案和计划进行编码实现,在进度和质量上符合方案和计划的要求;

  6、及时对BUG库中的软件问题进行跟踪修正。

  岗位要求:

  1、三年以上工作经验,一年以上大数据平台架构及ETL相关经验,可独立搭建/运维CDH/Spark整套平台架构;

  2、精通Python/Java/Scala/SQL/Shell等语言中两种以上,熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三种以上开源框架的原理和源码;

  3、熟悉容器平台开发或者开发优先考虑,有docker、kubernetes相关开发经验更佳;

  4、学习能力强,适应能力好,有丰富的问题原因定位及运维技术支持经验;

  5、有市场上成熟的大数据平台产品实际架构/开发经验优先。

  大数据开发工程师岗位的工作职责说明4

  职责:

  1. 负责公司大数据业务集群的运维工作确保高可用;

  2. 负责基础运维、故障定位、容量规划、扩容及性能优化;

  3. 设计实现大规模分布式集群的运维、报警监控和管理平台;

  4. 参与业务架构设计,在设计阶段给出可运维性改进建议;

  5. 深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技术及发展方向。

  任职资格:

  1.大专以上学历,2年及以上大数据运维工作经验,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术,熟悉源码尤佳,至少掌握python/shell中的一种语言,接受优秀应届毕业生;

  2.了解大数据平台应用架构,具备常见问题的基本分析和解决能力;

  3.熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;

  4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。

  大数据开发工程师岗位的工作职责说明5

  职责:

  1、负责公司c端产品以及广告数据的平台数据基础建设;

  2、大数据平台的搭建与维护;

  3、优化算法提高执行效率;

  4、数据挖掘相关开发。

  职位要求:

  1. 本科及以上,计算机、软件工程、统计学、数据挖掘、机器学习等相关专业;

  2. 熟悉JAVA语言及JAVA生态下的开发,了解多线程并发,能独立完成应用开发和部署;

  3. 3年及以上大数据流程架构经验,熟悉Hbase/Hive/Hadoop/Spark或等主流分布式开发平台,有高性能集群设计和开发经验;

  4. 能熟练操作Linux,熟练掌握SQL数据库语言 HiveSQL/Mysql/Sqlserver;

  5. 对有广告营销大数据算法/开发经验者优先,有大型数据项目经验优先,有用户行为分析、用户建模、业务建模经验者优先;

  6. 具有良好的逻辑分析能力、沟通能力和协调能力;

相关文章:

1.大数据开发工程师岗位的职责描述

2.大数据架构师的工作职责描述

3.软件架构师岗位的职责表述

4.大数据运维工程师岗位的主要职责

5.大数据架构师工作的职责

83190