大数据开发工程师岗位的工作职责说明

大数据开发工程师岗位的工作职责说明

　　大数据开发工程师负责大数据平台及应用场景的构建、部署、测试。以下是学习啦小编整理的大数据开发工程师岗位的工作职责说明。

　　大数据开发工程师岗位的工作职责说明1

　　职责：

　　1、负责基于Hadoop框架的海量数据平台建设

　　2、参与大数据平台的数据架构设计，完成从业务模型到数据模型的设计

　　3、基于海量数据的数据仓库，为业务搭建通用的查询和分析解决方案

　　4、管理并优化存储&计算资源利用效率、监控并维护例行ETL任务

　　5、梳理整体业务指标，可视化报表开发

　　应聘要求：

　　1、计算机本科及以上学历，5年以上大型数据仓库架构设计、模型设计、ETL设计相关经验

　　2、熟悉Hadoop生态，熟悉Oracle、SQL数据库中的一个或多个，有一定的性能优化经验

　　3、熟练掌握Java语言，MapReduce编程，Python/Shell等脚本语言，Linux操作系统

　　4、具备大数据云平台、计算存储平台、可视化开发平台经验

　　5、业务理解力强，对数据敏感，有互联网行业产品数据分析经验者优先

　　大数据开发工程师岗位的工作职责说明2

　　职责：

　　1、根据工作安排高效、高质地完成代码编写，确保符合规范的前端代码规范;

　　2、负责公司现有项目和新项目的前端修改调试和开发工作;

　　3、与设计团队紧密配合，能够实现实现设计师的设计想法;

　　4、与后端开发团队紧密配合，确保代码有效对接，优化网站前端性能;

　　5、页面通过标准校验，兼容各主流浏览器。

　　任职要求:

　　1. 本科及以上学历，熟悉j2ee，精通web开发有5年工作经验以上(学习能力好放宽至4年)，熟悉jsp，spring框架;

　　2.悉主流移动web开发框架,并有过实际项目开发经验;

　　3.有kylin,atlas,oozie,azkaban,spark,ranger任意一种使用项目使用经验。

　　大数据开发工程师岗位的工作职责说明3

　　职责：

　　1、负责公司大数据基础平台产品开发工作;

　　2、完成产品/项目划分的研发任务，按需求规范进行研发;

　　3、具备良好的需求分析能力、业务建模能力，参与产品和项目相关模块的需求讨论，概要、详细设计;

　　4、具备良好的架构分析能力与设计能力，积极参与前期设计;

　　5、能根据设计方案和计划进行编码实现，在进度和质量上符合方案和计划的要求;

　　6、及时对BUG库中的软件问题进行跟踪修正。

　　岗位要求：

　　1、三年以上工作经验，一年以上大数据平台架构及ETL相关经验，可独立搭建/运维CDH/Spark整套平台架构;

　　2、精通Python/Java/Scala/SQL/Shell等语言中两种以上，熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三种以上开源框架的原理和源码;

　　3、熟悉容器平台开发或者开发优先考虑，有docker、kubernetes相关开发经验更佳;

　　4、学习能力强，适应能力好，有丰富的问题原因定位及运维技术支持经验;

　　5、有市场上成熟的大数据平台产品实际架构/开发经验优先。

　　大数据开发工程师岗位的工作职责说明4

　　职责：

　　1. 负责公司大数据业务集群的运维工作确保高可用;

　　2. 负责基础运维、故障定位、容量规划、扩容及性能优化;

　　3. 设计实现大规模分布式集群的运维、报警监控和管理平台;

　　4. 参与业务架构设计，在设计阶段给出可运维性改进建议;

　　5. 深入研究大数据业务相关运维技术，持续优化集群服务架构，探索新的大数据运维技术及发展方向。

　　任职资格：

　　1.大专以上学历，2年及以上大数据运维工作经验，熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术，熟悉源码尤佳，至少掌握python/shell中的一种语言，接受优秀应届毕业生;

　　2.了解大数据平台应用架构，具备常见问题的基本分析和解决能力;

　　3.熟悉Linux操作系统的配置、管理及优化，能够独立排查及解决操作系统层面的问题;

　　4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。

　　大数据开发工程师岗位的工作职责说明5

　　职责：

　　1、负责公司c端产品以及广告数据的平台数据基础建设;

　　2、大数据平台的搭建与维护;

　　3、优化算法提高执行效率;

　　4、数据挖掘相关开发。

　　职位要求：

　　1. 本科及以上，计算机、软件工程、统计学、数据挖掘、机器学习等相关专业;

　　2. 熟悉JAVA语言及JAVA生态下的开发,了解多线程并发,能独立完成应用开发和部署;

　　3. 3年及以上大数据流程架构经验，熟悉Hbase/Hive/Hadoop/Spark或等主流分布式开发平台，有高性能集群设计和开发经验;

　　4. 能熟练操作Linux,熟练掌握SQL数据库语言 HiveSQL/Mysql/Sqlserver;

　　5. 对有广告营销大数据算法/开发经验者优先，有大型数据项目经验优先，有用户行为分析、用户建模、业务建模经验者优先;

　　6. 具有良好的逻辑分析能力、沟通能力和协调能力;

相关文章：

1.大数据开发工程师岗位的职责描述

2.大数据架构师的工作职责描述

3.软件架构师岗位的职责表述

4.大数据运维工程师岗位的主要职责

5.大数据架构师工作的职责