大数据开发工程师岗位的工作职责说明
大数据开发工程师负责大数据平台及应用场景的构建、部署、测试。以下是阅下文库小阅整理的大数据开发工程师岗位的工作职责说明。
大数据开发工程师岗位的工作职责说明1
职责:
1、负责基于Hadoop框架的海量数据平台建设
2、参与大数据平台的数据架构设计,完成从业务模型到数据模型的设计
3、基于海量数据的数据仓库,为业务搭建通用的查询和分析解决方案
4、管理并优化存储&计算资源利用效率、监控并维护例行ETL任务
5、梳理整体业务指标,可视化报表开发
应聘要求:
1、计算机本科及以上学历,5年以上大型数据仓库架构设计、模型设计、ETL设计相关经验
2、熟悉Hadoop生态,熟悉Oracle、SQL数据库中的一个或多个,有一定的性能优化经验
3、熟练掌握Java语言,MapReduce编程,Python/Shell等脚本语言,Linux操作系统
4、具备大数据云平台、计算存储平台、可视化开发平台经验
5、业务理解力强,对数据敏感,有互联网行业产品数据分析经验者优先
大数据开发工程师岗位的工作职责说明2
职责:
1、根据工作安排高效、高质地完成代码编写,确保符合规范的前端代码规范;
2、负责公司现有项目和新项目的前端修改调试和开发工作;
3、与设计团队紧密配合,能够实现实现设计师的设计想法;
4、与后端开发团队紧密配合,确保代码有效对接,优化网站前端性能;
5、页面通过标准校验,兼容各主流浏览器。
任职要求:
1. 本科及以上学历,熟悉j2ee,精通web开发有5年工作经验以上(学习能力好放宽至4年),熟悉jsp,spring框架;
2.悉主流移动web开发框架,并有过实际项目开发经验;
3.有kylin,atlas,oozie,azkaban,spark,ranger任意一种使用项目使用经验。
大数据开发工程师岗位的工作职责说明3
职责:
1、负责公司大数据基础平台产品开发工作;
2、完成产品/项目划分的研发任务,按需求规范进行研发;
3、具备良好的需求分析能力、业务建模能力,参与产品和项目相关模块的需求讨论,概要、详细设计;
4、具备良好的架构分析能力与设计能力,积极参与前期设计;
5、能根据设计方案和计划进行编码实现,在进度和质量上符合方案和计划的要求;
6、及时对BUG库中的软件问题进行跟踪修正。
岗位要求:
1、三年以上工作经验,一年以上大数据平台架构及ETL相关经验,可独立搭建/运维CDH/Spark整套平台架构;
2、精通Python/Java/Scala/SQL/Shell等语言中两种以上,熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三种以上开源框架的原理和源码;
3、熟悉容器平台开发或者开发优先考虑,有docker、kubernetes相关开发经验更佳;
4、学习能力强,适应能力好,有丰富的问题原因定位及运维技术支持经验;
5、有市场上成熟的大数据平台产品实际架构/开发经验优先。
大数据开发工程师岗位的工作职责说明4
职责:
1. 负责公司大数据业务集群的运维工作确保高可用;
2. 负责基础运维、故障定位、容量规划、扩容及性能优化;
3. 设计实现大规模分布式集群的运维、报警监控和管理平台;
4. 参与业务架构设计,在设计阶段给出可运维性改进建议;
5. 深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技术及发展方向。
任职资格:
1.大专以上学历,2年及以上大数据运维工作经验,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术,熟悉源码尤佳,至少掌握python/shell中的一种语言,接受优秀应届毕业生;
2.了解大数据平台应用架构,具备常见问题的基本分析和解决能力;
3.熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。
大数据开发工程师岗位的工作职责说明5
职责:
1、负责公司c端产品以及广告数据的平台数据基础建设;
2、大数据平台的搭建与维护;
3、优化算法提高执行效率;
4、数据挖掘相关开发。
职位要求:
1. 本科及以上,计算机、软件工程、统计学、数据挖掘、机器学习等相关专业;
2. 熟悉JAVA语言及JAVA生态下的开发,了解多线程并发,能独立完成应用开发和部署;
3. 3年及以上大数据流程架构经验,熟悉Hbase/Hive/Hadoop/Spark或等主流分布式开发平台,有高性能集群设计和开发经验;
4. 能熟练操作Linux,熟练掌握SQL数据库语言 HiveSQL/Mysql/Sqlserver;
5. 对有广告营销大数据算法/开发经验者优先,有大型数据项目经验优先,有用户行为分析、用户建模、业务建模经验者优先;
6. 具有良好的逻辑分析能力、沟通能力和协调能力;
相关文章:
1.大数据开发工程师岗位的职责描述
2.大数据架构师的工作职责描述
3.软件架构师岗位的职责表述
4.大数据运维工程师岗位的主要职责
5.大数据架构师工作的职责
上一篇:大数据开发工程师岗位的基本职责
下一篇:大数据开发工程师的工作职责模板