



下载本文档
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、大数据开发工程师的工作职责模板大数据开发工程师负责数据仓库的体系建设及落地实现。下面是小编整理的大数据开发工程师的工作职责模板。大数据开发工程师的工作职责模板1职责:1、独立负责工作小组,并对下级成员进行监督;2、具备资源整合以及对软件项目全局把控的能力;3、负责软件项目的系统设计和需求分析;4、制定软件项目开发计划,并按时完成功能模块的设计、开发以及编程任务;5、积极配合并完成主管下达的任务,并能够对软件部门的发展规划提出意见;任职条件1、大数据相关开发经验3 年以上,至少具备2 年以上java 开发经验;2、有基于hadoop 的数据抽取、转换、加载的开发相关经验 ;3 、 熟 练 掌 握
2、 hadoop 生 态 的 相 关 知 识 , 如 hive,hbase,flume.kafka,storm,spark , mapreduce 等 ;4、熟悉Linux 操作系统。熟悉linux 各项基本操作,至少掌握一门脚本语言;5、熟练数据仓库,对多维数据建模有深入理解;6、有BI 数据平台、数据仓库、日志采集、多维数据仓库设计、开发、架构经验者优先7、思维敏捷,有较强的钻研学习能力,较好的沟通能力、团队合作;大数据开发工程师的工作职责模板21、负责数据仓库和大数据处理模块的架构设计和开发;2、负责实现基于Spark 框架的分布式计算框架的设计和开发工作;3、负责Spark 技术研究和通
3、用数据平台的性能调优;4、负责大数据项目中,基于kafka 、 flume 、 sparkstreaming、Spark SQL等相关技术的海量数据的处理、 分析、 统计、挖掘工作。5、熟悉Scala/Java 语言,对Scala/Java 原理、底层技术有深入研究者优先;6、有过海量数据系统开发经验者优先;7、熟悉Hadoop/Spark 生态系统组件的使用,至少有2年以上的Spark 开发经验;8、写过推荐系统的优先考虑大数据开发工程师的工作职责模板3职责1、负责公司大数据平台建设工作,完成Hdaoop/Spark搭建部署,根据业务需要进行开发;2、开发实现网络爬虫并爬取所需数据,有效存储
4、到大 数据平台;3、对平台数据做预处理,满足数据展现及后续机器学习等系统使用;4、根据业务需要,应用大数据实时分析技术、可视化 技术等,并对平台发展规划进行设计。任职资格1、本科及以上学历,计算机相关专业 2、熟悉数据仓库和数据建模相关技术细节,有编程经验,熟悉SQL/Hadoop/Hive/Hbase/Spark 等大数据工具;3、具备海量数据处理经验,或有互联网行业数据挖掘工作经验;4、 1 年以上岗位经验优先,本科应届有意向的,可优先 培养。大数据开发工程师的工作职责模板4职责:1. 负责金融银行大数据系统相关模块的数据架构及研 发实施工作2. 依据业务场景、分析需求提供技术解决方案并加
5、以实 现;3. 与客户业务部门对接,解决数据建模、报表和报告在系统开发遇到的问题;任职资格:1. 具备3年以上DW原统建设经当了解 BI系统,有数 据管理经验,有维度建模相关经验,了解数据仓库建设过程 中的挑战与问题2. 精通多系统数据融合、清洗、转换、整合,具备海量数据加工处理相关经验3. 熟悉业界数据仓库建模方法、元数据管理、数据质量体系管理4. 掌握大型数据库开发技术(ORACLE/DB涔),有丰富的数据库模型设计和优化经验5. 熟练掌握Unix/Linux 常规命令、工具及Shell 编程6. 掌握一门或多门编程语言优先,如Java、 Python 、scala 等7. 熟悉Hadoo
6、p、 spark 、 kafka 等大数据生态相关技术,有相关实践经验着优先8. 良好的语言沟通与表达能力和自我驱动动力9. 具备银行项目设计、开发、 优化等经验者加分大数据开发工程师的工作职责模板5职责:1、参与ODS系统或Hadoop系统数据库相关开发,包括 数据仓库的数据模型设计(ODS层设计、基础数据层设计、 汇 总层设计等);2、 参与 ETL Mapping 设计及开发工作;3、 参与客户/用户画像、经营管理、产品画像、营销活动等主题域建设工作。资质要求:1 . 计算机相关专业本科及以上学历,优秀者放宽至大 专;2 .有大型数据库(ORALCE/MSSQL SERVER)开发经验, 有 Sybase IQHIVESpark SQL 开发经验者优先;3、有较强的SQL编程能力,熟练编写存储过程,能设计各种复杂的业务处理、
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 如何在信息系统项目管理师考试中掌握使用案例分析法试题及答案
- 项目管理软件的比较分析试题及答案
- 软件设计师考试课程设置试题及答案
- 考试评分标准下的软件设计师试题及答案
- 项目管理中时间估算技巧试题及答案
- 机电工程环境监测技术试题及答案
- 公共政策的执行性与考量因素试题及答案
- 网络设计文档撰写要点试题及答案
- 科技与社会政策相结合的创新路径试题及答案
- 深入探讨云计算与网络的结合点与试题及答案
- 运动素质知到课后答案智慧树章节测试答案2025年春浙江大学
- 2025年甘肃农垦集团招聘笔试参考题库含答案解析
- 驾照体检表完整版本
- 上门按摩项目融资计划书
- 机械通气基础知识及基础操作课件
- 打印版医师执业注册健康体检表(新版)
- 1.3.1动量守恒定律课件(共13张PPT)
- DB36_T 420-2019 江西省工业企业主要产品用水定额(高清无水印-可复制)
- 中小学教育惩戒规则(试行)全文解读ppt课件
- TCECS 850-2021 住宅厨房空气污染控制通风设计标准
- 印度尼西亚煤炭购销合同
评论
0/150
提交评论