大数据架构师工作的岗位职责

1、大数据架构师工作的岗位职责 大数据架构师负责研发技术开展方向，新技术领域的探 索，将新技术应用到公司大数据平台，提升公司效能。下面 是小编整理的大数据架构师工作的岗位职责。大数据架构师工作的岗位职责 1职责：1、负责大数据平台技术框架的技术选型和搭建;2、负责核心技术问题公关，建设高可靠性，扩展性及 高性能大数据 / 数据应用平台 ;3、负责规划数据挖掘的整体流程，负责大数据开发团 队业务需求开发 ;4、与其他团队密切配合，寻求数据层面的业务价值， 利用数据分析结论推动产品优化 ;5、研究和分享大数据架构领域新技术。任职要求：1、计算机相关专业全日制统招本科及以上;2、5 年以上工作经验， 至

2、少 3 年以上大数据工程相关工 作经验，能够设计大型大数据系统的架构和技术方案 ;3、精通 Hadoop/Spark/Hbase/Hive 等大数据技术 , 精通ETL技术；4、熟悉数据挖掘，了解典型大数据算法和策略;5、熟悉主流 Java 技术框架，精通关系型数据库及 SQL 语言，熟悉 NoSQL/JSON/XML；6、有较强的学习能力和问题解决能力，逻辑严密、思路清晰;7、有数据仓库经验者优先，有金融行业工程经验者优 先。大数据架构师工作的岗位职责 2职责：1、负责DMP技术架构设计与构建，根据业务规划及技 术规划制定应用架构方案 ;2、负责设计构建 DMP数据采集、存储及分析框架，设

3、计数据处理的技术流程和标准 ;3、负责核心功能的架构与代码模板编写，开发与维护 系统公用核心模块 ;4、负责基于大数据技术的海量数据的自动化分析处理 和统计工作。岗位要求：1 、计算机或相关专业本科以上学历，三年以上的开发 经验，二年以上大数据相关软件架构的实际经验 ;2、精通大数据处理技术， 熟悉 Hadoop/Storm 技术体系， 有 Hadoop、 Hive 、 Hbase 工程经验 ;3、具有较强的架构能力，具有分布式计算、实时计算、 数据仓库、数据挖掘系统的架构经历优先 ;4、对数据敏感，洞察力强，了解国内外广告开展趋势5、擅长系统分析与设计，精通常用的设计模式，擅长 性能调优 ;

4、6、熟悉DMP/RTB技术原理，了解用户的行为分析及建模；有RTB/DSP/SSP/EXCHANGE/DMPT告行业从业经历。大数据架构师工作的岗位职责 3职责：1、 负责 spark, hadoop, flink等开发和优化。2、参与前期需求沟通和分析，以产品化开发的思维， 完成需求分解和数据架构设计。3、与研发和数据科学家合作保证产品定义清晰，按时 完成产品上线。4、能够洞察市场状况，与各部门合作转化为基于大数 据挖掘的新策略或方案 .5、主动创造和开掘新的基于大数据挖掘产品商业模式.任职要求：1、全日制本科及以上学历，计算机软件相关专业，5 年以上开发经验， 3 年以上架构经验2、精通

5、hadoop/MapReduce/Spark/Hbase/Flink/Hive/R/Mahout等分布式数据存储和分布式计算平台原理，流式计算开发，有 开源二次开发经验者优先。3、精通大数据挖掘、机器学习.熟练掌握 Java/Perl/Python 至少一种编程语言。4、具有数据挖掘和分析、机器学习等工程实施相关经 验者优先 ；5、良好的跨部门沟通合作能力，解决不同观点能力并 取得结果。具备敏锐的互联网产品理解力，学习能力和逻辑思维能力强 ;6、较强的自我驱动力、推动和协调能力，强烈的责任 心和团队合作精神 ;大数据架构师工作的岗位职责 4职责1、负责大数据架构设计，包括定义数据的存储、集成

6、(ETL) 、应用，支撑业务运营和数据分析类需求实现 ;2、制定数据治理领域的数据体系化管理措施，包括元 数据设计、数据标准、数据质量、数据处理、数据平安等工 作，确保数据可信与平安 ;3、基于行业数据积累，满足业务的数据挖掘需求，实 现从数据到资产的转变，根据目标行业建立具有前瞻性的数 据模型;4、对各产品的数据平安负责，主导制定和实施数据库 系统平安策略，保证整体方案数据平安 ;岗位要求 业务技能要求：1、深入理解云化、数据仓库，在参与过的系统设计中， 必须涉及这两项关键技术 ;n2 、 精 通 或 者 熟 悉 Hadoop 体 系 架 构 ， 以 及 HDFS/HBase/Hive/Ma

7、pReduce/Spark 等技术，了解体系架构 各组件的优缺点，有直接的产品设计与开发、部署、调优的 经验;3 、精通或熟悉常见RDBMS(Oracle / PostgreSQL /MySql) 、 NoSQL(Redis / Memcached/ MongoDB) 、全文搜索 引擎 (Solr/ElasticSearch)的使用及开发，了解各数据库优缺点， 熟悉与架构设计相关的数据存储、性能调优等相关 领域知识，有相关工程经验尤佳 ;4、熟悉业界常用的数据采集、集成、数据存储、计算、 数据模型、数据分析的技术方案，具有数据分析或数据挖掘 相关经验者优先 ;n5、熟悉数据治理相关流程， 包括

8、数据接入、数据处理、 数据治理、数据组织、数据效劳等。专业知识要求：1、具备数据治理的知识与体系方案，包含政策、组织、 角色、流程、标准等，以及规划相应的支撑方案。了解业界 的数据管理方法论 ;2、具备数据用例设计和开发能力。能够基于业务相关 数据进行业务需求分析和痛点识别，将业务需求转化为数据 的需求，完成数据用例的设计和开发 ;3、精通海量数据 (日增量百亿 ) 级别数据仓库、数据集 市的构建流程。熟悉公安、政务、工业、交通、医疗等多行 业业务者优先。大数据架构师工作的岗位职责 5职责：1. 负责大数据平台的根底技术规划，编制相关标准文 档。2. 负责大数据平台的数据采集，处理，存储以及挖

9、掘 分析的架构实现。3. 负责大数据平台的实际规划建设，包括环境和框架 的规划搭建以及局部核心编码工作。4. 负责大数据相关技术开展方向的预研。5. 参与业务需求调研，根据需求及行业特点设计大数 据解决方案并跟进具体实施工程。6. 制定大数据平台中数据质量，业务质量监控及管理 方法。岗位要求：1. 全日制本科及以上学历， 5 年以上工作经验， 4 年及 以上大数据架构设计经验，熟悉大数据解决方案，包括Hadoop平台、Spark、storm、机器学习、深度学习等大数据 解决方案。2. 深刻理解大数据处理 流计算、分布式计算、分布式 文件系统、分布式存储等相关技术 实现方法。有架构和设 计实践经验。3. 精通大型数据库 Oracle 、 SqlServer 等的开发。4. 精通 java ， Python 中的一种或多种语言。5. 熟悉容器、虚拟化、微效劳框架等相关技术。6. 对数