大数据架构师岗位的主要职责概述

1、大数据架构师岗位的主要职责概述职责 : 1 。参与公司数据平台的系统规划和架构工作，领导系统架构设计和项目实施，确保项目质量和关键绩效指标的实现；2 。协调和促进制造工厂内部数据系统的建设，建立不同来源数据之间的逻辑关系，为公司的运营诊断和运营效率的提高提供数据支持； 3 。负责数据系统需求对接、 各种信息系统数据对接和软件供应商管理5 。根据现状制定整体数据治理方案和数据系统建设，包括数据收集、访问、分类、开发标准和规范，制定全环节数据治理方案；深入挖掘公司的数据业务，对数据业务有很强的感知能力，挖掘数据价值，促进数据实现场景的落地，实现决策和业务；。定义不同的数据应用场景，促进公司的数据可

2、视化工作，提高公司的数据分析效率和数据价值转化:1 的要求。本科以上学历，8 年以上软件行业经验， 5 年以上大数据架构设计经验， 熟悉商业智能平台、 大数据系统相关技术架构和技术标准；。熟悉数据仓库、数据集市、数据挖掘、数据抽取、数据清理、数据建模相关技术；。熟悉大数据相关技术 :Hadoop、Hive 、Hbase、Storm、Flink 、Spark、Kafka 、RabbitMQ。熟悉制造企业信息系统及相关数据库技术；。有大数据平台、计算存储平台、可视化开发平台经验，有制造业大数据系统项目开发或实施经验者优先；。对数据敏感，具有出色的业务需求分析和报告呈现能力，具有制造企业数据分析和数

3、据洞察、 大数据系统架构设计能力， 了解主流报告工具或新兴前端报告工具；。有较强的沟通、组织和协调能力，注重结果的思维，以及相关项目管理经验者优先大数据架构师职位概述 2职责 :，负责大数据平台和商业智能系统框架的设计、规划、技术选择、架构设计和系统基础设施服务开发的完成；，负责海量掩埋点规则、 SDK标准化、掩埋点数据采集、处理和存储、业务数据分发存储、流 / 实时计算等应用层架构建设和核心代码实现；。开发大数据平台的核心代码，管理项目敏捷开发过程，完成系统调试、集成和实施，解决每个项目周期的技术问题，保证大数据产品的在线运行；。负责大数据平台的架构优化和代码审查， 根据业务需求不断优化数据

4、架构，确保产品的可靠性和稳定性。、指导开发者完成数据模型规划和建设，分析模型建设和分析，分享技术经验；、有效制定各种突发研发技术故障应急预案， 具有明确的隐患意识；、深入研究大数据相关技术和产品，跟进行业先进技术； 要求、统计学、应用数学或计算机相关专业本科以上学历；、熟悉互联网移动嵌入点方法 ( 点击和浏览行为嵌入点 ) 、无嵌入点方案等。，有独立开发嵌入式点 SDK经验者优先考虑；，熟悉 Hadoop、Mr/MapReduce、HDFS、hbase、Redis 、Storm、Python 、Zookeeper、 Kafka 、Flink Hadoop 、Hive 、 Mahout、Flum

5、e、弹性搜索、 Kafka Python等。具有实际项目设计和开发经验；，熟悉与数据收集、数据清理、分析和建模相关的技术细节和流程5 ，熟悉 Liunx/Unix操作系统，能够熟练使用 shell/perl等脚本语言，精通 java/python/go/C+中的一种或多种编程语言6 ，并具有一定的算法能力。了解机器学习/ 深度学习算法工具的使用，有开发和使用主流大数据计算组件经验者优先考虑7 ，熟悉大数据可视化工具Tableau/E Charts8 ，执行力强，责任心强，学习和沟通能力强， 能在高压下高效工作。大数据架构师岗位主要职责总结3职责 :设计大数据方案和架构，根据大数据业务需求实现相

6、关功能；构建和维护大型数据集群，确保集群规模持续、稳定、高效、稳定运行；负责设计和指导大数据服务的具体开发；负责公司产品开发过程中的数据和存储设计；进行数据分析，可以完成并指导负责业务的数据建模职位要求计算机、自动化或相关专业本科以上学历 ( 如统计学和数学 ) ，至少年大数据处理工作经验；精通主要的大数据框架( 如 Hadoop、hive 、Spark 等。 ) ；熟悉 MySQL、NoSQL(MongoDB、Redis) 和其他主流数据库， 以及 rabbitMQ和其他队列技术。熟悉 hadoop/spark 生态学的原理和特点，有实战开发经验。首先熟悉常用的数据挖掘算法。大数据架构师职位

7、的主要职责概括为4职责 :1 。负责产品级业务系统架构的设计和优化( 如业务数据对象识别、数据实体、数据属性分析、数据标准、端到端数据流等) 。) 协助跨领域重大数据问题的分析、 定位和解决方案设计， 从架构设计上保证系统的高性能、高可用性、高安全性、高时效性、分布式可扩展性，并对系统质量负责2 。负责云数据平台的架构设计和数据处理系统的优化，推动云数据平台的建设和持续升级，制定云数据平台的调用约束和规范。根据行业应用需求，负责数据流各方面的方案选择，领导云数据平台建设，参与核心代码的编写和审核； 统计逻辑回归算法和数据的实时交互分析；数据可视化方案的选择、部署、集成和融合等。关注云数据平台，

8、继续推进平台技术架构升级，满足公司不同阶段的数据需求。:1 的要求。熟悉云计算基础平台， 包括 Linux(Ubuntu/CentOS) 、KVM、OpenStack/K8S 等基础环境，熟悉控制、计算、存储和网络；2 。掌握大规模分布式系统的技术堆栈，如CDN、负载平衡、服务 /异步、分布式缓存、 NoSQL、数据库的垂直和水平扩展；熟悉面向大数据应用的端到端相关高性能产品3 。精通 Java、Python 、Shell 编程语言，精通SQL、NoSQL等数据库的添加、删除、修改和查询操作优化；。Pb 级实战数据平台和生产环境的实施、开发和管理经验；。熟悉码头和其他集装箱的布局和包装， 熟悉

9、微服务的开发和日常调度；。计算机、软件、电子信息与通信等相关专业本科以上学历，至少5 年软件工程开发经验，至少2 年大数据架构师工作经验大数据架构师职位主要职责概述5职责 :大数据平台架构规划与设计；，负责大数据平台技术框架的选择和关键技术难点的攻关；，能够独立设计和优化行业大数据应用的总体技术框架、 业务框架和系统架构，能够指导开发团队根据系统的业务需求完成实施工作；，负责数据基础设施和数据处理系统的升级和优化， 不断提高系统的稳定性和效率，为相关业务的大数据基础平台提供支持和保障；。培养和建立大数据团队，并为团队提供技术指导要求:1 ，计算机相关专业背景，本科或硕士学位，8 年( 硕士学位5年)以上工作经验 ( 至少 3 年大数据项目或产品架构经验) ；，精通 Java、J2EE相关技术，精通通用开源框架架构，精通关系数据库系统 (Oracle MySQL 等。 ) 和 noSQL数据存储系统的原理和架构；，精通 SQL和 Mapreduce、Spark 处理方法；、精通大数据系统架构， 熟悉行业数据仓库建模方法和新建模方法的发展，有特殊的数据仓库和商业智能架构系统的建设经验；，对大数据系统有深入了解，熟悉卡夫卡、 Hadoop、Hive 、HBase、Spark、 Storm、greenplu