大数据架构师的职责

合集下载

大数据架构师的具体职责

大数据架构师（Big Data Architect）是一项旨在处理、管理和分析数据集的职位。他们使用现代技术和工具来设计和开发大规模数据处理系统，以处理来自不同来源的海量数据。大数据架构师需要拥有精通数据技术和领域知识，以实现可靠性、可扩展性和安全性。

大数据架构师的具体职责包括以下几点：

1. 构建可靠和可扩展大数据系统

大数据架构师需要设计和构建可靠和可扩展的大数据系统，以确保数据管道流畅地运行，并且可以满足指定的性能水平和可用性要求。他们需要熟悉多种工具和技术，包括Hadoop、Spark、NoSQL数据库和深度学习框架等，以构建可靠的系统

架构。

2. 管理和处理大规模数据集

大数据架构师需要通过设计和实现数据管道来管理和处理大规模数据集。他们需要熟悉大数据管理和分析工具，以协调和处理来自不同数据源的数据，并为业务决策提供有价值的见解。

3. 设计和实现数据安全

从业务机密到客户个人信息，大数据中的信息都是存在安全风险的。大数据架构师需要设计和实现数据安全策略，以保

护数据免受损坏、窃取和滥用等威胁。他们需要熟悉安全性技术和工具，比如SSL/TLS、加密、身份验证和访问控制等等。

4. 培训和指导团队成员

大数据架构师需要带领和培养团队成员，以确保数据管理和分析系统按照指定的要求运行。他们需要提供技术培训和指导，以帮助团队成员熟悉和掌握新技术和工具，以方便有效的大数据管理和分析。

5. 分析和评估新技术和工具

随着新技术和工具的不断涌现，大数据架构师需要分析和评估它们的适用性，以确定哪些技术和工具可以提高数据处理和管理的效率和效果，以确保整体数据管理解决方案的有效性。

大数据架构师岗位的职责内容

大数据架构师负责大数据平台技术框架的选型与技术难点攻关,指导开发大数据平台的开发，保证大数据产品的上线运行。以下是店铺整理的大数据架构师岗位的职责内容。

大数据架构师岗位的职责内容1

职责：

1、大数据平台架构规划与设计;

2、负责大数据平台技术框架的选型与技术难点攻关;

3、能够独立进行行业大数据应用的整体技术框架、业务框架和系统架构设计和调优等工作，根据系统的业务需求，能够指导开发团队完成实施工作;

4、负责数据基础架构和数据处理体系的升级和优化，不断提升系统的稳定性和效率，为相关的业务提供大数据底层平台的支持和保证;

5、培养和建立大数据团队，对团队进行技术指导。

任职要求：

1、计算机相关专业的背景专业一类院校毕业本科、硕士学位，8年(硕士5年)以上工作经验(至少拥有3年以上大数据项目或产品架构经验);

2、精通相关技术，精通常见开源框架的架构，精通关系数据库系统(Oracle MySQL等)和noSQL数据存储系统的原理和架构;

3、精通SQL和Mapreduce、Spark处理方法;

4、精通大数据系统架构，熟悉业界数据仓库建模方法及新的建模方法的发展，有DW，BI架构体系的专项建设经验;

5、对大数据体系有深入认识，熟悉Kafka、Hadoop、Hive、HBase、Spark、Storm、greenplum、ES、Redis等大数据技术，并能设计相关数据模型;

6、很强的学习Java，J2EE、分析和解决问题能力，可以迅速掌握业务逻辑并转化为技术方案，能独立撰写项目解决方案、项目技术文档;

大数据平台架构师岗位职责

大数据平台架构师是负责设计和构建大数据平台的专业人员，主要负责设计大数据架构，并将其与业务需求相结合，以实现高效的数据处理和分析。以下是大数据平台架构师的主要职责：

1. 完成大数据平台架构设计：大数据平台架构师需要深入了解业务需求和数据处理流程，设计出能够满足这些需求的平台架构。他们需要考虑各种因素，如数据来源、数据处理方式、数据存储和计算需求等，以确保平台能够高效地处理大数据量。

2. 选择合适的大数据技术和工具：大数据平台架构师需要了解各种大数据技术和工具，如Hadoop、Spark、Hive等，并根据业务需求选择合适的技术和工具来支持平台的功能。他们需要评估不同技术的优缺点，并选择最适合的技术来解决特定的问题。

3. 设计数据处理和分析流程：大数据平台架构师需要设计数据处理和分析的流程，以确保数据能够被准确地收集、处理和分析。他们需要考虑数据的传输方式、数据质量的控制和数据的安全性等因素，并设计相应的流程来保证数据的完整性和准确性。

4. 搭建和配置大数据平台：大数据平台架构师需要负责搭建和配置大数据平台，并确保平台能够正常运行。他们需要安装和配置各种组件和工具，如数据存储系统、分布式计算框架等，并进行性能优化和故障排查，以保证平台的稳定性和可靠性。

5. 参与解决复杂的技术问题：大数据平台架构师在平台运行过程中可能会遇到各种复杂的技术问题，如性能瓶颈、数据安全性等。他们需要快速识别问题的根本原因，并提供解决方案来解决这些问题。他们还需要与开发团队和运维团队紧密合作，共同解决技术问题。

大数据架构师职责(通用20篇)

大数据架构师职责（通用20篇）

大数据架构师职责篇1

职责：

1、负责大数据平台架构的评估、规划和设计;负责海量数据采集、处理及存储、应用方案的技术选型及架构实现;

2、开发大数据平台的核心代码，负责大数据平台的搭建，完成系统调试、集成与实施，技术难题的解决，保证大数据产品的上线运行;

3、根据业务需求持续优化数据架构，保证产品的可靠性、稳定性;

4、指导开发人员完成数据模型规划建设，分析模型构建及分析呈现，分享技术经验;

5、负责大数据平台的架构评审，代码评审，上线评审;参与数据应用需求、设计、审核和评审;

6、深入研究大数据相关技术和产品，跟进业界先进技术;

任职资格：

1.本科及以上学历，数学或计算机相关专业毕业，不少于5年的工作经验，具有扎实的计算机基础理论知识;

2.有3年以上Hadoop、Spark、Hbase平台性能调优经验;熟悉sparkstreaming等实时计算技术

3.熟悉hive、hbase、storm、mahout、flume、ElasticSearch、Spark、Kafka 等，具备实际项目设计及开发经验;

4.熟悉sparkstreaming等相关的实时计算技术;

5.熟悉大规模数据挖掘、机器学习、自然语言处理、分布式计算中一项或多项技术，并具备多年的实际工作经验;

6.熟悉主流关系型数据库(Oracle、MySql)、NoSql数据库，熟悉pl/sql编程;精通Linux操作系统，熟练使用Java;熟悉常用框架.如Spring、MyBatis等;

7.具有较强的执行力，高度的责任感、很强的学习、沟通能力，能够在高压下高效工作;

大数据架构师的主要职责说明

大数据架构师负责解决核心技术问题，对技术方案进行决策。下面是店铺为您精心整理的大数据架构师的主要职责说明。

大数据架构师的主要职责说明1

职责：

1、负责公司大数据底层框架的整体架构设计，结合公司实际业务情况进行技术选型及大数据战略规划;

2、负责公司项目的整体评估、设计、架构及关键模块的开发;

3、负责架构优化，协助团队解决开发过程中遇到的技术难题;

4、负责新技术的调研和大数据相关开源组件的研究，并能在团队进行推广应用;

5、参与数据分析、数据建模、项目核心模块及核心框架的开发;

6、负责大数据平台的性能条有和问题诊断。

任职要求：

1、计算机相关专业，本科及以上学历，3-5年以上工作经验，2-3年大数据相关经验;

2、具有扎实的大数据和数据仓库理论功底，负责过大数据平台或数据仓库设计;

3、对基于Hadoop的大数据体系有深入的认识，具备相关产品(Hadoop、Hive、HBase、Spark、Storm、Flume、Kafka、Redis、ES等)项目应用研发经验，有Hadoop集群搭建和管理经验，度过Hadoop和Spark源码;

4、熟悉Linux和Python语言，了解Scala原理和底层技术;

5、熟悉分布式系统的架构及对其进行设计和优化，对海量数据的清晰、分析处理及存储有相关的实战经验;

6、算法基础扎实，熟悉常见的数据结构，深入理解分布式算法和以上提到的分布式系统，

7、必须有一线coding的能力;

8、有统计学、数学知识，海量数据处理、分析和挖掘，大型互联

网公司从业经历着优先。

大数据架构师岗位职责

大数据架构师是负责设计、建立和维护大数据系统的专业人员，主要职责如下：

1. 数据架构设计：负责设计、制定大数据架构方案，包括数据

流程设计、数据模型设计、应用程序接口设计等，确保系统的稳定性、扩展性和灵活性。

2. 大数据平台搭建与维护：通过使用大数据技术栈（如Hadoop、Spark、Flink等），负责搭建大数据平台，管理数据采集、存储、处理、分析和展示，确保平台的高效运行和稳定性。

3. 系统性能优化：负责对大数据系统进行性能优化，包括数据

访问速度、存储空间利用率、数据处理效率等方面，同时提高系统

的响应速度和稳定性。

4. 数据安全保障：负责确保大数据系统的数据安全，制定和实

施数据加密、访问控制、防火墙等措施，保护系统的数据安全。

5. 团队管理：领导和协调大数据团队的工作，包括制定工作计划、掌握工作进度，确保团队人员高效、协同地完成工作任务。

6. 技术支持：及时解决团队成员遇到的技术问题及客户设备问题，并支持产品落地和售后。

7. 技术创新：负责大数据技术的研究和评估，并进行技术创新、新技术的引入。

总之，大数据架构师需要具备扎实的数据架构、数据库、大数

据技术和管理能力，共同构建一个强大的大数据系统。

大数据架构师是干什么的

大数据架构师是当今数字化时代中备受追捧的职业之一。随着信息量的爆炸性增长，企业和组织需要有效地管理和利用大数据以获得竞争优势。而大数据架构师则扮演着至关重要的角色，负责设计和实施复杂的大数据系统架构，以确保数据高效、安全地存储、处理和分析。

职责与任务

大数据架构师的主要职责是设计和构建大规模数据处理系统，以支持企业在面对海量数据时的需求。他们需要深入了解业务需求，评估和选择合适的大数据技术和工具，设计系统架构并确保其可扩展性、稳定性和性能。大数据架构师通常需要具备深入的数据分析和编程技能，以便能够理解和解决在数据处理过程中遇到的复杂问题。

此外，大数据架构师还需要与数据科学家、数据工程师和其他相关团队合作，共同制定数据处理流程、数据模型和数据集成方案。他们还需要负责监督和管理大数据平台的运行，确保系统按照设计要求稳定运行并满足用户需求。

技能要求

成为一名优秀的大数据架构师，需要具备多方面的专业技能和知识。以下是一些常见的技能要求： - 深入了解大数据技术生态系统，包括Hadoop、Spark、Hive 等工具和框架； - 熟悉数据仓库设计和维护，了解常用的数据模型和ETL流程； - 具备扎实的编程能力，能够熟练运用Java、Python等编程语言； - 熟悉分布式系统设计原理和容错机制，能够设计高可用性的系统架构； - 具备优秀的沟通和团队合作能力，能够有效与不同团队和利益相关者协调工作。

职业发展

随着大数据技术的不断发展和普及，大数据架构师的职业前景也越发广阔。优秀的大数据架构师在企业中拥有很高的地位和影响力，通常能够获得丰厚的薪资和福利待遇。此外，大数据架构师还可以选择在咨询公司、科研机构或技术供应商等领域发展，扩大自己的职业影响力。

大数据架构师的岗位职责9篇

大数据架构师的岗位职责 1

职责：

1、负责公司大数据产品的架构设计，包含数据收集、数据存储、数据应用，并完成相关架构设计文档的撰写;

2、参与规划从数据源到数据应用的整体流程，并参与相关产品的决策;

3、负责解决核心技术问题，对技术方案进行决策;

4、负责大数据研发团队建设、人才梯队培养和技术团队管理;

5、积极了解业界发展，研究与跟踪大数据新技术发展方向。

任职要求：

1、精通GoldenGate For BigData相关理论，具备大型数据利用的生产实战经验;

2、精通数据驱动的理论，设计并生产上线相关数据驱动的产品;

3、精通常用消息中间件的使用，例如kafka/RocketMQ/Apache Pulsar，有解读相关源码者优先;

4、掌握hadoop、spark生态体系相关产品的使用，掌握MapReduce 编程或Spark编程;

5、了解传统数据仓库理论及相关ETL工具，例如

kettle/datastage;

6、熟悉Oracle、Mongodb、Mysql数据库的使用;

7、扎实的Java语言基础，熟悉Java开发工具和调试工具的使用;

8、良好的团队协作精神，有能力对团队在软件设计、实现和测试方面进行指导;

9、良好的逻辑分析能力和沟通能力，执行力强、对待工作认真严谨、责任心强、具备出色的学习能力和团队合作精神，有一定的推动能力;

10、计算机科学、信息技术或相关领域本科以上学历，具有5年以上数据平台项目开发经验，3年以上的架构设计经验，具有大数据平台应用大型项目架构设计经验优先;

大数据平台架构师岗位职责

大数据平台架构师是负责设计和构建大数据平台的专业人员。他们的工作职责包括以下几个方面：

1. 架构设计：大数据平台架构师需要负责设计大数据平台的整体架构。他们需要根据业务需求和技术要求，选择适合的技术栈和架构模式，并制定详细的技术方案，确保平台的可扩展性、高可用性和安全性。

2. 数据模型设计：大数据平台架构师需要负责设计和优化大数据平台的数据模型。他们需要了解业务需求和数据特征，设计出合理的数据模型，以便支持复杂的数据分析和挖掘工作。

3. 数据存储和计算引擎选择：大数据平台架构师需要根据业务需求和数据规模，选择适合的数据存储和计算引擎。他们需要对各种大数据技术和工具有深入的了解，并进行合理的技术选型，以满足业务需求。

4. 数据流程设计：大数据平台架构师需要设计和优化大数据平台的数据流程。他们需要根据不同的数据源和数据处理需求，设计出合理的数据流程，以确保数据的准确性和及时性。

5. 平台监控和调优：大数据平台架构师需要负责监控大数据平台的运行情况，并进行性能调优。他们需要通过监控指标和日志分析，提前发现潜在的性能问题，并采取相应的措施进行调优，以提高平台的稳定性和性能。

6. 问题解决和支持：大数据平台架构师需要协助运维团队解决平台使用过程中遇到的问题，并提供技术支持。他们需要与跨部门的团队合作，共同解决技术难题，确保平台的正常运行。

7. 技术研究和创新：大数据平台架构师需要持续关注大数据技术的发展和创新，并进行相关的技术研究。他们需要评估新技术和工具的可行性和适用性，推动平台的技术升级和创新。

大数据架构师工作的职责（精选30篇）

大数据架构师工作的职责篇1

职责：

1. 负责大数据基础平台、海量数据存储/处理分布式平台、数据分析系统架构设计和研发;

2. 负责实时计算平台基础架构设计、部署、监控、优化升级;

3. 制定项目/数据仓库设计及实现规范，指导设计研发和部署;

4. 协助策略和算法团队工作，保障数据挖掘建模和工程化;

5. 深入研究大数据相关技术和产品，跟进业界先进技术。

任职要求：

1. 全日制本科及以上学历，5年以上软件和分布式系统研发经验，3年以上大数据系统架构经验;

2. 精通Hadoop/HBase/Spark/Storm/Redis技术及其生态圈;

3. 具备Java/C++/Scala等开发经验，熟悉数据挖掘和分析的策略与算法;

4. 具备良好的系统分析能力、故障诊断能力;

5. 有大数据策略、算法、可视化经验优先;

6、211/985 重点学校毕业优先。

大数据架构师工作的职责篇2

职责：

1、正确理解业务需求，对需求进行工作量评估;

2、参与项目相关的需求、设计、投产手册等文档的编写;

3、根据进度计划，完成所承担功能模块的设计、开发、单元测试、联调测试;

4、配合测试组修复代码缺陷，确保功能实现与代码质量;

5、负责所承担功能模块投产、部署，及上线后的日常维护;

6、完成项目经理或者架构师安排的其他工作;

任职资格：

1、本科以上学历，计算机相关专业，两年以上大数据开发经验;

2、熟悉Linux 环境，掌握shell或python;

3、熟练使用hadoop，hive，HBase，YARN，kafka，spark等大数据开发组件;

数据架构师的职责和要求

数据架构师是负责设计和管理大型数据系统的专业人士。他们需要具备广泛的技术知识和经验，以确保数据系统的合理性、可靠性和高性能。以下是数据架构师的主要职责和要求。

职责：

1. 数据系统设计：数据架构师负责设计整个数据系统，包括数据的存储、处理和传输。他们需要综合考虑数据的类型、规模、复杂度等因素，制定合适的架构方案，以满足业务需求。

2. 数据库管理：数据架构师需要管理和维护数据库，包括数据的备份与恢复、性能优化、安全管理等。他们需要熟悉各种数据库管理系统，如MySQL、Oracle、SQL Server等，并能根

据需求选择合适的数据库技术。

3. 数据安全与隐私保护：数据架构师需要确保数据的安全性和隐私保护。他们需要熟悉数据安全的相关法规和标准，设计合适的安全策略和控制措施，以保护数据不被非法访问、篡改或泄露。

4. 数据质量管理：数据架构师需要管理和优化数据质量，以确保数据的准确性、完整性和一致性。他们需要建立数据质量控制机制，监控和修复数据质量问题，并与数据管理员和数据分析师等合作，提高数据质量。

5. 技术咨询与支持：数据架构师需要为组织提供数据相关的技术咨询和支持。他们需要与业务部门和技术团队密切合作，理

解业务需求，制定合适的技术方案，并解决实施过程中的技术问题。

要求：

1. 技术知识与经验：数据架构师需要具备扎实的技术知识和经验，熟悉数据管理、数据仓库、大数据等相关领域的技术。他们需要了解数据库技术、数据建模、ETL工具、数据挖掘等，并能根据具体需求选择合适的技术方案。

大数据架构师岗位的职责内容

千里之行，始于足下。

大数据架构师岗位的职责内容

大数据架构师是负责设计和实施大数据系统架构的专业人士。他们在整个

大数据生态系统中起着至关重要的作用，负责从数据采集、存储、处理到分析

和可视化的全过程，确保系统的高效和稳定运行。

大数据架构师的主要职责包括以下几个方面：

1. 架构设计：大数据架构师负责设计和开发大数据平台的架构，确定数据的流动和存储方式。他们需要深入了解企业的业务需求和数据特征，结合技术

发展趋势，提供合适的架构解决方案。架构设计包括数据采集、数据存储和管理、数据处理和分析、数据可视化等各个环节的设计和整合。

2. 数据治理：大数据架构师需要负责建立和维护数据管理和治理的方法和流程。他们需要制定数据质量标准和规范，确保数据的准确性、一致性和完整性。同时，他们还需要定义数据的访问权限和安全策略，保护企业的核心数据

资产。

3. 技术选型：大数据架构师需要评估和选择适用的技术和工具。他们需要了解大数据技术的最新发展，熟悉各种大数据处理框架例如Hadoop、Spark等，以及各种数据库和存储系统。他们需要根据项目需求和预算，选取最适合的技

术组合，确保系统的性能和可扩展性。

4. 项目管理：大数据架构师需要与团队合作，参与大数据项目的规划、开发和交付。他们需要与业务部门和数据科学家紧密合作，确保项目目标的实现。他们需要制定项目计划，监控项目进展，解决项目中的技术和管理问题。

第1页/共2页

锲而不舍，金石可镂。

5. 性能优化：大数据架构师需要负责大数据系统的性能优化。他们需要对数据处理和存储过程进行分析和优化，提高系统的计算和存储效率。他们需要识别和解决系统瓶颈，确保系统的高性能和可靠性。

大数据架构师工作的职责

大数据架构师负责大数据系统设计、功能模块设计，数据平台的搭建、维护和优化。下面是小编整理的大数据架构师工作的职责。

大数据架构师工作的职责1

职责：

1、负责大数据项目平台架构的评估、规划和设计

2、开发大数据平台的核心模块代码，负责大数据平台的搭建，完成系统调试、集成与实施，保证大数据产品的上线运行

3、根据业务需求整合优化数据架构，保证产品的可靠性、稳定性

4、指导开发人员完成数据模型规划建设，分析模型构建及分析呈现

5、深入研究大数据相关技术和产品，跟进业界先进技术;

6、根据项目要求编写相关技术文档;

7、负责大数据平台的架构评审，代码评审，上线评审;参与数据应用需求、设计、审核和评审;

8、负责核心模块研发，负责大数据平台的搭建，完成系统调试、集成与实施;

9. 负责关键功能的开发，技术难题的解决，以及输出代码的关键把控;

10. 负责对使用关键技术的预研和选型，完成PoC ;

11. 指导工程师完成开发工作，并能分享技术经验。

任职资格:

1、精通Linux操作系统，熟练使用Java;

2、3年以上大数据项目实战经验，两个项目的架构设计经验，熟悉Hadoop、Hbase、Storm、Spark、Pig等开源框架，并熟悉其工作原理;

3、有Hadoop、Spark、Hbase平台性能调优经验;

4、熟悉其它分布式存储相关技术，包括HDFS，Hive、Redis、Mongodb、Flume、Kafaka、Sqoop、Zookeeper、ElasticSearch 等;

5、熟悉Java开发常用框架.如Spring、MyBatis等;

大数据架构师岗位的基本职责

大数据架构师需要负责根据业务需求整合优化数据架构，保证产品的可靠性、稳定性。以下是小编整理的大数据架构师岗位的基本职责。

大数据架构师岗位的基本职责1

职责:

1、负责自然语音交互、IOT家电物联控制、知识图谱等相关模块和系统的开发;

2、负责掌握第三方接口的调用和功能实现，持续优化服务性能和容量，并保证产品的兼容性和执行效率;

3、根据设计文档和需求说明完成代码编写、调试、单元测试与维护，确保项目进度和质量;

4、协助制定测试计划，及时发现并修复BUG，实现服务端的性能优化。

任职资格:

1、大学本科3年以上工作经验，计算机相关专业;

2、熟悉软件项目开发流程，具有良好编码风格及文档编写能力;

3、熟悉Linux服务器相关技术，能够独立完成服务器部署，具有相关经验;

4、熟悉Hadoop/Spark框架，JAVA基础扎实;

5、熟练使用Mysql数据库，了解MongoDB或neo4j等分布式数据库;

6、熟悉SpringCloud,SSM,Docker,redis开发者优先;

7、熟悉前端(包括但不限于Html5、css、Angularjs、ajax、jquery 等)开发技术优先;

8、了解Socket网络编程、MQTT等，有相应实践经验者优先;

9、有智能语音语义、知识图谱服务端开发经验者优先。

大数据架构师岗位的基本职责2

职责：

负责公司大数据产品架构的设计与实现;

配合大数据产品经理完成产品的快速研发与交付;

负责大数据产品架构的持续优化设计;

负责大数据产品核心组件设计;

负责大数据相关数据架构规划、数据建模、数据库设计以及大数据产品研发工作;

大数据架构师的基本职责

大数据架构师需要参与规划从数据源到数据应用的整体流程，并参与相关产品的决策。下面是店铺为您精心整理的大数据架构师的基本职责。

大数据架构师的基本职责1

职责：

1.负责整个大数据平台架构的设计和构建;

2.负责构建大数据平台的数据交换、任务调度等通用平台;

3.制定开发、测试、实施、维护的标准和规范，指导和培训工程师，不断提升团队能力。

4.参与系统需求分析、架构设计、技术选型、应用设计与开发以及测试与部署，负责编写核心部分代码。

5.持续挑战新的技术方向，攻克大数据量、高并发、高可用、可扩展等技术难点。

任职要求：

1.3年以上大数据架构经验，丰富的数据仓库、数据挖掘、机器学习项目经验

2.大规模数据处理的架构和设计实战经验

3.精通Spark、MR，熟练HDFS、Yarn、Hbase、Hive、MongoDB，熟悉Kafka、Redis、Storm、Mahout、Flume、ElasticSearch、GraphDB(NEO4J或其他)等，并具有丰富的大型数据平台工程经验

4.深刻理解大数据处理(流计算，分布式计算，分布式文件系统，分布式存储等)相关技术和实现方法

5.熟悉主数据、元数据、数据质量等企业数据管理相关的体系和方法，熟练Linux/Unix平台上的开发环境

6.本科或以上学历，计算机软件或相关专业，丰富的java开发经验和互联网背景优先。

7.具有比较强的问题分析和处理能力，有比较优秀的动手能力，

热衷技术，精益求精

大数据架构师的基本职责2

职责：

1. 深刻理解政府行业业务模式，构建政府行业的数据模型，制定公司大数据技术发展路线;

大数据架构师的工作职责描述

大数据架构师需要负责公司大数据产品的架构设计，包含数据收集、数据存储、数据应用，并完成相关架构设计文档的撰写。下面是小编为您精心整理的大数据架构师的工作职责描述。

大数据架构师的工作职责描述1

职责：

1、基于公司大数据基础和数据资产积累，负责大数据应用整体技术架构的设计、优化，建设大数据能力开放平台;负责大数据应用产品的架构设计、技术把控工作。

2、负责制定大数据应用系统的数据安全管控体系和数据使用规范。

3、作为大数据技术方案到产品实现的技术负责人，负责关键技术点攻坚工作，负责内部技术推广、培训及知识转移工作。

4、负责大数据系统研发项目任务规划、整体进度、风险把控，有效协同团队成员并组织跨团队技术协作，保证项目质量与进度。

5、负责提升产品技术团队的技术影响力，针对新人、普通开发人员进行有效辅导，帮助其快速成长。

任职资格：

1、计算机、数学或相关专业本科以上学历，5-20xx年工作经验，具有大型系统的技术架构\应用架构\数据架构相关的实践工作经验。

2、有分布式系统分析及架构设计经验，熟悉基于计算集群的软件系统架构和实施经验。

3、掌握Hadoop/Spark/Storm生态圈的主流技术及产品，深入了解Hadoop/Spark/Storm生态圈产品的工作原理及应用场景。

4、掌握Mysql/Oracle等常用关系型数据库，能够对SQL进行优化。

5、熟悉分布式系统基础设施中常用的技术，如缓存(Varnish、Memcache、Redis)、消息中间件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有实践经验者优先。