大数据平台架构师岗位职责精选范本5篇

铬初2分享 2024-02-05 21:46:01

　　制定优秀详细的岗位职责，可以增强全体人员爱岗敬业理念，强化公司健康有序发展，弘扬公司正气，增强公司凝聚力和战斗力。下面是小编给大家带来的岗位职责范本，欢迎大家阅读参考，我们一起来看看吧!

　　大数据平台架构师岗位职责(一)

　　1、负责公司大数据处理框架研发工作，设计与开发分布式存储、数据处理与分析架构。

　　2、负责大数据平台与产品和相关技术的追踪及研究。

　　3、负责大数据的处理工作，以及业务数据提取、加载、转换处理流程的开发和优化。

　　4、利用大数据平台工具对数据维护。

　　5、负责相关项目的技术支持和服务。

　　6、持续对系统的技术架构进行改进和优化。

　　1. 负责大数据项目整体架构规划，包括应用架构、技术架构、物理架构和数据架构等;

　　2. 负责指导工程师进行技术验证与实现，核心技术问题的攻关，解决项目开发过程中的技术难题;

　　3. 负责项目对外技术沟通，具有较强的沟通，表达和文档撰写能力;

　　4. 根据公司项目和业务发展特点，负责研究相关大数据前沿技术;

　　5. 推动技术能力的沉淀。

　　1、建设大数据平台，主要技术为k8s, docker;

　　2、跟进开源社区的更新，阅读文档，验证feature;

　　3、阅读容器生态圈各组件的开源项目代码，开发新功能;

　　4、持续提升平台的性能和稳定性。

　　1. 负责数澜大数据平台的架构设计和研发，建立数据生态服务，解决海量数据面临的挑战;

　　2. 管理和优化Hadoop、Spark等集群，计算作业的调优，保证集群和平台的高效和稳定;

　　3. 负责Hadoop、Spark、Flink的功能、性能和扩展，解决并实现业务需求;

　　4. 负责大数据产品的自动化、离线与实时计算、即席计算、数据质量、数据安全、机器学习等平台的设计和开发;

　　5. 调研和把握当前的最新技术，将其中的先进技术引入到自己的平台中，改善产品，提升竞争力;

　　1、负责大数据平台资源规划、权限控制、运维架构设计，为各产品业务提供稳定、高效、安全的运行环境;

　　2、负责实时，离线数据分析处理及实时平台的建设和搭建

　　3、熟悉 Flink 流式计算引擎的使用以及源码原理，并且有相关的流式处理平台的经验。

　　4、Java基础扎实，熟练掌握垃圾回收，网络，多线程编程，了解 python 或 scala

　　5、负责大数据平台技术架构、数据架构的分析与设计;