首页 > 文库大全 > 精品范文库 > 5号文库

大数据平台架构师岗位职责范本

大数据平台架构师岗位职责范本



大数据平台架构师岗位职责范本5篇

1、负责公司大数据处理框架研发工作,设计与开发分布式存储、数据处理与分析架构。

2、负责大数据平台与产品和相关技术的追踪及研究。

3、负责大数据的处理工作,以及业务数据提取、加载、转换处理流程的开发和优化。

4、利用大数据平台工具对数据维护。

5、负责相关项目的技术支持和服务。

6、持续对系统的技术架构进行改进和优化。

大数据平台架构师岗位职责(二)

1.负责大数据项目整体架构规划,包括应用架构、技术架构、物理架构和数据架构等;

2.负责指导工程师进行技术验证与实现,核心技术问题的攻关,解决项目开发过程中的技术难题;

3.负责项目对外技术沟通,具有较强的沟通,表达和文档撰写能力;

4.根据公司项目和业务发展特点,负责研究相关大数据前沿技术;

5.推动技术能力的沉淀。

大数据平台架构师岗位职责(三)

1、建设大数据平台,主要技术为k8s,docker;

2、跟进开源社区的更新,阅读文档,验证feature;

3、阅读容器生态圈各组件的开源项目代码,开发新功能;

4、持续提升平台的性能和稳定性。

大数据平台架构师岗位职责(四)

1.负责数澜大数据平台的架构设计和研发,建立数据生态服务,解决海量数据面临的挑战;

2.管理和优化Hadoop、Spark等集群,计算作业的调优,保证集群和平台的高效和稳定;

3.负责Hadoop、Spark、Flink的功能、性能和扩展,解决并实现业务需求;

4.负责大数据产品的自动化、离线与实时计算、即席计算、数据质量、数据安全、机器学习等平台的设计和开发;

5.调研和把握当前的最新技术,将其中的先进技术引入到自己的平台中,改善产品,提升竞争力;

大数据平台架构师岗位职责(五)

1、负责大数据平台资源规划、权限控制、运维架构设计,为各产品业务提供稳定、高效、安全的运行环境;

2、负责实时,离线数据分析处理及实时平台的建设和搭建

3、熟悉

Flink

流式计算引擎的使用以及源码原理,并且有相关的流式处理平台的经验。

4、Java基础扎实,熟练掌握垃圾回收,网络,多线程编程,了解

python

scala5、负责大数据平台技术架构、数据架构的分析与设计;

相关内容

热门阅读

最新更新

随机推荐