大数据架构师发布时间:2021-01-21 08:56:33 作者:天翼人力 文章来源: 浏览次数:
公司介绍
集团公司
职位信息
岗位描述
1. 持续改进公司大数据平台架构,满足不断增长的业务需求;
2. 负责基于海量数据采集、存储、治理及服务方案的技术选型及架构设计;
4. 从整体技术架构角度协助并推动战略落地,开发大数据平台的核心代码;
2. 负责根据实际业务场景,实现对开源大数据组件的产品化工作;
4. 负责产品研发过程中的技术架构设计、数据处理逻辑等方面文档的沉淀与积累;
5. 参与研发团队的日常技术交流与分享,为其他同事提供技术指导与帮助;
6. 深入研究大数据前沿技术和产品,与业界先进技术保持同步。
岗位要求
1. 统招本科及以上学历,5年以上大数据开发经验;
2. 精通Hadoop生态圈的部分产品,包括但不限于Spark、Impala、Hive、Kudu、HBase,理解其内部原理和适用场景,了解核心源码及调优方法;
3. 能够根据实际业务需求,通过封装或二次开发实现对开源大数据组件的产品化;
4. 善于容量规划、架构设计和性能优化并有丰富实战经验;
5. 熟悉大数据应用和技术,在ETL开发和流程优化、数据集成、数据开发、数据分析等领域有实战经验;
6. 熟练运用任意一门编程语言,包括但不限于Java、Scala、Python、Golang、Shell等;
7. 有强烈的主人翁意识,能适应一定工作压力、并有较强沟通能力和理解能力;
8. 有大数据中台建设经验、数据治理经验或医疗大数据从业经验者优先。