2021华泰证券数据架构资深专家社招公告(20210218)
发布时间:2021-02-19 09:17
在线咨询
重要提醒:本网站所发布内容为转载资讯,供您浏览和参考之用,请您对相关内容自行辨别及判断,本网站对此不承担任何责任。凡私自告知添加联系方式、保证无条件入职、收取各种费用等信息,请保持高度警惕,防止上当受骗造成各种损失。
数据架构资深专家
工作地点:南京市
学 历:硕士研究生及以上
工作类型:全职
招聘人数:若干
发布时间:2021-02-18
职位描述
1、负责Hadoop大数据平台、AI平台架构设计和软件技术选型,参与部门技术发展路线的制定和实践,以及大数据平台、AI平台相关标准制定等工作;
2、负责Hadoop生态圈相关组件功能、性能优化设计和实施落地工作;
3、参与团队技术人才培养,指导团队成员工作,提升团队研发能力;
4、研究大数据技术、AI技术发展动态,研究新型计算框架,并能够提出优化解决方案;
5、负责大数据平台、AI平台的架构审核、业务监控、应急响应、容量规划、技术攻关等,跟进并处理大数据平台系统问题及故障解决跟踪优化,不断提升集群服务质量,并根据实际情况进行优化;
6、负责企业数据产品和数据仓库等相关需求分析、数据规划、数据模型设计等工作;
7、负责企业数据资产地图、数据标准、数据安全、数据质量和生命周期管理等设计工作;
8、深入业务,理解业务的数据需求,和数据产品、算法团队等合作,挖掘数据价值,赋能业务。
任职要求
学历及工作年限要求:
计算机相关专业硕士及以上学历,10年以上相关工作经验。
任职要求满足以下三种类型之一:
一、
1、熟悉Hadoop生态圈的相关组件,深度了解HDFS、Hive、Impala、HBase、Yarn等组件的工作原理和使用,具备2年以上Hadoop调优经验;
2、了解大数据平台虚拟化、存储计算分离、基础架构服务化等构建方法,熟悉Hadoop集群安全管控方案,并能熟练使用Kerberos、Sentry等构建集群的安全管控体系;
3、熟悉Spark、Flink等计算组件,并至少有2个项目的实施经验;
4、熟练掌握Java语言、Python语言或Scala语言之一,具备3年以上使用经验;
5、熟练掌握Linux操作系统,并能熟练使用Shell编程;
6、有较大规模集群规划、监控与运维工作经验者优先;
7、良好的自我学习能力、自我管理能力、沟通能力和团队协作能力;
8、5年以上大数据平台架构领域工作经验。
二、
1、对k8s、docker、etcd等云原生相关组件有较深入了解,并具有一定的运营能力;
2、精通golang,有对k8s进行二次开发能力更佳;
3、熟悉容器网络,对如flannel、calico等有所了解;
4、熟悉分布式存储,对ceph等有所了解;
5、熟悉Linux基本操作,熟悉算法与数据结构;
6、具备与岗位相适应的数据科学、机器学习、深度学习基础知识体系;
7、具有大型项目架构经验、高性能集群建设经验者优先。
三、
1、有数据架构解决方案方面的经验,如数据仓库、数据集市、数据中台等;
2、熟悉数据仓库方法论,深入了解数据仓库技术体系,并支撑过大规模实际业务场景;
3、参与过企业数据治理,如数据模型、数据标准、质量体系的建设工作;
4、熟悉金融业务,有金融行业经验背景者优先;
5、善于沟通,能快速理解业务场景,具备优秀的技术和业务结合的能力。