2021华泰证券数据架构资深专家社招公告（20210218）

工作地点：南京市 学 历：硕士研究生及以上 工作类型：全职 招聘人数：若干 发布时间：2021-02-18 职位描述 1、负责Hadoop大数据平台、AI平台架构设计和软件技术选型，参与部门技术发展路线的制定和实践，以及大数据平台、AI平台相关标准制定等工作； 2、负责Hadoop生态圈相关组件功能、性能优化设计和实施落地工作； 3、参与团队技术人才培养，指导团队成员工作，提升团队研发能力； 4、研究大数据技术、AI技术发展动态，研究新型计算框架，并能够提出优化解决方案； 5、负责大数据平台、AI平台的架构审核、业务监控、应急响应、容量规划、技术攻关等，跟进并处理大数据平台系统问题及故障解决跟踪优化，不断提升集群服务质量，并根据实际情况进行优化； 6、负责企业数据产品和数据仓库等相关需求分析、数据规划、数据模型设计等工作； 7、负责企业数据资产地图、数据标准、数据安全、数据质量和生命周期管理等设计工作； 8、深入业务，理解业务的数据需求，和数据产品、算法团队等合作，挖掘数据价值，赋能业务。 任职要求 学历及工作年限要求： 计算机相关专业硕士及以上学历，10年以上相关工作经验。 任职要求满足以下三种类型之一： 1、熟悉Hadoop生态圈的相关组件，深度了解HDFS、Hive、Impala、HBase、Yarn等组件的工作原理和使用，具备2年以上Hadoop调优经验； 2、了解大数据平台虚拟化、存储计算分离、基础架构服务化等构建方法，熟悉Hadoop集群安全管控方案，并能熟练使用Kerberos、Sentry等构建集群的安全管控体系； 3、熟悉Spark、Flink等计算组件，并至少有2个项目的实施经验； 4、熟练掌握Java语言、Python语言或Scala语言之一，具备3年以上使用经验； 5、熟练掌握Linux操作系统，并能熟练使用Shell编程； 6、有较大规模集群规划、监控与运维工作经验者优先； 7、良好的自我学习能力、自我管理能力、沟通能力和团队协作能力； 8、5年以上大数据平台架构领域工作经验。 1、对k8s、docker、etcd等云原生相关组件有较深入了解，并具有一定的运营能力； 2、精通golang，有对k8s进行二次开发能力更佳； 3、熟悉容器网络，对如flannel、calico等有所了解； 4、熟悉分布式存储，对ceph等有所了解； 5、熟悉Linux基本操作，熟悉算法与数据结构； 6、具备与岗位相适应的数据科学、机器学习、深度学习基础知识体系； 7、具有大型项目架构经验、高性能集群建设经验者优先。 1、有数据架构解决方案方面的经验，如数据仓库、数据集市、数据中台等； 2、熟悉数据仓库方法论，深入了解数据仓库技术体系，并支撑过大规模实际业务场景； 3、参与过企业数据治理，如数据模型、数据标准、质量体系的建设工作； 4、熟悉金融业务，有金融行业经验背景者优先； 5、善于沟通，能快速理解业务场景，具备优秀的技术和业务结合的能力。