数据平台架构师

17-28K * 12薪
数据架构师
杭州
硕士
1-3年
岗位关键词
岗位职责
岗位职责: 1. 负责规划和设计大图存储与分布式计算平台架构,搭建大科学装置底座基础平台,支撑交叉领域多模态多尺度海量数据存储、智能计算与平台服务。 2. 负责数据库架构设计及规划和落地,以及平台和生态工具建设。 3. 负责设计建立性能优越的数据中台,支撑交叉领域多模态和多尺度海量数据的实时和批量接入,构建由数据接入到数据服务的可配置化平台。 4. 以数据为核心,制定数据质量标准,管理数据资产,确保数据安全。 5. 负责AI软件系统架构设计及其演进,对AI系统软件栈的长期竞争力负责。 6. 引入外部优秀的工具和技术,研发通用的基础平台功能。 7. 研究高效的大数据处理算法,保障基础平台稳定、高效运行。
岗位要求
岗位要求: 1.计算机或信息技术相关专业,硕士以上学历,有丰富的大数据领域工作经验,对大数据体系有深入的理解。 2.有深厚的java或scala语言功底,很强的分布式系统架构设计能力,对分布式、网络、高并发有自己的理解,熟悉微服务,工作流,调度系统,对大型java项目有架构能力。 3.具备丰富的数据库产品构建经验,熟悉至少一种数据库(PG, MYSQL, Redshift, PolarDB, Oceanbase, TiDB, GaussDB, Oracle, TERADATA)的技术架构, 对数据库集成,数据库开发,数据库调优等有实际经验,具备数据库高可用,系统优化的经验,具有分布式图数据库架构经验优先。 4.丰富的数据仓库及数据平台的架构经验,熟悉ETL设计开发,对数据安全、元数据管理、权限管理有深刻理解,对大数据一站式处理有一定产品化经验者优先。 5.具有扎实的大数据系统构建经验,对Hadoop、Spark、HDFS、Hbase、Kafka等分布式框架和中间件有深刻理解,有大数据中间件开发经验者优先。 6.熟悉了解至少一种实时数据处理技术(例如Flink、Storm、Spark Streaming)。 7.有类似于TensorFlow,Pytorch,Caffe,PAI,PaddlePaddle,OneFlow等AI训练框架构建经验。 8.有较好的理解力,洞察力,与人链接能力,对于AI系统、AI算法有独到的观点。 9.较强的工作激情,强烈的责任心和团队合作精神,能承受一定工作压力。 10. 学习能力强,拥有优秀的逻辑思维能力,有较强的分析和解决问题能力。
牛客安全提示:如发现虚假招聘、广告,或以任何名义索要证件、费用,或诱导异地入职、参与培训等均属违法行为,发现请 立即举报
之江实验室
研究所
不需要融资
杭州
查看其他 11 个职位