大数据平台开发工程师-存储方向 北京 全职 智能制造 / 工业互联网 / 工业自动化 职位描述 1、基于Paimon/Lance与Gravitino设计与研发理想汽车数据湖存储,解决海量元数据管理、分级存储、缓存加速、多模态存储、向量和全文检索等需求,支持数据平台、算法平台等数据存储和访问场景;2、与团队合作完成湖仓一体底层存储建设,支持批流一体业务场景,优化业务数据链路;3、负责维护线上分布式存储或大数据解决方案的SLA,基于用户的体验和数据持续优化。 职位要求 1、全日制统招本科及以上学历,计算机相关专业2、熟悉数据湖和元数据概念原理,Iceberg/Paimon/Lance及Gravitino/Polaris/Unity Catalog;3、熟悉MPP库概念、架构和原理,精通OLAP相关技术,包括SQL语言应用、数据模型的设计和开发,至少熟悉一种OLAP组件及其特性和应用场景,Presto/StarRocks;4、有大数据相关研发经验和数仓开发经验,对常见的大数据体系组件(Hadoop、Hive、Spark、Flink、Kafka等)有使用和开发经验;5、加分项:熟悉本体语义或数据语义层的定义和应用。 投递...
分布式系统工程师 武汉、北京 校招 正式 软件研发类 2027届校园招聘计划 职位描述 1. 负责小米数据基建系统建设,包括分布式计算(离线/实时)、作业与资源调度、数据湖等引擎的研发与维护;2. 业务导向技术突破,支撑小米人车家全生态 AI + BI 的数据基建需求,解决大规模云计算难题;3. 参与开源,提升小米在开源社区的影响力。 职位要求 1. 优秀的编程能力,NOI/ACM/IOI 竞赛优秀成绩者优先;2. 云计算开源贡献者优先,包括不限于Hadoop/Spark/Flink/Iceberg/Paimon/OLAP/Ray/Daft/Lance 等;3. 优秀的自我驱动和学习能力,不断追求卓越,对解决有挑战的问题充满热情;4. 计算机专业,数据结构、算法、操作系统等基础扎实。 投递...