数据仓库工程师 上海 社招 全职 职能与支持 - 数据分析 本科及以上 3-5 年 职位描述 1. 调研现有系统数据情况，并根据业务模块和需求，参与数据仓库设计与研发，建设电驱/电池工业化核心数据资产；2. 负责从多个系统及数据源进行数据获取，并根据数据标准同步至数据湖，保证数据的完整性和准确性；3. 负责不同技术场景下的数据获取和使用开发方案落地（实时、离线）；4. 负责数据治理体系的完善和实施，打造稳定可靠的数据服务和保障体系；5. 与业务团队、算法团队、产品团队紧密合作，参与数据产品和应用的数据研发，与产品一起打造极致体验的数据产品。6. 负责数据化运营，沉淀算法和数据分析思路，协作并推动数据化运营项目落地； 职位要求 1. 计算机、软件工程、自动化等相关专业本科及以上；2. 3-7年大数据工程实施经验，数据仓库建模和开发，了解目前主流大数据技术，如流批一体、数据湖等；3. 熟练掌握hive、spark等大数据工具，具备海量数据加工处理（ETL）相关经验，具备丰富的优化经验。熟练使用Java、Python等语言，熟悉hive UDF开发；4. 能独立负责业务域数据仓库开发及维护、数据仓库模型、数据报表等工作内容；熟悉数据仓库模型设计，掌握常用数据建模方法；5. 熟悉数据治理方法论、具备一定的数据治理经验；6. 较好的业务理解和数据洞察能力，能直接和业务对话，快速进行需求的理解和落地；7. 具有良好的团队合作和沟通能力，有很强的自驱力，能主动为结果负责； 投递...
We are seeking an experienced Senior Data Engineer to design, implement, and maintain our data infrastructure and pipelines. The ideal candidate will have a strong background in data engineering, big data technologies, and cloud platforms. You
Location:CN-Shenzhen-HyQ Shift:Standard - 40 Hours (China) Scheduled Weekly Hours:40 Worker Type:Permanent Job Summary:Lead the design and delivery of LME market data platforms that consolidate multiple real-time and historical market data sources into scalable enterprise data assets
Location:CN-Shenzhen-HyQ Shift:Standard - 40 Hours (China) Scheduled Weekly Hours:40 Worker Type:Permanent Job Summary:This role is a critical part of the Enterprise data team involved in the replacement of legacy ETL (Informatica) tool by providing key data engineering
Location:CN-Shenzhen-HyQ Shift:Standard - 40 Hours (China) Scheduled Weekly Hours:40 Worker Type:Permanent Job Summary:Lead the design and delivery of LME market data platforms that consolidate multiple real-time and historical market data sources into scalable enterprise data assets
高级全栈开发工程师-广告投放 上海 研发 - 后端开发 技术岗位 职位描述 负责内部广告投放平台的架构设计与核心模块开发 1、对接腾讯广点通、巨量引擎、快手等主流广告平台的 Marketing API；2、构建广告账户管理、素材管理、投放策略配置等核心功能；3、开发实时/准实时的投放数据报表与效果分析系统；4、设计并实现广告创意（素材）的自动化生成与A/B测试能力；5、保障系统高可用性，支持高并发下的数据拉取与推送。 职位要求 1、Node.js (Nest.js/Express) 或 Go / Java (Spring Boot)，至少精通一门；2、PostgreSQL / MySQL（事务性数据），Redis（缓存与队列），ClickHouse（广告日志分析）；3、Kafka / RabbitMQ，处理异步任务（如批量拉取广告数据）；4、丰富的 RESTful API / gRPC 对接经验，熟悉 OAuth2.0 授权流程；5、ETL 流程设计，处理海量广告曝光/点击/转化数据；6、React / Vue3 深度使用经验，TypeScript 必须7、ECharts / AntV
【27届校招】通用智能AI平台研发工程师 北京、上海、广州 正式 研发 - 算法 通用智能板块 职位描述 小鹏通用智能AI数据闭环平台团队，负责构建支撑百万级路采数据、千卡GPU集群的自动驾驶，具身智能数据与AI基础设施。从路测车辆上每秒产生的GB级传感器数据和多模态具身智能传感器数据，到最终训练出能够应对复杂城市道路的感知/预测/决策模型——我们打造的平台是这一切的底座。你将与国内顶尖的分布式系统、AI基础设施、自动驾驶算法工程师并肩工作，直面PB级数据处理、大规模分布式训练、大模型辅助标注等前沿技术挑战。真实场景，海量数据：你将处理来自摄像头、LiDAR、毫米波雷达、GPS/IMU等多传感器的真实路采和数采数据，规模达到PB级——这不是课堂作业，而是工业级挑战。前沿技术，深度应用：VLM自动化标注、Milvus向量检索、流批一体架构、GPU集群调度……你接触的不是纸上谈兵的技术，而是正在重塑行业的关键能力。完整链路，全局视野：从数据接入→清洗治理→特征提取→模型训练→推理部署→数据回流，你将有机会参与到AI平台的全链路建设中，理解自动驾驶数据闭环的每一环。高速成长，快速扛事：27届校招专属培养计划，mentor一对一引导，但绝不只让你做边角料——我们希望你尽快独立负责核心模块的研发与优化。方向一：大规模数据处理开发高可靠的ETL数据处理流水线，处理车载传感器数据（摄像头图像、LiDAR点云、GPS轨迹、CAN总线信号等）基于Spark/Flink优化数据清洗、转换、聚合任务，持续提升云端数据处理的吞吐与稳定性构建多模态Embedding生产流水线，支持CV/NLP模型对海量数据的分布式特征提取探索基于VLM（视觉语言模型）的自动标签生成方案，减少对人工标注的依赖，加速算法迭代构建驾驶场景的语义索引系统，支持复杂语义检索（如“夜间雨天前车急刹”“高架桥上旁车近距离切入”）方向二：数据建模与治理设计多源异构数据仓库的分层模型（ODS/DWD/DWS/ADS），支撑感知、预测、规划等算法的训练数据需求构建数据血缘与元数据管理体系，确保每一帧训练数据的来源、处理过程与版本都可追溯制定多模态数据的向量化规范（图像/点云/文本的Embedding标准），为后续检索与训练提供高质量特征输入方向三：AI平台架构与优化搭建数据湖仓一体架构（基于Iceberg/Delta Lake + StarRocks/Doris），兼顾数据湖的灵活性与数据仓库的查询性能开发高性能特征向量数据库（基于Milvus/Pinecone或自研引擎），支撑亿级向量的低延迟检索持续优化存储与计算性能（分区策略、压缩算法、缓存机制），探索流批一体、存算分离等新架构的落地设计高效的数据存储、分区与读取策略（Parquet/ORC），优化存储与网络I/O，保障训练与推理的数据吞吐方向四：分析工具与可视化开发BI数据看板，实时监控数据质量及自动驾驶核心指标（感知准确率、接管率、场景覆盖率等）提供多模态检索接口，支持通过文本描述（如“从左后方快速切入的摩托车”）检索对应的驾驶场景视频片段 职位要求 1、2027届硕士/博士毕业生，计算机、软件工程、人工智能、自动化、电子信息等相关专业2、扎实的编程基础，熟练掌握 Python/C++/Java/Scala 中至少一门语言，有良好的工程习惯与代码质量意识熟悉至少一项大数据处理框架（Spark/Flink）或深度学习框架（PyTorch/TensorFlow）3、对自动驾驶场景有基本认知和浓厚兴趣——你不一定懂感知算法细节，但要理解数据对算法训练的价值加分项（满足1-2项即可，非硬性要求）1、有数据仓库建模或数据湖（Iceberg/Delta Lake/Hudi）实际使用经验2、熟悉分布式计算原理，有Spark/Flink任务性能调优经验3、了解Kubernetes及GPU虚拟化技术，有集群资源调度相关实践4、使用过Milvus、Weaviate、Pinecone等向量数据库，或对向量检索算法（HNSW/IVF）有研究5、熟悉VLM/多模态模型（如CLIP、LLaVA、Qwen-VL等），有特征提取或模型微调经验6、有自动驾驶相关数据集（nuScenes/Waymo/Argoverse）的处理经验在ACM、Kaggle、天池等编程/数据竞赛中取得过优异成绩7、有高质量技术博客或开源项目贡献收获1、有竞争力的薪酬与校招专属福利包（薪资面议，对标一线互联网/自动驾驶公司）2、真实的工业级技术挑战，你的代码将直接运行在千卡GPU集群和PB级数据湖上3、技术广度与深度的双重成长，在数据工程、AI基础设施、分布式系统、多模态模型等方向持续积累4、广阔的成长空间：团队技术氛围浓厚，鼓励技术分享、论文阅读与创新探索，支持将前沿成果转化为实际生产力5、清晰的校招培养路径：入职前3个月mentor带教，半年内逐步独立负责核心模块，1年内具备技术owner能力 投递...
OFFICE OF INFORMATION TECHNOLOGY Senior Systems Analyst (Special Project) (25260147) We are seeking a highly skilled and experienced Senior Systems Analyst to join our dynamic team. As a Senior Systems Analyst, you will play a pivotal
About our group: We are a proactive, highly solutions oriented and collaborative team that works with all the various business groups across the organization. Our purpose is capturing massive amounts of data is to transform this
Job Summary: This is the contact point for the local team to work closely with the headquarter teams. We are seeking an experienced Senior Data Engineer to design, implement, and maintain our data infrastructure and pipelines.
车载测试（仪表、T-box、导航、ADAS） 保定 全职 研发 - 测试 职位 ID：A173586 职位描述 职责描述：对自动驾驶数据闭环系统的数据测试，包括1. 基于自动驾驶大数据处理平台（例如Hadoop/Spark），利用数据挖掘、机器学习等相关算法，解决自动驾驶业务需求，为自动驾驶评测、功能迭代，运营决策提供测试支持2. 用java/python/shell/javascript其中至少一种编程语言，能够开发自动化测试脚本完成数据验证3. 负责自动驾驶领域的数据测试，从场景，评价，用户，运营等多个维度挖掘数据价值，发现数据和业务背后规律，应用于产品研发、用户运营、商业等各种领域4.有hadoop, hive,Zookeeper,Hbase,Spark,ElastivSearch,Kafka,Flink,flume等分布式开源软件测试和应用经验。掌握基于分布式系统的ETL，数据仓库，BI报表的测试流程及方法。 职位要求 任职要求：1、具备数据一致性、完整性、准确性、安全性测试设计及实施经验2、具备处理大量数据和复杂算法的测试技巧，包括不限于能编写针对数据化产品类的自动化框架和脚本3、具备良好的数据分析和问题解决能力，能够快速定位问题，提出解决方案，同时具备良好的沟通能力，能有效地与开发团队、产品团队和其他测试团队合作4. 具备扎实的测试理知识，有测试需求分析经验能独立设计数据相关和编写测试用例5.熟悉Mysql/mongoDB，熟练掌握SaL,具备较强的思维逻辑能力，可完成复杂查询。6.有hadoop, hive,Zookeeper,Hbase,Spark,ElastivSearch,Kafka,Flink,flume等分布式开源软件测试和应用经验。掌握基于分布式系统的ETL，数据仓库，BI报表的测试流程及方法。7.熟练使用java/python/shell/javascript其中至少一种编程语言，能够开发自动化测试脚本完成数据验证8、3年以上相关工作经验，有汽车行业相关云平台、数据闭环平台、互联网或智驾相关领域经验者优先；9、面试优秀者，学历可放宽至专科 投递...
About Man Group Man Group is a global alternative investment management firm focused on pursuing outperformance for sophisticated clients via our Systematic, Discretionary and Solutions offerings. Powered by talent and advanced technology, our single and multi-manager
SummaryApple is where individual imaginations gather together, committing to the values that lead to great work! Every new product we build, service we create, or Apple Store experience we deliver is the result of us making
2027届实习-算法数据开发工程师 上海 实习 互联网 / 电子 / 网游 技术 职位描述 1、参与游戏业务离线/实时数仓的日常开发，协助完成简单的 ETL 逻辑编写及报表开发。2、负责日常数据链路的监控与异常排查，学习并实践数据准确性校验逻辑。3、负责数据字典的梳理及技术文档的编写，确保业务逻辑的可追溯性。 职位要求 学历背景：2026 届或 2027 届在校生，统招本科及以上学历，计算机、数学、软件工程等相关专业。编程基础：熟练编写 SQL（理解常见的 Join 原理、聚合函数、开窗函数），对底层逻辑有好奇心，有JAVA/PYTHON基础加分。算法功底：具备优秀的数据结构与算法能力，能够通过代码解决复杂的逻辑问题技术热情：熟悉大数据基本概念（如：知道 Hadoop/Spark/Flink 是做什么的），有分布式系统、数据库原理等相关课程背景。 职位信息 团队介绍： 我们在做什么？我们是业务全球化征程的“开路先锋”与“守护者”。我们的战场不局限于单一机房或单一云端，而是横跨全球多个Region的复杂基础设施。我们需要在维护传统稳态业务的同时推动云原生技术的落地。你将面对的是一个融合了物理机、虚拟机与Kubernetes容器集群的混合架构庞然大物，通过精细化的运维手段，确保全球玩家都能享受到极致流畅的服务体验。你会遇到的挑战驾驭全球多云环境：你需要同时操作 AWS、GCP、阿里云、腾讯云 等多家云厂商的控制台与API，解决跨国网络延迟、数据合规与资源调度难题；混合架构的统一治理：你的纳管对象既有前沿的 CNCF 云原生组件，也有基于虚拟机/物理机的传统应用。如何在两套体系间实现统一的监控、部署与治理，是你的核心课题；构建全球交付流水线：利用 Jenkins / GitLab-Runner 打造适应全球发布的CI/CD系统，让代码能够安全、快速地分发到世界各地的每一个节点；复杂场景的“神探”：面对跨时区、跨地域、跨架构的线上疑难杂症（网络抖动、应用卡顿、资源争抢），进行全链路的排查与恢复。你能获得的宏大的技术视野：很少有校招岗位能让你直接接触全球级别的架构设计与多云异构的管理经验；全栈运维能力：你将同时掌握“传统运维的深厚内功”（Linux底层、网络协议）与“云原生运维的各种招式”（K8s、ServiceMesh）；成就感：亲手敲下的命令，将影响地球另一端成千上万用户的实时体验。为了匹配业务的发展，我们在寻找更多志同道合的伙伴加入我们充满活力的团队，一起迎接市场日益激烈的挑战，共同打造更多的爆款！ 投递...
大数据开发工程师 东莞 职能部门类 本科及以上 3-5 年 职位描述 （1）大数据开发1、负责大数据离线开发，使用Sqoop等组件开发每日离线数据采集任务，使用Hive/Spark SQL编写ETL作业过程，处理各种复杂的业务逻辑，根据业务逻辑配置合理的调度顺序；2、负责大数据实时开发，使用Flink/Spark实时计算引擎开发实时流作业，读取接口/文本/数据库日志/消息队列中间件等数据源，经过业务逻辑加工处理后写入大数据平台；3、保障数据产出时效稳定，每天监控数据产出时间，采取调度链路优化，作业优化，SQL优化等手段，提升数据产出效率。（2）集团数据资产建设1、根据各个业务领域项目推进过程中沉淀的数据分析体系，维护成可方便检索，查找和应用的数据资产，包含业务口径，出数频率，数据样例等关键业务和技术元数据；2、根据数据分析师提供的数据质量规则，开发相应的数据校验程序，确保跑数完成后即刻校验，确保高质量的数据资产；3、生成相应的数据服务接口，可供前端应用，BI工具和业务系统调用。（3）数据仓库模型设计1、根据业务领域数据特征以及维度建模的方法，横向划分数据仓库分析主题域，纵向划分层次，达成数据重复利用率高且能快速开发数据需求的目的；2、定义各个数仓分层，考虑数据写入和查询的性能，提升作业的运行速度，报表查询数据时的高复用性和易扩展性；3、通过合理的数据模型设计，提高数据的查询性能和分析效率，降低维护成本。（4）制定规范1、制定公司数据仓库架构设计原则，输出数据仓库模型设计的基本原则；2、制定公司数据开发的开发规范。 职位要求 （1）教育程度：本科毕业3年以上，计算机，信息工程，数学等相关专业毕业；（2）相关经验：具有3年以上大数据开发相关经验；（3）专业能力：1.具备数据仓库架构和设计能力，熟悉维度建模的方法；2.良好的沟通和逻辑思维能力，能够对业务需求进行抽象并据此进行架构设计；3.有过数据资产目录建设和维护的经验；4.熟悉大数据离线和实时开发使用的组件，Hive、Spark、Flink等，熟悉分布式计算和存储的相关原理及高可用机制原理，并可独立排查故障问题；5.熟练使用Dataworks，DolphiScheduler，kettle或其它数据开发工具中的一种；6.熟悉SQL的执行原理，具备优化复杂SQL的能力；7.掌握shell，python，java等编程语言中的一种；8.具有很好的沟通表达能力，勤奋好学，具有很好的团队合作意识。 职位信息 部门： 集团IT部 招聘数量： 1 投递...
高级大数据开发工程师 北京 全职 互联网 / 电子 / 网游 职位描述 - 参与公司数据湖架构搭建和开发；- 参与ETL设计，数据工程建设和数据可视化开发； 职位要求 基本要求：- 全日制本科学历，计算机相关专业，5年-10年大数据开发工作经验；- 熟悉公有云架构，对阿里云/AWS数据湖生态有丰富的项目经验；- 熟练使用MR/Spark/Flink等大数据计算框架，掌握Java/Scala/Python等开发语言- 掌握数据湖体系架构、数据建模方法、数据治理等知识，较强的业务理解和抽象能力；- 熟系Airflow调度工具，使用Zeppelin、Jupyter Notebook进行数据开发； - 熟系AWS LakeFormation、Glue、EMR大数据组件，使用Java，Spark，Python进行数据分析；加分项：- 数据湖方向做过前瞻性技术规划的建设经验者，优先；- 通过技术驱动产品变革，并带来好的结果经验者，优先； 投递...
Some careers have more impact than others. If you’re looking for a career where you can make a real impression, join HSBC and discover how valued you’ll be. We are currently seeking an experienced professional to
多模态大数据平台开发工程师 上海、北京、深圳 校招 正式 技术族 职位 ID：A90988 职位描述 选择以下方向之一即可：- 数据资产管理后端：负责数据资产、批次、Clip、Dataset 等实体的接口开发与元数据管理，协助完成数据的注册、查询、筛选与版本管理。- 数据生产管道：负责多模态数据（视频、传感器、轨迹等）的 ETL 流水线开发，基于 Argo Workflows 编排清洗、标注、质检、交付等处理任务。- 标注平台：负责多模态标注工具的前后端功能开发，支持 2D、3D 框、点云、视频等标注类型。- 数据前端：负责数据门户的检索、筛选与可视化界面开发，呈现数据集版本、血缘与质量分布。- 数据采集软件：负责多传感器数据采集软件的开发与调试，协助实现采集监控与时间同步。 职位要求 - 计算机、大数据、人工智能、自动化等相关专业硕士及以上。- 扎实的编程基础，熟悉 Linux，掌握 Java、Go、Python、C++、TypeScript 中至少一种。- 了解后端服务、数据库、前端开发或大数据处理框架中的一类即可。- 踏实主动，具备较强的学习意愿与动手能力，有团队协作精神。 投递...
技术中心 - 数仓开发工程师 广州 技术类 职位描述 1、负责公司海量数据的接入，包括不限于服务端日志、客户端日志、外部聚合数据等，搭建公司数据中台，建设国内海外数据仓库；2、负责实时和离线数据开发，提供高质量、稳定的数据服务，为业务部门赋能；3、参与数据治理，面对PB级存量数据和万亿条级别的新增数据量，提升数据易用性及数据质量，降低数据处理成本；4、负责数仓平台内各种大数据、高并发、数据治理等方面的技术设计和落地；5、负责公司自建大数据的组件维护与调优。 职位要求 1、本科及以上学历，计算机相关专业，三年以上数仓工作经验；2、具备较好的Java/Python编码和SQL能力，能保质保量完成数据建设和数据分析工作；3、熟悉数仓建模理论，有完整数仓的建设经验，熟悉海量数据处理、ETL及任务调度、元数据管理、数据治理；4、熟悉大数据相关工具和框架，如StarRocks、Doris、Flink、Kafka、Hadoop、Hive、Spark、ClickHouse、Trino、Presto、FlinkCDC、Canal、DataX等数仓和ETL工具，具备集群与组件的调优能力；5、具备良好的团队协作和沟通能力，较强的工作规划和执行能力，积极推动项目进度；6、乐于探索新技术和业界新问题的解决方案，学习主动性强。 投递...
数据仓库工程师 深圳 社招 全职 职位描述 1、负责企业级数据仓库及业务数据集市的架构规划、分层设计（ODS/DWD/DWS/ADS）与落地实施，确保架构的先进性、可扩展性与高性能。2、主导核心业务域的数据建模工作，精通维度建模等方法论，设计通用灵活的数据模型与宽表，保障数据的一致性、完整性与复用性。3、设计并实现高效的ETL/ELT数据集成方案，负责数据提取、转换、加载全流程的开发、调度与优化，解决大规模数据处理中的性能瓶颈。4、推进数据治理体系建设，包括数据质量监控、元数据管理、数据血缘追踪、指标体系标准化等，提升整体数据质量与数据资产价值。5、负责数据仓库的日常运维与故障排查，保障数据服务SLA达标，及时响应并解决数据延迟、数据错误等线上问题，确保数据链路稳定可靠。6、深入理解业务需求，与数据分析、业务部门紧密协作，提供高质量的数据支持与解决方案，支撑业务决策、数据产品迭代及精细化运营。 职位要求 一、基础要求1、本科及以上学历，计算机科学、数据科学、信息技术等相关专业。2、3-7年及以上数据仓库设计与开发经验，有完整的企业级数据仓库建设项目经验优先。3、具备强烈的责任心、严谨的逻辑思维、良好的沟通协调能力及团队协作精神，对数据敏感，重视数据质量。二、 技术能力1、精通数据仓库理论体系，深入理解分层架构、主题域建模、维度建模等方法论，能结合业务场景设计合理的数据模型。2、精通SQL/HQL/Spark SQL开发及优化，能高效处理TB/PB级大规模数据集，具备复杂查询性能调优实战经验。3、熟悉大数据生态技术栈，具备Hadoop、Hive、Spark、Flink、Kafka等组件的实战应用经验；了解MPP数据库（ClickHouse、Doris）、OLAP引擎（Kylin、Presto）者优先。4、掌握Java/Python/Scala中的至少一种编程语言，具备良好的代码规范与工程化能力；熟悉ETL工具（DataX、Airflow、Kettle）及任务调度系统者优先。5、具备数据治理相关经验，熟悉数据质量监控、元数据管理、数据血缘分析等工具（如Apache Atlas、Griffin）的使用者优先。三、加分项1、有互联网、金融、电商等行业数据仓库建设经验者优先。2、有数据字典、指标管理体系从0到1搭建经验者优先。 投递...