Refine Reset All
Recent Searches clear
Sort by
Company
Job Type
Employer/Recruiter
Experience
Date Posted
Company
Job Title
Job Type
Employer/Recruiter
Experience
All Filters

Java Sparks Jobs In 上海 - 28 Job Positions Available

1 – 20 of 28 jobs
NIO jobs

Super Sparks-校招-企业智能系统研发工程师 上海 校招 正式 数字技术 硕士及以上 Super Sparks 招聘计划 职位 ID:A02039 职位描述 方向:ContextOS / Agent Runtime / Distributed AI Systems你要解决的问题企业 AI 的困难,不只是调用一次模型。它需要在复杂权限、异构数据、长链路任务和真实生产环境中稳定运行。你需要参与建设:- 能连接企业数据、知识、代码、API 和日志的上下文基础设施;- 能供不同 Agent 和 Coding Agent 调用的统一 Runtime;- 能追踪每一次上下文召回、推理和工具执行的运行系统;- 能在权限、安全、审计和成本约束下完成复杂任务的执行框架;- 能支撑企业级 Ontology、Semantic Mapping 和

NIO  11 days ago
爱奇艺 iQIYI jobs

Java开发实习生(风控方向) 上海 校招 实习 技术 日常实习生招聘 职位 ID:A131749 职位描述 - 负责爱奇艺业务风控平台以及规则引擎的架构和开发,保障爱奇艺会员,游戏,电商等关键业务的账号,接口,支付,交易安全,对抗各种欺诈,作弊,垃圾,盗号等非法行为;- 负责与安全团队,业务部门协同配合,参与风控相关的需求定义,确定设计方案并最终开发上线。 职位要求 - 本科及以上学历,计算机、软件工程、通信等相关专业;- 具备扎实的数据结构和计算机系统基础,熟悉Java开发语言及Spring开发技术栈;- 熟悉Nginx、Tomcat等WEB应用服务器,有相关应用部署经验,能够使用常见Linux命令;- 熟悉大数据处理,了解MapReduce原理,具备Spark、Flink等开发经验者优先;- 熟悉数据分析,能够从数据中找到问题并提供解决方案,具备严密的逻辑分析能力优先- 具有风控引擎相关实习经历,熟悉规则引擎、实时决策、风险评估等风控核心模块者优先;- 对技术充满热情,具备扎实的代码功底,能够快速学习新知识,不断突破技术瓶颈,乐于探索未知领域,随时准备好去面对新挑战。 投递...

Premium Full-time
爱奇艺 IQIYI  4 days ago
爱奇艺 iQIYI jobs

大数据平台Java开发实习生 上海 校招 实习 技术 - 研发 日常实习生招聘 职位 ID:A195304 职位描述 - 参与爱奇艺大数据平台开发,负责前后端功能实现,为用户提供一站式数据集成、处理、分析等服务,简化数据使用,提升数据开发和分析效率。 职位要求 - 计算机相关专业在校学生;- 熟悉Java语言,熟练掌握Java、Spring Boot开发,具备扎实的编程能力、工程实践能力和troubleshooting能力;- [加分项] 有Vue等 Web 开发经验者优先;- [加分项] 了解大数据生态,熟悉Hadoop、Spark、Flink、Kafka等常用的大数据技术栈,有大数据领域实践经验者优先;- 有责任心,做事踏实,具有良好的团队合作精神和沟通能力。实习收获:- 参与爱奇艺大数据体系建设,通过打造更好的数据产品,驱动公司业务增长;- 了解大数据生态,学习大数据技术栈,迈出成为大数据技术专家或大数据产品经理的第一步,为未来的职业生涯打下坚实的基础;- 工作项目可以写成毕业论文,安排企业导师指导,可开实习证明。 投递...

Premium Full-time
爱奇艺 IQIYI  1 day ago
NIO jobs

知识平台算法专家(RAG & 知识图谱方向) 上海 社招 全职 数字技术 本科及以上 5-7 年 职位描述 岗位核心使命深度融合 LLM 与知识图谱技术,构建企业级 GraphRAG 架构。通过本体建模与高精度检索技术,解决大模型在复杂专业领域下的幻觉问题,打造工业级的知识服务引擎。主要职责RAG 架构优化:负责企业级 RAG(检索增强生成)系统的全链路研发。针对长文本及复杂知识,优化文档切片 (Chunking) 策略、多路召回 (Retrieval) 及 重排序 (Reranking) 算法,提升问答的准确性与归因能力。知识中枢建设:负责领域本体论 (Ontology) 建模,设计高扩展性的 Schema;利用 LLM 实现自动化知识抽取(实体、属性、三元组),构建高质量结构化知识库。底层存储与检索:负责基于 Milvus/Zilliz 的向量数据库与 Elasticsearch 的全文检索集成,设计向量-标量混合检索方案,优化海量数据的检索延迟与相关性。推理与应用落地:探索图增强检索(GraphRAG)、多步推理链(CoT)在知识平台中的应用,负责从非结构化数据到结构化知识转化的全流程算法迭代。 职位要求 1.

NIO  29 days ago
NIO jobs

数据仓库工程师 上海 社招 全职 职能与支持 - 数据分析 本科及以上 3-5 年 职位描述 1. 调研现有系统数据情况,并根据业务模块和需求,参与数据仓库设计与研发,建设电驱/电池工业化核心数据资产;2. 负责从多个系统及数据源进行数据获取,并根据数据标准同步至数据湖,保证数据的完整性和准确性;3. 负责不同技术场景下的数据获取和使用开发方案落地(实时、离线);4. 负责数据治理体系的完善和实施,打造稳定可靠的数据服务和保障体系;5. 与业务团队、算法团队、产品团队紧密合作,参与数据产品和应用的数据研发,与产品一起打造极致体验的数据产品。6. 负责数据化运营,沉淀算法和数据分析思路,协作并推动数据化运营项目落地; 职位要求 1. 计算机、软件工程、自动化等相关专业本科及以上;2. 3-7年大数据工程实施经验,数据仓库建模和开发,了解目前主流大数据技术,如流批一体、数据湖等;3. 熟练掌握hive、spark等大数据工具,具备海量数据加工处理(ETL)相关经验,具备丰富的优化经验。熟练使用Java、Python等语言,熟悉hive UDF开发;4. 能独立负责业务域数据仓库开发及维护、数据仓库模型、数据报表等工作内容;熟悉数据仓库模型设计,掌握常用数据建模方法;5. 熟悉数据治理方法论、具备一定的数据治理经验;6. 较好的业务理解和数据洞察能力,能直接和业务对话,快速进行需求的理解和落地;7. 具有良好的团队合作和沟通能力,有很强的自驱力,能主动为结果负责; 投递...

Premium Full-time
NIO  29 days ago
XPENG jobs

【27届校招】计算平台软件工程师 上海、广州 正式 研发 - 算法 通用智能板块 职位描述 1、参与自动驾驶海量数据的采集、管理、处理与高效调度,设计与开发自动驾驶全链路数据平台,包括但不限于数据湖、数据仓库、分布式存储、流批一体计算与智能数据标注、数据治理等;2、研发大规模分布式计算与训练平台,基于Spark、Flink、Ray、PyTorch等技术实现自动驾驶大模型的数据清洗、预处理、并行训练与推理,支持多GPU/多集群高性能任务编排与资源调度;3、优化存储与检索架构,探索和实现包括OSS、CPFS、Iceberg、Delta Lake、Hudi、StarRocks、ClickHouse、ElasticSearch、Milvus等新一代高性能存储与检索方案,提升数据读写、索引、管理效率,赋能AI训练和推理;4、参与团队架构设计与技术攻关,跟进学术前沿与业界动态,解决自动驾驶场景下数据一致性、扩展性、高可用、智能调度等核心难题;5、推进工程实践落地与持续优化,深度参与端到端系统开发、自动化测试、上线发布与持续运维,推动数据与AI平台的稳定迭代和性能进化。 职位要求 1、教育背景:计算机、软件工程、人工智能、数据科学等相关专业,本科及以上学历,硕博优先;2、理论基础扎实: 精通分布式系统原理、并行计算、存储系统、数据库原理、数据湖/数据仓库理论、大规模机器学习等学科知识,有相关顶会/顶刊论文经历者优先;3、技术能力突出:(1)熟练掌握至少一种主流分布式计算框架(如Spark、Flink、Ray等)和一种深度学习框架(如PyTorch、TensorFlow等);(2)具备大数据存储与处理系统(如OSS、CPFS、Iceberg、Delta Lake、Hudi、StarRocks、ClickHouse、ElasticSearch、Milvus等)实操经验;(3)具备高性能数据检索、索引优化、海量数据管理等工程经验;4、编程与工程能力强(1)熟练掌握Python/Java/Scala/C++/Rust等主流开发语言中的至少一种,具备良好的工程实践和代码规范;(2)有高并发、大规模分布式系统、流式/批式混合计算平台相关项目经验者优先;5、创新与解决问题能力:具备独立分析复杂系统、定位瓶颈、提出创新性解决方案的能力,对技术钻研有热情,善于跨界学习;6、沟通协作与主动学习:良好的团队协作能力、沟通表达能力及自驱力,乐于分享、敢于挑战难题;7、加分项:(1) 在数据库、分布式系统、云原生计算、向量数据库、机器学习系统等领域有顶会(SIGMOD、VLDB、ICDE、NeurIPS、ICML等)论文、竞赛获奖或开源项目贡献;(2)有阿里云、腾讯云、AWS、GCP等云平台大数据相关实习、项目或竞赛经历;(3) 具备自动驾驶、机器人、智能感知领域大规模数据处理或AI应用落地经验;(4)英语或技术写作能力优秀,有技术博客、专利、文档经验。 投递...

XPENG  27 days ago
Apple jobs

SummaryApple is where individual imaginations gather together, committing to the values that lead to great work! Every new product we build, service we create, or Apple Store experience we deliver is the result of us making

Apple  23 days ago
BOKE Technology Co., Ltd jobs

2026届秋招-大数据开发工程师 补录 上海 正式 互联网 / 电子 / 网游 技术 职位描述 1. 基于大数据平台完成数据相关的开发工作,包含指标和报表开发;2. 密切配合游戏项目组,提供相应的数据分析支撑。 职位要求 1. 2026届应届本科及硕士毕业生,计算机相关专业,top 985院校优先;2. 熟悉SQL,Python,SparkJAVA等其中至少一项开发技能;3. 熟悉Linux系统的操作,熟练使用脚本开发;4. 能够明确自己当前的定位和未来的成长规划;5. 热爱游戏行业,工作认真负责。 职位信息 团队介绍: 我们是一支年轻有活力的数据支撑团队,有多名经验丰富的数据从业者,涵盖了大数据,数据仓库,数据分析师等专业领域,支撑了公司PB级别的数据服务。我们期待您的加入,我们会有定期的技术分享,会有经验丰富的人来帮助你迅速成长,我们也希望你能够给我们带来新的东西,让我们一起成长~ 投递...

Premium Full-time
BOKE Technology Co., Ltd  22 days ago
BOKE Technology Co., Ltd jobs

2027届实习-算法数据开发工程师 上海 实习 互联网 / 电子 / 网游 技术 职位描述 1、参与游戏业务离线/实时数仓的日常开发,协助完成简单的 ETL 逻辑编写及报表开发。2、负责日常数据链路的监控与异常排查,学习并实践数据准确性校验逻辑。3、负责数据字典的梳理及技术文档的编写,确保业务逻辑的可追溯性。 职位要求 学历背景:2026 届或 2027 届在校生,统招本科及以上学历,计算机、数学、软件工程等相关专业。编程基础:熟练编写 SQL(理解常见的 Join 原理、聚合函数、开窗函数),对底层逻辑有好奇心,有JAVA/PYTHON基础加分。算法功底:具备优秀的数据结构与算法能力,能够通过代码解决复杂的逻辑问题技术热情:熟悉大数据基本概念(如:知道 Hadoop/Spark/Flink 是做什么的),有分布式系统、数据库原理等相关课程背景。 职位信息 团队介绍: 我们在做什么?我们是业务全球化征程的“开路先锋”与“守护者”。我们的战场不局限于单一机房或单一云端,而是横跨全球多个Region的复杂基础设施。我们需要在维护传统稳态业务的同时推动云原生技术的落地。你将面对的是一个融合了物理机、虚拟机与Kubernetes容器集群的混合架构庞然大物,通过精细化的运维手段,确保全球玩家都能享受到极致流畅的服务体验。你会遇到的挑战驾驭全球多云环境:你需要同时操作 AWS、GCP、阿里云、腾讯云 等多家云厂商的控制台与API,解决跨国网络延迟、数据合规与资源调度难题;混合架构的统一治理:你的纳管对象既有前沿的 CNCF 云原生组件,也有基于虚拟机/物理机的传统应用。如何在两套体系间实现统一的监控、部署与治理,是你的核心课题;构建全球交付流水线:利用 Jenkins / GitLab-Runner 打造适应全球发布的CI/CD系统,让代码能够安全、快速地分发到世界各地的每一个节点;复杂场景的“神探”:面对跨时区、跨地域、跨架构的线上疑难杂症(网络抖动、应用卡顿、资源争抢),进行全链路的排查与恢复。你能获得的宏大的技术视野:很少有校招岗位能让你直接接触全球级别的架构设计与多云异构的管理经验;全栈运维能力:你将同时掌握“传统运维的深厚内功”(Linux底层、网络协议)与“云原生运维的各种招式”(K8s、ServiceMesh);成就感:亲手敲下的命令,将影响地球另一端成千上万用户的实时体验。为了匹配业务的发展,我们在寻找更多志同道合的伙伴加入我们充满活力的团队,一起迎接市场日益激烈的挑战,共同打造更多的爆款! 投递...

BOKE Technology Co., Ltd  22 days ago
BOKE Technology Co., Ltd jobs

2027届实习-AI算法工程师 上海 实习 互联网 / 电子 / 网游 研发 职位描述 AI算法工程师职位描述1. 专注游戏场景下的算法研发工作,深耕用户增长、因果推断、归因分析、个性化体验流设计及商业化活动/道具智能推荐等方向,驱动产品核心指标提升;2. 基于业务数据洞察,结合游戏生态特性定义可量化的算法优化目标,设计高落地性方案并推动实施,为项目创造显著商业价值;3. 持续关注AI领域前沿技术动态,探索其在游戏场景的创新应用,推动技术成果转化与工程化落地;4. 深度联动产品、运营团队,通过玩家行为建模与多维度分析,制定精细化算法策略,构建快速迭代机制以持续优化效果。 职位要求 任职要求1. 计算机、数学、统计学等相关专业本科及以上学历,具备独立负责项目的能力;2. 精通Python编程,具备扎实的代码功底与工程实现能力,掌握C/C++或Java者优先;3. 对游戏行业有浓厚兴趣,具备敏锐的业务洞察力,拥有游戏算法成功落地经验者优先;4. 在机器学习、深度学习、数据挖掘、自然语言处理或多模态技术等领域有深入研究;5. 熟悉分布式数据处理框架,对流式计算有实践经验,熟练运用Hadoop/Spark/Flink等大数据工具进行数据建模与分析优先考虑。 职位信息 团队介绍: 波克城市成立于2010年,旗下拥有《捕鱼达人》《爆炒江湖》《Tile Master》等众多精品老牌,覆盖休闲竞技、收集养成、模拟经营、策略对战等多个赛道。目前,我们的全球累计注册用户超5亿,全球总下载次数超15亿,连续7年入选中国互联网百强。近年我们也在小游戏赛道积极探索持续发力,先后推出了《跃动小子》《灵画师》《一路狂飙》等爆款佳作!为了匹配业务的发展,我们在寻找更多志同道合的伙伴加入我们充满活力的团队,一起迎接市场日益激烈的挑战,共同打造更多的爆款! 投递...

Premium Full-time
BOKE Technology Co., Ltd  22 days ago
Alstom jobs

Req ID:525927 At Alstom, we understand transport networks and what moves people. From high-speed trains, metros, monorails, and trams, to turnkey systems, services, infrastructure, signalling and digital mobility, we offer our diverse customers the broadest portfolio

Alstom  20 days ago
极兔速递 (J&T Express) jobs

【集团】-大数据开源组件研发工程师 上海 全职 职位描述 负责公司大数据基础架构核心组件的研发、优化和稳定性建设,重点参与流计算平台、海外云大数据平台以及开源大数据底座能力的持续演进。1. 参与 Hadoop、Spark、Flink、StarRocks 等开源组件的源码分析、问题定位、二次开发和版本升级;2. 重点负责 Flink / Spark Streaming 等流计算相关组件的性能优化、稳定性治理、任务调度优化和故障排查;3. 参与海外云环境下大数据平台的架构设计、成本优化、资源治理和稳定性建设,包括 Azure、Google Cloud、AWS 等云平台;4. 根据业务场景对实时计算、离线计算、存储、Shuffle、调度、查询等核心能力进行定制化改造;5. 参与流批一体、湖仓一体、存算分离、对象存储适配等方向的技术预研、方案设计和落地实施;6. 跟踪开源社区及海外云厂商大数据产品的发展,沉淀技术文档、最佳实践和平台化能力,提升团队整体研发效率。 职位要求 1. 计算机相关专业,本科及以上学历;2. 熟悉 Java / Scala / C++ / Go 中至少一种编程语言,具备良好的编码能力和工程实践能力;3. 熟悉 Hadoop、Spark、Flink、StarRocks 中至少一项,有源码阅读、问题排查或二次开发经验优先;4. 具备流计算相关经验,熟悉 Flink、Spark Streaming、Kafka、CDC、实时数仓或实时数据链路中的至少一项;5. 理解分布式系统基本原理,如任务调度、状态管理、Checkpoint、Shuffle、容错、资源管理、存储一致性等;6. 了解公有云大数据产品或云原生基础设施,有

极兔速递 (J&T Express)  18 days ago
NIO jobs

蔚来AGI超星计划-企业智能系统研发工程师 推荐投递 上海 校招 实习 数字技术 硕士及以上 蔚来AGI超星计划 职位 ID:A125432 职位描述 方向:ContextOS / Agent Runtime / Distributed AI Systems你要解决的问题企业 AI 的困难,不只是调用一次模型。它需要在复杂权限、异构数据、长链路任务和真实生产环境中稳定运行。你需要参与建设:- 能连接企业数据、知识、代码、API 和日志的上下文基础设施;- 能供不同 Agent 和 Coding Agent 调用的统一 Runtime;- 能追踪每一次上下文召回、推理和工具执行的运行系统;- 能在权限、安全、审计和成本约束下完成复杂任务的执行框架;- 能支撑企业级 Ontology、Semantic Mapping 和

NIO  18 days ago
Amazon.com jobs

Worldwide Global Selling has been helping individuals and businesses increase sales and reach new customers around the globe. Today, more than 50% of Amazons total unit sales come from third-party selection. The Global Selling team in

Amazon.com  14 days ago
XPENG jobs

数据Infra 后端开发工程师 深圳、上海、北京 全职 智能机器人板块 职位描述 1、负责机器人/具身智能场景下数据接入、解析、切分、清洗、质检、入湖、归档等数据管线能力建设,支撑多源异构数据稳定流转;2、设计并实现可扩展的数据处理 pipeline、算子编排、任务调度、运行监控和失败重试机制,提升数据生产链路的稳定性和效率;3、参与建设元数据管理、数据血缘、数据质量、数据版本管理等平台能力,支撑训练集、评测集和问题回溯流程;4、与算法、采集、运营、平台产品等团队协作,推动数据标准、处理规范和工程流程落地;5、参与数据平台服务化建设,包括接口设计、权限控制、资源调度、可观测性和 CI/CD 发布体系。 职位要求 1、计算机相关专业本科及以上学历,具备扎实的数据结构、系统设计和工程实现能力;2、熟练掌握 Python、Go、Java、C++ 中至少一门语言,有复杂后端系统或数据平台开发经验;3、熟悉 Spark、Flink、Ray、Kafka、Airflow、Argo、DolphinScheduler 等批处理、流处理或任务编排框架中的一项或多项;4、熟悉对象存储、Parquet、Arrow、Iceberg、Paimon、Hive Metastore 等数据湖/湖仓相关技术者优先;5、有良好的工程质量意识,熟悉监控告警、日志追踪、故障排查、性能优化和稳定性建设;6、具备较强的跨团队沟通能力,能够从业务目标出发拆解平台能力并推动落地。加分项1、有机器人、自动驾驶、大模型、多模态数据平台相关经验;2、有数据质量、数据血缘、元数据平台、训练/评测数据集管理平台建设经验;3、有大规模视频、图像、传感器、日志、状态流等异构数据处理经验。 投递...

Premium Full-time
XPENG  13 days ago
小米科技 Xiaomi Technology jobs

大数据开发工程师-汽车专项-实习 上海 校招 实习 软件研发类 职位描述 方向一:1.负责智能网联平台大数据需求分析、输出技术方案、数据开发工作;2.参与智能网联平台整车数仓建设及数据集市建设(数据ETL、数据建模、指标开发);3.参与智能网联平台大数据平台建设(离线/实时计算、数据质量、数据可视化、数据服务开发);4.负责智能网联大数据应用功能模块部署上线、线上问题分析、跟踪解决。方向二:负责电驱,电池,热管理等动力零部件的用户画像负责动力零部件的大数据健康监控和分析负责动力零部件的大数据转化,生成加速试验工况负责测试数据的云端自动化分析等处理分析任务 职位要求 1.计算机、软件工程、数据科学、统计学相关专业;2.熟练掌握SQL语言,熟练掌握Spark SQL&Spark离线计算、Flink实时计算技术优先;3.掌握数据仓库基本概念(如星型模型、雪花模型、数据分层),有数据仓库建模或ETL开发经验者优先;4.掌握Python编程语言,熟悉Pandas、NumPy等数据处理库,掌握一定的机器学习、深度学习算法,了解LLM相关知识&Java编程语言是加分项;5.有良好的沟通能力,能高效完成安排的工作; 投递...

Premium Full-time
小米科技 Xiaomi Technology  12 days ago
Bambu Lab jobs

测试开发实习生(数据方向) 上海 实习 研发 - 测试 职位描述 1.协助数据仓库及数据产品的功能与质量测试,涵盖ETL流程、API数据接口、数据报表等,验证数据准确性及完整性;2.参与测试用例设计与执行,记录并跟踪缺陷,协助编写测试报告及数据质量评估文档;3.协助复现、分析数据问题,配合研发及业务团队定位原因并推动解决;4.参与数据质量监控体系的建设与优化,协助数据治理相关的辅助工作。 职位要求 1.全日制本科及以上学历,计算机、软件工程、数据科学等相关专业优先;2.熟悉SQL,能熟练编写查询及校验语句,了解至少一种数据库(如MySQL、PostgreSQL等);3.了解Python、Java或Shell中的至少一种编程语言,可编写简单的自动化校验脚本;4.对大数据技术(如Hive、Spark、Flink)或数据仓库基础概念有所了解;5.逻辑清晰,对数据敏感,细致有耐心,具备良好的沟通与协作能力;6.每周可实习4天及以上,连续实习3个月以上。 投递...

Premium Full-time
Bambu Lab  8 days ago
Apple jobs

SummaryAthena Platform Services (APS) is looking for a talented Software Engineer to play a meaningful role in building data services and platforms that run machine learning analytics to prevent fraud, waste and abuse across Apple. Athena

Apple  8 days ago
Apple jobs

SummaryThis position is required for working on the data migration and ongoing support for data platform for Applied Machine Learning enterprise systems at Apple China. The main deliverables will be: •Work with SRE on setting up

Apple  8 days ago
Bambu Lab jobs

数据开发实习生 上海 实习 数据 职位描述 1.参与数据仓库、ETL(数据抽取转换加载)流程的设计、开发与维护;2.负责数据质量监控,处理数据异常及日常运维问题;3.配合团队完成数据模型优化、报表开发及数据分析支持工作;4.参与大数据平台(如Hadoop/Spark/Hive等)的日常开发与调优。 职位要求 1.全日制统招本科及以上学历,计算机、数学、统计等相关专业背景优先;2.熟悉SQL,掌握Python/Java/Scala中至少一种编程语言;3.了解Hadoop生态(HDFS、Hive、Spark等)及数据仓库基本概念;4.逻辑清晰,责任心强,对数据敏感,具备良好的沟通能力;5.每周可实习4天及以上,连续实习3个月以上。 投递...

Premium Full-time
Bambu Lab  8 days ago

Subscribe for job alerts and resources to make your job search easier!

Confirmation email sent to

Check your email and click on the link to start receiving your job alerts

Receive the latest job openings for:

java sparks jobs in 上海

You also might be interested in:

开发工程师

Data Engineer

Scala

Machine Learning

Kafka

Apache Kafka

AI

Confirmation email sent to

Check your email and click on the link to start receiving your job alerts

All Filters Apply
Sort by
Company
Job Type
Employer/Recruiter
Experience