Refine Reset All
Sort by
Job Type
Employer/Recruiter
Experience
Date Posted
Location
Job Type
Employer/Recruiter
Experience
All Filters

Java Hadoop Jobs In Shanghai - 15 Job Positions Available

1 – 14 of 15 jobs
Makro PRO jobs

We are seeking an experienced Senior Data Engineer to design, implement, and maintain our data infrastructure and pipelines. The ideal candidate will have a strong background in data engineering, big data technologies, and cloud platforms. You

Makro PRO  18 days ago
BOKE Technology Co., Ltd jobs

AI算法工程师 上海 全职 互联网 / 电子 / 网游 职位描述 职位描述1. 专注游戏场景下的算法研发工作,深耕用户增长、因果推断、归因分析、个性化体验流设计及商业化活动/道具智能推荐等方向,驱动产品核心指标提升;2. 基于业务数据洞察,结合游戏生态特性定义可量化的算法优化目标,设计高落地性方案并推动实施,为项目创造显著商业价值;3. 持续关注AI领域前沿技术动态,探索其在游戏场景的创新应用,推动技术成果转化与工程化落地;4. 深度联动产品、运营团队,通过玩家行为建模与多维度分析,制定精细化算法策略,构建快速迭代机制以持续优化效果。 任职要求1. 计算机、数学、统计学等相关专业本科及以上学历,3年以上算法研发经验,具备独立负责项目的能力;2. 精通Python编程,具备扎实的代码功底与工程实现能力,掌握C/C++或Java者优先;3. 对游戏行业有浓厚兴趣,具备敏锐的业务洞察力,拥有游戏算法成功落地经验者优先;4. 在机器学习、深度学习、数据挖掘、自然语言处理或多模态技术等领域有深入研究,需提供相关项目案例及成果说明;5. 熟悉分布式数据处理框架,对流式计算有实践经验,熟练运用Hadoop/Spark/Flink等大数据工具进行数据建模与分析优先考虑。我们秉承“BE WILD. BE FREE.”的品牌主张,坚持始终创业、简单务实、开放包容、勇于担当的文化理念。在这里——【态度】我们讲求自驱,不设边界,没有人能定义你的舞台和天花板;【氛围】内部真·扁平,新人的意见、不同的观点都有可能成为波克前行的关键;【成长】入职即有指导人和成长伙伴双cover,内部分享+外聘大神助你突破自我;【生活】一日三餐下午茶,房补公寓任你选,节日社团境外游.让游戏不只是工作,更是你的生活! 投递...

Premium Full-time
BOKE Technology Co., Ltd  24 days ago
极兔速递 (J&T Express) jobs

【集团】大数据测试工程师-兔集 上海 全职 职位描述 主要职责:1.大数据产品质量保障(核心职责):设计和执行复杂的数据测试用例,包括:功能正确性、数据准确性、完整性、一致性测试,以及数据转换逻辑的验证。2.自动化测试:设计、开发并维护高效的自动化脚本,以提升测试覆盖率和执行效率。3.测试策略与流程:参与制定和优化大数据项目的测试策略、测试计划和测试流程。深入理解业务和数据逻辑,设计高效的数据构造和数据模拟方案。 职位要求 任职要求1.测试专业能力:具备2年以上软件测试经验,其中至少1年以上大数据领域测试经验。掌握功能测试、集成测试、性能测试等方法论,能独立设计测试用例和测试数据。对质量保障体系有深入理解,具备敏锐的缺陷洞察力和分析能力。2.大数据技术栈:具备大数据平台(如 Hadoop、Spark、Flink、Hive、Kafka 等)的测试经验。精通 SQL,能够编写复杂的查询语句进行数据验证和探查。理解数据仓库分层模型(如 ODS, DWD, DWS, ADS)。3. 工具开发能力:熟练掌握至少一门编程语言,如 Python、Java ,并具备良好的编码习惯。4.个人素质:具备出色的逻辑思维能力、分析问题和解决问题的能力。拥有强烈的技术热情、自驱力和团队合作精神。乐于分享,能够将技术方案清晰地传达给团队成员。 投递...

Premium Full-time
极兔速递 (J&T Express)  23 days ago
Papergames jobs

资深大数据开发 上海 全职 平台类 职位描述 1、负责离线和实时数据仓库的搭建与优化,保障数据的准确、完整和高效可用;2、根据业务需求设计合理的数据模型,开发高效ETL流程,进行数据分层与数据治理;3、跟进数据产品在业务场景中的落地,开发数据应用和分析工具,提升数据服务的易用性和价值;4、负责大数据平台和任务的性能调优、解决各类技术难题,保障系统的稳定与高效运行;5、深入理解游戏业务,对接业务部门,制定并实现复杂业务的数据解决方案;6、持续跟踪大语言模型等前沿技术发展,将数据开发能力转化为可落地的智能化实践经验。 职位要求 1、本科及以上学历,计算机、软件工程、数据分析或相关专业,5年以上大数据开发经验;2、精通Java、Python等至少一门编程语言,扎实的代码功底和算法能力;3、熟练掌握Hadoop、Hive、Spark、Flink、Kafka等大数据生态组件,有阿里云Maxcompute、ADB开发经验者优先;4、熟悉数据仓库理论体系,分层设计与维度建模,有PB级数据处理经验者优先;5、业务理解能力强,能够独立对接复杂业务需求,善于沟通和团队协作;6、逻辑思维强,有良好的技术敏感度和学习驱动力,抗压能力强,有责任心和团队合作精神;7、熟悉大语言模型等前沿技术,具备大语言模型等前沿技术应用能力。 投递...

Premium Full-time
Papergames  23 days ago
酷睿程 (CARIZON) jobs

数据挖掘工程师/专家 北京、上海 社招 全职 研发 - 算法 职位描述 1. 基于自动驾驶海量数据,利用机器学习、深度学习和数据挖掘方法,负责相关数据挖掘、场景发现、数据筛选与价值挖掘工作,研发适用于实际业务场景的 AI 模型、算法和工具。2. 负责机器学习/深度学习领域的算法研究与工程落地,包括但不限于图学习、生成学习、迁移学习、强化学习、多模态学习以及各类优化方法的实践与创新。3. 面向自动驾驶感知、预测、规划、仿真、数据闭环等业务场景,探索前沿算法问题,设计并实现可落地的技术解决方案,推动数据驱动的模型迭代和业务发展。4. 建设数据挖掘与智能分析能力,包括规则挖掘、Embedding 检索、向量数据库、图搜索、文搜图/图搜图、多模态理解等能力,提升数据生产、质检、评测和交付效率。5. 结合业务需求,沉淀可复用的数据挖掘工具链和算法平台,支持大规模数据分析、样本召回、长尾场景挖掘、难例发现和数据质量提升。 职位要求 1. 数学、计算机、统计学、通信、电子、自动化等相关专业本科以上学历;具备 3 年及以上机器学习、深度学习或数据挖掘相关研究或工程经验。2. 熟悉 Python、Java、C/C++、Scala 等至少一门编程语言,具备良好的工程实现能力,有大规模数据处理、算法系统开发或模型训练经验者优先。3. 熟悉至少一种深度学习框架,如 PyTorch、TensorFlow、MindSpore 等;熟悉常见机器学习/深度学习模型和算法,包括但不限于 GBDT、RF、CNN、RNN、Transformer、CLIP、多模态模型、Embedding 模型等。4. 具备较强的数据分析和数据建模能力,熟悉常见数据挖掘方法,如聚类、分类、召回、排序、异常检测、相似度检索、特征工程、样本筛选等。5. 有自动驾驶、机器人、智能交通、地图、推荐系统、搜索广告、多模态理解、大规模数据挖掘等相关经验者优先。熟悉大数据处理工具或平台者优先,如 Spark、Flink、Hadoop、Hive、ClickHouse、Doris、Elasticsearch、Milvus、Faiss 等。6. 具备良好的问题抽象能力、技术判断力和沟通协作能力,能够结合业务场景快速定位问题,并推动算法方案落地。加分项1. 有自动驾驶数据闭环、长尾场景挖掘、感知数据挖掘、仿真数据挖掘、数据质检或模型评测经验。2. 有多模态大模型、VLM、CLIP、Qwen-VL、Embedding 检索、向量数据库、RAG、Agent

Premium Full-time AI
酷睿程 (CARIZON)  23 days ago
Bambu Lab jobs

数据开发工程师 上海、杭州 全职 研发 - 数据 热招职位 职位描述 1、负责离线数据仓库,搭建数据架构和模型,保障数据准确、一致和稳定,包括数据清洗、模型设计、数据治理和稳定性保障;2、负责实时数据架构建设,开发实时计算任务,保障数据传输的实时性与准确性,满足实时数据在各业务场景的需求;3、深入理解业务,根据业务发展阶段和需求,提供系统性的解决方案并落地;4、关注大数据领域前沿技术,将新技术、新方法应用到实际工作中,持续优化数据开发体系与技术架构。 职位要求 1、较为丰富的数仓设计&开发经验,具备离线/实时数据处理能力,有海量数据实时处理经验优先;2、熟悉Hadoop/Spark/Flink生态相关技术,具备一定的JAVA、Scala、Python语言的开发能力,能够结合多技术栈的优势提出业务解决方案;3、对数据敏感,具备良好的业务理解能力,通过数据体系与业务的结合,进行良好的数仓模型设计,保障稳定性和扩展性;4、有良好的逻辑思维性,有良好的抗压能力和自驱能力;5、具备数据治理经验为加分项。 投递...

Premium Full-time
Bambu Lab  19 days ago
Apple jobs

SummaryApple is where individual imaginations gather together, committing to the values that lead to great work! Every new product we build, service we create, or Apple Store experience we deliver is the result of us making

Apple  11 days ago
BOKE Technology Co., Ltd jobs

2027届实习-算法数据开发工程师 上海 实习 互联网 / 电子 / 网游 技术 职位描述 1、参与游戏业务离线/实时数仓的日常开发,协助完成简单的 ETL 逻辑编写及报表开发。2、负责日常数据链路的监控与异常排查,学习并实践数据准确性校验逻辑。3、负责数据字典的梳理及技术文档的编写,确保业务逻辑的可追溯性。 职位要求 学历背景:2026 届或 2027 届在校生,统招本科及以上学历,计算机、数学、软件工程等相关专业。编程基础:熟练编写 SQL(理解常见的 Join 原理、聚合函数、开窗函数),对底层逻辑有好奇心,有JAVA/PYTHON基础加分。算法功底:具备优秀的数据结构与算法能力,能够通过代码解决复杂的逻辑问题技术热情:熟悉大数据基本概念(如:知道 Hadoop/Spark/Flink 是做什么的),有分布式系统、数据库原理等相关课程背景。 职位信息 团队介绍: 我们在做什么?我们是业务全球化征程的“开路先锋”与“守护者”。我们的战场不局限于单一机房或单一云端,而是横跨全球多个Region的复杂基础设施。我们需要在维护传统稳态业务的同时推动云原生技术的落地。你将面对的是一个融合了物理机、虚拟机与Kubernetes容器集群的混合架构庞然大物,通过精细化的运维手段,确保全球玩家都能享受到极致流畅的服务体验。你会遇到的挑战驾驭全球多云环境:你需要同时操作 AWS、GCP、阿里云、腾讯云 等多家云厂商的控制台与API,解决跨国网络延迟、数据合规与资源调度难题;混合架构的统一治理:你的纳管对象既有前沿的 CNCF 云原生组件,也有基于虚拟机/物理机的传统应用。如何在两套体系间实现统一的监控、部署与治理,是你的核心课题;构建全球交付流水线:利用 Jenkins / GitLab-Runner 打造适应全球发布的CI/CD系统,让代码能够安全、快速地分发到世界各地的每一个节点;复杂场景的“神探”:面对跨时区、跨地域、跨架构的线上疑难杂症(网络抖动、应用卡顿、资源争抢),进行全链路的排查与恢复。你能获得的宏大的技术视野:很少有校招岗位能让你直接接触全球级别的架构设计与多云异构的管理经验;全栈运维能力:你将同时掌握“传统运维的深厚内功”(Linux底层、网络协议)与“云原生运维的各种招式”(K8s、ServiceMesh);成就感:亲手敲下的命令,将影响地球另一端成千上万用户的实时体验。为了匹配业务的发展,我们在寻找更多志同道合的伙伴加入我们充满活力的团队,一起迎接市场日益激烈的挑战,共同打造更多的爆款! 投递...

BOKE Technology Co., Ltd  10 days ago
BOKE Technology Co., Ltd jobs

2027届实习-AI算法工程师 上海 实习 互联网 / 电子 / 网游 研发 职位描述 AI算法工程师职位描述1. 专注游戏场景下的算法研发工作,深耕用户增长、因果推断、归因分析、个性化体验流设计及商业化活动/道具智能推荐等方向,驱动产品核心指标提升;2. 基于业务数据洞察,结合游戏生态特性定义可量化的算法优化目标,设计高落地性方案并推动实施,为项目创造显著商业价值;3. 持续关注AI领域前沿技术动态,探索其在游戏场景的创新应用,推动技术成果转化与工程化落地;4. 深度联动产品、运营团队,通过玩家行为建模与多维度分析,制定精细化算法策略,构建快速迭代机制以持续优化效果。 职位要求 任职要求1. 计算机、数学、统计学等相关专业本科及以上学历,具备独立负责项目的能力;2. 精通Python编程,具备扎实的代码功底与工程实现能力,掌握C/C++或Java者优先;3. 对游戏行业有浓厚兴趣,具备敏锐的业务洞察力,拥有游戏算法成功落地经验者优先;4. 在机器学习、深度学习、数据挖掘、自然语言处理或多模态技术等领域有深入研究;5. 熟悉分布式数据处理框架,对流式计算有实践经验,熟练运用Hadoop/Spark/Flink等大数据工具进行数据建模与分析优先考虑。 职位信息 团队介绍: 波克城市成立于2010年,旗下拥有《捕鱼达人》《爆炒江湖》《Tile Master》等众多精品老牌,覆盖休闲竞技、收集养成、模拟经营、策略对战等多个赛道。目前,我们的全球累计注册用户超5亿,全球总下载次数超15亿,连续7年入选中国互联网百强。近年我们也在小游戏赛道积极探索持续发力,先后推出了《跃动小子》《灵画师》《一路狂飙》等爆款佳作!为了匹配业务的发展,我们在寻找更多志同道合的伙伴加入我们充满活力的团队,一起迎接市场日益激烈的挑战,共同打造更多的爆款! 投递...

Premium Full-time
BOKE Technology Co., Ltd  10 days ago
HSBC Group jobs

GCIO - Asia & Middle East Technology Our GCIO organisation plays a critical role for the bank. This team partners with the businesses to build the platforms, systems, and products that our customers use every day.

HSBC Group  8 days ago
极兔速递 (J&T Express) jobs

【集团】-大数据开源组件研发工程师 上海 全职 职位描述 负责公司大数据基础架构核心组件的研发、优化和稳定性建设,重点参与流计算平台、海外云大数据平台以及开源大数据底座能力的持续演进。1. 参与 Hadoop、Spark、Flink、StarRocks 等开源组件的源码分析、问题定位、二次开发和版本升级;2. 重点负责 Flink / Spark Streaming 等流计算相关组件的性能优化、稳定性治理、任务调度优化和故障排查;3. 参与海外云环境下大数据平台的架构设计、成本优化、资源治理和稳定性建设,包括 Azure、Google Cloud、AWS 等云平台;4. 根据业务场景对实时计算、离线计算、存储、Shuffle、调度、查询等核心能力进行定制化改造;5. 参与流批一体、湖仓一体、存算分离、对象存储适配等方向的技术预研、方案设计和落地实施;6. 跟踪开源社区及海外云厂商大数据产品的发展,沉淀技术文档、最佳实践和平台化能力,提升团队整体研发效率。 职位要求 1. 计算机相关专业,本科及以上学历;2. 熟悉 Java / Scala / C++ / Go 中至少一种编程语言,具备良好的编码能力和工程实践能力;3. 熟悉 Hadoop、Spark、Flink、StarRocks 中至少一项,有源码阅读、问题排查或二次开发经验优先;4. 具备流计算相关经验,熟悉 Flink、Spark Streaming、Kafka、CDC、实时数仓或实时数据链路中的至少一项;5.

极兔速递 (J&T Express)  6 days ago
Bambu Lab jobs

数据开发实习生 上海 实习 数据 职位描述 1.参与数据仓库、ETL(数据抽取转换加载)流程的设计、开发与维护;2.负责数据质量监控,处理数据异常及日常运维问题;3.配合团队完成数据模型优化、报表开发及数据分析支持工作;4.参与大数据平台(如Hadoop/Spark/Hive等)的日常开发与调优。 职位要求 1.全日制统招本科及以上学历,计算机、数学、统计等相关专业背景优先;2.熟悉SQL,掌握Python/Java/Scala中至少一种编程语言;3.了解Hadoop生态(HDFS、Hive、Spark等)及数据仓库基本概念;4.逻辑清晰,责任心强,对数据敏感,具备良好的沟通能力;5.每周可实习4天及以上,连续实习3个月以上。 投递...

Premium Full-time
Bambu Lab  3 days ago
Amazon.com jobs

Worldwide Global Selling has been helping individuals and businesses increase sales and reach new customers around the globe. Today, more than 50% of Amazons total unit sales come from third-party selection. The Global Selling team in

Amazon.com  2 days ago

We are seeking an experienced Senior Data Engineer to design, implement, and maintain our data infrastructure and pipelines. The ideal candidate will have a strong background in data engineering, big data technologies, and cloud platforms. You

CP Axtra  14 days ago

Subscribe for job alerts and resources to make your job search easier!

Confirmation email sent to

Check your email and click on the link to start receiving your job alerts

Receive the latest job openings for:

java hadoop jobs in shanghai

Confirmation email sent to

Check your email and click on the link to start receiving your job alerts

All Filters Apply
Sort by
Job Type
Employer/Recruiter
Experience