Refine Reset All
Sort by
Employer/Recruiter
Experience
Date Posted
Location
Job Type
Employer/Recruiter
Experience
All Filters

Python Spark Jobs In China - 105 Job Positions Available

Top Cities:
1 – 20 of 105 jobs
智元创新(上海)科技有限公司 jobs

Python开发实习生 上海 实习 职位描述 参与云端数据处理管线的开发、维护与优化工作,协助完成数据从采集、处理到训练全链路的工程化落地;负责数据Pipeline相关模块的代码编写、单元测试与文档撰写,保障代码质量与可维护性;协助排查数据流转过程中的异常与性能瓶颈,参与日志分析、问题定位与修复工作;参与数据管线自动化工具与监控脚本的开发,提升数据运维效率。 职位要求 硕士在读,计算机、软件工程、人工智能等相关专业,每周至少实习4天,实习期3个月以上;扎实的Python编程基础,熟悉常用数据结构与设计模式,代码风格规范;了解数据处理基础流程,有ETL/数据Pipeline开发经验者优先;了解Docker、Kubernetes等容器化技术,有云端开发经验者优先;具备良好的学习能力与团队协作精神,对数据工程领域有热情。加分项了解Airflow、DolphinScheduler等工作流调度框架;了解Spark、Flink等大数据处理框架;了解Git协作开发与CI/CD流程;有开源项目贡献或技术博客者优先。 投递...

Premium Full-time
智元创新(上海)科技有限公司  9 days ago
Bambu Lab jobs

【日常实习】AI Agent 系统平台工程师上海、深圳、杭州实习研发日常实习职位描述岗位使命作为系统平台工程师,你将深度参与支撑AI Agent全生命周期的核心运行时系统与开发框架平台的研发工作。你将在资深系统工程师的指导下,接触并实践高性能Agent Runtime引擎、工具调用框架、可观测性体系等工程化前沿课题,在真实的大规模分布式系统环境中磨砺系统设计与工程实现能力,获得高速成长。核心职责1. Agent运行时模块开发与调试协助开发Agent Runtime的核心功能模块,包括生命周期管理、上下文窗口管理、任务状态持久化等基础能力,参与模块单元测试、集成测试与线上Bug排查修复。2. 工具链与插件框架建设参与在导师指导下,参与Tool/Plugin注册与调用框架的功能迭代,协助完善动态工具发现机制、权限控制逻辑及沙箱隔离执行方案,负责相关模块的文档撰写与测试用例补充。3. Agent编排与工作流支撑协助基于LangGraph/AutoGen等框架完善Agent编排引擎的局部功能,参与多智能体协作调度流程的调试与优化,支撑工作流DAG定义与动态任务路由逻辑的工程实现。4. 可观测性体系建设协助参与Agent全链路可观测性基础设施的建设,协助接入Tracing/Logging/Metrics采集管线,协助开发Agent执行轨迹的可视化分析工具,支撑系统稳定性监控需求。5. 技术调研与工程支撑持续跟踪Agent基础设施、MCP/A2A协议、云原生编排等领域的最新进展,输出有实质内容的技术调研报告,为团队架构演进提供参考输入。职位要求基础技术能力1. 熟练掌握至少一门编程语言(Python/Go/Java均可),代码风格规范,具备独立完成功能模块开发的能力2. 了解分布式系统基本概念(如消息队列、服务调用、状态管理等),有相关课程学习或项目实践经验3. 了解Docker/Kubernetes基本使用,能够在容器化环境中部署和调试服务4. 了解大语言模型基本原理及主流API调用方式,有Agent框架(LangChain/LangGraph/AutoGen等)的基础使用经验者优先学业与时间要求1. 在读本科(大三及以上)或硕士研究生,计算机、软件工程、信息工程等相关专业2. 每周可保证 至少4天 稳定工作,实习周期 3个月以上3. 具备良好的自驱力与文档习惯,能独立拆解任务并按时交付加分项1. 有Kafka/Flink/Spark/Ray等大数据或流计算系统的学习或使用经验2. 有AI Coding工具(Cursor/Claude Code/Copilot等)的实际工程使用习惯3. 有开源项目贡献记录或活跃的GitHub主页4. 对系统性能优化、高并发架构设计有浓厚兴趣投递...

Premium Full-time
Bambu Lab  29 days ago
Bambu Lab jobs

【暑期实习】AI Agent 系统平台工程师上海、深圳、杭州实习研发27届暑期实习职位描述岗位使命作为系统平台工程师,你将深度参与支撑AI Agent全生命周期的核心运行时系统与开发框架平台的研发工作。你将在资深系统工程师的指导下,接触并实践高性能Agent Runtime引擎、工具调用框架、可观测性体系等工程化前沿课题,在真实的大规模分布式系统环境中磨砺系统设计与工程实现能力,获得高速成长。核心职责1. 专题课题独立攻关认领一个与Agent运行时或平台框架强相关的工程专题课题(如:Agent长程任务断点恢复机制设计与实现、基于LangGraph的多智能体编排引擎性能优化、Tool调用安全沙箱隔离方案原型验证、Agent全链路Tracing可观测性体系建设等),在导师指导下完成端到端的方案设计与工程实现。2. 核心平台能力建设参与深度参与Agent Runtime或开发框架的关键模块研发,包括但不限于:状态持久化存储、Token预算管理策略、上下文压缩算法、工具调用链路优化、Agent执行轨迹分析等,产出可集成上线或可复用的代码成果。3. 系统性能评估与基准测试设计合理的基准测试方案,建立延迟、吞吐量、资源利用率、可靠性等量化评估指标,对所负责模块进行系统性性能验证与瓶颈分析,输出完整的性能报告与优化建议。4. 开发者体验与SDK建设参与Agent SDK/CLI/API的模块化封装工作,协助完善开发者文档与最佳实践规范,从开发者视角提出并落地提升框架易用性的具体改进方案。5. 前沿技术探索与创新输出结合课题方向,主动调研MCP/A2A协议标准化、云原生Agent调度、Agent评估体系(SWE-Bench/TAU-Bench等)等最新进展,提出具有创新性的工程方案,鼓励在实习期间产出技术分享、开源贡献或论文/专利思路。职位要求基础技术能力:1. 熟练掌握至少一种系统级语言(Go/Java/Rust之一)或Python,具备扎实的编程功底与独立完成完整项目的工程能力2. 理解分布式系统核心概念(分布式一致性、消息队列、状态管理、高可用架构等),有相关系统(Kafka/Flink/Spark/Ray/Redis等)的实际使用或开发经验3. 熟悉Docker/Kubernetes基本原理与操作,有微服务或云原生环境下的系统部署与调试经验4. 了解至少一种主流AI Agent框架(LangGraph/AutoGen/LangChain/Strands等)的设计理念,理解工具调用、工作流编排、记忆管理等核心机制5. 了解大语言模型推理服务基本原理,有RAG系统或向量数据库使用经验者优先学业与时间要求:1. 在读本科(大三及以上)、硕士或博士研究生,计算机、软件工程、信息工程等相关专业2. 可连续全职实习 3个月以上,保证每周出勤4天以上综合素质1. 对构建高可靠、可扩展的Agent基础设施平台充满热情,有强烈的工程质量意识与结果导向2. 具备出色的跨团队沟通能力,能与AI算法工程师、平台工程师和业务团队高效协作3. 有良好的技术文档写作能力,能清晰表达系统设计思路、接口规范与实验结论4. 能快速适应AI Agent领域的高速技术迭代,对将分布式系统经验迁移至Agent基础设施这一全新领域充满探索欲加分项1. 有从0到1设计并实现某一分布式系统组件、Agent框架模块或平台基础设施的完整经历2. 熟悉Agent评估体系(SWE-Bench/TAU-Bench等),有自动化评测集构建或基准测试经验3. 有AI Coding工具(Claude Code/Cursor/Codex CLI等)的深度工程使用经验,具备AI辅助开发的工程化思维4. 在开源社区有高质量项目贡献(尤其是Agent框架、分布式系统或大数据领域)5. 了解GPU集群管理或模型推理优化(vLLM/TensorRT等)的基本原理6. 熟悉多语言技术栈(Go + Python为佳),有跨语言异构系统的设计或集成经验7. 在ACM-ICPC/系统类竞赛中获奖,或在OSDI/SOSP/ATC/EuroSys等系统顶会发表过相关论文投递...

Premium Full-time
Bambu Lab  29 days ago
Bambu Lab jobs

AI Agent系统平台工程师 - Agent运行时与框架体系方向深圳、上海、杭州全职研发职位描述岗位使命负责构建支撑AI Agent全生命周期的核心运行时系统与开发框架平台。你将站在大模型工程化落地的最前沿,设计并实现高性能、高可用、可扩展的Agent运行时引擎、编排调度核心、工具调用框架及可观测性体系,为上层业务Agent提供稳定、高效、安全的底层基础设施与开发范式。如果你拥有大数据/分布式系统基础设施的深厚背景,并对将大模型能力转化为可规模化运行的Agent系统充满热情,这正是属于你的机会。核心职责1. Agent运行时系统(Runtime)设计与研发:负责Agent Runtime内核的设计、研发与性能优化,涵盖Agent生命周期管理、状态持久化、上下文窗口管理、长程任务执行与断点恢复等核心能力,保障智能体核心引擎稳定高效运行。2. Agent编排框架与工作流引擎:基于LangGraph/AutoGen/Strands等主流框架理念,设计并实现Agent编排引擎,支持多智能体协作调度、复杂状态机与工作流DAG定义、动态任务路由与负载分发,构建统一的Agent执行通道抽象。3. 工具链与基础设施底座:构建Tool/Plugin注册与调用框架,支持动态工具发现、权限控制、安全沙箱隔离执行;设计大规模Sandbox系统与公司级Agent Tool网关,保障多租户场景下的安全与资源隔离。4. 大规模Agent系统集成与性能优化:深度结合分布式计算、流处理与高并发系统设计经验,优化端到端LLM推理调用链路,实现Token预算管理、上下文压缩、提示词缓存与模型路由策略,持续降低系统延迟与成本。5. Agent可观测性与治理体系:建设全链路可观测性体系,覆盖Tracing、Logging、Metrics及Agent执行轨迹追踪与分析;构建Agent行为合规检测、Prompt漂移监控及自动化质量评估与回归验证管线。6.开发者平台与SDK建设:模块化输出Agent开发套件,封装API/SDK/CLI,降低业务团队Agent构建与调优门槛;定义并维护Agent开发规范与最佳实践,支撑业务场景快速集成与规模化交付。7. 前沿技术探索与架构演进:持续跟踪业界Agent基础设施、MCP/A2A协议、云原生编排等方向的技术进展,推动新技术在平台中的规模化落地,持续迭代架构以适应不断增长的智能体规模与复杂度需求。职位要求必备技术能力1. 精通至少一种系统级编程语言(Go/Java/Rust)与至少一种AI/脚本语言(Python),具备扎实的编程功底与优秀的系统设计能力;2. 具备3年以上分布式系统或大数据基础设施(如Kafka、Flink、Spark、Ray、HDFS、消息队列等)的设计开发经验,深刻理解分布式一致性、状态管理、高可用架构与弹性伸缩等核心概念;3. 熟悉Docker/Kubernetes等云原生技术栈,具备微服务架构、服务网格(Service Mesh)、容器编排、CI/CD流水线的工程实践经验;4. 熟悉至少一种主流AI Agent开发框架(LangGraph/AutoGen/LangChain/Strands等)的设计理念与底层实现,理解Agent工作流编排、工具调用、记忆管理等核心机制;5. 理解大语言模型(LLM)基本原理与推理部署流程,有RAG系统、向量数据库或模型服务化的工程经验;6. 具备良好的系统抽象能力与组件化设计思维,熟悉事件驱动架构、插件化架构等常见架构模式。经验背景:1. 在大数据平台、分布式调度系统、云原生PaaS平台或高并发消息系统等相关领域有项目实践经验者优先;2. 有Agent运行时系统、Agent平台基础设施或LLM推理服务平台的设计开发经验者优先;3. 熟悉多租户系统设计,具备大规模系统部署、性能优化与容量规划经验;4. 有AI Coding工具(如Claude Code、Cursor、Codex等)的深度使用经验,具备AI辅助开发的工程化思维综合素质:1. 具备优秀的系统抽象、问题拆解与工程架构能力,对构建高可靠、可扩展的Agent基础设施充满热情2. 拥有出色的自驱力、学习能力和跨团队沟通协作能力——你将同时与算法团队、平台工程团队和业务团队深度合作3. 能够快速适应AI Agent领域的高速技术迭代,在快节奏环境中持续学习并输出高质量工程成果4. 对将大数据/分布式系统经验迁移至AI Agent基础设施这一全新领域充满探索欲与使命感加分项1. 有从0到1构建Agent开发框架、Agent运行时或智能体平台的核心架构经历2. 熟悉Agent评估体系(如SWE-Bench、TAU-Bench等),有自动化评测集构建经验3. 了解强化学习(RL)训练基础设施(采样、Reward、回放、训练闭环),有与算法团队协作优化Agent能力的工程经验4. 在开源社区有高质量项目贡献(尤其是Agent框架、分布式系统或大数据领域)5. 有GPU集群管理、模型推理优化(vLLM/TensorRT等)的实践经验6.

Premium Full-time AI
Bambu Lab  29 days ago
IQVIA jobs

BASIC FUNCTIONS: Opportunity to work as a Data Scientist in Information Partner Services with extremely complex data and methodologies in a fast-paced, ever-changing environment answering critical business questions for retail pharmacy and wholesaler clients. Combining modern

IQVIA  29 days ago
Momenta jobs

工程开发实习生上海、北京实习技术 - 软件工程职位描述1、为智驾大模型进行软件/产线/基建的架构设计和工程开发,建设一体化和规模化的Data Infra解决方案,提升模型数据的数量、质量和多样性,推动算法的高效演进2、协同感知/规控算法团队,构建面向智驾大模型的海量数据闭环体系,覆盖数据采集、处理、挖掘、应用的端到端全链路职位要求核心要求:1、本科及以上学历,计算机、电子、软件工程、通信、自动化等相关专业2、熟练掌握Python或C++程序设计语言3、有系统设计/大数据处理/数据库/分布式计算等工程方向研发经验4、熟悉Spark/K8S/Redis/Flink/Docker/Git优先条件:1、有机器学习的数据/基建等相关经验者优先2、有机器学习模型算法等相关经验者优先3、有自动驾驶行业相关经验者优先投递...

Premium Full-time
Momenta  28 days ago
亚信安全 jobs

软件架构师成都全职互联网 / 电子 / 网游职位描述1. 具有良好的技术视野,快速学习能力及良好的沟通能力,具有系统思维及产品思维;2. 精通面向对象设计思想,设计模式,熟悉微服务架构及DDD的设计思想,有设计完整的企业级应用的经验。对系统的性能与容量扩展有深入的理解。有独立完成技术预研POC及架构设计的能力;3. 精通两种以上主流后端编程语言: 1. Java 2. C++ 3. NodeJS 4. Python 5. Go4. 精通以下主流数据库及大数据技术,了解其底层原理,并会进行调优; 1. MySQL 2. MongoDB 3. ElasticSearch 4. ClickHouse 5. Kafka 6. Flink/Spark/esper 5. 熟悉微服务架构相关组件与功能如:API-Gateway,配置中心,认证与授权等。熟悉微服务治理相关技术;6. 对系统安全有深刻的理解;7. 精通容器技术及K8S(精通云原生技术栈会是一个很好的加分项);8. 精通操作系统及计算机网络底层原理;9. 熟悉分布式技术原理;职位要求1、本科及以上学历,计算机类相关专业;2、5年及以上工作经验。投递...

亚信安全  28 days ago
Momenta jobs

工程开发实习生急招上海、北京实习互联网 / 电子 / 网游 - 研发日常实习生职位描述1、为智驾大模型进行软件/产线/基建的架构设计和工程开发,建设一体化和规模化的Data Infra解决方案,提升模型数据的数量、质量和多样性,推动算法的高效演进2、协同感知/规控算法团队,构建面向智驾大模型的海量数据闭环体系,覆盖数据采集、处理、挖掘、应用的端到端全链路职位要求核心要求:1、本科及以上学历,计算机、电子、软件工程、通信、自动化等相关专业2、熟练掌握Python或C++程序设计语言3、有系统设计/大数据处理/数据库/分布式计算等工程方向研发经验4、熟悉Spark/K8S/Redis/Flink/Docker/Git优先条件:1、有机器学习的数据/基建等相关经验者优先2、有机器学习模型算法等相关经验者优先3、有自动驾驶行业相关经验者优先投递...

Premium Full-time
Momenta  27 days ago
BID Operations jobs

Company Introduction At BID Operations, we are passionate about supporting our clients in their journey towards success. Our mission is to empower you to thrive by handling the essential yet time-consuming aspects of your business operations,

BID Operations  28 days ago
Insta360 jobs

数据仓库工程师深圳社招全职职位描述1、负责企业级数据仓库及业务数据集市的架构规划、分层设计(ODS/DWD/DWS/ADS)与落地实施,确保架构的先进性、可扩展性与高性能。2、主导核心业务域的数据建模工作,精通维度建模等方法论,设计通用灵活的数据模型与宽表,保障数据的一致性、完整性与复用性。3、设计并实现高效的ETL/ELT数据集成方案,负责数据提取、转换、加载全流程的开发、调度与优化,解决大规模数据处理中的性能瓶颈。4、推进数据治理体系建设,包括数据质量监控、元数据管理、数据血缘追踪、指标体系标准化等,提升整体数据质量与数据资产价值。5、负责数据仓库的日常运维与故障排查,保障数据服务SLA达标,及时响应并解决数据延迟、数据错误等线上问题,确保数据链路稳定可靠。6、深入理解业务需求,与数据分析、业务部门紧密协作,提供高质量的数据支持与解决方案,支撑业务决策、数据产品迭代及精细化运营。职位要求一、基础要求1、本科及以上学历,计算机科学、数据科学、信息技术等相关专业。2、3-7年及以上数据仓库设计与开发经验,有完整的企业级数据仓库建设项目经验优先。3、具备强烈的责任心、严谨的逻辑思维、良好的沟通协调能力及团队协作精神,对数据敏感,重视数据质量。二、 技术能力1、精通数据仓库理论体系,深入理解分层架构、主题域建模、维度建模等方法论,能结合业务场景设计合理的数据模型。2、精通SQL/HQL/Spark SQL开发及优化,能高效处理TB/PB级大规模数据集,具备复杂查询性能调优实战经验。3、熟悉大数据生态技术栈,具备Hadoop、Hive、Spark、Flink、Kafka等组件的实战应用经验;了解MPP数据库(ClickHouse、Doris)、OLAP引擎(Kylin、Presto)者优先。4、掌握Java/Python/Scala中的至少一种编程语言,具备良好的代码规范与工程化能力;熟悉ETL工具(DataX、Airflow、Kettle)及任务调度系统者优先。5、具备数据治理相关经验,熟悉数据质量监控、元数据管理、数据血缘分析等工具(如Apache Atlas、Griffin)的使用者优先。三、加分项1、有互联网、金融、电商等行业数据仓库建设经验者优先。2、有数据字典、指标管理体系从0到1搭建经验者优先。投递...

Premium Full-time
Insta360  26 days ago
智元创新(上海)科技有限公司 jobs

具身算法实习生上海实习职位描述参与具身智能机器人算法研发,聚焦模仿学习/强化学习算法在真实机器人上的落地应用,参与数据采集、数据挖掘、数据评测全流程,以高质量数据驱动算法迭代。【岗位职责】- 参与遥操作数据采集、数据清洗、格式转换与质量评估,支撑算法训练数据需求;- 基于模仿学习(ACT、Diffusion Policy)或强化学习(PPO、SAC)进行模型训练与调优;- 参与数据挖掘与分析,识别高价值样本(失败轨迹、长尾场景),提升数据对模型的效果增益;- 协助建立数据质量评测流程,包括标注准确率校验、数据分布分析、端云一致性检查;- 在仿真环境(Isaac Sim、Mujoco)或真实机器人平台上进行算法验证与Badcase归因分析;- 跟踪具身智能与数据驱动的前沿技术,复现论文并探索新方法。职位要求【任职要求】- 计算机、自动化、机器人、人工智能等相关专业,硕士或博士在读(优秀本科生亦可);- 熟练掌握Python,熟悉PyTorch深度学习框架;- 了解模仿学习(ACT、Diffusion Policy)或强化学习(PPO、SAC)基础知识;- 了解ROS/ROS2,有机器人数据处理经验(MCAP、ROS bag、Parquet等)者优先;- 有真实机器人(机械臂、人形机器人、移动底盘)上手经验者优先;- 【快速入职】每周能保证4天以上实习时间,能连续实习3个月以上。【加分项】- 有遥操作数据采集或UMI/ALOHA系统使用经验;- 熟悉数据标注、数据挖掘或数据质量评测方法;- 有大规模数据处理经验(Spark、Ray等);- 在CoRL、ICRA、IROS、NeurIPS、CVPR等会议发表过相关论文;- 有GitHub开源项目贡献经历。【我们提供】- 真实的机器人实验环境与大规模数据采集设施;- 资深算法工程师一对一指导,快速成长;- 有机会参与顶级会议论文投稿;- 有竞争力的实习薪资与餐补;- 表现优异者可获得转正机会。投递...

Premium Full-time
智元创新(上海)科技有限公司  26 days ago
Bosch Group jobs

Company Description Do you want beneficial technologies being shaped by your ideas? Whether in the areas of mobility solutions, consumer goods, industrial technology or energy and building technology - with us, you will have the chance

Bosch Group  25 days ago
百观科技 BigOne Lab jobs

行业分析师上海全职互联网 / 电子 / 网游职位描述行业分析师将是百观的骨干成员,你将融合数据、金融和科技,带领团队“勇敢求真”,用尖端的技术把亿级的数据转化成洞见和产品,解决世界顶尖投资机构面临的研究难题。你将有机会打造出直接对客户有价值、对公司有效益、对行业有领导作用的数据产品。#岗位职责• 在资深数据投研分析师带领下服务顶级投资机构客户,撰写基于独家数据的研究分析和尽调报告• 将对于行业分析的理解输出到产品上,挖掘客户的数据痛点,为数据产品开发提供支持,助力行研报告自动化和产品化• 与数据产品经理和数据分析师一起,计划、把控、并交付产品的开发与提升,包括挖掘数据源内容、制定数据收集规格、监督统计抽样策略与分析、验证数据质量及验收可视化平台的内容与交互逻辑等• 深入了解电商、O2O、娱乐、教育等行业,辅助搭建品牌知识图谱,跟踪并分析各行业和公司的动态,理解各行业、企业运营发展趋势及业务关键指标• 从客户角度为线上平台的交互体验和功能提出改进需求,推动和保持产品平台在行业里的领导地位职位要求#要求• 对数据科学与资本市场的融合发展充满激情,认同金融和咨询行业的未来必定是与技术和数据更深层次地绑定,渴望以owner和shaper的身份参与到这个新趋势中• 拥有1年左右投资分析、行业研究经验,能够独立从金融和运营层面分析不同业务的数据• 对新事物充满热情,敢于尝试,开放求真,敢于不断挑战自己,让自己的能力不断提高,让自己匹配得上越来越大的责任和越来越高的收益• 较强的自我认知能力,善于自我反省并接纳自己• 热爱数据和技术,愿意接触不同类型的数据并了解数据生产过程• 985或同等级海外学校本科及以上学历;经济、统计、CS、数学、金融、社会科学或者其他计量专业等相关专业背景者• 英语达到职业专业水平,阅读与撰写报告、邮件、文档无障碍#加分• 有商业咨询机构CDD项目经验• 有商业数据分析、BI相关经验• 对数据分析语言有了解,如Python/R/Matlab;对数据库如SQL/MongoDB有了解;对数据仓库如Hive/Spark/GreenPlum有了解• 有海外经历者优先• 英语达到流利水平,托福100分以上,SAT 2000分以上投递...

Premium Full-time
百观科技 BigOne Lab  24 days ago
百观科技 BigOne Lab jobs

高级大数据开发工程师北京全职互联网 / 电子 / 网游职位描述- 参与公司数据湖架构搭建和开发;- 参与ETL设计,数据工程建设和数据可视化开发;职位要求基本要求:- 全日制本科学历,计算机相关专业,5年-10年大数据开发工作经验;- 熟悉公有云架构,对阿里云/AWS数据湖生态有丰富的项目经验;- 熟练使用MR/Spark/Flink等大数据计算框架,掌握Java/Scala/Python等开发语言- 掌握数据湖体系架构、数据建模方法、数据治理等知识,较强的业务理解和抽象能力;- 熟系Airflow调度工具,使用Zeppelin、Jupyter Notebook进行数据开发; - 熟系AWS LakeFormation、Glue、EMR大数据组件,使用Java,SparkPython进行数据分析;加分项:- 数据湖方向做过前瞻性技术规划的建设经验者,优先;- 通过技术驱动产品变革,并带来好的结果经验者,优先;投递...

Premium Full-time
百观科技 BigOne Lab  24 days ago
Westwell 西井科技 jobs

数据语料工程师上海全职互联网 / 电子 / 网游职位描述- 构建多模态 AI 数据语料 pipeline,处理 LiDAR / Video / Sensor / 结构化数据,支撑模型训练、仿真与算法评估。- 基于 NiFi / Dagster 设计数据工作流与数据生产系统,实现数据采集、清洗、转换与 dataset 构建自动化。- 基于 Daft / Arrow / Parquet / Lakehouse 构建高性能数据处理 pipeline,支持 PB 级数据处理与大规模 dataset

Westwell 西井科技  24 days ago
百观科技 BigOne Lab jobs

数据分析师(数据科学方向)北京全职互联网 / 电子 / 网游职位描述职位描述:数据分析师是百观数据产品开发的中坚力量。我们会一起挑战数据分析相关的各种有趣问题。在自由开放的氛围下,将前沿的数据科学、数据分析技术转化成业界独一无二,极具价值的产品。职责:与产品经理一起分析需求,设计数据产品的计算方案、可视化方案以及更深入的挖掘数据价值将数据科学应用到实际产品开发中职位要求基本要求:- 本科及以上学历;统计、数据科学、计算机等相关专业;- 精通至少一种脚本语言,例如Python;熟悉至少一个数据科学模块,例如Sklearn, TensorFlow, Pytorch;深刻理解所使用的算法细节- 擅长将复杂的算法及量化分析过程,以清晰、准确和高效的方式,与跨部门或不同背景的同事交流- 熟悉处理和分析复杂、大量和多维度的多源数据- 熟悉关系型数据库和数据库查询语言,例如SQL- 有使用大数据处理相关组件的经验,例如Spark, Hadoop, Presto- 良好的英文阅读和沟通能力投递...

Premium Full-time
百观科技 BigOne Lab  24 days ago
百观科技 BigOne Lab jobs

数据分析师(数据科学方向)上海全职互联网 / 电子 / 网游职位描述职位描述:数据分析师是百观数据产品开发的中坚力量。我们会一起挑战数据分析相关的各种有趣问题。在自由开放的氛围下,将前沿的数据科学、数据分析技术转化成业界独一无二,极具价值的产品。职责:与产品经理一起分析需求,设计数据产品的计算方案、可视化方案以及更深入的挖掘数据价值将数据科学应用到实际产品开发中职位要求基本要求:- 本科及以上学历;统计、数据科学、计算机等相关专业;- 精通至少一种脚本语言,例如Python;熟悉至少一个数据科学模块,例如Sklearn, TensorFlow, Pytorch;深刻理解所使用的算法细节- 擅长将复杂的算法及量化分析过程,以清晰、准确和高效的方式,与跨部门或不同背景的同事交流- 熟悉处理和分析复杂、大量和多维度的多源数据- 熟悉关系型数据库和数据库查询语言,例如SQL- 有使用大数据处理相关组件的经验,例如Spark, Hadoop, Presto- 良好的英文阅读和沟通能力投递...

Premium Full-time
百观科技 BigOne Lab  24 days ago
NIO jobs

SuperSparks - 实习 - 大模型算法工程师(大数据领域)上海校招实习数字技术 - 算法硕士及以上Super Sparks 招聘计划职位 ID:A128745职位描述项目内容介绍:人工智能和大模型数据智能服务项目。主要分为以下两个方向:1、GPT应用平台场景,打造企业级一站式大模型平台,提供先进的生成式AI生产及应用全流程开发工具链;支持了公司辅助营销、智能客服等众多智能化应用。2、整车行业智能化场景的解决方案,包括;研发和生产数字化、数字化营销和服务等。- 通过先进的数据分析和人工智能算法,实现生产资源的优化配置和生产流程的精细化管理;- 通过AI检测提高产品质量、提升生产效率、降低生产成本以及优化生产工艺;- 通过AI的数据挖掘和分析,为产品设计、制造、测试等环节提供决策支持;- 通过AI辅助生成营销文案,处理大量的客户咨询和服务请求,降低运营成本,提高效率等。职位描述:1. 深入参与公司在大模型、深度学习等前沿领域的研究和开发工作;2. 负责关键算法的设计、实现与优化,解决技术难题,提升产品性能;3. 与产品、工程团队紧密合作,确保项目的顺利推进;4. 跟踪业界最新学术论文与技术动态,进行技术预研和储备,为公司的发展提供有力支持;职位要求1. 2026年或2027年毕业;2. 熟练掌握Python等编程语言,熟悉深度学习框架(如TensorFlow、PyTorch等);3. 在人工智能、大模型、机器学习等领域有深厚的理论基础和丰富的实践经验;4. 在自然语言处理、计算机视觉等至少一个领域有深入研究和突出成果;5. 有重量级科研成果/学术论文/专利或国际顶级竞赛获奖;6. 有大型项目经验者优先;投递...

NIO  24 days ago
NIO jobs

SuperSparks - 校招 - 大模型算法工程师(大数据领域)上海校招正式数字技术 - 算法硕士及以上Super Sparks 招聘计划职位 ID:A90675职位描述项目内容介绍:人工智能和大模型数据智能服务项目。主要分为以下两个方向:1、GPT应用平台场景,打造企业级一站式大模型平台,提供先进的生成式AI生产及应用全流程开发工具链;支持了公司辅助营销、智能客服等众多智能化应用。2、整车行业智能化场景的解决方案,包括;研发和生产数字化、数字化营销和服务等。- 通过先进的数据分析和人工智能算法,实现生产资源的优化配置和生产流程的精细化管理;- 通过AI检测提高产品质量、提升生产效率、降低生产成本以及优化生产工艺;- 通过AI的数据挖掘和分析,为产品设计、制造、测试等环节提供决策支持;- 通过AI辅助生成营销文案,处理大量的客户咨询和服务请求,降低运营成本,提高效率等。职位描述:1. 深入参与公司在大模型、深度学习等前沿领域的研究和开发工作;2. 负责关键算法的设计、实现与优化,解决技术难题,提升产品性能;3. 与产品、工程团队紧密合作,确保项目的顺利推进;4. 跟踪业界最新学术论文与技术动态,进行技术预研和储备,为公司的发展提供有力支持;职位要求1. 2026年应届毕业生,硕士或博士学位;2. 熟练掌握Python等编程语言,熟悉深度学习框架(如TensorFlow、PyTorch等);3. 在人工智能、大模型、机器学习等领域有深厚的理论基础和丰富的实践经验;4. 在自然语言处理、计算机视觉等至少一个领域有深入研究和突出成果;5. 有重量级科研成果/学术论文/专利或国际顶级竞赛获奖;6. 有大型项目经验者优先;投递...

NIO  24 days ago
酷睿程 (CARIZON) jobs

湖仓开发工程师北京社招全职互联网 / 电子 / 网游职位描述-负责企业级数据湖仓平台的设计、开发与维护;-负责湖仓内数据建模、数据加工、数据采集、分层设计等工作,保证数据质量与一致性;-负责编写高性能ETL任务,维护Flink、Spark等计算任务的稳定运行;-负责元数据管理、数据质量监控、数据血缘分析、权限系统的设计与开发;-和业务方进行需求对接,完成业务数据到湖仓到使用的全链路工作;职位要求-计算机、大数据等相关专业,本科及以上学历;-精通Java、Python、Go等语言中一种或多种,具备良好的编码习惯;-熟练掌握Spark、Flink、Kafka、Hive、Doris等大数据组件,深入理解端到端一致性及具体实现,具备实时湖仓开发经验;-熟悉数据湖技术(如Iceberg)、湖仓分层、湖仓一体架构,深入理解ACID、Schema Evolution、Time Travel等核心特性及使用场景;-具备良好的沟通协作能力,主动性强,能独立定位和解决问题;-熟悉Iceberg、Flink、Doris等相关大数据组件源码者优先;-有自动驾驶领域的湖仓数据平台开发经验者优先。投递...

Premium Full-time
酷睿程 (CARIZON)  24 days ago

Subscribe for job alerts and resources to make your job search easier!

Confirmation email sent to

Check your email and click on the link to start receiving your job alerts

Receive the latest job openings for:

python spark

You also might be interested in:

实习生

开发工程师

Data Engineer

AI

ETL

Apache Spark

NoSQL

Data Quality

Data Engineering

Big Data

Confirmation email sent to

Check your email and click on the link to start receiving your job alerts

All Filters Apply
Sort by
Employer/Recruiter
Experience