大数据开发工程师实习生南京实习互联网 / 电子 / 网游职位描述1. 参与大数据平台的开发与维护，协助构建高可靠、高性能的数据处理系统；2. 协助开发和优化分布式计算任务（如Hadoop/Spark/Flink作业），提升数据处理效率；3. 参与ETL流程设计与实现，支持数据清洗、转换和加载；4. 协助数据仓库与数据建模工作，维护数据表结构和元数据管理；5. 学习并跟踪大数据领域新技术（如实时计算、湖仓一体等）。职位要求1. 学历专业：计算机、软件工程等计算机相关专业本科及以上在校生；2. 技术要求： - 了解至少一种大数据框架（Hadoop/Spark/Flink/Hive/Apache Hudi等）； - 熟悉SQL，有NoSQL数据库（如HBase/MongoDB）使用经验者优先； - 掌握Java/Scala中的至少一门编程语言； - 掌握Superset等数据分析工具，了解方法； - 对Linux基础命令和Shell脚本有一定了解；3. 加分项： - 接触过数据仓库（如Hive/Apache Hudi）、消息队列（Kafka）或实时计算技术； - 参与过数据处理或分析相关项目（如竞赛、科研、开源项目）；4. 个人素质：逻辑清晰，学习能力强，具备团队协作精神，对大数据技术有热情。实习收获：- 深入实战学习业界主流大数据技术栈；- 接触真实业务场景下的海量数据处理挑战；- 获得资深工程师一对一指导及转正机会。投递...
大数据开发工程师上海正式研发25届春招（研发类）职位描述1. 负责流批一体大数据平台架构和数仓模型搭建，保障数据准确性、一致性和稳定性；2. 负责离线和实时数仓建设，满足数据在BI报表、数据服务、算法训练各业务场景的需求；3. 深入学习和理解业务，根据业务发展阶段和需求，与团队一起设计并实践系统性的解决方案。职位要求1. 全日制本科及以上学历，计算机相关专业；2. 精通数据结构和算法，对计算机网络、操作系统、数据库系统底层原理有比较深入的理解；3. 熟悉若干种大数据工具的使用：Kafka、Flink、Doris、Elasticsearch、Milvus、Hive、HBase、Redis等；4. 熟悉linux操作命令，Java、Python编程语言，Git等代码管理工具，对大数据平台架构和底层原理有浓厚兴趣；5. 热爱大数据和算法工作，具备快速学习、良好沟通，逻辑思维能力，有创新思维和自驱力。投递...
高级爬虫工程师北京、上海社招全职研发 - 大数据职位描述1、负责爬虫策略与方案制定，爬虫系统架构设计与开发；2、负责网站、APP等大规模文本、图片数据抓取，爬虫核心算法优化，提升爬虫效率和质量；3、进行多平台信息分析，参与企业数据建设。职位要求1、3年以上开发经验（爬虫），计算机相关专业优先；2、有过爬虫平台化建设经验（0-1）优先；3、至少熟悉并使用过一种主流爬虫架构，如Scrapy、Gocolly、Webmagic等；4、有分布式爬虫或熟悉app逆向、反编译经验者优先；5、熟练掌握Python/Go/JavaScript等至少一种语言；熟练使用Go语言者优先；6、熟悉HTTP、TCP等网络协议，精通httpClient/jSoup/xpath/正则表达式/验证码加密处理/代理池等爬虫相关技术；掌握fiddler、charles等抓包工具；7、熟悉Mysql、Nosql数据库设计，熟悉Redis技术和ElasticSearch；了解Hadoop、HBase、HDFS、Kafka等大数据相关知识。投递...
Java开发工程师常州、南京全职生产 / 制造 / 加工职位描述1.系统设计与架构规划:1).负责设计和规划复杂的应用系统架构,确保系统具有高可用性、高可扩展性和高性能2).制定技术选型方案,包括选择合适的框架、数据库、中间件等。3).定义系统的接口规范、数据模型和业务流程。2.技术领导与团队管理:1).领导技术团队,指导开发人员进行技术选型和代码实现。2).解决技术难题,提供技术支持和培训。3).参与项目管理,做好过程管理和绩效考核确保项目按时交付。3.性能优化与故障排除:1).对系统进行性能优化,提高系统的响应速度和吞吐量。2).快速定位和解决系统故障,确保系统的稳定性。4.架构重构与优化:16:011).对现有技术架构进行重构和优化,以提升系统的性能和可维护性。2).根据业务发展需求,不断调整和完善系统架构。5.技术文档编写与评审:1).编写系统架构设计文档、技术选型文档等,确保团队成员对系统架构有清晰的认识2).参与技术文档的评审工作,确保文档的质量和准确性。6.跨部门沟通与协作:1).与产品经理、项目经理、测试人员等其他部门进行有效沟通和和协作,确保项目的顺利进行。2).协调不同部门之间的资源分配和工作进度,确保项目按时交时。职位要求1、计算机或相关专业本科以上学历,有大型制造业甲方架构师经验,至少8年以上互联网J2EE开发经验;2、独立承担起海量数据并发系统技术架构能力及业务规划能力;3、具备非常强技术和业务架构意识、JAVA基础扎实、理解IO、多线程、对处理大流量高并发技术非常熟悉;4、具备高负载/高并发/高可用架构经验;5、熟悉SSI、SOA、MQ、集群任务等开源框架及了解其原理和实现机制、熟悉Mysql、Redis、Hbase等大数据存储分析;6、熟悉Linux操作系统常用命令思路清晰、善于思考、能独立分析和解决问题;7、熟悉软件工程、设计模式、编程规范、熟练掌握UML流程计设计,有过程控制意识;8、善于学习和与人沟通、为人正直、诚信、有较强的事业心、具有分析、解决应用问题的能力;9、项目管理经验:有效地管理项目进度和资源,做好过程管控,确保项目按时按质完成。10、具备出色的架构设计思维、技术决策能力以及跨团队协作能力;16:01投递...
【中国】资深系统运维（IDC运维）上海全职职位描述一、岗位概述IDC运维工程师负责保障数据中心基础设施及IT系统的稳定运行，涵盖硬件维护、系统监控、故障处理、网络管理、安全管理等核心职责。需具备跨领域技术能力，适应7×24小时轮班或应急响应机制，确保数据中心高可用性。二、核心职责1.基础设施运维①负责机房服务器、存储设备、网络设备（交换机、路由器、防火墙）的物理安装、配置及日常巡检。②监控电力、制冷、消防等环境系统，确保符合数据中心运行标准（如温度、湿度、供电稳定性）。③管理设备上下架、综合布线，协调施工方完成机房整改或扩容项目。2.数据库优化备份①执行数据备份策略，定期验证备份数据的完整性与可恢复性。②制定数据库优化管理方案，保障数据库稳定运行。（oracle、mysql等主流数据库）③参与制定灾备方案，组织应急演练，确保业务连续性。3.系统运维及云、虚拟化①安装、配置及优化主流操作系统（Linux/Windows）及虚拟化平台（VMware）。②管理公有云资源，云服务配置及维护。（阿里、腾讯、火山等主流云平台）。③使用Ansible等工具实现配置管理自动化、编写Shell/Python脚本优化日常任务。4.监控与故障处理①通过Zabbix、Nagios等工具实时监控服务器性能（CPU、内存、磁盘I/O）、网络流量及业务应用状态。②快速响应硬件故障（如磁盘损坏、电源故障）、软件崩溃或网络攻击，执行数据恢复或系统回滚操作。③编写故障分析报告，总结根因并推动预防措施落地。职位要求1.技术能力①精通Linux系统管理，熟悉文件系统、权限控制及服务配置。②精通数据库运维管理，如oracle，mysql等。③精通虚拟化技术，如vsan等。④了解分布式系统（Hadoop、HBase）或容器技术（Docker、Kubernetes）者优先。2.工具与脚本①熟练使用监控工具（Prometheus、Grafana）及自动化运维平台。②具备Shell/Python脚本编写能力，能独立完成任务调度或数据清洗。3.软技能①良好的跨部门协作能力，能清晰传达技术方案至开发、测试或业务团队。②具备高压环境下的问题解决能力，通过时间管理平衡紧急任务与长期优化。4.资质与经验①计算机、网络通信相关专业优先。②3年以上IDC运维经验，熟悉数据中心，有数据中心建设经验或备份容灾实施经验者优先。③有oracle认证优先。投递...
Please complete the attached Internal TransferRequest Formand submit. Please make sure to apply with your Coupang e-mail address. Company Introduction We exist to wow our customers. We know we’re doing the right thing when we hear
Company Description Do you want beneficial technologies being shaped by your ideas? Whether in the areas of mobility solutions, consumer goods, industrial technology or energy and building technology - with us, you will have the chance
【27届实习】数仓开发工程师 热招 上海、杭州 实习 技术类 2027届实习生项目 职位描述 2027届实习生项目：面向27届毕业生（毕业时间2026年9月-2027年8月），为符合岗位要求的同学提供转正机会；1、负责数据仓库与业务需求口径对接和确认工作； 2、参与数据仓库的模型结构设计、负责ETL mapping逻辑映射及开发，管理元数据；3、负责海量空间数据的清洗、处理工作；4、参与维护大数据、数仓维护，并能快速高效解决遇到的问题, 保障数仓平台正常稳定运 行；5、完成上级交办的其他工作。 职位要求 1、2027届毕业生，本科及以上学历，计算机、通信、统计学等相关专业优先；2、熟悉掌握MySQL, hadoop、hive、hbase、MapReduce、Flink、Kafaka、Kylin等大数据相关技术；3、熟悉数仓维度建模；4、精通各类SQL，熟悉性能调优。5、熟悉Python编程，掌握Java/Scala其中至少一种，能够编写脚本解决日常问题；6、熟悉阿里云dataworks优先。 投递...
【数据平台】离线数据开发专家 上海 全职 研发 - 大数据 技术类 职位描述 1、负责得物电商交易、社区、供应链等多个业务的离线数据仓库构建，如数据模型的设计，ETL实施，性能优化以及相关技术问题的解决；2、深入各个业务，合理建设指标体系、报表体系，与业务紧密合作，探索业务场景下的数据解决办法；3、参与数据治理工作，提升数据易用性及数据质量，做好数据资产沉淀，发挥数据价值。 职位要求 1、3年以上数据仓库经验，熟悉数据仓库模型设计与ETL开发经验，掌握维度建模设计方法，具备海量数据加工处理（ETL）相关经验；2、熟悉数据仓库领域知识体系和技能，对数据采集、数据融合、数据质量、数据应用链路有深入理解；3、具有一定数据模型和数据架构基础，熟悉大数据生态，包括但不限于Hadoop/Hive/HBase/Spark等; 4、精通SQL，有一定的SQL性能调优经验，熟悉Hive SQL的开发；5、能自我驱动，有较强的沟通能力及团队合作精神，强烈的责任感及进取精神。 投递...
【数据平台】实时数据开发专家 上海 全职 研发 - 大数据 技术类 职位描述 1、负责公司电商交易、社区、供应链等业务的实时数据仓库的开发与优化，建设数据中台为业务赋能；2、负责实时指标计算的数据建模、架构设计与开发；3、参与多方业务合作，深入业务解决问题，提出数据侧的解决办法。 职位要求 1、至少3年实时数仓相关工作经验；2、深刻理解计算机原理，有良好的数据结构和算法基础，扎实的编程能力；3、熟悉Kafka/Flink/Druid/HBase/Doris 等实时计算引擎的开发和使用；4、具有快速定位问题的能力和较强的学习能力；5、能自我驱动，有较强的沟通能力及团队合作精神，强烈的责任感及进取精神。 投递...
【技术保障】大数据SRE工程师 上海、杭州 全职 互联网 / 电子 / 网游 - 研发 技术类 职位描述 1.负责大数据平台、算法平台相关业务链路运维工作；2.负责处理大数据生态稳定性等问题，保障集群高效、稳定、经济运行；3.与开源社区保持交流，发现对业务场景有帮助的特性并引入生产环境，或将经内部验证的特性贡献到社区。 职位要求 1.对技术有追求，能够刨根问底的搞定技术问题；2.熟悉hdfs/yarn/hbase大数据系统原理及部分组件源码；3.熟悉K8S相关运维；4.具备规模化大数据集群的故障诊断与性能优化能力；5.具备大规模跨集群、跨机房迁移经验者优先；6.有高度的责任心，良好的学习和自我驱动能力。 投递...
数据湖引擎研发专家 上海、杭州 全职 互联网 / 电子 / 网游 - 研发 技术类 职位描述 1、深度参与数据湖存储内核的架构设计与研发，包括分布式日志、列式流存储、KV存储、存算分离架构等；2、在得物打造数据湖产品服务，支撑大规模商业化落地；3、构建“湖流一体”的数据标准和生态，推动 Flink、Spark、StarRocks、Trino 等开源引擎的深度集成。 职位要求 1、具备3年以上大数据计算引擎、数据库内核或分布式系统研发经验，具备复杂系统架构设计与技术攻坚能力;2、熟悉分布式存储、日志系统（如 Kafka、Pulsar）、KV系统（如HBase）、数据湖存储（如 Paimon、Iceberg）等技术原理，有内核开发经验者优先；3、扎实的计算机系统基础与编程能力，精通 Java 或 C++/Rust 系统开发经验者优先；4、具备强烈的技术热情、ownership 和工程落地能力；具备良好的团队协作与跨团队沟通能力，能够在多方协作环境中高效推进技术方案落地；5、有开源项目贡献经验者优先。 投递...
Java开发工程师（SDK服务端） 上海 全职 研发 - 后端开发 职位描述 职位要求：1、负责游戏发行中台、充值中心、账号体系、用户标签画像等核心系统的需求分析、设计、开发、测试、上线维护和持续优化；2、负责核心模块代码编写，确保代码质量、性能、安全性、可维护性和长期演进能力；3、参与国内外充值、支付数据对账、账号登录、用户画像、用户行为分析等复杂业务场景建设；4、参与核心链路稳定性建设，包括容量评估、限流降级、监控告警、故障演练、问题复盘、性能优化和技术债治理；5、与产品经理、运营、业务部门和客户端团队紧密沟通，准确理解业务需求并转化为可落地技术方案；6、负责编写和维护设计文档、接口文档、排障手册、监控指标和上线预案。任职要求：1、计算机科学、软件工程或相关专业，本科及以上学历，5年及以上Java开发经验；2、具备扎实的Java服务端开发能力，熟悉面向对象编程、常用设计模式、工程质量和代码可维护性；3、熟练掌握Spring Boot、Spring Cloud、MyBatis等主流Java技术体系；4、具备 C 端高并发或核心交易链路经验，熟悉账号体系、用户画像、用户行为分析、国内外充值中心、支付数据对账或稳定性建设中的多个方向；6、精通MySQL、Oracle等关系型数据库，具备良好的数据库设计能力和SQL优化能力；7、熟悉Redis、RabbitMQ/Kafka、Elasticsearch、HBase等中间件的使用场景和基本原理；8、熟悉Linux常用操作，能够进行部署、日志分析、性能排查和线上问题定位；9、具备强owner意识和稳定性意识，能主动识别风险、补齐监控、推动复盘并沉淀长期机制。 投递...
数据平台架构师 热招 上海、杭州 全职 研发 职位描述 1、负责企业级大数据平台体系的建设，设计高可用、高性能、稳定可靠的数据平台架构方案，支撑企业级数据仓库和数据治理的落地，保障平台稳定高效运行、支撑业务发展； 2、负责数据平台整体技术架构体系的建设和优化，包括括数据湖、数据仓库、数据中台、实时计算平台等核心组件的规划与建设改进数据研发流程，提升数据研发质量；3、完善数仓的数据合规建设，优化数仓存储计算性能；4、作为技术领域专家，制定团队技术规范、开发标准和最佳实践，承担技术难题攻关，跟踪行业前沿技术趋势，持续驱动技术创新。 职位要求 1、计算机相关专业本科及以上学历，5年以上数据平台研发经验。 2、精通数据平台和仓库建设理论，有企业级数据仓库搭建和数据治理经验。 3、对批流一体、数据湖等业内前沿方向有深刻理解，有实际落地经验者优先。 4、熟悉大数据生态相关技术，如Hive、Doris、ClickHouse、iceberg、HBase、Spark、Flink、Kafka等，另外熟悉SQL、Python、Java、Go等编程语言 5、有Linux系统的基础运维能力，熟悉K8S容器编排基本概念、原理、组件、工具 。6、良好的业务理解力，较强的自驱力，热爱技术，结果导向。 投递...
车载测试（仪表、T-box、导航、ADAS） 保定 全职 研发 - 测试 职位描述 职责描述：对自动驾驶数据闭环系统的数据测试，包括1. 基于自动驾驶大数据处理平台（例如Hadoop/Spark），利用数据挖掘、机器学习等相关算法，解决自动驾驶业务需求，为自动驾驶评测、功能迭代，运营决策提供测试支持2. 用java/python/shell/javascript其中至少一种编程语言，能够开发自动化测试脚本完成数据验证3. 负责自动驾驶领域的数据测试，从场景，评价，用户，运营等多个维度挖掘数据价值，发现数据和业务背后规律，应用于产品研发、用户运营、商业等各种领域4.有hadoop, hive,Zookeeper,Hbase,Spark,ElastivSearch,Kafka,Flink,flume等分布式开源软件测试和应用经验。掌握基于分布式系统的ETL，数据仓库，BI报表的测试流程及方法。 职位要求 任职要求：1、具备数据一致性、完整性、准确性、安全性测试设计及实施经验2、具备处理大量数据和复杂算法的测试技巧，包括不限于能编写针对数据化产品类的自动化框架和脚本3、具备良好的数据分析和问题解决能力，能够快速定位问题，提出解决方案，同时具备良好的沟通能力，能有效地与开发团队、产品团队和其他测试团队合作4. 具备扎实的测试理知识，有测试需求分析经验能独立设计数据相关和编写测试用例5.熟悉Mysql/mongoDB，熟练掌握SaL,具备较强的思维逻辑能力，可完成复杂查询。6.有hadoop, hive,Zookeeper,Hbase,Spark,ElastivSearch,Kafka,Flink,flume等分布式开源软件测试和应用经验。掌握基于分布式系统的ETL，数据仓库，BI报表的测试流程及方法。7.熟练使用java/python/shell/javascript其中至少一种编程语言，能够开发自动化测试脚本完成数据验证8、3年以上相关工作经验，有汽车行业相关云平台、数据闭环平台、互联网或智驾相关领域经验者优先；9、面试优秀者，学历可放宽至专科 投递...
高级大数据研发工程师 北京 社招 全职 职位 ID：A94598 职位描述 1、负责小爱内容资源数据流及数据服务建设；2、负责小爱内容数据、搜索推荐服务架构优化；3、负责小爱用户画像、LLM通用知识库建设。 职位要求 1、熟悉大数据相关技术：Spark/Flink/Hadoop/HBase/Hive/Iceberg等；2、熟练使用Java、Scala、Python语言中的一种或者多种，熟悉java常见数据结构、多线程并发、JVM等；3、熟悉常用基础组件：Mq/Redis/Es等；具备数据库系统理论知识，熟悉Mysql/Tidb等，精通SQL；4、有过分布式、高并发业务系统搭建经验优先；5、熟悉大模型(LLM)技术，对向量数据库、RAG等有过深入调研优先；6、责任心强，具有较强的学习、沟通和问题解决能力。 投递...
高级存储研发工程师 武汉 社招 全职 职位 ID：A238433 职位描述 负责分布式存储系统的设计和开发，保障系统在高并发场景下的高效、稳定；支持业务存储需求，帮助用户改善存储产品使用体验； 职位要求 本科及以上学历，5年以上相关研发工作经验；熟练掌握常用的数据结构和算法，编程能力过硬；熟悉Linux操作系统原理，掌握常见网络、多线程模型及性能优化方法；具有Linux平台下C/C++/Golang编程经验；熟悉Redis、LevelDB/RocksDB、TiKV、HBase、MySQL等一种或多种存储系统原理；有技术钻研热情，问题定位能力、学习能力强，良好的沟通能力和团队合作能力；具有以下条件者优先：有大规模分布式存储系统研发经验开源社区的活跃贡献者 投递...
资深数据开发工程师/专家 武汉、上海 社招 全职 数字技术 - 软件研发 本科及以上 7-10 年 职位描述 - 负责公司级核心数据资产的规划和建设，支撑核心业务场景设计和开发落地 - 负责支撑AI的数据基座设计与开发，支持基于向量数据库，知识图谱的语义知识搭建和优化 - 参与数据产品与应用的数据研发，发掘数据商业价值，和产品技术团队一起打造极致体验的数据产品 - 为海量数据处理和分析提供高效解决方案，落地实时和离线需求，为基础开发者提供可靠技术支持 - 结合业务方向，深度挖掘数据需求，形成技术方案和标准，探索行业前沿技术 职位要求 - 大模型与Agent相关的行业落地经验，如大模型应用开发，Agent系统，RAG等 - 掌握维度建模设计方法，具备海量数据加工处理（ETL）经验，具备良好的SQL性能调优能力 - 熟悉数仓领域知识和技能，包括但不局限于：数据集市设计，元数据管理，数据质量 - 精通Spark，FLink 数据开发框架，有丰富实时数据的实际开发和性能调优经验 - 熟悉Hadoop，HBase，Kafka，ElasticSearch，Presto，Redis等大数据技术体系 - 熟悉Clickhouse,Starrocks,Hologres等OLAP引擎技术细节者优先 - 熟悉Iceberg，Hudi，Paimon
ONVO-数仓工程师 上海 社招 全职 用户与服务 本科及以上 3-5 年 职位描述 1. 负责公司级核心数据资产的规划和建设，支撑核心业务场景设计和开发落地；2. 负责支撑AI的数据基座设计与开发，支持基于向量数据库，知识图谱的语义知识搭建和优化；3. 参与数据产品与应用的数据研发，发掘数据商业价值，和产品技术团队一起打造极致体验的数据产品；4. 为海量数据处理和分析提供高效解决方案，落地实时和离线需求，为基础开发者提供可靠技术支持；5. 结合业务方向，深度挖掘数据需求，形成技术方案和标准，探索行业前沿技术。 职位要求 1. 大模型与Agent相关的行业落地经验，如大模型应用开发，Agent系统，RAG等；2. 掌握维度建模设计方法，具备海量数据加工处理（ETL）经验，具备良好的SQL性能调优能力；3. 熟悉数仓领域知识和技能，包括但不局限于：数据集市设计，元数据管理，数据质量；4. 精通Spark，FLink 数据开发框架，有丰富实时数据的实际开发和性能调优经验；5. 熟悉Hadoop，HBase，Kafka，ElasticSearch，Presto，Redis等大数据技术体系；6. 熟悉Clickhouse,Starrocks,Hologres等OLAP引擎技术细节者优先；7. 熟悉Iceberg，Hudi，Paimon 等数据湖技术细节者优先；8. 具备良好的沟通和团队协作能力，做事主动积极负责，有技术热情和激情面对挑战。 投递...
智能辅助驾驶-仿真云平台软件研发工程师 上海 社招 全职 数字技术 本科及以上 7-10 年 职位描述 - 负责智能辅助驾驶仿真平台底层架构设计开发，构建高可用可扩展可维护仿真平台化服务- 负责集群资源管理与任务调度方案，构建高性能仿真计算能力，提升仿真任务吞吐/时延能力 职位要求 - 熟练掌握JAVA、GO、Python、Shell、C++等其他一种或多种编程语言- 熟悉后端开发技术栈：springmvc、mybatis、负载均衡（ngix、lvs）、消息队列、缓存(redis)、常用数据库（MySQL、MongoDB），并具有实战项目开发经验- 熟悉Docker、Kubernetes等容器化技术，并有实战项目经验优先考虑- 熟悉GPU虚拟化技术，并有实战项目经验优先考虑- 有分布式系统、分布式计算开发和使用经验，或大数据处理经验，如HBase、HDFS、Spark、Ray等，优先考虑- 熟悉Linux系统原理，对虚拟化技术有深入理解优先考虑- 具有较强的学习能力和意愿、理解能力、沟通和协作能力，有良好的自省能力和自驱能力 投递...