百联全渠道-AI数仓开发工程师当面告知

百联集团有限公司
2026-12-04 16:17:50
校招27届本科硕士

岗位详情

地区:

上海

专业要求:

数据科学计算机科学与技术软件工程数据科学与大数据技术

岗位职责:

一、岗位描述 1、参与集团级离线/实时数据仓库的架构设计与主题域建模,参与 ODS→DWD→DWS→ADS 分层体系建设与持续迭代; 2、参与业务条线(零售/会员/供应链等)数据模型规划、ETL 开发、任务编排与性能优化,保障核心数据资产的准确性、及时性与可复用性; 3、基于 Hadoop/Hive/Spark/Flink/Kafka 等生态组件,参与建设日志采集、数据同步、清洗标准化、明细/汇总加工的全链路数据管道; 4、参与推进数据治理工作,包括数据质量监控、血缘管理、口径统一及 SLA 保障;沉淀标准化的数据字典、指标体系与知识库,降低业务与技术的沟通成本; 5、参与推进数据资产的AI-Ready化改造,规范元数据语义、完善字段注释与业务上下文,为知识库检索、RAG(检索增强生成)及大模型应用提供高质量语料基础; 6、参与跟进湖仓一体、流批一体等数据工程演进方向,探索 Iceberg/Paimon、OLAP引擎及大模型驱动的数据分析场景落地。 二、岗位要求 1、本科及以上学历,计算机、软件工程、大数据、数据科学等相关专业优先; 2、扎实的 SQL 能力,熟悉复杂查询、窗口函数、执行计划分析与常见性能调优; 3、熟悉 Hadoop 生态(HDFS/YARN/MapReduce)、Hive/Spark SQL 离线数仓开发;了解 Flink/Kafka 实时数据处理链路,具备流批一体意识者优先; 4、了解维度建模方法(星型/雪花模型、事实表/维表设计、SCD),理解数仓分层与主题域抽象,能在指导下完成业务模块的模型设计; 5、具备编码能力,熟练掌握 Java、Scala、Python 中至少一门,能用 Shell 编写自动化脚本;有 Spark/Flink 作业调优、数据倾斜处理经验者优先; 6、了解 DataX/Kafka Connect/Airflow/DolphinScheduler 等同步与调度工具,理解任务依赖、分区、幂等重跑等基本工程概念; 7、对业务有好奇心,能快速理解业务过程并映射为数据模型;具备良好的文档与结构化表达能力,有数据知识库、数据字典或元数据平台建设经验者优先; 8、加分项:了解 RAG、知识图谱、向量数据库等大模型相关技术原理,理解高质量结构化数据对 LLM 应用的重要性;有 AI-Ready 数据集建设或大模型数据预处理实践经验者优先。

招聘要求:

1、本科及以上学历,计算机、软件工程、大数据、数据科学等相关专业优先; 2、扎实的 SQL 能力,熟悉复杂查询、窗口函数、执行计划分析与常见性能调优; 3、熟悉 Hadoop 生态(HDFS/YARN/MapReduce)、Hive/Spark SQL 离线数仓开发;了解 Flink/Kafka 实时数据处理链路,具备流批一体意识者优先; 4、了解维度建模方法(星型/雪花模型、事实表/维表设计、SCD),理解数仓分层与主题域抽象,能在指导下完成业务模块的模型设计; 5、具备编码能力,熟练掌握 Java、Scala、Python 中至少一门,能用 Shell 编写自动化脚本;有 Spark/Flink 作业调优、数据倾斜处理经验者优先; 6、了解 DataX/Kafka Connect/Airflow/DolphinScheduler 等同步与调度工具,理解任务依赖、分区、幂等重跑等基本工程概念; 7、对业务有好奇心,能快速理解业务过程并映射为数据模型;具备良好的文档与结构化表达能力,有数据知识库、数据字典或元数据平台建设经验者优先; 8、加分项:了解 RAG、知识图谱、向量数据库等大模型相关技术原理,理解高质量结构化数据对 LLM 应用的重要性;有 AI-Ready 数据集建设或大模型数据预处理实践经验者优先。

公司介绍

百联集团有限公司

百联集团有限公司

百联集团有限公司,成立于2003-05-08,位于上海,法定代表人:叶永明,登记状态:存续,注册资本100000万人民币,公司类型:国有企业

百联集团有限公司成立于2003-05-08,法定代表人为叶永明,注册资本为100000万元人民币,企业地址位于中国(上海)自由贸易试验区张杨路501号19楼,所属行业为商务服务业,经营范围包含:国有资产经营,资产重组,投资开发,国内贸易(除专项审批外),生产资料,企业管理,房地产开发,食品销售。(除依法须经批准的项目外,凭营业执照依法自主开展经营活动)。百联集团有限公司目前的经营状态为存续(在营、开业、在册)。