岗位职责：一、专业基础 了解数据仓库基础概念，分清 ODS/DWD/DWS/ADS 分层思想，理解数仓建模基本思路。 二、技术技能 1、数据开发基础 SQL：熟练 MySQL/Hive SQL，掌握多表关联、子查询、窗口函数、数据优化，能独立编写复杂统计 SQL； 大数据组件 了解 HDFS 文件存储原理、YARN 资源调度； 了解 Kafka 基础概念：生产者、消费者、分区，能看懂简单消息链路； 了解 Hive 建表、分区、分桶、数据导入导出； Spark：理解 RDD、DataFrame 算子，会使用 PySpark 完成数据清洗、指标统计，了解 Spark 任务调优基础常识。 2、项目运维 & 调试 能使用 Linux 常用命令（文件操作、进程查看、日志查看），看懂服务器报错日志、排查简单任务异常； 了解 ETL 流程：数据抽取、清洗、转换、落地，配合完成数据同步、任务调度； 会使用 Git 进行代码管理、分支提交； 具备问题排查能力：代码报错、数据对不齐、任务运行失败的定位与调试。 3、加分项 了解 DolphinScheduler调度、Doris、Sqoop 数据同步、数据质量校验、爬虫基础。 三、工作内容 协助开发 PySpark、Hive 数据脚本，完成数仓分层数据加工； 负责数据清洗、异常数据排查、指标核对； 协助日常任务部署、调度运维、文档编写。 基础信息：工作地点：哈尔滨；学历要求：本科；经验要求：经验不限；岗位类型：实习；实习月数：6；每周到岗天数：5；提供实习证明：否；可转正：否 岗位标签：MySQL；HIVE SQL；数据治理；数据库开发；数据挖掘