工作职责:
-负责大数据平台的架构设计与开发,包括数据仓库建设、数据管道搭建、数据治理等
-设计并优化大规模数据处理作业,保障数据链路的稳定与高效
-与产品、算法团队协作,为AI模型训练与业务分析提供高质量数据支撑
-推动数据中台能力建设,提升数据资产管理与复用效率
-探索AI技术在数据质量检测与智能ETL中的应用
任职资格:
-本科及以上学历,计算机、统计学等相关专业优先
-熟练掌握SQL,熟悉Spark、Flink、Hive等大数据技术栈
-掌握Python/Java/Scala中至少一种编程语言
-有大数据平台开发或数仓建设相关经历者优先
-有数据库内核、分布式存储相关经验者优先
-了解Windows、Unix、Linux等主流操作系统原理,熟练运用系统层支持应用开发
-技术视野开阔,有强烈的上进心和求知欲,善于学习和运用新知识,勇于解决难题