工作职责:

-建设公司大数据数仓体系，包括批与流两类数据流建设
-深入理解业务系统，理解项目客户需求，设计和实现符合用户需求的大数据系统，确保项目顺利验收
-负责数据集成和ETL架构设计和研发
-研究大数据前沿技术，不断持续优化大数据平台，为业务提供价值

任职要求:

-本科及以上计算机、数据库、机器学习等相关专业，3年以上数据开发工作
-对业务数据有敏锐的理解能力，并能快速梳理和分析业务数据
-熟练掌握SQL语言、熟悉MySQL，对Shell、Java(Scala)、Python非常熟悉
-熟悉常用的ETL技术和原则；精通数据仓库数据库设计规范和实操；有丰富的spark，MR任务调优经验
-熟悉Hadoop、Hive、HBase、Spark、flink、kafka等大数据组件者优先
-对clickhouse，doris，TIDB等主流分析性数据系统熟练使用并有调优经验者优先
-语言能力要求：Base新加坡同学掌握英语优先；Base东京同学掌握日语优先