Job description
【岗位职责】 工作职责: 1、负责基于Flink、Hudi、Paimon等构建中国联通BOM域海量数据实时湖仓。 2、负责基于Flink的海量实时数据的处理、分析、统计和挖掘。 3、负责基于大数据的AI数据集建设。 4、负责建设公司核心数据资产,保障相关数据质量。 5、负责制定相关技术规范和使用规范。 【任职要求】 任职要求: 1、学历:国内外硕士研究生及以上学历。 2、专业要求:计算机、软件工程、信息通信、数学等相关专业。 工作技能要求: 1、熟悉Linux,掌握主流开发语言、工具和业务流程,熟练掌握Scala、java、C++、Python等1至2种编程语言。 2、熟悉Flink、Hudi、Paimon等大数据技术,有丰富的实时湖仓建设。 3、熟悉Kafka、RocketMQ、ActiveMQ等消息中间件者优先。 4、熟练掌握Flink SQL者优先。 5、熟悉通用基础大模型、有AI数据集建设经验者优先。 6、有过海量数据系统开发经验者优先。