Job description
亮点 / Highlights: 美团正在全力投入大模型技术研发,LongCat 是美团自研的基座大模型。你将加入大模型数据工程团队,负责为语言模型和多模态模型的训练、迭代提供底层数据基础设施。这里有——
真实的超大规模场景:海量文本 + 多模态数据,日处理量达 PB 级别,日常应对万亿规模网页带来的技术挑战;
端到端的技术深度:从数据采集、清洗、标注到训练数据配比,深度参与大模型全链路研发;
与优秀算法团队并肩:和大模型算法工程师紧密协作,用数据工程驱动模型效果提升;
公司战略级投入:充足的资源、GPU 算力和技术探索空间。
你将获得:
技术成长:站在 AI 最前沿,积累从数据到模型的全链路工程经验;
影响力:你的工作直接影响美团大模型的训练效果和迭代速度;
视野:与资深算法科学家、架构师日常交流,快速拓宽技术视野。
岗位职责 / Duties: 1、设计和开发分布式大模型数据平台,提供高性能、可扩展的数据处理链路,支撑LongCat基座、语言模型和多模态大模型的高效训练迭代;
2、构建海量数据的全生命周期管理体系,提供元信息、数据血缘、存储治理、可视化与可观测能力;探索数据实验和数据发版的工程上限;
3、深入理解大模型训练流程和数据策略,抽象并开发高效、可靠的数据加工框架,显著提升算法团队的数据工程效率;
4、与算法工程师紧密配合,设计数据策略解决方案,用工程能力放大数据对模型效果的杠杆作用。