职位列表
第 192 页,共 267 页
文本训练优化高级工程师
负责大模型预训练加速算法的研究与优化,涵盖MoE、多模态及创新架构等方向;针对MoE架构开展专项优化,包括Expert并行、负载均衡、通信优化等;研究并优化文本模型训练效率;探索Linear Attention、Memory Layer等新型架构的高效训练方案;设计并实现TP/PP/DP/EP/SP等并行策略,提升大规模训练的吞吐量与资源利用率;与算法团队协作,快速支持新模型架构的训练需求。要求硕士及以上学历,计算机、人工智能等相关专业...
多模态训练加速研发工程师(基础架构)
负责大规模分布式训练与推理基础架构的设计、开发和优化,支持千卡级大模型训练;针对多模态数据特点,通过分布式并行策略和通信优化技术支持长序列训练,解决训练效率瓶颈;构建和维护海量多模态数据的流式处理管道,支撑大规模预训练阶段的数据高速加载;负责多模态推理引擎的功能开发和性能优化,包括吞吐优化、时延优化和性能瓶颈排查。要求熟悉Transformer模型架构,精通Megatron-LM、DeepSpeed、Colossal-AI等训练框架之一...
多模态算法工程师
负责多模态大模型在预训练、SFT、对齐等各阶段的模型开发与训练,涉及模型高效结构、多模态 scaling law、数据配比、性能优化等方向的探索;参与多模态大模型的训练加速和高效部署,包括系统调优、硬件适配等工作;参与前沿多模态算法与应用的调研、研究创新,并将多模态 AI 能力应用于产品中。要求具备硕士及以上学历,三年以上算法开发经验、一年以上大模型相关经验,熟悉多模态大模型基本原理和至少一种深度学习框架,如 PyTorch,具备模型开...
多模态数据算法工程师
负责多模态大模型在预训练、指令微调、偏好对齐等阶段的数据建设工作,包括数据采集、数据入库、数据清洗、数据观测、数据挖掘等环节;负责多模态数据的闭环验证,建立从数据构造、模型训练到性能评测的全链路闭环体系,确保数据有效提升模型基础能力;参与训练数据全生命周期管理体系建设,支撑多模态大模型场景下海量训练数据的高效读取,提升模型训练工程效率;跟进业界最新技术与进展,结合实际场景落地,持续提升数据质量并挖掘数据价值。要求具备扎实编码能力,熟悉...
多模态大模型算法工程师
主导多模态大模型在预训练、SFT(指令微调)、RLHF(偏好对齐)等全阶段的数据体系建设,攻克海量多模态语料的智能采集、多维清洗、去重过滤、自动化标注与深度挖掘等关键问题;建立“数据合成与构造—模型训练—能力评测”的全链路闭环验证体系,通过数据消融与归因分析推动模型能力提升;参与设计并优化 PB 级多模态训练数据的全生命周期管理架构,提升海量数据吞吐与加载效率,支撑大规模分布式训练;持续跟踪并复现前沿技术成果,将数据端与多模态算法相关前...