岗位描述
岗位描述:负责多模态大模型(Vision-Language Model,VL/Omni)的研发与优化,重点面向端侧设备(移动端);设计与实现下一代端侧友好的模型结构,针对特定芯片进行算法与系统的协同设计;研究并落地低比特量化(w4a8、w2a16、fp8),协助完成异构硬件(如 NPU)的模型部署;支持下游多模态 Agent、端云 Agent 协同、场景对话、实时感知等业务需求;探索 VLM 在端上实时场景中的新应用。 岗位要求:熟悉主流 LLM、VLM、Diffusion Model 的原理与实现,深度学习基础扎实;熟悉 LLM、VLM 的预训练与后训练,熟悉模型压缩与加速技术(QAT、PTQ、fp8、蒸馏等);熟悉主流训练、推理、部署框架,如 Megatron、Deepspeed、vLLM、llama.cpp、TNN/MNN 等,并具有实际项目经验;具备良好的代码能力。加分项:熟悉使用 Cuda、Triton 等工具进行细粒度性能优化;系统性掌握前沿 LLM/VLM 的算法与训练方法论,包括 Scaling Law、MoE、Linear/Hybrid Attention、MTP 等。