独角兽

多模态训练框架算法工程师

智谱AI

地点待补充算法社会招聘

岗位描述

岗位描述:参与 GLM 系列多模态大模型,以及 CogVLM、CogView、CogVideo 系列多模态理解与生成模型的训练框架研发与优化。 岗位要求:统招硕士及以上学历,计算机或相关专业;熟练掌握 Pytorch,具备模型训练经验;熟悉 Transformer 结构,了解 BERT、GPT、ViT、CLIP 等常见模型的训练方法;具备模型迁移、精度对齐经验,能够在新框架中适配新的模型;了解常见大模型训练优化方法,能够根据需求快速熟悉、掌握并进行修改;对 Megatron 框架有一定了解,能够借鉴其他框架持续完善和优化现有框架。