大模型推理优化实习生当面告知
中科寒武纪科技股份有限公司
2027-01-03 22:16:15
其他28届实习
岗位详情
地区:
北京市
专业要求:
电子信息工程自动化
岗位职责:
1、参与分布式推理系统建设,提供行业领先的LLM/多模态模型解决方案;
2、针对大语言模型(LLM)、视觉生成(如Diffusion Models)等场景,开展端到端推理性能优化,重点降低推理延迟、提升吞吐量;
3、深度优化推理框架,提升框架在异构硬件上的扩展性与易用性;
4、开发自动化性能分析工具,实现推理瓶颈的快速定位与优化建议生成。
招聘要求:
1、计算机、电子工程、自动化、数学等相关专业优先,2028届在校生;
2、熟悉linux环境下 C++/Python编程,具备CUDA/BANGC等异构编程经验;
3、了解LLM或者视觉生成模型原理:
a)大模型推理框架:vLLM/SGLang/FasterTransformer/TensorRT-LLM
b)视觉生成系统:Diffusers/ComfyUI/xDiT
5.深入理解量化、kvcache、多机多卡并行等加速技术;
6.实习时长需满足6个月,每周出勤4天及以上。
*此岗位有笔试环节,请同学关注邮箱动态。
公司介绍

中科寒武纪科技股份有限公司
中科寒武纪科技股份有限公司,成立于2016-03-15,位于北京,法定代表人:陈天石,登记状态:存续,注册资本41835.0224万人民币,公司类型:民营/私企
公司信息:
公司名称:中科寒武纪科技股份有限公司
公司类型:
公司性质:--
公司地点:
公司规模:
涉及领域:--
公司网址: