推理框架开发工程师当面告知
北京清微智能科技有限公司
2026-11-26 14:22:40
其他校招27届
岗位详情
地区:
北京
专业要求:
人工智能计算机科学与技术软件工程
岗位职责:
1、基于自研AI加速卡及相关软件栈,开发大模型推理框架,实现框架功能; 2、端到端调通大模型,优化推理性能、调试精度和准确率; 3、根据实际需求,承担部分算子的开发和优化工作; 4、开发服务接口、对接外部服务接口,按业务要求达成各种测试要求,实现大模型推理框架落地;
1、C++ , Python 编程熟练 ; 2、熟悉常用的大模型推理框架, 包括但不限于 vLLM /SGlang等,了解prefixcache/ chunkprefill/ continousbatching/ scheduler/ worker/ runner/ pd分离/ mtp等; 3、了解大模型网络结构的一种或多种,包括但不限于 deepseek系列/qwen3.6系列/qwen3/Llama等; 4、了解大模型常用 算子及优化方法,包括但不限于 各种 attention, GEMM , RoPE,通信算子等。 5、熟悉 MLIR 或 TVM;
招聘要求:
1、基于自研AI加速卡及相关软件栈,开发大模型推理框架,实现框架功能; 2、端到端调通大模型,优化推理性能、调试精度和准确率; 3、根据实际需求,承担部分算子的开发和优化工作; 4、开发服务接口、对接外部服务接口,按业务要求达成各种测试要求,实现大模型推理框架落地;
1、C++ , Python 编程熟练 ; 2、熟悉常用的大模型推理框架, 包括但不限于 vLLM /SGlang等,了解prefixcache/ chunkprefill/ continousbatching/ scheduler/ worker/ runner/ pd分离/ mtp等; 3、了解大模型网络结构的一种或多种,包括但不限于 deepseek系列/qwen3.6系列/qwen3/Llama等; 4、了解大模型常用 算子及优化方法,包括但不限于 各种 attention, GEMM , RoPE,通信算子等。 5、熟悉 MLIR 或 TVM;
公司介绍
北
北京清微智能科技有限公司
北京清微智能科技有限公司,成立于2018-07-26,位于北京,法定代表人:王博,登记状态:存续,注册资本4249.014814万人民币,公司类型:民营/私企
公司信息:公司名称:北京清微智能科技有限公司公司类型:公司性质:--公司地点:公司规模:--涉及领域:--公司网址: