课程

低成本 DeepSeek R1 推理挑战与赤兔推理引擎实践

唐适之 · 授课老师

适合对象
公开课面向关注大模型推理、算力成本及私有化部署的行业听众;

围绕DeepSeek R1推理的算力需求和部署成本,介绍有限硬件资源下的推理取舍,以及赤兔推理引擎在更广泛GPU上的FP8推理优化实践。

课程内容

课程概览

围绕DeepSeek R1推理的算力需求和部署成本,介绍有限硬件资源下的推理取舍,以及赤兔推理引擎在更广泛GPU上的FP8推理优化实践。

课程大纲

  • DeepSeek R1与日益增长的算力需求

    有限硬件资源下的大模型推理取舍

    赤兔方案:更广泛GPU上的FP8推理优化

微信咨询

添加客服微信

选好课程后,可在微信中沟通培训内容、讲师和时间安排。

正在读取联系方式…

查看完整咨询说明 →