基本信息
文件名称:2025年大模型分布式推理框架(含答案与解析).docx
文件大小:14.98 KB
总页数:10 页
更新时间:2025-09-06
总字数:约6.77千字
文档摘要

2025年大模型分布式推理框架(含答案与解析)

一、单选题(共15题)

1.在分布式推理框架中,以下哪个策略主要用于提高模型并行度?

A.数据并行

B.模型并行

C.硬件加速

D.混合并行

2.在大模型分布式推理中,以下哪种技术可以实现模型量化,降低计算成本?

A.INT8量化

B.INT16量化

C.FP16量化

D.双精度量化

3.以下哪种技术可以帮助减少大模型分布式推理过程中的通信开销?

A.模型剪枝

B.知识蒸馏

C.模型压缩

D.服务器端推理

4.在分布式推理框架中,以下哪个技术可以帮助解决梯度消失问题?

A.激活函数归一化

B.学习率调整

C