基本信息
文件名称:2025年大模型梯度压缩通信优化测试题答案及解析.docx
文件大小:15.42 KB
总页数:7 页
更新时间:2025-09-25
总字数:约6.67千字
文档摘要

2025年大模型梯度压缩通信优化测试题答案及解析

一、单选题(共15题)

1.以下哪项技术能够在不牺牲模型性能的情况下,显著减少模型参数量?

A.知识蒸馏

B.结构剪枝

C.模型并行策略

D.低精度推理

2.在分布式训练框架中,以下哪种方法可以有效减少通信开销?

A.参数服务器

B.All-reduce算法

C.数据并行

D.模型并行

3.以下哪项技术可以解决梯度消失问题,提高模型训练效果?

A.ReLU激活函数

B.Dropout正则化

C.BatchNormalization

D.残差网络

4.在模型量化过程中,以下哪项技术可以实现INT8量化而