基本信息
文件名称:2025年大模型注意力稀疏化计算专题卷答案及解析.docx
文件大小:16.28 KB
总页数:7 页
更新时间:2025-09-30
总字数:约7.74千字
文档摘要
2025年大模型注意力稀疏化计算专题卷答案及解析
一、单选题(共15题)
1.以下哪项技术可以显著减少大模型训练时的计算资源消耗?
A.分布式训练框架
B.参数高效微调(LoRA/QLoRA)
C.持续预训练策略
D.对抗性攻击防御
2.在注意力机制中,以下哪项技术可以有效地降低模型复杂度?
A.稀疏激活网络设计
B.卷积神经网络改进
C.梯度消失问题解决
D.集成学习(随机森林/XGBoost)
3.在模型并行策略中,以下哪项技术可以实现跨GPU的数据传输?
A.模型量化(INT8/FP16)
B.结构剪枝
C.模型并行策略
D.低精度推理
4.以下哪项技