【阿里云大模型高级工程师ACP习题集】2.9 大模型应用生产实践(上篇)

练习题

1. 【单选题】在自然语言处理的法务咨询场景中，以下哪种模型选择最为合适？
   A. 通用大语言模型
   B. 经过数学领域微调的模型
   C. 面向法律领域训练的模型
   D. 视觉模型

2. 【多选题】以下哪些属于模型非功能性需求？（ ）
   A. 模型对不同语言的支持能力
   B. 模型的响应速度要求
   C. 模型运行的成本预算
   D. 模型在高并发场景下的稳定性

3. 【单选题】在模型性能优化中，以下哪种方法不属于减少大模型处理请求数和运算量的策略？
   A. 使用上下文缓存技术
   B. 选择较小规模模型
   C. 合并或去除重复请求进行批处理
   D. 利用空闲资源进行批量推理

4. 【多选题】关于模型实时监控与预警，以下说法正确的是？（ ）
   A. 只需监控模型准确率，其他指标不重要
   B. 数据漂移检测能帮助发现输入数据与训练数据分布的差异
   C. 自动告警阈值设置得越低越好，以便及时发现问题
   D. 详细记录模型请求信息有助于定位问题根源

5. 【单选题】在建立评测基线模型时，以下哪种做法是合理的？
   A. 直接使用最复杂的模型作为基线
   B. 从简单的基础算法开始构建基线模型
   C. 不参考历史版本，完全重新构建基线模型
   D. 只在一种业务场景下构建基线模型

6. 【多选题】在成本优化中，优化系统性能节约成本的方法有哪些？（ ）
   A. 用大模型替换小模型
   B. 上下文缓存高频重复查询结果
   C. 批量推理合并或去重请求
   D. 增加token数量

7. 【单选题】对于对话、咨询、搜索类业务场景，以下哪个不是常用的性能评估数据集？
   A. ShareGPT
   B. MMLU
   C. HumanEval
   D. 以上都不是

8. 【多选题】在模型性能优化的用户感知优化方面，以下哪些方法可以减少用户等待时间？（ ）
   A. 流式输出
   B. 分块处理
   C. 展示任务进度
   D. 完善错误处理机制

9. 【单选题】在GPU实例规格选择中，不影响模型运行所需内存大小计算的因素是？
   A. 模型参数量
   B. 模型功能
   C. KV Cache占用
   D. 精度设置

10. 【多选题】在容灾性设计中，通用应用容灾方案包括以下哪些内容？（ ）
    A. 跨地域、跨可用区部署
    B. 创建备用环境
    C. 定期演练预测试
    D. 启用降级与熔断机制

11. 【单选题】在模型选择的评估方法中，若要测试模型的复杂推理能力，以下哪种公开数据集较为合适？
    A. MMLU
    B. BBH
    C. HumanEval
    D. LongBench

12. 【多选题】以下关于业务需求分析的说法，正确的是？（ ）
    A. 业务需求分析是大模型部署的第一步
    B. 业务场景不清晰可能导致模型选择错误
    C. 只需考虑功能性需求，非功能性需求不重要
    D. 不同业务场景对模型的功能性和非功能性需求差异大

13. 【单选题】在模型性能优化中，通过精简输入内容，要求模型生成简洁回答来减少Tokens的输入和输出，这种方法主要针对以下哪种需求？
    A. 系统性能提升
    B. 用户感知优化
    C. 成本优化
    D. 稳定性保障

14. 【多选题】在评测基线管理中，定期测试与对比包括哪些维度？（ ）
    A. 时间维度
    B. 空间维度
    C. 场景维度
    D. 模型维度

15. 【单选题】在成本优化的云上部署成本优化中，以下哪种计费方式适用于业务场景不稳定，对成本敏感的情况？
    A. 预付费（包年包月）
    B. 按量付费
    C. 抢占式实例
    D. 以上都不合适

16. 【多选题】在模型性能优化中，并行化处理包括以下哪些方式？（ ）
    A. 数据并行
    B. 模型并行
    C. 流水线并行
    D. 任务并行

17. 【单选题】在建立基线模型时，参考历史版本性能数据的目的是什么？
    A. 为了复用历史版本代码
    B. 为了快速构建基线模型
    C. 为了评估新模型的改进或退化情况
    D. 为了减少测试工作量

18. 【多选题】以下哪些属于模型实时监控与预警的关键指标？（ ）
    A. 模型准确率
    B. 模型响应速度
    C. 模型错误率
    D. 模型参数量

19. 【单选题】在自然语言处理的通用任务中，如开放域问答，通常使用以下哪种模型？
    A. 经过特定领域微调的模型
    B. 通用大语言模型
    C. 视觉模型
    D. 语音处理模型

20. 【多选题】在容灾性设计的降级与熔断机制中，降级是指？（ ）
    A. 暂时停止对故障模型的调用
    B. 切换至备份模型
    C. 采用简单的规则引擎来提供兜底服务
    D. 对故障模型进行修复

21. 【单选题】已知某模型在FP8精度下，参数量为300亿，每个参数占用4字节，计算该模型本身占用显存约为多少GB？（ ）
    A. 11.25
    B. 12
    C. 22.5
    D. 24

22. 【多选题】在模型性能优化中，用户感知优化的方法有（ ）
    A. 完善错误处理机制，设置自动重试和错误降级方案
    B. 提供用户反馈入口，持续改进系统
    C. 展示任务进度，让用户了解系统处理情况
    D. 采用模型压缩与量化技术加速推理

23. 【单选题】以下关于自动化扩缩容的说法，错误的是？
    A. 水平伸缩计算资源可以利用弹性伸缩（ESS）动态调整ECS/GPU实例数量
    B. 函数计算（FC）可以按需分配资源，实现自动化扩缩容
    C. 自动化扩缩容只能提升系统性能，对成本优化没有帮助
    D. 负载均衡（SLB）可以分散流量压力ÿ