职位题库

大模型算法工程师面试题库

面向大模型算法工程师相关面试,围绕强化学习、GRPO、系统设计、Agent、Transformer等主题展开练习,结合题目考察点、回答思路、参考答案和常见误区,梳理知识要点并练习清晰表达。

114 道题目建议用时 342 分钟专项面试练习

全部题目 114 道题

25

项目的数据方案是如何确定的,有没有调研过公开数据集作为替代?

考察候选人对数据构建流程的理解,包括数据来源、清洗、标注方案,以及是否考虑过公开数据集替代,评估其数据敏感度和工程权衡能力。
26

你接触过哪些RL算法,DAPO对比GRPO,主要解决了哪些痛点?

考察候选人对强化学习算法(特别是DAPO和GRPO)的理解深度,包括算法原理、改进点及适用场景。
27

挑选强化学习算法时,你一般会重点考量哪些因素?

考察候选人在实际项目中选择RL算法时的决策框架,是否综合考虑任务特性、训练成本、稳定性等因素。
28

什么场景需要做上下文压缩,它和任务文本长度之间有什么关联?

考察候选人对上下文压缩技术的理解,包括适用场景、与文本长度的关系,以及压缩对模型效果的影响。
29

简述多模态大模型的整体核心架构与组成模块

考察候选人对多模态大模型整体架构的系统性理解,能否清晰拆解视觉编码器、模态对齐模块与语言模型等核心组件及其协作关系。
30

详述主流视觉语言Adapter的类型与核心功能,并说明Q-Former的原理与应用场景

考察候选人对视觉语言Adapter家族的理解深度,尤其是Q-Former的查询机制、训练目标及适用场景。
31

详解自注意力Self-Attention底层原理,并解释缩放因子与多头注意力的作用

考察候选人对Transformer核心机制的掌握程度,包括QKV计算、缩放原因和多头设计动机。
32

对比MHA、MQA、GQA三种注意力机制的差异,重点分析推理速度与显存占用

考察候选人对注意力机制变体在推理阶段KV Cache显存与速度影响的理解,能否从工程角度做量化分析。
33

解析PagedAttention技术原理,说明其是否能够降低显存占用及背后核心原理

考察候选人对PagedAttention分页管理KV Cache机制的理解,能否区分显存碎片优化与显存总量降低。
34

详细解释困惑度PPL的物理意义;拓展说明模型预训练阶段常见的概率类评估指标与计算公式。

考察对困惑度物理意义的理解,以及预训练阶段概率类评估指标的掌握程度。
35

阐述 Mid-Train 中间训练阶段的核心作用,对比该阶段与预训练、微调阶段在参数配置、训练策略上的差异。

考察对Mid-Train阶段的理解,以及其与预训练、微调阶段的区别。
36

结合个人论文项目,说明冷启动模块与强化学习RL流程之间的过渡设计,拆解整体思路与解决的痛点。

考察候选人在实际项目中如何设计冷启动与强化学习的衔接,以及解决的关键问题。
返回面试题库