职位题库

AI Infra工程师面试题库

面向AI Infra工程师相关面试,围绕强化学习、多轮对话、Triton、算子开发、低延迟等主题展开练习,结合题目考察点、回答思路、参考答案和常见误区,梳理知识要点并练习清晰表达。

13 道题目建议用时 39 分钟专项面试练习

全部题目 13 道题

01

在TP并行结合CUDA Graph的场景下,如何排查稳定性与超时问题?

考察候选人对TP并行与CUDA Graph结合时可能出现的稳定性、超时问题的排查思路,包括问题定位、最小复现、根因分析等。
02

确定性Router GEMM中,Split-K策略为何会破坏计算确定性?如何解决?

考察候选人对GEMM计算确定性问题的理解,特别是Split-K策略对确定性的影响及解决方案。
03

固定Persistent Kernel在小M维度shape下算力浪费的核心原因是什么?如何自适应选择计算路径?

考察候选人对Persistent Kernel在动态shape下性能问题的理解,以及自适应计算路径和降级策略的设计能力。
04

Decode阶段CPU/GPU同步阻塞问题如何优化?如何将轻量化计算托管到GPU以提升吞吐?

考察候选人对Decode阶段性能瓶颈的分析和优化能力,特别是CPU/GPU同步阻塞的解决和计算托管策略。
05

NCCL中Ring AllReduce与Tree AllReduce的工作原理及适用场景?

考察候选人对NCCL通信拓扑的理解,包括Ring和Tree AllReduce的原理及在高吞吐、低延迟场景下的选择。
06

请说明你在多轮对话RL中如何设置双层奖励,以及如何构造用户模拟器来避免模拟器数据过拟合?

考察候选人对多轮对话RL中奖励分层设计、用户模拟器构建及过拟合防控的系统性理解,评估其能否将训练目标与真实业务分布对齐。
07

在多轮对话中,你如何设计评测方案?转人工率如何评测?A/B测试怎么进行?

考察候选人能否以完整会话为单位设计多轮评测体系,正确区分必要与可避免转人工,并规范开展A/B测试。
08

如何解决多轮对话的冷启动和业务约束遵循问题?

考察候选人对多轮对话系统冷启动训练与上线策略、以及软硬业务约束分层治理的理解。
09

Verl中的AgentLoop有什么特点?

考察候选人对Verl框架中AgentLoop抽象的理解,包括其定位、核心接口、工程特点与局限。
10

请说明选择OPD的动机以及数据筛选时的策略,为什么不使用学生错误的轨迹?

考察候选人对On-Policy Distillation动机、数据筛选策略以及错误轨迹处理的理解,评估其能否平衡纠错能力与训练噪声。
11

请介绍你在高性能Attention重构中具体做了哪些工作?

考察候选人对Attention模块重构的实际经验与优化手段,评估其技术深度。
12

是否部署过小模型?低时延怎么做,重点问prefill阶段。

考察候选人对小模型低延迟部署的理解,特别是prefill阶段的优化策略。
返回面试题库