专业服务行业面试题 · Transformer
专业服务行业相关面试题，按题目行业基础数据聚合。
共 27579 道真题 · 当前筛选命中 136 道 · 更新 2026-08-05
筛选题目已选：Transformer
考察点
技术栈
第 101 题请实现一个多头自注意力机制（Multi-Head Self-Attention）。 考察对Transformer核心组件的理解及编码实现能力第 102 题怎么理解Transformer的Attention 考察对注意力机制原理、计算流程及应用的理解第 103 题DETR 是如何在不用 NMS 的情况下保证一个目标附近只生成一个检测框的？ 考察对 DETR 目标检测机制与去重原理的理解第 104 题在Transformer中，掩码注意力的作用是什么？ 考察对Transformer注意力机制中掩码原理的理解第 105 题请介绍Transformer的整体架构及其关键组件的作用。 考察对Transformer架构核心组件及原理的理解第 106 题请介绍你对Transformer模型的理解，包括其核心机制和适用场景。 考察对Transformer架构核心组件、原理及应用的掌握程度第 107 题多模态大模型中的ViT，解释其原理以及它是如何训练的？ 考察对Vision Transformer（ViT）架构原理及其训练流程的理解第 108 题请详细介绍 Transformer 中的注意力机制（Attention Mechanism），并说明其如何工作。 深入理解注意力机制的原理、计算流程及在 Transformer 中的作用第 109 题位置编码（position embedding）通常用什么方法实现？除了基础方法，你还了解哪些方法？ 考察对位置编码实现方式及其演进的掌握第 110 题请介绍你对大模型（如 GPT、BERT 等）技术原理和业务应用的主要了解。 考察对大模型基础原理、能力边界及行业应用的理解深度第 111 题请详细介绍Transformer架构的核心组成部分及其作用。 考察对Transformer架构的理解深度第 112 题Transformer 与 DIN 的注意力机制有哪些区别？ 考察对两种注意力机制原理及适用场景的辨析能力第 113 题自注意力的时间复杂度是多少？请解释其计算过程。 考察对Transformer自注意力机制计算复杂度的理解第 114 题八股：多头和单头的情况下有什么区别？ 考察对多头注意力机制原理、计算与效果差异的理解第 115 题请解释 Transformer 中各主要子层的功能，并分析如果去掉前馈网络（FFN）层会对模型产生什么影响。 考察对 Transformer 结构各组件功能的准确理解，以及对组件作用机理的深入分析第 116 题Transformer注意力机制的复杂度是多少？怎么计算？ 考察对注意力机制时间复杂度推导的理解第 117 题请介绍你对 Transformer 架构的理解。 考察对 Transformer 架构核心组件和工作原理的掌握程度第 118 题请说明自注意力机制中权重矩阵的参数量如何计算，并解释各矩阵的维度。 考察对自注意力机制中参数结构的理解与计算能力第 119 题Attention中为什么要除以根号dk？ 考察对注意力机制数学原理和数值稳定性的理解第 120 题请解释GMP模型（生成式预训练模型）的底层原理，并说明其在自然语言处理任务中的关键机制。 考察对GMP模型底层架构、训练原理和关键机制的理解