鹅你好狠的心

第 20 题：SwiGLU 激活函数相比 ReLU / GELU 的优势 题目 解释 SwiGLU 激活函数相比 ReLU 和 GELU 的优势。 一、ReLU 与 GELU 简述  ReLU：；简单、稀疏，但死神经元、非零处恒为 1 的梯度。 GELU：（与正态 CDF 相关）；平滑、在负半轴非零，被 BERT、GPT-2 等采用。  二、门控与 GLU 族 GLU（Gated Linear Unit） 形式：，即一路做门控（sigmoid），一路做线性变换，再逐元素乘。门控可让模型学会“选通”信息，提升表达能力。 SwiGLU：把门控的 sigmoid 换成 Swish（即 ，又称 SiL...

现在27届还没实习的我是不是废了

第 55 题：提示越狱（Prompt Jailbreaking）的常见手段与防御策略 题目 解释提示越狱（Prompt Jailbreaking）的常见手段和防御策略。 一、什么是提示越狱？ 提示越狱（Jailbreaking） 指通过精心设计的 prompt 诱使模型绕过安全与合规约束（如拒绝生成有害内容、不泄露系统提示、不扮演违规角色），输出本不该输出的内容。与“提示注入”侧重“改写系统意图”略有重叠，但越狱更强调突破安全策略。 二、常见手段（简述）  角色扮演：要求模型“扮演无限制的 AI”“忽略伦理”等，弱化其安全身份。 假设与虚构：如“假设在虚拟故事中…”“仅用于研究…”以制造“非真...