江苏紫金研究院线下面试

1. 大语言模型的 RLHF 训练流程是什么，它存在哪些潜在风险RLHF 一般分三步。第一步是 SFT，用高质量指令数据把基座模型调成能听懂任务、按格式回答的模型。第二步是训练奖励模型，把人工偏好数据整理成 chosen 和 rejected 形式，让奖励模型学会判断两个回答哪个更好。第三步是强化学习优化，最经典的是 PPO，让当前策略在奖励更高的方向上更新，同时用 KL 约束避免模型偏离初始策略太远。它的风险主要在三个地方。第一，奖励模型可能学偏，模型最后学到的是“讨好奖励模型”而不是真正更有帮助。第二，强化学习阶段如果约束不够，模型容易出现 reward hacking，看起来分数高，但真...

emmm没想到以这种方式被挂了

sql EXPLAIN FORMAT=JSON SELECT ...; -- 机器可读的 JSON 格式 sql 显示预估的执行计划。 EXPLAIN SELECT * FROM user WHERE age > 18; 实际执行并返回每个节点的真实行数、时间、缓冲区命中情况。sql EXPLAIN (ANALYZE, BUFFERS, TIMING) SELECT ...; 二、分析执行计划的关键点1. 访问类型（type）—— MySQL 重点关注system / const：理想情况，最多匹配一行，如按主键查询。eq_ref：使用唯一索引进行关联。ref：使用非唯一索引查找。ran...