我是27年毕业，现在还没毕业在准备阶段，为9月校招先做准备，简历只有本科投硕士的，还没太改就不放了，我先介绍下自己。本科在吉林大学 仪器系 测控技术与仪器专业，毕业综测第二名，绩点3.895/4.0，保研硕士目前在哈工大本部 仪器系 仪器科学与技术英语比较差，擦边过的四级，六级还没考过，计算机拿了二级WPS和三级网络技术证拿过的奖，本科3次一等1次国励，还有个小社会奖学金，研一拿的入学特等。本科实践课很多很多很多，数电、模电、信号与系统、嵌入式、控制系统、微机原理这些理论课都有对应的实践课，要做小项目的，对应的学的东西是VHDL、焊接技术和画PCB板、MATLAB、单片机、PID算法、汇编语言...

面试里如果被问到“为什么Attention要做成多头，而不是单头就够了”，很多人会先回答一句：“因为多个头可以关注不同子空间的信息。”这个方向并没有错，因为我最一开始学算法的时候，也思考过这个问题，但那会儿搜到的也就是这些原理罢了，但问题在于，这个说法太抽象了。面试官如果继续追问一句“什么叫不同子空间？到底不同在哪”，很多人就接不下去了，反正我到毕业写完论文了都没想过这个点。要把这道题答好，其实需要先回答一个更本质的问题：如果只有一个头，究竟会出什么问题？把这个问题讲透，多头注意力的问题也就解答了。（我的回答建议在文末）一、先别急着讲多头，先看单头的瓶颈到底是什么先从单头注意力开始。假设输入序...