题目 什么是位置编码？对比绝对位置编码和相对位置编码的优缺点。 一、为什么必须有位置编码？ Self-Attention 对输入做的是集合运算：打乱 token 顺序， 和  的结果完全不变。所以 Transformer 本身无法区分“谁在前、谁在后”，必须显式注入位置信息，否则“我吃苹果”和“苹果吃我”在模型眼里可以一样。这就是**位置编码（Positional Encoding）**要解决的问题。 两种思路：  绝对位置编码：给每个位置  一个向量 ，和 token 嵌入相加（或拼接）后再进 Attention，回答“这是第几个位置”。 相对位置编码：不在输入上加向量，而是在 Attent...

论文马上送审了，无意间在小程序上再次看见了自己的高考成绩，发现高考已经过去快10年了。一起参加高考的同学现在只有几个还在继续深造，有时候真的会畅想选择了另一条路的自己会是怎样。

求各位路过的大佬锐评！      

收集了一圈身边人的真实经历，答案比我想象的离谱。说最慷慨的，字节被提名最多。朋友去字节面试，当天打车报销，面完请吃饭，最后没过还发了封措辞温柔的拒信。他说："被拒得这么体面，我都不好意思骂它。"还有人说华为，实习补贴高、节假日礼品多，但补贴都用来买止痛药了……说最抠的，某传统国企稳居榜首。朋友实习三个月，补贴800，打车不报销，连打印纸都要申请。有次加班到凌晨，问能不能打车回去，领导说"地铁还没停啊"。还有种抠法更隐蔽：offer写的是20k，到手发现餐补通讯补贴全是饼，实际到手15k。问HR，说"这很正常的"。但有意思的是，慷慨的公...