面试题简述Transformer中用的是LayerNorm，而不是常见的BatchNorm，这是为什么？面试官想听的意识到不是BN不好，而是不适合Transformer的使用场景。面试回答举例Transformer中选择LayerNorm而不是BatchNorm，主要原因和序列建模方式以及训练场景有关。详情请查看：http://xhslink.com/o/8yJohFzKSX6由浅入深分析1、BN 依赖 batch 统计量。2、LN 只依赖特征维度。3、Transformer 的 token 并行与 BN 设计目标维度不一致。4、自回归推理场景下 BN 表现不稳定。面试加分点1、提出推理阶段 ...

😅😅😅😅😅😅😅😅😅

每次看到“996”“007”“加班到深夜”这样的字眼，我都想说一句：真恶心。加班文化的核心，其实就是榨干人的时间和精力，把个人生活当作可消耗资源。不是努力，而是被动公司喜欢用加班当“忠诚证明”，好像多待在办公室就等于能力强。不是效率，而是糟蹋健康长期加班带来的，不是成长，而是疲惫、焦虑和健康问题。不是团队精神，而是压榨文化被动跟随、压力互传，真正的创造力和幸福感全被消耗掉。真正尊重员工的公司，是工作有边界，效率至上，而不是拿加班当衡量价值的标准。加班文化恶心，但我们可以选择拒绝被绑架的时间，用聪明和效率赢得尊重，而不是用熬夜和牺牲换所谓忠诚。