jrm谁懂啊，以前看乐子现在照镜子谁能知道这事能发生在自己身上说我回答太官方像背书我说我闭着眼答呗，他还说算了我说你怀疑的时候怎么不追问，怎么不问灵活点？逮着上古时代的八股搁这问，回来你叭叭问完我叭叭答完，一句作弊完事，六百六十六手写个最大子数组和，我直接记事本默写了，上古时代的题。然后他让我暴力写一遍……我追问他为啥觉得我作弊，他说你思考一会一直瞅一个地方，然后就都说出来了，背书一样没有思考我说我现在问你个问题你不思考能秒答吗？他来了句不能，因为我不是研究生……也不卖关子，公司名 银河智学20-99人小公司有录音有截图，存着留以后讲段子

面试题简述Transformer中用的是LayerNorm，而不是常见的BatchNorm，这是为什么？面试官想听的意识到不是BN不好，而是不适合Transformer的使用场景。面试回答举例Transformer中选择LayerNorm而不是BatchNorm，主要原因和序列建模方式以及训练场景有关。详情请查看：http://xhslink.com/o/8yJohFzKSX6由浅入深分析1、BN 依赖 batch 统计量。2、LN 只依赖特征维度。3、Transformer 的 token 并行与 BN 设计目标维度不一致。4、自回归推理场景下 BN 表现不稳定。面试加分点1、提出推理阶段 ...