面试题简述Transformer中用的是LayerNorm，而不是常见的BatchNorm，这是为什么？面试官想听的意识到不是BN不好，而是不适合Transformer的使用场景。面试回答举例Transformer中选择LayerNorm而不是BatchNorm，主要原因和序列建模方式以及训练场景有关。详情请查看：http://xhslink.com/o/8yJohFzKSX6由浅入深分析1、BN 依赖 batch 统计量。2、LN 只依赖特征维度。3、Transformer 的 token 并行与 BN 设计目标维度不一致。4、自回归推理场景下 BN 表现不稳定。面试加分点1、提出推理阶段 ...

大三寒假想找个实习，根本约不到面，可以帮忙看看简历吗

经历了实习和秋招毒打，现在对“企业文化”这四个字简直PTSD。有些文化，HR说出来是福报，打工人听起来全是sos。罗列一下：1. “我们公司没有严格的打卡时间，比较弹性。”翻译： 意思是早上你得按时来，但晚上几点走就看命了。2. “我们团队就像家人一样。”翻译： 家人就是你看在亲情的面子上，多干点活别谈钱。 别搞这一套。我是来打工赚钱的，不是来认亲戚的。“家人文化”往往意味着边界感的缺失——比如晚上10点发消息默认你会回，周末团建默认你会去！3. “提倡狼性文化/奋斗者精神。”翻译： 吃的是草，挤的是血。所谓的狼性，很多时候就是毫无意义的内卷。明明活干完了，但领导没走谁也不敢走；明明一个文档能...