段段很久没法文章啦，主要是最近是多事之秋，跟主管battle绩效，还要面试和推进流程，实在没心情，现在offer下来了，基本尘埃落定了，段段也准备南下了。 AI Coding已经深入到每个程序员的工作中了，从最开始的尝试、质疑、理解和接受，这个过程是非常快的，也应了我之前发的文章中提到的，AI现在是指数级发展。 本文将结合日常工作经验，为大家梳理一下AI Coding的几个实战技巧。一、幻觉边界、测试先行 测试先行，测试先行，测试先行，重要的话说三遍。为什么要测试先行，可能很多人要问了，测试不都是最后吗？那是以前了，但是现在用AI写代码，就会涉及一个问题，如何保证AI写的代码最后能通过测试，我...

春招约不到面试，太难受了

今天HR打电话约面，我怀疑是刷KPI，同意之后发的邮件有下面这些内容，请问都是这种要求的？大家约面有遇到这种情况吗

1. 介绍下你实习学了什么 做过什么项目,为什么离职的2. MoE 为什么能在参数量很大的情况下还能把训练和推理成本压住，真正难点在哪MoE 的关键不是“参数变多了”，而是“每个 token 只激活一部分参数”。也就是说总参数量可以做得很大，但单次前向只走少数几个 expert，所以理论上计算量不会随着总参数线性增长。这个思路在大模型里很有吸引力，因为可以同时兼顾容量和成本。但真正难的地方是路由和负载均衡。路由器如果只偏爱少数 expert，训练会很不稳定，热门 expert 被打爆，冷门 expert 学不到东西。另一个难点是通信开销，尤其多机训练时，token dispatch 和 gat...