1. 全参数微调的显存一般怎么估算全参数微调的显存不能只看模型参数本身，真正上线训练时至少要把参数、梯度、优化器状态和激活值都算进去。最粗略的估算方式是：如果模型参数量是 N，训练精度是 bf16，那么参数大约占 2N 字节，梯度再来一份 2N，如果用 Adam，还要额外保存两组一阶和二阶矩，通常再加 4N + 4N 字节。也就是说，不考虑激活值时，单参数相关内存大致可以按 12N ~ 16N 字节估。真正把 batch size、sequence length、checkpointing、并行策略加进去后，激活值往往才是大头。所以面试里如果只答“参数量乘 2”基本不够。更稳的答法是先给出静态...

求教各位大佬，我是二面面完了，一小时后又变成这样了，这是三面还是g了呢

请大家帮我看看简历写得如何

3.26 一面怎么说呢，体验很独特，面试官不开摄像头，我简单做个自我介绍就直接开始问，没有拷打我的实习、项目让我直接挑一个项目、实习自己说说，然后没有做出任何评价八股部分1、redis的集群有哪些模式2、redis集群底层是怎么同步的3、langchian有几种message类型（这个有点尴尬不会）手撕从尾开始k个一组的链表反转手撕直接秒了，总时长30min。面试官说思维面挺广，我反问部门以及技术栈其实我内心就想速度好快，面试官不开摄像头，问的随心所欲，恐怕是kpi了，要寄了，我相信自己的技术水平，哪怕是挂了，我想面评也不会太过于差劲（）结果半小时后直接进复试，约的转天，由于我要回学校考试，推...