1. 全参数微调的显存一般怎么估算全参数微调的显存不能只看模型参数本身，真正上线训练时至少要把参数、梯度、优化器状态和激活值都算进去。最粗略的估算方式是：如果模型参数量是 N，训练精度是 bf16，那么参数大约占 2N 字节，梯度再来一份 2N，如果用 Adam，还要额外保存两组一阶和二阶矩，通常再加 4N + 4N 字节。也就是说，不考虑激活值时，单参数相关内存大致可以按 12N ~ 16N 字节估。真正把 batch size、sequence length、checkpointing、并行策略加进去后，激活值往往才是大头。所以面试里如果只答“参数量乘 2”基本不够。更稳的答法是先给出静态...

27届还能有实习吗，有同学就学到Javaweb也找了个实习，之前投了800份我就约了一个面，，然后紧急搓了个ai项目demo换上去了😩

友友们，京东的校招内推开始了！ 内推码：C4L5P 京东内推链接： https://campus.jd.com/api/wx/position/index#/?emplErp=C4L5P 欢迎大家投递我们的京东，有问题评论区打出来！ 加入京东多元包容的团队！