外包国家电网阿里云运维

1.自我介绍 2. Lora 原理（核心是低秩分解：将原始权重更新近似为两个低秩矩阵乘积，减少参数量，保留主导方向，训练高效） 3.了解 DeepSpeed 吗， ZeRO -1, ZeRO -2和 ZeRO -3分别做了哪些优化 （1 优化优化器状态，2 优化梯度，3 切分参数，全面节省显存） 4. Qwen的模型结构是怎么样的，相比于 LLaMA, DeepSeek 有什么区别（Qwen采用GQA+SwiGLU+RMSNorm，和LLaMA架构非常相似，差异在训练数据和tokenizer中文支持更好；DeepSeek只用MoE/ MLA架构，Qwen系列主要是Dense模型） 5.怎么缓解...

我是不是最少的？

字节一共四面，已oc美团一共四面，已oc京东一共三面，已oc阿里菜鸟一共两面，已oc零跑汽车一共三面，已oc众安保险一共四面，已oc荣耀，录用决策ing华子，泡池子ing阿里控股一共四面都过，泡池子ing百度提前批一共三面都过，泡池子ing虾皮等hr面ing小红书一共四面都过了，排序挂蚂蚁一面挂腾讯两次一面挂小鹏汽车二面挂pdd（应该是笔试挂）得物，简历挂理想汽车，简历挂阿里系大都简历挂