阿里高德打车多模态大模型算法岗

面试很难，还是要多多练习，感觉自己说不明白业务逻辑1.Agent的架构设计2.RAG的检索如何实现3.预训练数据清洗方法4.Group Query Attention的作用5.手撕：实现LRU Cache6.MoE架构的专家路由是对每个token路由还是对每个序列路由7.KV Cache的优化方法

感觉阿里系的面试官更狠一点惹：1.自我介绍；2.你的项目用的是哪些JDK？ 答：JDK8和JDK173.JDK8和JDK17有什么区别？有哪些更新的地方？ 4.请使用Stream流表达式写一个场景题（给定一个List，List里面有Person类，Person类里面有name，age，请通过Stream流把这个List里面的变成Map，其中键为name，值为person）5.上述你说的会有什么问题？ 答：name会有重复的问题。6.重复问题怎么解决？7.你说你JDK17是为了适配一些新的框架，具体是什么框架？ 答：SpringCloud Alibaba8.你对SpringCloud Aliba...

给我面没招了，发点面经攒攒人品～1. 实习拷打2. 实习项目介绍，问的很细致3.  wide&deep模型怎么得到user/item embedding的？4. wide&deep用的是什么损失函数5. mtl模型了解吗？介绍下mmoe6. 多个任务怎么平衡loss7. relu做激活函数优缺点8.   catboost和 xgboost 区别9. catboost 怎么处理类别变量的10. 然后又问xgboost 怎么处理缺失值的11. xgboost的损失函数是什么12. DIN里activation unit结构介绍一下13. transformer结构中的attention机制是怎么样的14.   神经网络初始化权重为0的影响

被横向挂了，希望发出来对大家有帮助！1. 先answer后cot和先cot后answer，做SFT有什么区别？是否对比过效果？2. 怎么确保人工标注的数据准确率符合预期？3. 如何选择合理的SFT的checkpoint，用于后续的RL？4. 图片怎么输入模型的，一张图片有多少token？5. 你觉得RL和SFT有什么区别？6. 为什么不只做RL，而选择SFT then RL？7. 重要性采样是什么，为什么RL中要加入CLIP机制？8. On-policy和Off-policy有什么区别？八股1. Transformer的decoder中为什么要用自回归因果掩码？2. 缩放点积注意力为什么要除以$\sqrt d_k$？