蚂蚁集团多模态大模型实习面经

给我面没招了，发点面经攒攒人品～项目拷打CLIP部分1.CLIP的结构+一个batch里面混入了相同的图片，也就是说一个正样本被当作一个负样本，但它实际是一个正样本，怎么去解决和避免这些问题?在训练或者说Loss层面2.CLIP可以做分类吗?通过对齐的方式做分类你觉得是可行的吗?3.图像输入给大模型，解码输出文本，这样的对齐方式和CLIP有什么区别?这两种哪种是未来趋势?偏八股部分1.COT有了解过吗?结构化的输入/few-shot 为什么会有帮助?(模型层面)2.有了解过哪些大模型?BLIP2的三个loss介绍3.现在大部分的结构不采用Q-former，而用MLP，是为什么?那为什么之前不用MLP，而用Q-former?4.一个多模态模型，它的视觉和文本编码器的参数量大小有什么配比的逻辑?5.一个5乘5的卷积，它可以由几个3乘3的卷积串联来替换，从而减少计算量但保持感受野不变?6.分类任务需要很多标注样本，但是现在想在少量样本的情况下，实现新增任务的效果，如何实现?不希望通过大量数据做微调手撕：经典力扣 全排列

混元多模态模型 - 后台开发 一面 60min1. 自我介绍2. agent里面经常会遇到数据安全的问题，你有没有处理过？3. 有没有去调研过一些现成的数据安全方案？4. 简历项目里面抑制模型幻觉的这个背景是怎么做的，能不能详细介绍一下？5. 对这个策略的有效性验证怎么样？6. 实习里面写的推理框架优化的背景和方案能不能详细介绍一下？7. 讲到上下文爆炸的问题，现在很火的openclaw框架其实很好的解决了这点，你知道它是怎么解决的吗？8. 那对于长期记忆，它是怎么处理和存储的？9. mcp框架有了解过吗？手撕：1. 根据前序和中序遍历还原二叉树2. m个苹果放到n个盘子（可以为空），一共有多少种方法3. 基于互斥锁实现读写锁

因为年终奖发的比较晚，本来想年底看机会的哪成想时间接不上，3月底开始看机会，4年社招小弟被虐惨了。。。。按照面试顺序如下美团-交易中台         二面挂        场景题回答的不是很好滴滴-稳定性平台     BP面挂        年包接不住挂爱回收-二手平台     三面挂         年包接不住挂百度                       hr面完         谈薪中阿里淘天                一面挂         八股项目回答还可以，问了很多AI Agent相关的细节完犊子滴滴-外卖配送        二面挂         二面面试官觉得我没相关经验，明里暗里说不建议换赛道，业务不匹配高德-大云图           一面挂         数据采集平台业务不匹配字节-火山引擎        一面挂         感觉跟面试官聊的还不错，项目+算法都还可以，第二天直接感谢信小红书                    二面中          聊的还可以，部门很扁平化，有点向往白龙马云行科技      二面中           全程没八股，项目的各种细节各种问阿里和美团是为数不多还一直问八股的公司，其他都是聊项目，聊具体场景设计方案当然都有算法题，但是对于社招选手还可以，一般都是二叉树、数组、链表、栈这种的各种遍历、删除的变种，目前没有遇到hard难度的，对于社招选手真是省大力了，如果你也在看机会中可以交流交流。。。。

淘天一共多少面啊？如何看淘天三面是技术面还是 hr 面呀？我这显示一个小时的面试，如果是三面技术面一般问些啥呢，有无面经😬