面试问题：- （针对简历提问）你工作里主要关注哪些指标？解释一下AUC含义、计算和作用- 主流的开源大模型结构有哪些？（prefix decoder，casual decoder、encoder-decoder）- 介绍一下layernorm和batchnorm的区别？- 在机器学习里，怎么处理长尾数据和多峰数据？- 怎么解决模型的冷启动问题，你觉得LLM在冷启动方面能够起到什么作用？- 介绍一下常见的优化算法（SGD ->Adagrad ->RMSProp ->Adam -> AdamW）？优缺点- 为什么Adam不一定最优而SGD最优的？怎么理解分析？- （针对简历提问）你工作里的对比损失是怎么构造的，有什么作用？介绍常见的对比损失的公式。代码题：- 数组第K大。给定整数数组 nums 和整数 k，请返回数组中第 k 个最大的元素。（力扣215原题）- 手写对比损失的计算（结合项目），并简单说了一下原理。（大概写出来就好）二面我这个是交叉面，提问的有部分设计大模型，也当然我简历上有大模型，所以问了一些llm+搜推的内容，但这部分交叉问题比较浅，能说个大概就很好，同时也有很多经典的机器学习面经问题。因为项目里提到了对标学习，所以面试官在代码考核部分让我写个示例，所以写进简历的一定要准备好（包括流程步骤，代码实现大概要清楚）。面广告算法的岗位，机器学习面经暴率很高，建议熟背，就算是看过有印象，问到的时候也会基本很稳。

鼠鼠去年暑期实习面试过360，前天应该是一面的负责人说，就不再给我技术初试了，直接复试。（噩梦开始了）面试总共23分钟结束1. 自我介绍 （自我介绍不真诚 ， 像对着念，要像和他聊天一样去介绍自己。不是像背书一样）2. 什么学校的？一本还是二本？3. 为什么不考研4. 你认为目前哪个行业发展最好？ 你再看什么行业？ （鼠鼠回答： AI 发展好， 我再看的行业： 安全研发，游戏，AI）5. 你了解AI吗？6. 看你说的更多是对AI的使用（然后中间说了一堆乱七八糟的） 最后来了一句，如果让你自己做一个deepseek,你服务端会怎么做？（OK , 大的要来了）鼠鼠第6个问题完全不会，只能把自己知道的为数不多的一点关于AI开发的东西说出来 （说的最多的就是我了解到的一些如何在一个会话中让AI回答的问题上下文关联的知识）。 还没说完，面试官说了一句：“你感觉今天还有必要面试下去吗？”  鼠鼠以为是回答的太烂了，想着，寄就寄了吧，确实不会。 紧接着一句话，我想直接退出： “你用AI面试”。鼠鼠懵了，不知道为什么能让面试官说出来这句话。 跟面试官说了半天，共享屏幕开了，说：“我不看你屏幕，不要把面试官当傻子 ， 面试官面试了很多人，是会有一些应届生用AI辅助面试 ， 这样不好”。 鼠鼠是真的要红温了，非常想退出。但是想着是个大公司，直接退不是很礼貌（现在想想有点后悔，面试官也丝毫没有尊重我的意思）我也不知道说什么了，相顾无言。 然后面试官说那出道思考题吧，我说可以。题目很简单（面试的网站上牛客网），鼠鼠就直接在代码考核那一栏去模拟过程了，正在思考过程中 ， 面试官突然打断，说：“你在干什么呢？” （牛客的代码考核，我写什么东西，面试官应该可以看到吧？我不确定 ， 我不知道怎么回答面试官这个问题），直接跟面试官说了一个还没检验的答案，没有一丝意外，是错误的。 给出错误答案之后，面试官说：“不用AI不会了吧， 那你还用刚才的AI去写一次看看”。（鼠鼠一直在忍着没有退出去，我非常希望能够给出这个思考题的正确答案）。 就接着重新去尝试了，然而在这次尝试过程中，又一次被面试官打断。（这次确实已经乱了，不想写了 ， 也思考不进去了）。7.再次相顾无言一会儿， 面试官说没什么想问的，问我有什么问题没有？（鼠鼠已经红温，热的不行，就直接跟面试官说没有问题，结束吧）出去狠狠吃一个蜜雪冰城的冰淇淋降降温。这次是我从去年三月份开始投简历为止到现在，最红温的一场面试。其它也有面试红温的，但是原因是因为问的问题连着很多鼠鼠回答不上来，心态崩了。两者红温状态不一样，第二种，面试结束之后的复盘总结，也可以对自己技术，项目场景，基础知识有一定的提升。但是这次的面试，更多的是感受到了，被轻视，没有得到应该有的尊重，回答问题被打断，思考题被打断。很无奈啊，两次错过360。 鼠鼠下次再也不说AI行业了。

字节在职大模型算法工程师带做llm项目面向实习1-2人

1. 自我介绍2. 过一下你觉得最好的项目/实习。说了一个教程类开源项目，其中包括部署、LoRA微调等内容。又说了了另一个在学校做的项目，问的很细，包括我们使用Function Call做检索的流程、用langchain如何实现的，内部原理是什么。3. 下一个项目BERT相关的，问了问Transformer的原理结构，他的优点是什么，我讲的是他是不限制距离计算，有效遏制了经典RNN模型的长序列遗忘问题。问了问BERT的原理，幸好看过原论文，简单说了下。4. 下一个项目是做的Qwen SFT，训练数据如何生成的，多少数据，训练的参数，训了多久。5. 问了强化学习deepseek，我答了GRPO和PPO，问了DPO我没看过。6. medium题