淘天大模型算法校招二面

1.八股：vLLM中使用的技术是否熟悉（如Paged Attention、KV Cache）？2.八股：了解加速推理框架DeepSpeed吗？3.八股：MoE模型专家的负载不均衡问题如何解决？4.八股：如何通过修改损失函数来解决负载均衡问题？5.项目：SFT使用的数据集，使用了多少张卡？SFT训练多久？6.项目：SFT 的数据集是越大越好吗？会存在scaling law 吗？7.项目：SFT使用的数据可能和原始模型预训练时的数据分布有较大区别，怎么解决？8.项目：讲一下LoRA微调的原理，A、B矩阵怎么初始化的，LoRA微调秩设置的是多少9.项目：讲一下什么场景下用SFT，什么场景下用RL10.项目：为什么使用强化学习会存在训练不稳定问题？为什么业界还在用？11.代码题：lc129 求根节点到叶节点数字之和

都说人要不忘初心，始终如一，但是真的做到太难了，所以互联网也越来越不正经，忘记自己的初心了。小 红书：百度（百度天天拿着广告赚钱，用百度搜索根本搜不到有用信息了，现在小红书已经成为很多人的搜索工具了）；百度：看病量刑（源于百度问医，然后百度为了盈利把一些骗人的医生和医院置于靠前为主，官媒《人民日报》都diss过，所以“度娘成名医”大家就都知道了 ）；微博：维权/吃瓜/发疯（微博热搜是舆情的风向标，很多大瓜都是在这上面爆料的，看看今天有啥瓜没有）；微信：工作、钱包（工作用微信群，支付用微信钱包）；哔哩哔哩：上大学（最早应该是宋浩《高等数学》同济版教学视频、名校公开课等免费课程在 B 站上，大量大...

1.请介绍 Transformer 的结构组成及各部分作用2.如何降低 Transformer 的计算复杂度？常见的稀疏注意力变体有哪些？3.LoRA微调的原理是什么？秩 r 的选择会对模型表现产生什么影响？4.kv cache是什么？为什么能极大地提升推理速度？5.RAG的完整流程，构建向量检索库时如何处理时间衰减对召回的影响？6.微调时的训练数据是怎么构建的？如何保证样本多样性和质量？7.在 RAG+知识图谱的 Agent 系统中，知识图谱更新的机制是怎样的？是怎样保证实时性的？8.训练 LoRA 模型时，你是如何选择冻结层的？依据是什么？9.在高并发查询 Agent 系统中，你会如何优化召回和生成阶段的延迟？10.大规模 Agent 系统在多线程/多进程场景下的资源调度策略如何设计？11.如果你要在 GPU 资源有限的条件下同时提供推理和微调服务，如何做资源分配和任务调度以保证时延和吞吐？12.代码：lc15 三数之和

得物后端一面（面经分享）1. JVM的架构，具体阐述一下各个部分的功能？2. Zset的底层如何实现？3. Mysql隔离机制有哪些？怎么实现的？可串行化是怎么避免的三个事务问题？4. Spring源码看过吗？Spring的三级缓存知道吗？5. 抛开Spring，讲讲反射和动态代理？那三种代理模式怎么实现的？6. 讲讲线程池？为什么用线程池？7. 集合里面的arraylist和linkedlist的区别是什么？有何优缺点？8. 介绍一下计网里面的tcp和udp协议 9. 介绍一下http和https的区别？为什么https安全？10. Mysql有很大的数据量怎么办？怎么分表分库？11. Re...