百度社招 大模型训练方向
一面,9.10
1.自我介绍
2.手撕代码 leetcode 128
3.八股
介绍下vllm的技术点。
介绍下KV Cache,GQA,MQA,MHA
lora的原理,lora会不会更新原来的权重,如果对embedding层也配置了lora会不会更新。
topK和topP采样方法,采样温度的数值有什么意义。
自我感觉:手撕代码ac了,八股有三分之一答的有点糟糕,面试官似乎对我也没啥兴趣,项目也没问
。微凉。
1.自我介绍
2.手撕代码 leetcode 128
3.八股
介绍下vllm的技术点。
介绍下KV Cache,GQA,MQA,MHA
lora的原理,lora会不会更新原来的权重,如果对embedding层也配置了lora会不会更新。
topK和topP采样方法,采样温度的数值有什么意义。
自我感觉:手撕代码ac了,八股有三分之一答的有点糟糕,面试官似乎对我也没啥兴趣,项目也没问
全部评论
零基础转行大模型训练方向应该怎么学习呀?计算机科班硕士,但之前搞纯cv的
大模型社招卡学历吗
相关推荐

点赞 评论 收藏
分享
09-15 15:35
中国科学技术大学 算法工程师 点赞 评论 收藏
分享