大模型实习求帮助

九本华五硕，一段大厂实习，模型待上线，有大模型相关论文一篇a会二作已中，一篇在投，秋招大厂要么投了很久没动静，要么都一面挂，目前只有一个过了一面。（投的都是大模型应用岗）感觉面试官对论文完全不感兴趣，也觉得实习产出比较toy，只会八股疯狂拷打，一问深了就歇菜。感觉不配大厂了。

1. 在LLM推理里，我们经常听到一个词叫prefill，能解释一下它是什么意思吗？2. 我们来聊聊Transformer的基础吧。能先介绍一下Softmax函数吗？然后整体讲讲Transformer模型，特别是里面的QKV（Query, Key, Value）机制，能详细说说这个过程吗？3. Transformer的训练复杂度还挺高的，尤其是在处理长序列时。你了解哪些工作是致力于降低它训练时间复杂度的？4. 长上下文（long context）是现在LLM的一个研究热点，你都知道有哪些方法可以解决或者缓解长下文问题？5. GQA（Grouped-Query Attention）的原理是什么？...

本人二本九硕，2027届开学研二。实验室项目太多，研一下就疯狂外派出差，一个项目出差了三个月，所以感觉以后实习也很悬，目前是写了一篇视觉的小论文，跟大模型没关系，感觉也没什么用。最近看大模型很火，所以就学了一个月，但是感觉大模型的论文好像不太好发，算法基本没希望，只能找一些大模型开发的，但如果后面不放实习的话，感觉也不好找。java还没开始学。请教各位牛友，如果真没有实习的话，选哪个all in可能会好一些呢😭😭

部门：国际贸易事业部(ICBU)-商家&广告质量，海面kpi，避雷！