飞猪大模型一面

大语言模型关键技术概览规模扩展：早期的研究主要关注模型参数规模所带来的性能优势，最近的工作则是加大对于高质量数据的规模扩展。数据工程：首先，需要对于数据进行全面的采集，拓宽高质量的数据来源；其次，需要对于收集到的数据进行精细的清洗，尽量提升用于大模型训练的数据质量；第三，需要设计有效的数据配比与数据课程，加强模型对于数据语义信息的利用效率。高效预训练能力激发：多种高级提示策略，包括上下文学习、思维链提示等，通过构建特殊的提示模板或者表述形式来提升大语言模型对于复杂任务的求解能力。人类对齐：首先训练能够区分模型输出质量好坏的奖励模型，进而使用强化学习算法来指导语言模型输出行为的调整，让大语言模型...

1.介绍一下自己2.二面就不问具体项目细节了，问的都是别的内容以及八股    学校都学了什么课    机器学习这门课的框架    分类模型的损失有哪些    在学校的研究方向是什么    介绍一下transformer的decoder结构    为什么选择用llama3    项目做了多久    beamsearch是怎么做的（这个没回答上来，学过的直接忘了）    对大模型行业怎么看，发展趋势    大模型怎么运用到知识图谱中3. 代码题，直接ac了，嘿嘿    单向链表l1->l2->.....->ln重排为l1->ln->l2->l(n-1)->l3->l(n-2)

家人们，发现一个宝藏大模型项目！！自己动手搭建一个，顶其他的10个！能用Torch 搭建，还有rag和agent。

在6.10下午接到了OC终于等到了虽然来的有点晚要成为一名🐬孝子啦