JDY

继续来分享下之前的面经~欢迎友好讨论，信息共享1.直接开始八股2.Transformer 中为什么用LN不用BN3.图像中 BN 是怎么用的4.在 NLP 中如果句子长度不一致，用 BN 会有什么后果5.给定三维矩阵bsz * seq_len * dim，BN和LN分别作用在哪个维度6.已知bsz seq_len dim head，参数量是多少，和哪几个参数有关7.带有多个注意力头的注意力机制计算过程8.说出pytorch中维度变换的函数9.显存OOM，参数，ZERO，vllm，梯度累积，优化器，混合精度10.讲一下实习经历11.长度外推技术12.觉得自己做得最好的点是什么13.使用华为的框架和显卡进行SFT有没有遇到什么问题14.LongLoRA和LoRA的区别15.算法题：返回第K大的数，要求比快排更快

无论何时，哪怕你是真的关心ta，也不要过多探寻对方的个人隐私。当你发现对方对你的提问含糊其辞，或试图转移话题时，就说明对方并不想回答，这时就不要追问啦。即便关系足够近，没有分寸的追问也会让对方觉得职场人际边界被打破。不要为了维护表面的和谐，而不真诚地表达自己的工作感受。因为即便不说，对方还是能够感受到你心怀怨恨，影响你们之间的合作氛围。

工作才明白，职场里最容易踩的坑，就是把客气当底线，把好说话当成全。一开始总想着低姿态，多帮一点、多忍一点，别人才会喜欢自己。于是杂活接、忙帮、请求不拒绝，把自己的时间挤得满满当当，本职工作反而被耽误。可慢慢发现，你越无底线迁就，别人越觉得理所当然。有一次没帮上忙，反而被责备、疏远、被孤立，之前所有的好，瞬间都不算数。职场不需要烂好人，只需要有边界的成年人。守住自己的节奏，做好分内的事，不讨好、不内耗、不委屈自己。温和要有棱角，善良也要带锋芒，你有边界，才会被真正尊重。

最仅段段开始复习并面试了，但是市场行情还是差点意思，段段把最近学的和面试的，以及段段做的AIGC项目做个小总结，希望能对大家带来帮助。 不得不感叹AI进步速度之快，我们这帮研发天天研究用AI革自己的命，属于是没有办法的办法了，在这个巨大变革的时代，我们也不得不跟进潮流，防止淘汰了，闲话少说，上干货。 本文主要讲解RAG架构，RAG定义，Doris数据仓湖，Doris分区分桶，贪多嚼不烂，先讲这几个。一、RAG架构 什么是RAG架构，很多同学其实有思想误区，任务RAG是个向量库，RAG是个什么什么服务，其实都不准确。严格来说，RAG代表一种架构思想。 定义：RAG全名增强检索生成（Retriev...