1. 自我介绍2. 训练一个 decoder-only 大模型时，为什么 embedding 层和 lm head 常常共享权重权重共享本质上是一种参数高效和统计一致性的设计。输入端 embedding 学到的是“token 到向量空间”的映射，输出端 lm head 学到的是“隐藏状态到词表概率”的映射，如果这两个空间本身就在描述同一个词表语义，那么共享权重可以减少冗余参数，并让输入语义空间与输出判别空间保持一致。从优化角度看，共享权重还能起到轻微正则化作用，尤其在词表非常大时更明显。代价是模型表达自由度下降了一点，但对大多数语言模型来说这个损失远小于收益。很多实现里会保留一个独立 bias...

春招约不到面试，太难受了

整理的时候发现，为啥这么多redis？？？😂😂😂我还是换回我的rpc吧(起码自己手敲了)有啥需要改进的，求大佬指点

于3月10号晚7点，收到招聘软件上的邀请投递初级Java研发工程师（薪资1.5w-1.9w）。投递简历收到回复，自我介绍是国企，做教育考试类项目，说以Java进行面试，进入Java全栈开发项目组，另外需要用到.net开发和Python，.net不会可以进组学习，然后问笔试和面试都是线下，是否愿意。因为本人那段期间要写毕业论文，故推辞了一下时间，差不多半个月后（3.27）去线下笔试和面试，笔试内容包括(数据库，逻辑推理，前端，Java后端，算法题一道)，大概写了70多分钟交卷，基本都是问答题，虽然hr说题型基础但是对应届生来说比较有难度，需要好好准备，尤其是算法题是十进制转换成平衡三进制，当时做...