京东后端一面

《JAVA面经实录》- 数据库面试题1.数据、数据库、数据库管理系统和数据库系统概念?数据：是数据库中存储的基本对象，在计算机中的概念是广义的，描述事物的符号记录称为数据，比如你的音乐、文档和图形都是数据。数据库：数据库（Database,DB）,简单的来讲就是存放数据的仓库，严格来讲，是长期存储在计算机内，有组织、可共享的大量数据集合。数据库管理系统：数据库管理系统（Database Management System，DBMS）是位于用户与操作系统之间的一层数据管理软件，用来定义数据，管理数据。数据库系统：数据库系统由数据、数据库、数据库管理系统（及其开发应用工具）、应用程序和数据库管理员...

本来下午都要面试了，提前一周约好了面试，现在有把我踹了？？？真服了

目前只有wxg约过一面，手撕没撕出来就挂了

1. 自我介绍2. 训练一个 decoder-only 大模型时，为什么 embedding 层和 lm head 常常共享权重权重共享本质上是一种参数高效和统计一致性的设计。输入端 embedding 学到的是“token 到向量空间”的映射，输出端 lm head 学到的是“隐藏状态到词表概率”的映射，如果这两个空间本身就在描述同一个词表语义，那么共享权重可以减少冗余参数，并让输入语义空间与输出判别空间保持一致。从优化角度看，共享权重还能起到轻微正则化作用，尤其在词表非常大时更明显。代价是模型表达自由度下降了一点，但对大多数语言模型来说这个损失远小于收益。很多实现里会保留一个独立 bias...