字节多模态算法岗凉经AML

一面(0816)
首先是自我介绍
然后深挖论文
中间夹杂着一些基础的八股,比如GRU和LSTM的区别,CLIP的操作步骤
手撕题目是(1)写个CLIP模型的伪代码(2)求字符串的最长无重复子串
这两个都不算难,写出来了

二面(0818)
自我介绍+深挖论文
然后开始拷打八股:CLIP和BEIT V3的区别;BEIT V3除了BERT外还有别的特殊的设计吗;V3和V2的 embbeding有什么不同;VIT的patch怎么做的;224*224*3的图像做成14*14的patch的话,最后sequence的长度是多少;Transformer里的position encoding怎么做的;相对位置编码和绝对位置编码有什么区别吗;具体实现相对位置编码该怎么做;了不了解其他的大模型;了不了解CV领域一些预训练的模型;了不了解对比学习;了不了解coco,simclr等对比学习方法,是怎么具体做的;等等(还有很多太细节的记不清了)

Transformer里的layer normal是怎么实现的,那手撕来实现一个Transformer里的layer normal吧

(爆炸,纯坐牢,到后面只要我会的说一半就会被打断换成别的更细的问题,八股被拷打晕了,很多不会的)
全部评论
跟我很接近的面试题,我也二面完被挂了,aml太顶了。。。
1 回复 分享
发布于 2023-08-20 19:34 浙江
确实难,有大佬进三面的吗
点赞 回复 分享
发布于 2023-08-24 18:22 北京
lz咱俩应该是一个面试官,二面题基本一样后悔没提前看到,请问如何知道是不是挂了呀
点赞 回复 分享
发布于 2023-08-22 10:32 天津
老哥 我直接死在了一面的伪代码和无重复子串以及一堆细节八股上
点赞 回复 分享
发布于 2023-08-20 09:00 安徽
博tql!加油冲
点赞 回复 分享
发布于 2023-08-18 17:41 重庆

相关推荐

1.你这个xx实习的项目能展开讲讲吗?你主要负责哪块?为什么是你来做这块?2.自动化评估体系这里能具体说说怎么评的吗?哪些维度3. 多维度自动化评估体系,那每一个维度是怎么做的?比如你说的关键词匹配和问答对,这个流程怎么构建的4.图表的准确性你怎么评估的?怎么从markdown和HTML 里提取对应图表并比对的?有没有一些异常case举个例子?5.用了playwright去截图,那遇到报错或者渲染失败怎么办6不同设备模块比如交换机、服务器,它们的字段特征都不一样,那你怎么做统一化训练7.那你这个知识图谱底层是用什么数据结构存的8.用的是PAI吗?那有没有对比过比如说 igraph或者图数据库像GraphScope这些之间有啥区别9有没有用过一些大模型的推理?比如说用千问做辅助根因预测10你们这套系统的准确率和召回率大概是多少,那比如说没有到90%,你们是认为这个指标是OK的吗11所以它是系统推理出根因之后还需要人工check,然后才能执行故障预案,有没有哪一部分流程是完全自动化的12你们平台现在接的主要是底层设备指标,那有没有接入一些业务指标,比如订单失败率转化率这类的业务数据13我有个疑问就接入业务指标的话你需要知道整个平台的服务拓扑,那你们这个平台是怎么接入业务侧拓扑的?是自己做的吗?还是中台团队负责15.那你既然用过图数据库,你知道它底层的存储结构是怎样的吗?比如它是怎么组织边和节点的16.我们现在是两阶段推荐架构:第一阶段召回用的是embedding点积召回,第二阶段是MLP跟transformer做多目标打分。那你觉得在我们这么大规模的数据量下,如果要做real-time re-ranking,你会在架构上怎么做trade-off?怎么压低latency17.我们现在在做embedding精度提升也试过加cross tower、attention pooling 甚至meta learning,但发现一旦模型重了,就难以部署到线上实时系统。那你觉得在embedding learning的这个模块里,有哪些方案能在不严重影响线上性能的情况下提升语义表示能力
点赞 评论 收藏
分享
评论
18
135
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务