CV小子转多模态大模型求助

1. 详细问了简历上的项目和实习！2. 问了推理加速的项目（实习中做的），线上请求的QPS有多少，模型推理速度如何？用的什么显卡？推理加速是怎么做的？3. 问了一些关于多模态大模型的内容（简历上有），比如模型结构，模型如何训练的，模型在线上指标如何，不同模态如何对齐等？4. 问了一些关于RAG的细节（简历上有），如何评估RAG的效果，做了哪些改进等？5. 八股的话，问了个transformer中为什么注意力机制除以根号k以及lora的原理

1.介绍简历和项目；2.问了一些项目细节3.对于Agent的了解？对于RAG做了哪些优化？4.对于RL的了解，详细问了PPO的原理？5.问了一些场景题：比如单个LLM能否帮助用户完成行程规划（从出行到酒店，都订好票）？6.问了一些学校的事情，毕设做的啥之类的，为啥转行等问题

ByteIntern：面向2027届毕业生（2026年9月-2027年8月期间毕业），为符合岗位要求的同学提供转正机会。团队介绍：字节跳动商业信任与安全算法团队聚焦于通过 AI 技术（包括但不限于大模型 / Agent / 多模态等）识别治理问题广告内容与广告主，助力降低虚假宣传、不良暗示等内容发生概率，提升广告质量。该方向也是行业共同关注、长期研究的方向，在这里你可以基于平台能力及内容，深耕算法优化，为商业化各业务（广告、电商、本地生活等）提供安全解决方案。团队在 Agent 领域深耕技术及其在新一代智能化审核系统中的落地与创新。岗位职责1. 搭建风险感知、风险研判、审核策略优化等智能体能力，支持交互类智能体训练2. 参与审核链路的完全自主进化体系构建3. 跟踪 Agent 前沿技术并进行可行性验证（如Perference-based RL、多智能体协作、DeepResearch、数据和模型的scaling、轻量化模型新RL范式），支持数据基建和模型infra的基建工作，并在商业化安全场景中验证落地岗位要求1. 27届硕士或博士在读，计算机、电子信息或相关专业；2. 有扎实的代码能力、数据结构和基础算法功底，熟练掌握C/C++或Python编程语言；3. 熟悉机器学习和大模型基础原理，有大模型预训练、微调、强化学习、Agent搭建经验者优先；4. 在ACM/ICPC、Top Coder、Kaggle等比赛中有优异的表现和获奖经历者优先；5. 在大模型/Agent领域主导过重大影响力项目，或发表过顶会顶刊论文者优先；6. 出色的问题分析和解决能力，能够独立解决复杂的技术问题；7. 良好的沟通协作能力，能够与团队紧密合作，共同推进项目进展。base北京/上海。感兴趣请发送简历到hantao.zhang@bytedance.com，或投递到 https://job.toutiao.com/s/eZgZS9P7e24

1.多模态学习中常见的融合方式有哪些？早期融合 vs 晚期融合 vs 中间融合的区别和适用场景？2.CLIP 模型的原理是什么？它是如何实现图文对齐的？损失函数怎么设计的？3.Vision Transformer (ViT) 和 CNN 在图像特征提取上的优劣对比？4.什么是对比学习（Contrastive Learning）？InfoNCE loss 的公式和作用？5.大模型训练中常用的优化器有哪些？AdamW 和 Adam 的区别是什么？6. 请详细介绍你简历中提到的多模态项目：输入是什么？模型结构？如何对齐不同模态？7. 项目中遇到的最大挑战是什么？你是如何解决模态异构性问题的？ 8. 有没有做过消融实验？哪些模块对最终性能提升最关键？9. 如果让你将该项目部署上线，你会考虑哪些工程优化点？你的模型在训练集上表现很好，但在新场景（如不同光照/语言风格）下性能下降明显，你会如何提升泛化能力？10. 【LeetCode 300】最长递增子序列（Longest Increasing Subsequence）——要求写出 O(n log n) 解法。