美团核心本地商业 - 前端&移动端 实习

最近读了腾讯写的文章，简单自己做了下总结和理解，又有了新的输入，不愧是腾讯👍 一、学到的核心知识 1. 大模型推理的两大基石  Continuous Batching（连续批处理）：传统批处理要求一个 batch 内所有请求"同时开始、同时结束"，但 LLM 输出长度不可预测，会浪费 GPU。vLLM 把调度粒度从 request level 下沉到 token level——每一步看哪些请求"差几个 token"，就调度几个 token，把短请求填进 batch 的空隙里。 Paged Attention：传统做法一次为请求申请全部显存，碎片严重；P...

自我介绍测需求中怎么设计测试用例的会去看客户端兼容、适配吗除了端到端触发，还会怎么做问项目的Agent设计，入口、负责部分意图识别准确率怎么计算得来的prompt调优过程，如何优化项目里Agent的功能有哪些抓包用什么工具抓包为什么要装证书HTTP是否有状态登录状态怎么实现的SQL Create、Update、Select常用的Linux命令是否是回文串