阿里云和蚂蚁二选一

最近读了腾讯写的文章，简单自己做了下总结和理解，又有了新的输入，不愧是腾讯👍 一、学到的核心知识 1. 大模型推理的两大基石  Continuous Batching（连续批处理）：传统批处理要求一个 batch 内所有请求"同时开始、同时结束"，但 LLM 输出长度不可预测，会浪费 GPU。vLLM 把调度粒度从 request level 下沉到 token level——每一步看哪些请求"差几个 token"，就调度几个 token，把短请求填进 batch 的空隙里。 Paged Attention：传统做法一次为请求申请全部显存，碎片严重；P...

你可以先进行一下自我介绍。你是哪里人？你自己在学校有实验室吗？主要是应用在做什么呢？那你这边有没有什么问题？问：那我们今天面试就到这里结束。面试结果 HR 会和你联系。本来约的是10:45，结果面试官11点了还没来，我就退出会议了。11:20的时候打电话来叫我去面，结果自我介绍完之后问了实验室项目做了什么，然后就直接结束了，全程就五分钟！晚上还发邮件来评价面试体验我都不想鸟人了

Trace（一次完整任务） │ ├── Span：Turn-1 │ │ │ ├── Generation │ │ ├── Model: GPT-4o │ │ ├── Prompt │ │ ├── Output │ │ ├── Input Tokens │ │ ├── Output Tokens │ │ └── Cost │ │ │ └── Span：Tool Use (LS) │ ├── Event: tool_start │ ├── Event: command_execute │ └── Event: success │ ├── Span：Turn-2 │ │ │ ├── Generati...

飞舞双非大家参谋参谋1，蚂蚁内包(数字天蚂)，做ai安全测试，就测agent，长沙，年综合8w。2，壹钱包，做传统安全和支持ai转型，渗透工作不算多，大都是合规，防护这种，上海，年综合13.5w。都给的好低😓😓😓