行业资讯精选 8336氪
英伟达Vera CPU测试显示AI智能体编排性能提升，支持高并发推理
英伟达7月21日表示，AI云平台DeepInfra测试显示，Vera CPU相比其他CPU产品，在AI智能体工作负载下可实现最高2.2倍编排速度提升，并支持最高1.6倍更多智能体并发运行。DeepInfra表示，其平台每周处理近5万亿Token，其中约30%来自智能体应用。英伟达称，随着AI智能体承担更多推理、规划和工具调用任务，CPU在模型调用过程中的调度效率将成为AI基础设施性能的重要因素。（界面）
📎 发布于 07-22 07:32🔗 阅读原文（36kr.com）