采购逻辑从单路视频结构化 / 目标检测,升级为现场自主智能闭环;不再只看 TOPS,重点看内存 / 显存、长上下文、Agent 运行时、多模型并发、本地工具调用能力,行业正在从 “边缘推理盒” 进入 “边缘智能体盒子” 的选型周期。

一、需求转变背后的核心动因
1. 成本:云端 Agent Token 账单不可控
Agent 是多轮循环推理 + 工具调用,持续消耗 token;大量现场设备全部上云,API 费用会随使用量线性上涨。本地跑 Agent 把持续订阅成本一次性变成硬件资产,高频场景 ROI 更高。
2. 数据合规与隐私:敏感数据不出场
工地、明厨亮灶、厂区、政务、连锁门店,视频、设备日志、业务单据不能上传公网。本地 Agent 可以完成感知→理解→决策→设备联动,只把摘要 / 告警少量上云,满足等保、行业数据隔离要求。
3. 低时延 + 断网可用
传统云 Agent 一旦断网直接失效;本地 Agent 在无外网环境下依然持续执行巡检、告警、设备控制,适合工业、野外、弱网场景。
4. 业务诉求变化:从 “事后分析” 到 “现场自主执行”
老一代边缘盒子:被动接收视频,输出检测结果,上报云端做决策。
本地 Agent 盒子:自主拆解任务、调用本地模型、操作下位设备、记忆上下文、多步骤自闭环,相当于在现场部署数字员工,不是单纯算法推理机。
二、采购指标发生哪些变化(重点)
传统选型:TOPS、视频路数、编解码、功耗、接口。
新选型:能否稳定跑本地 Agent 工作流
硬件层面
1. 内存 / 显存 > 单纯 TOPS
Agent 维持长上下文、多模型并发(视觉 SLM+LLM+RAG 知识库),显存 / 统一内存是瓶颈。
轻量单 Agent:16GB 起步
生产级多 Agent 并发:建议≥24GB 统一内存,优先支持大带宽内存架构;内存不足会出现 swap、token 吞吐暴跌、任务中断
2. 算力不再只看 INT8 TOPS,看重 LLM 推理效率
传统 NPU 擅长 CV;本地 Agent 盒子要求NPU / 加速器对大模型量化推理友好,支持 4bit/8bit 量化、KV 缓存优化,保证稳定 token 输出,而不是只跑检测模型。RK1828、BM1684X、力擎 LQ50 这类国产算力卡 / 核心板,现在重点宣传 LLM+Agent 栈适配能力,而不是单纯 CV 算力。
3. 外设与实时接口
需要对接现场设备(PLC、门禁、传感器、云台、IO 继电器),要求 RS485、GPIO、千兆 / 万兆网口,支持 Agent 调用硬件执行动作,不是只做视频接入。
4. 24h 稳定、散热、低功耗
Agent 是常驻进程,7×24 小时持续运行,对长时间满载稳定性、散热、看门狗要求高于传统一次性推理盒子。
软件栈(采购新增硬性门槛,很多厂商容易忽略)
这是区分普通 AI 盒子和 Agent 盒子最关键的点:
预装 Agent 运行时框架(OpenClaw/EdgeClaw 或自研 AgentOS),任务拆解、工具调用、记忆管理、多 Agent 调度
本地 RAG 能力:挂载私有知识库、文档 / 图片本地检索
模型管理:支持 SLM / 量化 LLM + 视觉模型混合加载、模型热切换
安全沙盒:限制 Agent 权限,防止越权操控设备、文件访问(企业采购必看)
端云协同:本地自主执行,网络恢复后同步日志 / 复盘,而不是完全割裂
模型 OTA、技能包远程升级,支持持续迭代 Agent 能力,交付不固化
三、典型行业采购场景
智慧工地 / 园区:本地 Agent 看安全帽、区域入侵,自主联动声光告警、云台追踪、门禁锁,断网也能值守,视频原始数据不上云。
光伏 / 风电巡检:摄像头 + 传感器数据本地分析,Agent 规划巡检路线、识别缺陷、生成巡检报告,弱网野外场景。
工厂质检:Agent 综合视觉 + 工艺知识库,自动判定缺陷、调用产线设备停机,长上下文记录批次问题。
连锁门店 / 零售:本地导购 Agent,分析客流、识别商品,本地知识库回答咨询,保护门店经营数据。
四、采购避坑要点
1. TOPS 高 ≠ 能跑 Agent:很多传统 CV 盒子 NPU 强,但内存小、没有 LLM 优化,加载大模型直接 OOM,无法跑多轮 Agent 循环。
2. “能跑大模型” ≠ 支持 Agent:能本地对话只是 LLM;Agent 需要任务规划、工具调用、持久记忆、多模型调度,依赖完整软件栈。
3. 并发预估要放大:Agent 多轮推理开销远大于单次图像识别;算负载时不能简单按 CV 路数估算。
4. 国产化适配:政企项目优先看国产芯片(RK1828、算能、力擎等)+ 国产 Agent 框架组合,满足信创。
五、市场产品路线
国产边缘算力盒:RK3588+RK1828 加速、BM1684X、力擎 LQ50,主打工业 / 安防场景,AgentOS 预装,适合项目落地;
x86/NPU 迷你主机路线:Intel Core Ultra、AMD Ryzen AI,内存大,LLM 生态好,偏向企业办公室、机房本地 Agent;
专用 AgentBox:软硬一体,预装完整智能体框架,开箱即用,降低客户部署成本。
需求留言: