一款边缘感知产品的成败取决于四件事:观察世界的传感器、运行模型的集线器、为模型供数的存储器,以及把整个栈连接起来的接口。若只按峰值指标来选,设计在实验台上能跑,到了电池供电环境中却可能“夭折”。配套文章 On-Device Inference Is Remaking the Sensor Stack 提出了更好的方法:把每个决策下推到能够完成它且成本最低的那一级。本文将把这条原则逐项落实为具体规格。
下面来看看:每一类器件需要重点敲定哪些规格、哪些边缘 AI 功能值得为之买单,以及常见接口是什么。
组件 | 需要敲定的关键规格 | 值得关注的边缘 AI 功能 | 典型接口 |
|---|---|---|---|
IMU | 轴数、并发满量程范围、噪声密度、陀螺零偏稳定性、ODR、FIFO 深度 | 免代码决策树、可编程传感器内 DSP、嵌入式融合 | I2C / I3C / SPI + 中断 |
飞行时间 | 分区数、环境光条件下的测距能力、FoV/FoI、精度、模块尺寸 | 片上直方图处理、距离加置信度输出 | I2C / I3C(图像级产品用 CSI-2) |
60 GHz 雷达 | 扫频带宽、Tx/Rx 通道数、封装天线、微距/远距范围 | 自主存在检测引擎或片上 DSP 分类器 | SPI + 中断 |
MEMS 麦克风 | SNR、AOP、输出类型、阵列匹配容差 | 声学活动检测、用于 VAD 和关键词检测的麦克风内 NPU | PDM / I2S / TDM |
传感器集线器 / 主机 | SRAM、内存带宽、NPU 算子支持、深度休眠电流、工具链 | 始终在线集线器域、多流同步、模型安全 | 承载上述各类总线 |
存储器 | SRAM(KB)、Flash(MB)、LPDDR 容量与带宽(GB/s) | 能够容纳 INT8 模型及其激活数据,并留有 OTA 余量 | 片上 / LPDDR / PSRAM |
接口 | 引脚数、数据速率、每条总线上的设备数量、中断支持 | 带内中断、动态寻址(I3C) | I2C / I3C / SPI / PDM / I2S / CSI-2 |
惯性测量单元(IMU)是可穿戴设备、资产跟踪器和状态监测的主力器件,也是传感器内 AI 最成熟的实例。以下四类规格决定了哪款 IMU 才是合适的选择:
STMicroelectronics 在传感器内智能方面处于领先地位,TDK InvenSense、Bosch Sensortec 和 Analog Devices 则覆盖了从消费级到工业级的广泛区间。对于汽车和长生命周期设计,AEC-Q100 认证状态和 10 年供货计划也是可筛选的关键规格。
飞行时间(ToF)传感器输出的是距离而不是图像,这正是它从手机扩展到笔记本电脑、机器人和家电,成为兼具隐私优势的存在检测与手势传感器的原因。直接 ToF(dToF)在片上测量光子返回时间,并向主机输出距离及置信度;间接 ToF 则以更高功耗换取更密集的深度图。可以用以下三项规格来筛选产品:
毫米波雷达能够在视距范围内、黑暗环境中,并且无需捕获可识别图像的情况下,检测宏观运动和微运动(包括呼吸)。有些器件充当前端,执行 FMCW(调频连续波)扫频并在片上 FIFO 中存储数据,再由主机上的轻量模型进行分类;另一些则在芯片内集成 DSP,直接在传感器端运行分类器。一旦这个决策确定下来,就应重点关注以下三项规格:
供应商格局按应用领域分化明显。Infineon 在消费电子和楼宇自动化方面领先,而 TI 则主导汽车舱内感知。模块供应商还提供了另一种选择:支付更高溢价,即可获得已预先完成天线与匹配设计的方案。
麦克风是始终在线功耗故事开始的地方,而信噪比(SNR)只是规格表的一部分。还要检查以下几点:
主机负责汇聚传感器数据流、打时间戳并进行同步,运行传感器本身无法完成的任务,并且只有在下层各级发出信号时才被唤醒。单看 TOPS 指标很容易误导,因此在器件选型时你应该:
如今主机这一层本身也横跨了很宽的范围。低端方面,配备 NPU 的微控制器,例如 ST 的 STM32N6,已把加速视觉与音频能力带入 MCU 的功耗和成本预算。再往上一档,基于 Arm 的 Ethos-U85构建的器件,已可把 transformer 算子带到端点。高端则有边缘 SoC,例如 Qualcomm 的 Dragonwing Q-8750,能够运行多模态流水线和小型语言模型。应根据产品当前要运行的最重模型来匹配这一层级,同时为明年要运行的模型留出余量。
内存决定设计是否可行,而到了 2026 年,它也决定产品能否在预算内顺利出货。对于 MCU 级推理而言,片上 SRAM 才是真正的上限,因为激活数据和工作缓冲区都必须装得下,典型容量范围为 256 KB 到 512 KB。Flash 用于存放量化模型, 在降至 8 位后,体积通常约为其 32 位原始模型的四分之一,此外还要为 OTA 更新和 A/B 分区预留余量。一旦引入视觉处理流水线或小型语言模型,就需要外部 LPDDR;此时决定加速器实际表现的,不仅是容量,还有以 GB/s 计的带宽。
不过,指定内存参数只是容易的部分。DRAM 产能已经 转向 AI 数据中心,推高了 LPDDR 价格并拉长了交期。在 BOM 冻结之前,务必检查供货情况、生命周期状态以及第二来源。在当前这个周期里,这项检查本身就是规格定义的一部分。
总线决定了引脚数量、功耗,以及有多少传感器可以共用一条线路。接口的存在,是为了在数据到达系统中昂贵的部分之前先对流量进行整形,而实现这一目标的默认选择已经发生了变化:
来自 On-Device Inference Is Remaking the Sensor Stack 的原则适用于 BOM 的每一项:尽可能在栈的更底层解决每个决策,并优先选择传输结果而非原始采样数据的器件。
以上每一项规格同时也都是一个搜索关键词。满量程、SNR 和片上内存都可以映射到 Octopart 的参数筛选器上;而当某项规格比筛选条件更新时(例如分区数量或传感器内置 NPU),也可以从同一结果页一键直达数据手册。按照休眠功耗预算来定义规格,并围绕决定该预算的关键参数进行筛选,那么边缘感知 BOM 最终就会汇聚成一套连贯一致的体系架构。