Tesla AI5 芯片设计的更多专利细节曝光!这篇文章详解了 Voxel Pipeline 处理管线,这是专为 Voxel Occupancy Network(体素占有网络)优化的端到端处理管线,因此 AI5 芯片是 Tesla 为 3D 感知量身打造的「专用加速器」,用在 Tesla EV 与 Optimus 的边缘计算
⏩ AI5 把"理解3D空间"这件事烧进了电路里:
第一层:效率来自"不浪费"。 通用芯片(如NVIDIA Orin)带着一堆你可能用不到的模块—— ISP、视频编解码器、通用 GPU 着色器。AI5 把 ISP 直接砍掉,让 MAC 阵列自己做去马赛克,省下的晶体管面积全给 AI 计算核心。每一平方毫米的硅都在做“管线”真正需要的事,没有冗余,同样面积上的有效算力密度更高;
第二层:精度来自"拆了再拼"。 边缘芯片的功耗预算逼着你用 8-bit 窄运算单元,但 3D 感知需要 16-bit 甚至 32-bit 精度。AI5 的解法是在电路层面把宽数据沿字节切开、并行走窄通道、出口重组——用 8-bit 的功耗做到 16/32-bit 的精度。这是硬件原生支持的无损拆合,功耗没涨,精度没丢;
第三层:通用性来自"契约是 3D 空间本身"。 AI5 Voxel Pipeline 的输入是摄像头画面,输出是一个可查询的 3D 占用数据集——给坐标,返回"这里有没有东西、在不在动、是什么"。这个契约跟"载具是什么"无关。车道线是 3D 空间里的占用边界,工厂地板上的零件也是,人类走过来的轨迹也是。Robotaxi 和 Optimus 跑的是同一条管线、同一颗芯片、同一套查询接口,只是 Planner 层的决策逻辑不同!
因此 AI5 是一颗专门为"用摄像头理解 3D 世界"定制的感知处理器。恰好,所有需要用眼睛理解物理空间的机器——车、机器人、无人机需要的都需要。
用这个逻辑来看边缘芯片的另一个王者 Apple:
Apple 的 Neural Engine 和 AI5 其实是同一种设计哲学的不同实例——应用定义硬件。Apple 也是砍掉不需要的通用模块,把晶体管预算集中在自己的软件栈真正需要的计算上。M 系列芯片的 Neural Engine 专门为 Core ML 的推理模式优化,跟 AI5 为 Voxel pipeline 优化是同一个逻辑。
但两者的应用域几乎不重叠。Apple 的感知需求是:手机/头显上的面部识别、AR 场景理解、图像处理。Tesla 的感知需求是:高速运动中的实时 3D 占用建模和速度场估计。精度要求、延迟预算、功耗约束完全不同。
AI5 对 Apple 不是竞争是验证。如果 Tesla 证明了"把整条AI Pipeline 的精度契约烧进硅片"这条路在边缘场景走得通,Apple 会更有信心在 Vision Pro 的下一代芯片上做类似的事——把 ARKit 的空间感知 Pipeline 更深地固化进Neural Engine。
两家公司可能会在一个地方相遇:机器人。如果 Apple 真的在做家用机器人(各种传闻一直没断),它需要的恰好也是"用摄像头理解 3D 空间"。所以说,Tesla 将会是物理世界“智能设备”的 Apple,能自己设计和制作芯片的意义将不言而喻了
✨https://x.com/i/status/2035890802803781996