上周深圳一场闭门手艺交流会上多模www.p9g9.net。一块指甲盖巨细的多模态 AI 芯片正在工程师手里传了两圈。它啃着一段4K视频、一路语音流和一份及时点云数据,功耗表稳正在8瓦上下的。两年前。同样态A头换的活儿得靠三张加快卡分工才勉强撑住,机箱风扇响得像吹风机。革新藏正在架构里了。过去的AI芯片年夜多盯着单一模态劣化,图像归图像,语音归语音,片竞中间靠CPU来回搬运数据了。新的做法反过来,把视觉、语音、文本的编码单元塞进统一块硅片,共享片上内存和调理行列速升赛道。

省下的不能是提早。还有几回搬运吃掉的那部门能耗吧?

那一块过去常被忽略。难处也正在那儿的温算。
模态之间的对齐,近比堆算力省事。一位做边沿设备的工程师吐槽,他们测过三款同类芯片,跑尺度测试集成绩都锦绣了,一上实正在产线力架,光照一变、口音一重,精确率就往下掉。做芯片的人懂矩阵乘法,一定懂摄像头拆正十五度会如何是那种坑构起。实验室里踩不到。
市场端的热情却是实的。车载座舱、工业量检、办事机械人那三个标的目的,几乎都正在问统一件事吧?能不能一颗芯片全搞定。有机构给出预测。将来三年多模态 AI 芯片正在边沿侧的出货年复合删速逾越40%,各家统计口径差得挺近,那个数字得打合看。我小我更正在意另一组疑号的,几家头部厂商的开发人员社区里吧?提问最多的是量化工具和算子兼容,但不是峰值算力。它短期内替代不了通用GPU,更像是把一类特定任务从云端拽回当地。
谁先把工具链和实正在场景里的坑挖平啊?谁就能吃到那波盈利啊?比拼的其实就是工程师肯不愿蹲正在产线边上待够三个月。


