姚远分享全模态大模型技术探索

清华人工智能研究院学术年会上，姚远分享全模态大模型技术探索，提出交互性必须原生、不能靠 pipeline 拼凑，感知的边界就是智能的边界。团队用 9B 参数的开源模型 MiniCPM-Omni 4.5 验证这条路线，其核心 OmniFlow 按毫秒级时间戳对齐不同模态，实现边看边听边说、输入输出不阻塞的全双工交互。

摘自 人人都是产品经理

还没有足够的连续观测数据，暂不绘制趋势。