跳到正文

#多模态

今日 0 条
10月3日周六
  1. Kimi · 官方博客78

    Kimi 发布开源模型 K2.5,强化视觉编码与多智能体并行执行能力

    Kimi 发布开源模型 Kimi K2.5,在 K2 基础上继续预训练约 15T 视觉与文本混合 token,主打编码、视觉与自主导航的 Agent Swarm。K2.5 可自动编排最多 100 个子智能体、执行最多 1,500 次工具调用的并行工作流,相比单智能体设置最多缩短 4.5 倍执行时间。模型已通过 Kimi.com、Kimi App、API 与 Kimi Code 开放使用。

    推荐理由:原文给出了 K2.5 的多模态预训练规模与 Agent Swarm 并行调度机制,读者可据此判断其在复杂任务上的执行效率优势。

  2. Kimi · 官方博客55

    月之暗面(Kimi)发布并开源 WorldVQA 视觉世界知识基准

    月之暗面(Kimi)团队发布并开源 WorldVQA 基准,用于评测多模态大模型在原子视觉世界知识上的事实准确性。数据集含 3500 组图像问答对,覆盖 9 个类别并区分头部与长尾知识;实验显示前沿模型在长尾视觉知识上准确率常低于 50%,且普遍过度自信,其中 Kimi-K2.5 的 ECE 为 37.9%、Slope 为 0.550,表现最好。

  3. MiniMax · 官方新闻79

    MiniMax 发布全模态生成模型 H3

    MiniMax 正式发布通用全模态生成模型 H3,支持多模态上下文统一理解,可输出最高 15s 2K 分辨率的原生双声道音视频。该模型在指令遵循、文字与品牌信息呈现及 V2V Motion Transfer 等方面表现出色,2K 分辨率下每秒价格不到主流模型的 1/3。官方计划在未来几天内开放模型权重,以推动开源社区发展。

    推荐理由:MiniMax 发布全模态生成模型 H3,支持 15s 2K 原生双声道音视频,计划开放权重,为多模态创作提供了新的高性价比选项。

  4. The Decoder69

    Cloudflare 发布 Clef 与 Clef-flash 决策模型,称智能体决策不再需要人类介入

    Cloudflare 发布面向智能体的决策模型 Clef 与 Clef-flash,直接对标 TypeSafe AI 的 Jev。Clef-flash 中位延迟约 39 毫秒,Clef 约 209 毫秒,而 Jev 略超 524 毫秒;Clef 基于 Qwen3.8-27B,Clef-flash 基于 Qwen3.5-9B,上下文窗口为 64,000 token,并可处理图像。

    推荐理由:文中给出 Clef 与 Jev 的延迟和准确率对比,读者可据此判断决策模型在智能体链路中的取舍。

10月2日周五
  1. The Verge · AI67

    Google Gemini Live 上线 Guided Vision,可用 AI 实时描述摄像头画面

    Google 在 Gemini Live 中上线 Guided Vision 功能,可对手机摄像头对准的画面提供实时语音描述,帮助用户阅读小字、描述环境、寻找并识别物体。

    推荐理由:原文将其与 Apple 的 VoiceOver Live Recognition 对标,同时明确它不承担导航与安全出行职责,便于读者判断实际适用范围。

  2. TechCrunch · AI68

    ChatGPT 推出虚拟试穿与商品收藏功能

    OpenAI 宣布面向全球用户推出两项 ChatGPT 购物功能:虚拟试穿与商品收藏(Favorites)。虚拟试穿基于新发布的 ChatGPT Images 2.5 模型,用户上传自拍或全身照后,可通过购物结果中的 try on 按钮查看服装或配饰的上身效果;Favorites 则把商品保存到应用内的 Library,与试穿图片放在一起管理。报道同时指出 Google 去年已推出虚拟试穿功能。

    推荐理由:原文对照 Google 去年推出的虚拟试穿和 Pinterest 的时尚发现生态,帮助读者判断 ChatGPT 购物功能的竞争位置。

  3. The Decoder59

    近半数测试者在一分钟视频通话中将 Tavus 的 Griffin 误认为真人

    Tavus 发布 Griffin,该公司称之为首个“人机交互模型”(HIM),可在实时视频对话中同时理解与生成语音、面部表情、语气、手势和停顿。在 Tavus 的测试中,48% 的参与者在进行一分钟视频通话后认为 Griffin 是真人,此前系统最高仅 2%;在 Nvidia 的独立测试中 Griffin 得分 3.83,人类为 3.92,此前最佳 AI 模型为 2.80。

10月1日周四
  1. 量子位66

    何恺明团队提出NAT-ARC:用ImageNet预训练实现纯视觉ARC推理

    何恺明团队提出NAT-ARC,一套不依赖LLM的纯视觉ARC解题方案,用ImageNet MAE预训练encoder再迁移到抽象格子推理。最佳单模型参数量0.6B,在ARC-1上pass@2达63.4%,集成后达70.2%;作为参照,专用LLM系统The ARChitects用8B模型拿到71.6%。

    推荐理由:论文显示ImageNet自然图像预训练可迁移到ARC抽象格子推理,用约四分之一参数量逼近专用LLM系统。

  2. The Verge · AI67

    OpenAI 新智能体 Dots 叫板 Meta,但它能打赢免费吗?

    在 DevDay 大会上,OpenAI 发布由 GPT-6 Astra 驱动的智能体 Dots,可构建虚拟世界并委派未发布产品 QA、网站设计、行程规划等复杂工作,但暂限每月 20 美元的 Pro 及更高套餐用户。

    推荐理由:原文把 Dots 与 Muse 在价格、隐私和企业市场上逐项对比,读者可据此判断付费智能体相对免费产品的差异化空间。

  3. InfoQ 中国22

    快手磁力引擎袁暖:生成即合规,Agentic AIGC 驱动的广告素材修复实践|QCon 上海

    快手磁力引擎安全与生态算法专家袁暖将在 10 月 22 日—24 日的 QCon 上海,分享《生成即合规:Agentic AIGC 驱动的广告素材修复实践》。该架构以多 Agent 协同把审核结论解构为结构化任务,对文字、图像、视频做局部精准编辑与片段生成/替换,并以多目标强化学习在合规与营销吸引力间动态求解。体系覆盖全模态、服务千万级素材场景,支持一句话指令驱动的端到端视频编辑。

9月30日周三
  1. 科技早知道44

    当眼镜、耳机、手机都有 AI,谁来统一你的「第二大脑」|2026 高通骁龙峰会 S10E31

    高通在 2026 骁龙峰会上围绕 Agentic AI 发布两颗 2nm 旗舰芯片,并将设备形态从手机延伸到眼镜、耳机与 AI Pin。手机仍承载个人上下文与隐私信息,升级为 hub 并把边缘侧算力分发给配件,感知数据留本地、复杂推理去云端。高通正推进 Snapdragon 设备间互操作协议并计划开放为行业标准,还以 39 亿美元收购 Modular,借 Mojo 与 MAX 统一模型部署。

  2. 量子位29

    直播回顾:工业AI的下一个机会在哪?

    西门子Xcelerator与阿丘科技在量子位对话中指出,工业AI的下一批机会集中在高价值、数据ready、技术可行的场景交叉点。阿丘科技在半导体晶圆案例中导入智能体技术,使设备OEE和产能提升25%左右。工业AI必须具备工业级可靠性,做到可信、可追溯、可量化,其从单点走向规模化还需平台作为连接器与放大器。

  3. InfoQ 中国19

    AIGC 驱动的内容生产力变革:Vidu 多模态大模型的创新与实践|QCon 上海

    生数科技解决方案负责人郑重将出席 QCon 上海站,分享 Vidu 多模态大模型驱动内容生产力变革的创新与实践。分享将拆解视频生成在多主体一致性、长时序稳定性与镜头叙事控制上的关键瓶颈,并介绍 Vidu S1 流式视频生成模型的秒级响应与即时指令遵循能力。他还将探讨视频生成模型向世界模型与具身智能方向的演进路径。

  4. 量子位75

    斯坦福 HomeBody 让 GPT-6 Astra 接上宇树 G1,进入陌生厨房完成收拾与取物任务

    斯坦福团队项目 HomeBody 让 GPT-6 Astra 控制宇树 G1 机器人,在从未见过的厨房里按语言指令归拢咖啡袋、丢掉纸盒,并从视野外的抽屉中找到药递给人。

    推荐理由:原文拆解了 HomeBody 让大模型把机器人技能当工具调用的三步流程,可看出具身智能任务从桌面抓取扩展到整房间操作的实现思路。

  5. 雷峰网64

    越大越强,不再是 LLM 的专利:PixVerse R2 攻克实时世界模型 Scaling 难题

    爱诗科技 PixVerse R2 已全量上线,用户可在网页端直接体验动作指令与互动影游交互。实机体验与 HAR 网络记录显示,冬日宫殿会话全程仅一次 session_init,约 119.5 秒生成窗口内八轮推荐 Prompt 与 3355 条动作帧(约 33.4Hz)被组织在同一条持续 session 中,Prompt 处理期间 WASD 控制通道仍然开放。

  6. 量子位 · 行业解读56

    GPT-6 Astra 能取代专业 3D 模型吗?Meshy 不到两年 ARR 破 1 亿美元

    量子位用同一张参考图实测发现,GPT-6 Astra 生成的角色细节明显弱于专业 3D 模型 Meshy,而 Meshy 披露其 ARR 从 100 万美元增至 1 亿美元用时不到两年,快于 HeyGen 的 29 个月。作者据此判断,通用模型越擅长规划与调度,稳定可用的专业 3D 资产反而越成为瓶颈,Meshy 已接入三七互娱等游戏公司生产流程,并推出实时互动内容架构 Mora。

9月29日周二
  1. Microsoft Research66

    微软研究院推出面向生物学复杂性的 AI 研究系统 Quine

    微软研究院发布 Quine,一个整合生物学多模态世界模型与交互式 harness 的 AI 研究系统,可跨序列、结构、功能、细胞状态与影像数据联合学习表示。研究团队与 Broad Institute 合作,用 Quine 预测并优先排序可驱动胰腺癌 PDAC 肿瘤细胞状态转变的化合物,多个排名靠前的候选已在湿实验中得到验证,整个筛选过程仅用一个周末。

    推荐理由:微软研究院展示了多模态生物世界模型在胰腺癌细胞状态筛选中的湿实验验证,读者可看到 AI 如何介入实验设计闭环。

  2. 科普中国 · 阿虚同学24

    2026云栖大会·阿里云智能设计中心分论坛回顾|AI时代的设计新编译

    9月24日,阿里云智能设计中心在2026云栖大会出品「AI时代的设计新编译」分论坛,探讨生成式技术进入真实生产流程后设计价值如何重构。与会嘉宾形成共识:当界面与代码可被即时生成,设计的核心从执行转向定义意图、组织编排与审美判断。论坛还发布"古壁生辉"项目,以AI能力对山西平顺大云院《维摩诘经变》壁画进行数字化重现,探索传统文化数字保护与创新传播。

  3. 极客公园74

    Manus 2.0 正式发布并推出个人 Agent 应用 CUE

    Manus 正式发布 2.0 版本,底层换用自研 Cascade Agent 框架,任务 Token 消耗减少 23.2%、完成时间缩短 28.2%、运行成本降低 32%,并新增可购买的云电脑作为专属运行环境。

    推荐理由:原文把 Cascade 框架、云电脑、Studio 与 CUE 串成个人 AI 线索,便于对比 Meta Muse 等巨头的同类布局。

  4. 少数派58

    ColorOS 17 深度评测:可塑的白昼

    少数派作者 Enc3lMag1k 深度评测 ColorOS 17,认为焕新凝光视效基本统一了第一方应用的设计语言,但为可读性在光效强度上做出取舍。小布 AI 借 PersonaX 记忆共生引擎升级为系统级能力,小布 Next 的多 Agent 架构支持自定义 MCP 与端侧模型,被作者视为目前手机厂商在主动智能上走出最远一步。

  5. 爱范儿70

    可灵 4.0 首发实测,国产 AI 视频再次掀桌?

    可灵 AI 拿出 Kling 4.0 大版本更新,主打真实、可控、专业,将于 10 月正式上线,Kling 4.0 Flash 已于 9 月 28 日率先开放小范围体验。

    推荐理由:原文把 Kling 4.0 的 10-bit HDR 输出与主流 8-bit 方案对比,并给出多参考素材的提示词分工技巧,可直接迁移到自己的视频生成流程。

9月28日周一
9月27日周日
9月25日周五
9月24日周四
  1. 腾讯混元 · 官方公众号63

    腾讯混元发布腾讯 Hy 翻译 APP,基于 Hy-MT2 支持 33 种语言互译

    腾讯混元推出腾讯 Hy 翻译 APP,基于 Hy-MT2 翻译模型打造,支持 33 种语言互译,覆盖 5 种中国少数民族语言及方言。APP 提供语音翻译、拍照翻译与离线翻译,离线模式可提前把模型下载到手机,在无网络或信号差时稳定使用;现已在美国、日本、韩国、新加坡等 12 个国家和地区上线,并同步支持小程序、插件和 PC 端,搜索“腾讯混元翻译”即可体验。

9月23日周三
  1. Google DeepMind77

    Google DeepMind 发布 Gemini 3.8 Flash TTS 与 Flash-Lite TTS 语音模型

    Google DeepMind 发布 Gemini 3.8 Flash TTS 与 Gemini 3.8 Flash-Lite TTS 两款文本转语音模型。前者侧重深度创意指导,支持自然语言生成定制声音、30秒语音复刻与逐句表演控制;后者面向高并发、低成本的规模化应用。

    推荐理由:原文清晰对比了两款新 TTS 模型的定位与功能,并给出基准表现与安全机制,便于开发者评估选型。

  2. Latent Space42

    生物安全是一场 AI 军备竞赛 —— Eric Nguyen(Radical Numerics CEO)

    Radical Numerics CEO Eric Nguyen 指出,提升生物学能力的基因组语言模型(GLM)同样能让防御不落后于生物安全军备竞赛。他曾参与领导 Evo 与 Evo 2 的开发,这些模型后被用于生成完整噬菌体基因组、并合成出功能性病毒。其团队还用 aptamer 数据集证明模型能在 DNA 语言上实现链式推理,自主延续未展示过的高分序列。