Elorian 首个 AI 模型 Glimpse:直接对图像推理,而不只是围绕图像推理
Elorian 发布首个 AI 模型 Glimpse,以研究预览形式开放 API 接入,聊天界面为候补名单制。其核心机制"视觉草稿空间"允许模型在推理过程中反复回看图像、裁剪区域或提取视频帧,而非一次性将图像转为 token。模型在数百张 GPU 上训练,输入 $0.60、输出 $3 每百万 token,Elorian 称在科学图表推理与短视频字幕任务上优于 GPT-6 Astra。
Elorian 发布首个 AI 模型 Glimpse,以研究预览形式开放 API 接入,聊天界面为候补名单制。其核心机制"视觉草稿空间"允许模型在推理过程中反复回看图像、裁剪区域或提取视频帧,而非一次性将图像转为 token。模型在数百张 GPU 上训练,输入 $0.60、输出 $3 每百万 token,Elorian 称在科学图表推理与短视频字幕任务上优于 GPT-6 Astra。
Meta 发布开源权重模型 Muse Spark Open,总参数 816B(激活 42B)、支持最高 100 万 token 上下文,覆盖文本、图像、视频和音频输入,针对编码和智能体任务。
Meta 今日发布开放权重模型 Muse Spark Open,总参数 816B,号称目前最强的美国开放权重模型,原生多模态,支持长程任务与多步推理。Meta 与 Apple 合作让该模型可在两台 M5 Ultra Mac Studio 上通过最新 MLX 框架本地运行,Apple 同步发布了 MLX 技术博客。
Meta 将编程优化开源权重模型 Muse Spark Open 接入 Amazon SageMaker JumpStart。模型采用 MoE 架构,总参数 816B、单 token 激活 42B,上下文 1M tokens;接收文本、图像、文档、音频与音视频输入,并作为推理模型会返回 reasoning_content。
Meta 发布开源多模态 MoE 模型 Muse Spark Open,总参数约 816B、每 token 激活约 42B,输入支持文本、图像、音频和视频,上下文窗口可达 1M tokens。
推荐理由:原文覆盖了 transformers、llama.cpp、vLLM 等推理后端的部署示例和 TRL LoRA 微调流程,读者可以直接复用这些方案。
Nvidia 发布开源多模态模型 Nemotron 3.5 Super VL(120B 参数、MoE 架构每 token 激活 12B),主打持续运行的企业智能体,并同步推出两款用于本地与边缘场景的 Bolt 模型。
NVIDIA 发布 Nemotron 3.5 Super VL(120B 参数)开放模型,主打多模态智能体任务,并推出 Bolt 74B-A9B 24GB 与 Bolt E4B 4GB 两款端侧模型。
推荐理由:原文给出 Super VL 在参数量和吞吐量上的同档对比,以及从数据中心到端侧的全家族覆盖定位,可帮助判断 Nemotron 在开放模型生态中的角色。
Swiss AI 团队发布 Apertus 1.5 (8B/70B),在 1.0 基础上加入原生图像与音频理解、可切换思考模式以及 262,144 token 上下文窗口(4 倍提升),权重以 Apache 2.0 开源。
推荐理由:文章对照同尺寸开源权重模型,从多模态、长上下文与思考模式三方面详述 Apertus 1.5 的能力改进与取舍,可作为了解其定位的一手参考。
Liquid AI 开源 d1 系列两个边缘决策模型 d1-3B 与 d1-omni-600M,主打毫秒级单次前向传播推理。
Google 发布开源多模态嵌入模型 EmbeddingGemma 2,参数量 7.4 亿,可将文本、图像、视频、音频和代码转为向量。它在 Massive Text Embedding Benchmark (Code) 上得分 78.68,较前代 68.76 提升近 10 分,Google 称表现优于两倍体量的竞品模型。
Google DeepMind 发布开源多模态嵌入模型 EmbeddingGemma 2,基于 Gemma 4 架构并采用 Apache 2.0 协议,参数规模 740M,可将文本、图像、音频与视频映射到同一嵌入空间。
推荐理由:在端侧资源约束下把文本、图像、音频、视频统一映射到同一嵌入空间,为本地 RAG 与跨模态检索提供了新的基线。
Mistral AI 发布 1T 参数多模态模型 Mistral Large 4(昵称 Le Chonk),目前只能通过公共 guardrail 端点访问,开源权重将在安全测试完成后三周内发布。
Mistral 发布万亿参数模型 Mistral Large 4(昵称 le Chonk),原生多模态、1.05 万亿总参数中激活 490 亿,支持 100 万 token 上下文窗口,API 已在 Mistral Studio 上线,权重预计 10 月底发布。
Mistral 发布 Mistral Large 4(ML4)公开预览版,这是一款 1 万亿参数、49B 活跃参数的原生多模态模型,已在 Mistral Studio 开放 API 试用。
推荐理由:原文同时给出了 ML4 在开源模型中的相对位置与欧洲数据中心、3,800 张 Blackwell GPU 的训练规模,读者可以据此理解其基础设施与开源生态意义。
Reka AI 发布研究预览版 omni 模型 Rho-1(19B 参数),用单一神经网络统一处理文本、图像、视频与机器人控制。各类模态以 token 形式跑在同一共享上下文窗口,无需外部模型或工具调用,模型可实时生成连续视频并即时响应新指令。训练使用 320 张 H100 GPU,历时约三个月。
Google 发布 Gemini 4 Argon,称其能自主发现、验证并修复关键软件漏洞,目前仅通过 Fairwind 计划向部分网络安全合作伙伴开放。该模型针对防御性安全任务训练,Google 称其在多项基准上高于 OpenAI 的 GPT-6 Astra 与 Anthropic 的 Fable、Opus,并引用 Vals 指数显示其处于领先。
Google DeepMind 发布新的前沿模型 Gemini 4 Argon,先通过 Fairwind Program 面向一批可信网络安全防御方开放,随后逐步向开发者、企业和消费者推出。
推荐理由:官方给出 1M 输出 token、DeepSWE v1.1 77.9% 等指标与分阶段开放安排,可据此了解前沿模型的发布节奏与安全门槛。
Google 发布新前沿模型 Gemini 4 Argon,在部分基准上超过 OpenAI 和 Anthropic 的模型,但没有取得明显领先;推广价下每百万输入 token 2 美元、输出 token 10 美元。
Microsoft Research 推出 AI 研究系统 Quine,由生物学多模态世界模型和连接模型、科学工具、文献与研究者的交互 harness 组成。该系统与 Broad Institute 合作用于胰腺导管腺癌(PDAC)化合物筛选,其排名最高的化合物在湿实验中产生最大的 classical 到 basal 细胞状态转变,整个过程仅用一个周末。
Latent Space 的 AINews 汇总了 9/24 至 9/25 的 AI 动态,本周发布的 Claude Opus 5.5 因生成讲解视频成为讨论焦点。
Gemini 3.8 Live with Live Avatar 已在 Gemini Enterprise 上线,将近实时视频生成与语音对话结合,让企业智能体以带口型同步和自然表达的动态形象进行实时对话。
推荐理由:原文给出 Live Avatar 在多语言同步和后台工具调用上的具体能力,读者可据此判断企业实时客服场景的落地边界。
Liquid AI 发布实验性草稿模型 LFM2.5-VL-DSpark,为视觉语言模型 LFM2.5-VL-3B 加入投机解码路径,端侧解码最高提速 3.13x、H100 上最高 2.66x,端到端提升最高 2.62x 和 2.27x。
小米发布 MiMo-V2.6 系列开源全模态模型,MiMo-V2.6-Pro 以 1.02T 总参数、42B 激活参数在 Artificial Analysis 智能指数上以 46 分位列最高分的开源权重模型,另有 MiMo-V2.6-Flash 与最高 20 倍输出速度的 MiMo-V2.6-Pro-UltraSpeed,模型采用 MIT 许可。
推荐理由:原文给出了 RL 训练配方与开源环境清单,读者可以据此判断后训练成本下降对开源模型格局的影响。
Google 发布 Gemini 3.8 Live 和 Gemini 3.8 Live Extended Thinking 两款实时语音对话模型,分别面向规模与成本效率、以及高复杂度任务。
推荐理由:两款语音模型分别面向规模成本与复杂任务,并给出各自评测数据和开放入口,可供判断语音智能体的选型。
NeoMME 是 H Company 发布的多语言多模态编码器系列,包含 260M 和 800M 两个规格,采用单一双向 Transformer 同时处理文本 token 与 32×32 图像 patch,从零训练并使用掩码离散扩散目标。
Google DeepMind 发布 Gemini Omni 1.1 Flash,为开发者提供场景延展、首尾帧指定、360p 快速草稿和最高 4K 放大等生成视频控制能力。
推荐理由:相比此前只能参考最后一秒的版本,Omni 1.1 把场景延展的上下文提到 10 秒,并给出 360p 草稿与 4K 输出等具体参数。
Meta 发布开源多模态模型 Muse Glimmer 30B,采用 Apache 2.0 协议,面向本地智能体用例,并获得 transformers、llama.cpp、vLLM、Inference Endpoints 的 day-0 支持。
推荐理由:原文给出Muse Glimmer 30B在Agentic、编码、安全等基准上对位Gemma4-31B、Qwen3.6-27B的逐项对比结果,并附transformers、llama.cpp下的本地推理与DFlash推测解码代码示例。
Mistral 发布开源多模态安全分类模型 Shieldstral,参数规模 3B,可在单张 16GB NVIDIA GPU 上运行,权重采用 Apache 2.0 授权(https://mistral.ai/news/shieldstral/)。
Google DeepMind 发布 Gemini Robotics ER 2,这是面向机器人的具身推理模型,支持视频理解、任务编排和多机器人协作,已通过 Gemini API、Google AI Studio 向开发者开放,并在 Gemini Enterprise Agent Platform 上私测。
推荐理由:原文给出了进度分类与时刻定位的具体准确率和延迟数据,可据此判断高层推理模型在机器人任务编排上的能力边界。
Google 在 Flow Music 中上线新的音乐生成模型 Lyria 3.5,称其在音乐性、歌词和人声质量上均有显著提升。该版本可生成更复杂自然的旋律结构,歌词的提示词遵循度与结构意识更强,人声更具情感表现力且发音更准确。用户还能更便捷地控制输出曲目的节奏与时长,并已在 Flow Music 中开放试用。
DharmaOCR 在面向巴西葡萄牙语的 OCR 评测中以 0.925 的提取质量分优于发布更晚的 Mistral OCR4(0.798)和 Unlimited-OCR(0.7587)。
Thinking Machines 开源 1T 参数多模态大模型 Inkling,原生支持图像、文本和音频输入及 1M 上下文,采用 decoder-only MoE 架构(975B 总参数、41B 激活),同步提供 BF16 与 NVFP4 两个权重版本。
推荐理由:原文给出 Inkling 的 MoE 架构细节与多模态能力范围,并附 transformers、SGLang、vLLM 多框架部署示例和主流模型基准对比,方便评估其工程落地方案。
Google DeepMind 发布 Nano Banana 2 Lite 与 Gemini Omni Flash 两款模型。
推荐理由:两款模型都给出了延迟、单价与上线入口,开发者可据此对照现有图像和视频管线判断成本与选型。
Google DeepMind 发布 Gemma 4 12B,一款面向笔记本电脑的智能体多模态模型,视觉与音频输入直接进入 LLM 主干、不再依赖独立编码器,并配备 Multi-Token Prediction 草稿器以降低延迟。
推荐理由:原文给出无编码器多模态架构的实现细节,读者可比对它与 26B MoE 在内存占用上的取舍。
Google DeepMind 发布 Gemini Omni 模型家族,首个模型 Gemini Omni Flash 开始在 Gemini 应用、Google Flow 和 YouTube Shorts 上线。
推荐理由:官方列出了 Omni Flash 的多模态输入与对话式视频编辑能力,可据此判断它对现有视频创作流程的影响。
Google DeepMind 发布 Gemini 3.5 模型系列,首发 Gemini 3.5 Flash,今日起在 Gemini app 和 Google Search 的 AI Mode 面向所有人开放,开发者可通过 Google Antigravity、Google AI Studio 中的 Gemini API 和 Android Studio 使用。
推荐理由:文章列出 3.5 Flash 与其他前沿模型的基准对比和速度差异,可用于评估智能体与编码场景下延迟和成本的取舍。
Google DeepMind 发布 Gemini Robotics-ER 1.6,作为推理优先的机器人模型升级版,在指点、计数、成功检测等空间与物理推理上较 Gemini Robotics-ER 1.5 和 Gemini 3.0 Flash 有明显提升。
推荐理由:相比 1.5 与 Gemini 3.0 Flash,新模型新增仪表读数能力,可了解机器人具身推理的进展与开放入口。
Mistral 发布 Mistral Small 4,采用 119B 总参数 / 6B 激活的 MoE 架构,统一 Magistral 推理、Devstral 编码代理与 Pixtral 多模态能力,支持 256k 上下文和可配置推理强度,权重以 Apache 2.0 开源。
推荐理由:原文给出统一推理、编码与多模态能力的架构与同尺寸模型的输出效率对比,可作为评估开源部署延迟与成本的参考。
Mistral 发布 Mistral OCR 3 模型(mistral-ocr-2512),在表单、手写内容、低质量扫描件和复杂表格上相对 Mistral OCR 2 取得 74% 的整体胜率。
Mistral 发布 Mistral 3 模型家族,旗舰款 Mistral Large 3 为 41B 激活 / 675B 总参数的稀疏 MoE,在 LMArena OSS 非推理模型榜位列第 2,全系采用 Apache 2.0 协议开源。
推荐理由:原文给出 Mistral Large 3 的 MoE 规模与 LMArena 排名,以及 Ministral 3 端侧尺寸,可作为开源权重模型横向对比的坐标。