机器之心SOTA公众号文章

中国电信开源Xing4.0-29B-Intent意图理解模型,MiniMax发布M3.1 Flash正式版

意图理解模型Xing4.0-29B-Intent,高速模型服务MiniMax M3.1 Flash,扩散文本生成模型Mercury 3,视频理解模型VideoJev,模型记忆机制MemT-1.0,机器人训练仿真平台NVIDIA Isaac Lab 3.0,闭环机器人策略训练框架LoopWAM,模型训练方法ROSS。

机器之心SOTA

公众号 · 24 篇文章

10 月 20 日,今天值得关注的项目覆盖意图理解、高速模型服务、视频理解、模型记忆与机器人训练:Xing4.0-29B-Intent 将多类信息抽取统一为结构化输出,MiniMax M3.1 Flash 与 Mercury 3 开放高速模型服务,Isaac Lab 3.0 则更新了机器人仿真的后端与任务接口。


🎯 意图理解


★ Xing4.0-29B-Intent

将自然语言转换为带类别和参数的结构化结果,支持多意图与多轮理解。

图片


中国电信星辰团队发布 Xing4.0-29B-Intent,将意图识别与参数抽取放进同一个模型。开发者先定义候选类别和字段,模型便能把“查询明天北京到上海的航班”解析成查询意图、出发地、目的地和日期,并以 category 与 args 组成的 JSON 返回。

模型基于 Xing4.0-29B-A4B 训练,覆盖意图与槽位、实体、关系和事件抽取,支持多意图、多轮对话及中英文输入。官方提供 BF16、FP8 和 GGUF 版本,权重、代码与配套数据采用 Apache 2.0 许可;SDK 可连接自行部署的模型服务,适合工单路由、设备指令解析和业务信息提取。

上手门槛

自行部署:🟡 中|支持 vLLM、SGLang|提供 BF16、FP8 与 GGUF 权重

模型地址:https://huggingface.co/XingChen-AGI/Xing4.0-29B-Intent

代码仓库:https://github.com/XingChen-AGI/Xing4.0-29B-Intent


⚡ 高速模型服务


★ MiniMax M3.1 Flash

支持编程、电脑操作与 Agent 工具调用,以高速推理响应连续任务。

图片


MiniMax 于 10 月 19 日发布 M3.1 Flash 正式版,并确认此前的 Space Bunny 是其早期版本。模型面向编程、电脑操作和连续工具调用,支持 100 万 token 上下文以及图像、视频输入。开发者可以调节思考深度,在任务质量与响应时间之间做选择。

正式版已通过 API、M Plan 和 MiniMax Code 开放,开发者可按自己的工作方式选择接入入口。API 每百万输入 token 为 0.15 美元,输出为 0.60 美元,缓存输入为 0.015 美元。模型权重计划稍后开放,目前可用的是服务接入路径,尚不能下载正式版权重自行部署。

上手门槛

开发接入:🟢 低|兼容 OpenAI API|按量计费

开发平台:https://platform.minimax.io

API 文档:https://platform.minimax.io/docs/api-reference/text-openai-api

MiniMax Code:https://agent.minimax.io/download

发布说明:https://www.minimax.io/blog/minimax-m31f


★ Mercury 3

通过扩散方式生成文本,提供百万上下文与兼容 OpenAI 的 API。

图片


Inception 于 10 月 19 日发布 Mercury 3,继续采用扩散式文本生成路线,并提供 100 万 token 上下文窗口。长上下文让一次请求能够容纳更多输入材料;官方测试报告了每秒 1068 token 的生成速度,但这是特定测试条件下的结果,不代表所有请求都能达到同一速度。

Mercury 3 已通过 Inception 平台及 OpenRouter 等渠道提供 API,兼容 OpenAI 接口,可接入已有的助手与 Agent 工作流。标准价格为每百万输入 token 0.20 美元、输出 0.70 美元。当前通过托管服务使用,适合对生成速度敏感、同时需要处理较长材料的应用。

上手门槛

开发接入:🟢 低|OpenAI 兼容 API|按量计费

开发平台:https://platform.inceptionlabs.ai

API 文档:https://docs.inceptionlabs.ai

发布说明:https://www.inceptionlabs.ai/blog/introducing-mercury-3


🎞️ 视频理解


★ VideoJev

直接为视频候选结果评分,完成时间片段定位与选择式问答。

图片


南京大学 MCG 的 VideoJev 基于 Qwen 构建,把视频理解任务转为对候选结果直接评分,而不是先生成一段文字答案。在视频时间片段定位中,模型返回以秒表示的区间;在选择式问答中,则输出候选答案的概率,让结果形式直接对应任务所需。

项目已发布 4B 和 35B-A3B 两档模型权重及代码,采用 Apache 2.0 许可。两种输出适合需要定位片段或比较选项的流程,使用时也要按这种任务形式准备输入。部署除语言模型外还需加载视觉组件,长视频的帧数会影响显存占用,应结合输入长度控制采样规模,不能只按模型参数量估计资源需求。

上手门槛

自行部署:🟡 中|需加载视频视觉组件|长视频需按帧数控制显存占用

官方演示入口:https://modelscope.cn/studios/MCG-NJU/VideoJev-Demo

4B 模型:https://huggingface.co/ZhuYuhan/VideoJev-4B

35B-A3B 模型:https://huggingface.co/ZhuYuhan/VideoJev-35B-A3B

代码仓库:https://github.com/MCG-NJU/VideoJev


🧠 模型记忆


★ MemT-1.0

把历史信息写入模型记忆状态,支持保存与恢复,减少反复读取历史文本。

图片


MemTensor 的 MemT-1.0 结合动态本地记忆与可训练超记忆,让模型在推理时不必重新读取全部历史文本,并支持记忆状态的保存和恢复。项目提供 Nano 与 Flash 两个版本,分别基于 Qwen3.6-35B-A3B 和 DeepSeek V4 Flash,尝试将持续使用的历史信息纳入模型自身的记忆机制。

这种设计仍有边界:官方指出,精细证据检索仍落后于较强的文本记忆系统。许可需分开看:Nano 权重采用 Apache 2.0,Flash 权重采用 MIT,仓库集成代码则使用禁止商用的 PolyForm Noncommercial 许可。Nano 参考推理方案采用 SGLang 与双 GPU,Flash 需要更多资源,部署前需核对资源和代码使用范围。

上手门槛

自行部署:🔴 高|Nano 参考方案采用 SGLang 与双 GPU|仓库代码禁止商业使用

Nano 模型:https://huggingface.co/MemTensor/MemT-1.0-Nano

Flash 模型:https://huggingface.co/MemTensor/MemT-1.0-Flash

推理说明:https://github.com/MemTensor/MemT-1.0/blob/main/inference/README.md

代码仓库:https://github.com/MemTensor/MemT-1.0


🤖 机器人训练


★ NVIDIA Isaac Lab 3.0

以统一任务 API 接入多种物理与渲染后端,搭建机器人训练仿真流程。

图片


NVIDIA 于 10 月 20 日发布 Isaac Lab 3.0 正式版。作为机器人训练仿真平台,新版通过统一任务 API 支持多种物理与渲染后端,并支持 Newton 及独立的 Omniverse 库。完整 Isaac Sim 成为可选组件,开发者可以围绕自己的机器人任务选择仿真后端,再组织训练流程。

新版也带来了需要实际处理的迁移变化。从 2.x 升级时,四元数顺序由 WXYZ 改为 XYZW,数据接口也有调整,已有任务不能默认原样兼容。对准备迁移的团队而言,除了安装环境,还应检查旧任务的姿态数据和接口用法。上手主要需要配置仿真后端与机器人任务,仿真训练本身并不要求先准备实体机器人。

上手门槛

自行部署:🟡 中|需配置仿真后端与机器人任务|迁移旧任务需调整姿态数据与接口

安装文档:https://isaac-sim.github.io/IsaacLab/v3.0.0/source/isaaclab/installation.html

项目仓库:https://github.com/isaac-sim/IsaacLab

版本说明:https://github.com/isaac-sim/IsaacLab/releases/tag/v3.0.0


★ LoopWAM

将成功、次优和失败的部署轨迹用于闭环机器人策略训练。

图片


LoopWAM 已提供代码与模型检查点,其训练流程把机器人部署中的成功、次优和失败轨迹,与专家演示共同使用。这让训练数据不只来自理想操作,也包含策略执行过程中的不同结果。系统包含 Wan2.2 TI2V 5B 与 ActionDiT 等组件,用于构建闭环机器人策略。

项目方报告,LoopWAM 在 RoboTwin 2.0 的指定评测设置下取得 94.5% 的平均成功率,并提供多个仿真任务与机器人形态的检查点。运行时需组合模型、模拟器和环境资产,实机使用还需适配对应机器人。当前仓库未明确列出项目许可证,商业使用前需核对代码与权重的授权范围。

上手门槛

自行部署:🔴 高|需集成多模型、模拟器与环境资产|实机使用需完成机器人适配

模型检查点:https://huggingface.co/datasets/loop-wam/loopwam/tree/main

代码仓库:https://github.com/loop-wam/LoopWAM

项目主页:https://loop-wam.github.io


🧪 模型训练


★ ROSS

筛选历史轨迹中有价值的 token,以离线训练复用已有交互数据。

图片


AllSpark Research 的 ROSS 是一套训练方法与工具,可在强化学习或多教师在线蒸馏后继续利用历史 rollout。审查器先筛选有价值的 token,后续离线 masked SFT 仅在这些位置计算损失,同时保留完整上下文。它复用已有轨迹,无需为这一步训练新增环境交互,但仍需要执行模型训练。

项目以 Apache 2.0 许可提供代码和审查标注脚本,交付的是训练流程,并非可直接聊天的成品模型。使用者需要自行准备模型检查点与历史轨迹,并为标注流程接入审查模型;参考训练还涉及多 GPU 集群。它更适合已有训练产物、希望继续挖掘历史数据价值的团队,数据整理、审查和训练资源仍需纳入成本考虑。

上手门槛

开发接入:🟡 中|需接入审查模型|需准备历史轨迹

自行部署:🔴 高|训练需多 GPU 集群|需自备模型检查点与历史轨迹

上手文档:https://github.com/AllSpark-Research/ROSS#quick-start

代码仓库:https://github.com/AllSpark-Research/ROSS

图片
图片
图片


前往微信阅读全文

内容来自公众号,可前往微信查看原文。

查看作者的更多文章 →订阅更新、RSS 与阅读指南 →