青稞AI公众号文章

直播预告!基于细粒度准则的多模态强化学习奖励,如何让模型的推理更忠于视觉证据?

当正确的观察与错误的推断交织在同一段回答中,reward 应当如何分配,才能鼓励做对的部分,并引导模型纠正出错的环节?

青稞AI

公众号 · 52 篇文章

图片

主页:http://qingkeai.online/




 

青稞社区为科研人员提供成果宣传支持,如有优秀研究成果分享推广,欢迎投稿联系:aiFreeCode


 

 

视觉语言模型能生成流畅的回答,却可能看错图表数值,或在推理中引入图像无法支持的结论。

来自南洋理工大学 S-Lab、A*STAR 和 UIUC 的研究团队提出了 V-Rubrics,用逐项评分(rubrics)来处理“信用分配”(credit assignment)问题。

论文:V-Rubrics: Visual Faithfulness via Rubric-Based Reinforcement Learning
链接:https://arxiv.org/abs/2608.25580v1
代码:https://github.com/shulin16/v-rubrics
数据集:https://huggingface.co/datasets/v-rubrics/v-rubrics-50k

视觉事实、推理步骤和任务要求分别列为评判的准则,而这些单项的得分则会被用于后续的 GRPO 强化学习。该论文已被 EMNLP 2026 主会接收,代码与数据现已开源。

完整解读:答案正确,推理就一定可靠吗?V-Rubrics 用 35 万条细粒度准则细化多模态强化学习奖励

10月8日(周四)晚8点,青稞Talk  第157期,青稞社区邀请到南洋理工大学计算机科学博士生田淑琳,分享介绍 V-Rubrics,包括 V-Rubrics 50K 的数据构建、逐项奖励与前缀信用分配设计,并结合知识推理、视觉数学和图表理解的实验与案例,分析其相较答案级奖励的收益与局限,探讨如何让模型的推理更忠于视觉证据。

分享内容

V-Rubrics:如何让模型推理更忠于视觉证据?基于细粒度准则的多模态强化学习奖励

1、答对≠看对:多模态推理的盲区
2、V-Rubrics:用细粒度评分准则提升多模态推理的视觉忠实性
- V-Rubrics 50K 的数据构建
- 逐项奖励与前缀信用分配设计
3、对比答案级奖励的收益与局限
4、探讨多模态推理的未来
5、AMA(Ask Me Anything)环节

青稞介绍

田淑琳,南洋理工大学计算机科学博士生,导师为刘子纬教授和朱宏远博士。她的研究聚焦多模态智能体与视觉推理,尤其关注长时程多模态理解和工具增强推理。她曾获 A*STAR 计算与信息科学奖学金支持,并获评 CVPR 2026 及 ICLR 2025 SCOPE Workshop 杰出审稿人。

直播时间

10月8日(周四)20:00 - 21:00

如何观看

Talk 将在青稞社区【视频号:青稞AI】上进行直播,欢迎预约观看!

 




往期推荐

图片

直播预告!聊聊自我改进、递归自我改进(RSI),以及与自博弈的关系

图片

直播预告!聊聊 EnvHarness,Agent 和环境如何“左脚踩右脚”实现自进化

图片

直播预告!聊聊 Lego-RL 框架,如何在真实 Coding Agent Harness 中接入 RL 进行训练?

图片

直播预告!从 Harness 看 AI4AI 如何实现




 

加入青稞AI技术交流群

 

加入青稞AI技术交流群,不仅能与来自MIT、港中文、CMU、UCLA、斯坦福、清华、阿里、腾讯等名校名企AI研究员/开发者一起进行技术交流,同时还有一线青年AI研究员/开发者的Talk分享、青稞Tea、论文精读、招聘内推、国内外硕/博申请、大模型技术报告解读等。备注:姓名+学校/公司+方向,暗号"AI"优先审核通过!





都看到这了,点个关注再走吧🧐~


前往微信阅读全文

内容来自公众号,可前往微信查看原文。

查看作者的更多文章 →订阅更新、RSS 与阅读指南 →