OpenGaFF:基于码本注意力的开放词汇高斯特征场
提出OpenGaFF框架,利用高斯特征场和码本注意力增强几何与语义耦合,实现开放词汇3D场景理解,显著提升语义一致性与分割质量。
面向临床的脑MRI基础模型:FOMO25挑战的发现
自监督预训练提升临床脑MRI泛化性,不同任务偏好不同预训练目标,小模型表现优异。
VGGT-Segmentor:几何增强的跨视图分割
提出VGGT-S框架,利用几何建模与联合分割头实现像素级精准实例分割,自监督训练,在Ego-Exo4D上创SOTA。
从地球观测数据中实现树篱和线性木本特征的可推广映射:德国国家产品
提出模块化工作流,用深度网络从多分辨率地球观测数据中分离线性木本特征,无需重训生成德国全国地图,效果优异,可推广。
Gen-Searcher:强化图像生成的智能搜索代理
首个搜索增强图像生成代理,多步推理搜索知识,双奖励强化学习,显著提升知识密集型生成。
World-R1: 强化文本到视频生成中的三维约束
World-R1用强化学习对齐3D约束,不改架构提升视频几何一致性,平衡动态与刚体。
4DThinker:利用4D图像进行动态空间理解思考
4DThinker通过动态潜在心理图像实现VLM的4D推理,联合监督文本与4D隐变量,强化学习优化,优于基线。
WildTableBench:多模态基础模型在真实世界表格理解中的基准测试
首个真实世界表格图像问答基准WildTableBench,评测21个模型,仅一个准确率超50%,揭示结构感知与推理缺陷。
VISD:通过结构化自蒸馏增强视频推理
提出VISD框架,利用结构化自蒸馏和方向-幅度解耦,提升视频推理准确性与时空定位,训练收敛速度提升近2倍。
使用集成扩散估计端到端自动驾驶的不确定性
提出EnDfuser,利用集成扩散生成轨迹分布,实现不确定性感知,提升自动驾驶性能。
Not All Tasks Quantize Equally: Fisher-Guided Quantization for Visual Geometry Transformer
超越防御:面向内在3D点云鲁棒性的流形对齐正则化
提出MAPR框架,通过对齐内在扰动预测正则化几何,无需对抗训练即显著提升点云鲁棒性。
HorizonDrive:面向长时域驾驶模拟的自纠正自回归世界模型
HorizonDrive通过抗漂移训练与蒸馏,实现长时域自回归模拟,在nuScenes上FID降低52%,FVD降低37%。
MedVIGIL:在视觉证据缺失下评估可信赖的医学视觉语言模型
MedVIGIL基准通过300例医生标注测试,评估医学VLM在证据缺失时的可靠性,最佳模型MCS 69.2,人类83.3,存在14.1分差距。
EgoInteract:用于交互理解和预测的合成自我中心视频生成
提出EgoInteract模拟器,生成密集标注的合成自我中心视频,在多个真实基准上提升交互理解与预测性能。
Uni-Edit:智能编辑是统一模型调优的通用任务
智能编辑任务仅用一个任务、一个阶段和一个数据集,同时提升统一多模态模型的理解、生成和编辑能力。
迷失在折叠中:交叉验证并非不确定性估计的深度集成
交叉验证集成与深度集成在不确定性估计中表现各异,前者适合模糊性建模,后者提升校准与故障检测,应依研究目标选择。
欧洲多中心乳腺癌MRI数据集
公开的多中心乳腺癌MRI数据集,含741例检查,涵盖良恶性及非病变病例,为AI辅助诊断提供真实临床变异性基准。
GAF:高斯动作场——机器人操纵中动态世界建模的4D表示
GAF通过4D高斯建模动态场景与动作,提升重建质量及操作成功率7.3%。
Imagine2Real:通过视频生成先验实现零样本人形-物体交互
提出Imagine2Real框架,用4D点轨迹统一表示,稀疏关键点跟踪避免重定向,利用基础模型潜空间实现零样本物理部署。
MapGCLR: 面向在线矢量化高清地图构建的表征地理空间对比学习
通过对比学习强制BEV网格地理空间一致性,结合半监督训练,提升在线矢量化高清地图构建性能。
量子启发式鲁棒且可扩展的SAR目标分类
张量网络在SAR分类中实现鲁棒性、抗数据投毒与模型效率平衡,适用于边缘设备。
压缩即适应:基于扩散基础模型的隐式视觉表示
提出隐式视觉表示框架,以扩散模型低秩适应编码信号,实现极低比特率视频压缩,统一压缩与生成。
BEiTScore:基于高效交叉编码器的无参考图像描述评估
提出轻量交叉编码器,结合对抗性LLM数据增强,实现高效且SOTA的无参考图像描述评估。
平板包装基准:通过家具组装评估大型视觉-语言模型的时空理解
提出Flat-Pack Bench基准,评估LVLMs细粒度时空推理,发现其在时间信息利用和空间交互理解上存在显著不足。
Lens:重新思考基础文本到图像模型的训练效率
3.8B参数T2I模型,仅用19.3%训练计算即达SOTA性能,密集字幕与多分辨率批次提升效率。
PhysX-Omni:面向刚体、可变形体和铰接体的统一仿真就绪物理3D生成
提出PhysX-Omni统一框架,覆盖刚体/变形体/铰链体,构建数据集和评估基准,性能优异。
GenEvolve:基于工具编排的视觉经验蒸馏的自进化图像生成智能体
GenEvolve通过工具轨迹比较与视觉经验蒸馏,使智能体自进化,实现图像生成SOTA。
UniVL:用于空间定位上下文图像生成的统一视觉语言嵌入
UniVL以单一视觉输入融合空间语义,省去文本编码器,在提升图像质量的同时降低高达52%推理计算量。
先细察后诊断:基于主动缩放的置信感知超声VQA
提出先缩放后诊断的超声VQA框架,引入不确定性感知奖励,在肝脏、乳腺、甲状腺数据集上病灶定位提升39.3%。
验证即消融:视觉语言模型真的使用连续思维令牌吗?
提出令牌替换测试,发现视觉语言模型在破坏连续思维令牌内容后仍保留性能提升,表明令牌未被真正用于推理。
AVI-HT:面向3D手部跟踪的自适应视觉-惯性融合
AVI-HT自适应融合视觉与手套IMU,在手物交互中降低关键点误差16.1%,核心是跨传感器注意力机制。
MRecover: 一种利用AI生成对比度恢复运动伪影MR图像的条件生成模型
MRecover模型通过T1w图像合成TSE图像,有效恢复MR运动伪影,提升海马亚区分割的数据可用性与统计效能。
利用视觉语言模型推断车辆信息以改进自动驾驶中的三维标注
利用视觉语言模型零样本推断车辆信息,改进自动驾驶3D标注,减少人工时间并提高质量。
通过聚合预训练实现从解剖到疾病表型的通用CT表示
FlexiCT模型经56数据集预训练,在多任务中超越专用模型,捕捉肿瘤阶段等疾病表型特征。
癫痫症状学套件(S3):面向癫痫症状学理解的临床多模态数据集、基准与模型
提出S3数据集及七任务基准,评估11个MLLM,揭示癫痫视频理解弱点,微调有效,神经符号分类F1达0.96。
BodyReLux:时间一致的全身体视频重照明
采用视频扩散模型,融合静态与动态光照数据,通过光照令牌和掩码注意力实现时间一致的全身体视频重照明。
SceneGraphGrounder:通过结构化场景图匹配的零样本3D视觉定位
提出SceneGraphGrounder,通过结构化图匹配实现零样本3D定位,利用视觉标记从2D视图构建3D场景图,实现可解释推理。
CrossVLA:面向视觉-语言-动作模型的跨范式后训练与推理优化
提出CrossVLA,使DPO适配连续动作模型,DoRA提升10.4%,降噪循环占推理延迟78.6%,缓存加速有限。
在多模态医学视觉基础模型中学习涌现的模块化表示
针对模态非独立同分布问题,提出DEX模块化网络,动态激活专家并融合知识,实现涌现模块化表示,在26个下游任务中提升性能。
两阶段多模态情感模仿强度预测框架
提出两阶段多模态框架,融合文本、音频、视觉与动作特征,在情感模仿强度挑战赛中获第三,测试集平均皮尔逊相关0.57。
MM-Conv:面向3D对话中上下文感知定位的多模态数据集与基准
提出3D对话指代消歧基准与两阶段定位法,上下文改写提升定位率11-22%,证明解耦语言视觉更有效。
Thermo-VL:将视觉语言模型扩展到热红外感知
Thermo-VL将热红外融入冻结VLM,双注意力融合+辅助损失提升低光照多光谱推理。
Multi-scale interaction network for stereo image super-resolution
测试时扩散的稀疏缩放引导轨迹优化
RTS方法通过奖励引导噪声优化与稀疏缩放,显著提升扩散模型生成质量,刷新SOTA。
预测到定位:从预测性时间感知到证据驱动推理的视频时间定位
提出F2G框架,将视频时间定位转化为可验证的识别-测量问题,融合预测感知与证据推理,提升定位准确性与鲁棒性。
SDGBiasBench:评估与缓解视觉-语言模型在可持续发展目标中的偏见
提出SDGBiasBench套件评估VLM的SDG偏差,并设计无训练CADE方法,显著提升多选准确率与回归性能。
面向视觉语言模型的视觉优势策略蒸馏
提出视觉优势策略蒸馏(VA-OPD),利用视觉信号差异区分关键token,在数学推理与视觉理解任务中持续提升性能。
MAVEN:面向视频推理任务的多阶段智能体标注流水线
提出MAVEN流水线,自动生成视频推理训练数据,微调模型性能超越Gemini。
EvoVid:以时间为中心的视频大语言模型自进化
EvoVid提出时间中心自进化框架,通过时间感知奖励让视频LLM从原始视频自主改进,性能媲美有监督方法。