CuriosAI 在 EgoVis 2026 的 CASTLE 挑战赛提交方案
针对600多小时多视角自我中心视频问答,提出SVA和TMKG方法,SVA以0.50准确率成为最终方案。
具有时空与结构一致性学习的道路条件交通流视频预测网络
RCSNet将交通预测重构为拓扑引导生成,利用结构一致性学习提升跨城预测准确性与道路对齐性。
个性化联邦学习中的模式识别任务
本文比较七种个性化联邦学习算法在模式识别任务上的性能,发现APPLE、FedGC和FedProto表现最优。
残差化时序稀疏自编码器用于解释扩散模型
提出残差化时序SAE,从扩散模型激活轨迹中学习,捕捉线性预测之外的结构,有效分析时空特征。
一种面向纹理识别的深度滤波器组自监督学习方法
采用卷积自编码器自监督预训练,结合深度滤波器与Fisher向量池化,实现轻量高效纹理识别。
SmartDirector: 基于关键帧的电影级视频生成与叙事节奏控制
SmartDirector通过多关键帧控制叙事节奏,两阶段生成高质视频,优于现有方法。
SIGMA:弥合视觉基础模型适应性中的结构与分布差距
提出SIGMA轻量微调方法,仅用1.72%参数,通过尺度融合与语义调制弥合结构与分布差距,密集预测性能领先。
面向不完整多模态输入的统一视觉-语言模型
针对实际中多模态输入不完整问题,提出统一模型,可即插即用提升性能。
教师与求解者之间的反思性对话用于视频问答
提出基于两种智能体反思性对话的上下文注入方法,实现零微调的视频问答适应,在EgoCross挑战赛获第三名。
OphIn-500K:策划网络规模的视觉指令以扩展眼科多模态大语言模型
提出眼科指令数据构建管道,创建大规模数据集OphIn-500K,开发眼科MLLM OphIn-VL,性能超越现有模型。
从语言输入视角重新思考视频语言模型
提出即插即用框架,通过生成正负文本和属性推理,提升视频语言模型跨模态桥接性能。
我们真的需要量子机器学习吗?:一个多维度的实证研究
量子SVM精度更高但成本高,量子CNN参数内存效率优但运行慢,特征维度增加时优势更明显。
ROVER:面向有依据多图像推理的目标中心视觉证据路由
提出ROVER轻量可学习插件,路由目标中心视觉证据,提升多图像推理性能,在多个基准上表现最佳。
SIGMA:面向文本驱动图像篡改定位的语义差异指令引导掩码标注器
SIGMA利用语义差异与指令引导自动生成篡改定位掩码,产出百万级训练数据,提升六种检测器F1达18.34%。
SEMAGIC:从野外图像中学习语义一致的可变形3D表示
提出SEMAGIC框架,通过特征一致性损失和顶点索引条件变形,从单视图野外图像中学习语义一致的可变形3D表示,显著提升语义对应性能。
结构引导的视觉扰动中和框架(用于大型视觉语言模型)
提出SIGN轻量防御,仅0.5%像素修改、0.16秒/图,防御成功率超87%,几乎无损原始性能。
评估从自我中心饮食环境图像推断饮食行为改变接受度的可行性
研究用可穿戴相机拍摄饮食图像,结合CLIP模型,初步证明可推断饮食行为改变接受度,为即时干预提供可能。
当伴随图像的思考遇上安全:多模态越狱鲁棒性的决定因素
显式图像工具交互通过隐藏表示的安全方向残差偏移,平均降低越狱成功率约30%,是提升多模态鲁棒性的有效设计。
Con-DSO:为RGB-D直接稀疏里程计学习短时一致性先验
Con-DSO学习短时一致性先验,通过不确定性预测选择可靠像素,大幅降低RGB-D视觉里程计轨迹误差。
双分支蒸馏Transformer用于高效非对称无人机跟踪
提出双分支蒸馏策略增强轻量学生模型,实现无人机跟踪的精度与速度平衡。
CogPortrait:通过分层智能体规划实现肖像动画中细粒度眼部区域控制
提出两阶段框架,用MLLM智能体规划眼部关键点,DiT生成动画,在HDTF和EMH基准上精度和视觉质量更优。
利用分割引导的对抗学习增强超低场MRI
利用分割先验条件化CycleGAN和T-REX加权集成,将64mT超低场MRI合成为3T级图像。
超越替代梯度:面向视觉语言模型的完全可微分令牌剪枝
提出DiffPrune,用连续控制令牌信息替代离散剪枝,实现完全可微分训练,保留96.5%精度,加速2.85倍。
VCap:弱到强视觉字幕的超几何奖励
VCap通过配对参考字幕与视觉信号验证事实一致性,提供超几何分布精度奖励,实现弱到强泛化,8B模型在多基准超越SOTA。
坚守公平!确保扩散模型在不同引导尺度下的群体公平性
分解总偏见为模型与引导偏见,提出StayFair方法,通过公平引导算法实现跨尺度群体公平,且不牺牲图像质量。
ABot-OCR 技术报告
单次前向将页面图像转录为Markdown,消除模块化编排;专用数据引擎+强化学习优化文本准确性与格式,实现SOTA性能。
应对恶劣天气分割中的泛化差距:一种训练策略视角
用训练策略而非模型架构缩小恶劣天气分割的泛化差距,验证-测试差距从16.1降至6.5点。
Mags-RL:通过智能体强化学习为多模态大语言模型戴上放大镜,实现复杂场景推理
提出Mags-RL框架,让MLLM调用超分辨率智能体进行两轮推理,仅需40个样本即可提升复杂场景推理准确性。
使用事件相机自动估计羽毛球扣杀中的击球时间、击球位置和球速
双事件相机同步自动估计扣杀击球时间、击球位置与球速,125次测试验证,偏差小,可用于实际评估。
从生成到创作:文本到图像评估中的Qwen-Image-Bench
Qwen-Image-Bench以创作者为中心,通过真实性和创意维度评估T2I模型,可靠区分顶尖模型并提供优化信号。
Intra-YOLO:基于强化学习与迁移学习的口腔内龋齿与磨牙-切牙矿化不良小目标检测模型
提出口腔内龋齿与MIH检测CAD系统,克服小目标及相似病灶识别难点。
VLA-Hijack:基于视觉本体感知劫持的可迁移补丁攻击方法
VLA-Hijack劫持视觉自定位,抑制真臂并注入假臂,实现跨架构高迁移性,达到黑盒攻击新SOTA。
重新审视变化检测方法在冰塔崩塌延时监测中的应用
提出体积变化检测子任务,实验表明特征匹配方法稳健,监督法受数据限制,混合法有前景。
CLEAR-NeRF: 共线性和局部区域增强的无界场景精确三维重建
提出共线性与局部区域增强的NeRF,通过四项改进提升无界场景重建鲁棒性及度量精度,效果优于基线。
哪种预训练范式更能服务于空间智能?视觉语言模型与视频生成模型的实证比较
比较VLM与VGM在语义、实例分组和3D几何上的表现,发现互补性,融合两者可兼得几何与语义。
ST-ColoNet:基于混合注意力与边缘引导特征学习的时空结肠段识别
提出ST-ColoNet两阶段框架,融合混合注意力与边缘特征学习,结肠镜视频段识别准确率81.0%、F1 70.7%,超越现有方法。
SAM增强的道路数据集分割:自动驾驶中关键类别的平衡
使用SAM将ZOD边界框转为像素标注,处理10万帧精选2300帧,模型达48.1% mIoU,解决类别不平衡。
没有安全剂量:训练数据如何驱动不安全图像生成
训练数据中不安全图像比例驱动输出不安全率,零污染仍有16.6%基线风险,安全过滤不影响质量。
一种新颖的橡树落叶序数多视图聚合方案
提出多视图序数分类框架聚合CNN预测,提升橡树落叶估计的精度与鲁棒性。
MeniOmni:一个用于整体半月板损伤评估的结构化多模态基准
提出MeniOmni多模态基准,整合MRI与临床先验,支持半月板损伤精细分级和报告生成,提升评估安全性。
DebFilter: 消除隐藏在值中的偏见
提出无需训练的DebFilter,通过调整交叉注意力值组件,在推理时消除文本到图像模型的社会偏见。
学会标注:用于半监督指代表达式分割的强化自演化框架
提出L2L框架,将伪标签构建作为可学习决策,利用多模态大模型先验和强化学习自适应选择高质量监督,联合优化实现半监督指代分割提升。
MangaFlow:一种端到端的智能体框架,用于可控故事到漫画生成
MangaFlow将漫画创作分解为多个可编辑阶段,实现布局与跨面板一致性控制,并引入故事记忆支持长篇生成。
FLORO:面向跨传感器与尺度的生态遥感多模态地理空间基础模型
FLORO利用掩码自编码在异构遥感数据上预训练,跨传感器迁移强,PANGAEA基准分割表现优异,数据量远小于其他模型。
从Kellgren-Lawrence到焦磷酸钙晶体沉积:一种用于膝骨关节炎评估的软标签框架
提出软标签序数框架用于KL和CPPD分级,多种分布策略均优于传统独热编码,统计显著。
患者特异性肺动脉树数字孪生用于提取肺栓塞生物标志物
利用AI生成动脉和栓塞掩模,构建患者肺动脉树数字孪生,自动计算严重度评分和栓塞分布,提供快速精确信息。
VidPrism:面向图像到视频迁移的异构专家混合模型
VidPrism提出异构专家混合框架,通过分工专家、多速率采样和动态双向融合,提升视频理解性能,达SOTA。
Proprio:面向物理合理视频生成的潜在自评分与推理时改进
Proprio利用视频生成器内部自评分信号,无训练即可显著提升物理合理性。
弥合无线电地图估计中的采样分布偏移:一种轨迹感知范式
提出ST-TBS训练范式,解决轨迹与随机采样分布偏移,将RMSE从0.2632降至0.0571,提升无线电地图估计泛化性。
PointQ-Bench:用于诊断和可解释点云质量评估的基准
PointQ-Bench是覆盖3083个点云、8种问题类型的诊断基准,揭示当前模型存在感知-诊断差距。