几何视角下的物理对齐数据压缩
局部几何理论揭示了物理信息压缩中可观测与重建的权衡,给出各向异性误差分配及对齐诊断。
消息调优超越图提示调优:一个棱柱空间视角
棱柱空间理论量化图提示调优能力上限,消息调优可超越该上界,实验验证效果更优。
面向高阶脑连接分析的多尺度超图学习
提出MuHL自适应多尺度超边学习框架,动态学习高阶交互,提升脑疾病分类性能并识别关键脑区交互。
基于频谱解析与原型引导空间传播的图基础模型
提出SPG模型,通过频谱分解和原型几何蒸馏,提升图基础模型的跨域泛化能力。
基于Transformer引导自适应扩散的多模态图神经网络用于临床前阿尔茨海默症分类
提出融合扩散核与多头注意力的框架,提升多模态临床前AD分类性能,精准识别关键脑区。
运行工况偏移下热工水力代理模型在线自适应的验证门控多智能体治理
提出验证门控多智能体治理框架,通过角色分离智能体与门控实现热工水力模型在线自适应,全模式使平均误差降低19%,告警超标率降至35.8%。
AugMask:通过随机增强与掩蔽在不完整表格数据上训练扩散模型
提出AugMask框架,用条件增强处理缺失值、去噪监督仅用于观测坐标,使标准扩散模型性能优于专门基线。
FLIPS:通过伪随机序列对LLM进行实例级指纹识别
FLIPS利用伪随机序列偏差实现LLM实例级指纹识别,准确率达96%,证明其监管可行且必要。
When Model Merging Breaks Routing: Training-Free Calibration for MoE
APIC:使用神经过程的摊销物理信息校准
APIC框架利用双分支潜架构解耦物理参数与结构偏差,实现稀疏观测下快速校准与不确定性量化,提升参数恢复。
缓解错误信用传播:基于评分标准的强化学习的概率图奖励聚合
提出GEAR概率图框架,聚合评分标准依赖奖励,减少错误信用传播,强化学习性能提升15.5%。
时间粒度对基于家庭负荷曲线的社会人口统计推断的影响
时间粒度影响社会人口推断,发现15分钟-1小时及1-7天平台期,可解释特征与XGBoost表现佳,揭示隐私-效用权衡。
局部引导,全局影响:高斯重塑信任区域解锁行为转变
高斯信任区域优化(GTR)用非单调高斯核重塑信任区域,解决PPO在非平稳环境中的行为转变难题。
链接预测还是毁灭:知识图谱嵌入中不稳定的种子
研究发现随机因素导致KGEM预测不稳定,MRR不保证稳定性,投票改善有限,可靠性存疑
IdEst:通过内在维度评估自监督学习表示
提出IdEst,通过内在维度估计自监督学习表示,与线性探针性能强相关且计算高效。
为下游任务定制严格适当的评分规则:在因果推断中的应用
提出通过匹配下游误差曲率定制严格适当评分规则,应用于ATE估计,效果优于标准方法。
随机森林中需要多少棵树?——结合高原搜索与Optuna的再探讨方法
提出基于三元组高原搜索算法,自动确定随机森林近最小充分集成规模,避免预设范围,理论分析并实验验证效果。
分析超连接中的流坍缩:从诊断到缓解
揭示超连接中多流退化为单流主导的坍缩现象,通过打破初始化对称性可缓解并提升性能。
Flicker-DDPM:利用1/f闪烁噪声注入加速去噪扩散
Flicker-DDPM用1/f有色噪声替代白噪声,以少3.33倍采样步骤达同等质量,谱匹配线性化反向轨迹。
KVarN:方差归一化的KV缓存量化减轻推理任务中的误差累积
KVarN用哈达玛旋转和双轴方差归一化量化KV缓存,消除token尺度误差,减少推理误差累积,在2位精度下达到最佳性能。
面向鲁棒图神经网络的拓扑感知高斯图修复
提出TAGR,用稀疏特征邻域图和残差校正修复图,增强GNN对噪声和缺失边的鲁棒性。
中文标题:重新思考张量分解在后训练大语言模型压缩中的作用
中文摘要:系统评估发现张量分解与LLM异构表示存在根本性不匹配,明确了其实用限制。
揭秘管道并行:PipeDream的首个理论
提出随机PipeDream算法,首次给出非凸收敛保证,分析延迟与S^4关系,并与LocalSGD比较。
HiSE:一种面向异构图神经网络的轻量级分层语义解释器
HiSE通过LASSO和KL散度实现轻量级分层语义解释,高效提升异构图神经网络的保真度与鲁棒性。
基于模型的强化学习中的事后鲁棒性
提出推断时结合学习模型与名义策略,通过对抗性模型预测控制提升鲁棒性,无需额外训练,在扰动MuJoCo环境验证有效。
教师何时应该移动?自在线策略蒸馏中的时间耦合与稳定性
蒸馏中教师更新需完全冻结(隔离期)保稳定;固定调度致长程崩溃;CGTR门控刷新避崩,四任务最优。
监督微调LLM规划器中的世界模型恢复探究
监督微调使LLM线性编码动作有效性及状态谓词,更广状态覆盖提升世界模型恢复准确性。
高斯RBF支持向量回归预测函数最小化中DCA收敛特性的解析评估
通过RBF核解析构造DC分解,推导出收敛特性由标量Cαρ决定,可预先评估DCA性能。
利用验证-生成差距:基于置信度条件验证的测试时强化学习
提出TTRL-CoCoV框架,基于置信度条件验证分别处理高、低、中置信样本,有效提升Pass@1和Pass@k,在多个基准上显著超越现有方法。
使用均衡传播在ImageNet上训练预测编码网络
提出基于均衡传播的预测编码网络训练方法,在ImageNet实现13.23% top-5错误率,接近反向传播。
中文标题:空间转录组学引导的对齐增强病理基础模型中的分子图谱分析
中文摘要:STAMP框架利用空间转录组数据对齐病理图像与分子通路,微调基础模型以增强分子感知,临床验证有效。
物理引导的自蒸馏策略优化
提出物理引导策略优化(PGPO),用互信息调节步长,在Science-QA提升最高4.5点,防止训练崩溃。
速通表格基础模型预训练
社区速通nanoTabPFN预训练,0.92分钟达目标,加速81倍,开源可参与。
AnchorMoE:通过锚定路由混合专家模型实现可解释时间序列分类
AnchorMoE基于MoE架构,对片段编码分解预测,引入正交约束与可靠性门控,实现可解释且高性能的时间序列分类。
加法的形状:大型语言模型中算术的几何结构
提出噪声量化模型解释算术错误的几何滑移机制,通过几何一致性检查检测和纠正推理中的量化失败。
PURGE:保留引导擦除的投影遗忘算法
利用持续学习与遗忘对偶性,通过保留引导梯度投影和表示擦除实现高效遗忘,保留准确率>96%,隐私性接近理想。
Multi²:交互式环境中基于LLM智能体的分层多智能体决策
提出分层多智能体框架Multi²,高层生成子目标,低层强化学习执行,缓解目标漂移,提升交互鲁棒性。
保持存活:基于表格基础模型的无删失生存分析
利用表格基础模型免训练进行生存回归,迭代插补右删失数据构建加速失效时间模型,性能与需训练模型相当。
图标记的沉没现象:图语言模型的机制分析
图标记的激活显著性与图语义效用解耦,沉没标记非主要信息载体,暴露现有构造局限。
基于后验采样的保形语言建模
提出基于后验采样的保形语言建模,通过校准实现风险控制,在保证统计保证下提升生成效用。
先压缩后合并:从多个LoRA到一个低秩适配器
提出先压缩后合并方法,在共享子空间压缩后合并多个LoRA,保证低秩结构,避免截断损失,性能优于现有方法。
图神经网络在无线冲突图中的极限分析
针对稀疏随机几何图冲突图,建立GNN转移性理论,在链路调度中验证优于基准。
熵引导下的工具感知优化实现高效智能体强化学习
TAO-RL框架通过工具感知轨迹过滤与熵引导探索优化数据与策略,显著提升推理性能。
中文标题:在基于可验证奖励的强化学习中用合成增强替代人工策展
中文摘要:研究用门控过滤的合成增强替代人工策展,成本交换率1.4-11.6倍,且保持泛化性能。
强化学习中的易用型安全屏蔽
提出tempestpy库,将盾牌合成集成至Gymnasium,降低安全探索门槛,并扩展支持随机多人游戏及MiniGridSafe环境。
基于少样本适应重新评估持续学习
提出少样本评估框架,更全面衡量持续学习系统的稳定性与塑性,发现元学习未来任务能诱导学习能力。
TreeFlash:并行自回归近似加速推测解码
TreeFlash用MLP近似自回归分布,保留O(1)解码复杂度,块效率提升12%,加速9%。
面向图着色的对比神经算法推理
提出对比学习框架用于图着色,使同色节点嵌入对齐、相邻节点分开,实现可迁移的低冲突着色。
Online Learning with Gradient-Variation Interval Regret
基于文本选择与属性匹配的文本属性图压缩
通过文本选择和属性匹配压缩图数据,精度提升4.9%,可压缩至1%体积。