稀疏混合专家模型中不连续性的几何与随机分析
分析稀疏混合专家模型不连续性,低阶不连续主导,并设计平滑机制提升性能。
INDEQS:信息型神经控制微分方程
INDEQS将图先验知识融入神经控制微分方程,在时空预测中降低误差。
基于平滑性的PAC-Bayes界去随机化
利用损失和平滑性,将吉布斯预测器去随机化为均值预测,通过Rademacher复杂度与雅可比-海森正则化获得确定性泛化界。
JourneyFormer:利用序列建模编码Airbnb客人旅程
Airbnb部署JourneyFormer序列模型,解决长序列与稀疏标签挑战,显著提升搜索排序效果与业务指标。
带奖励机的帕累托Q学习
PQLRM融合帕累托Q学习与奖励机,高效处理非马尔可夫多目标奖励,快速收敛并生成帕累托最优策略。
面向多任务学习的本质子空间合并
针对多任务合并干扰,发现任务更新能量集中于主方向,提出本质子空间分解合并(ESD/ESM)正交化主成分,减少干扰实现高效融合。
OrthoReg:面向混合符号-神经动力系统的正交正则化
OrthoReg通过惩罚符号与神经成分重叠,防止冗余,提升符号恢复与分布外泛化。
用于高效Transformer的互补注意力头剪枝
CAHP用图论和信息论自动剪枝互补注意力头,避免梯度法偏见,在SST-5和MNLI上表现更优。
ChronoSurv:一种临床路径引导的多模态生存分析图框架
ChronoSurv提出分层有向图框架,将临床轨迹建模为多模态生存分析,实现最优预测与校准性能。
奖励始终蕴含在数据中:判别器引导的强化学习修正流匹配
DRL用预训练空间判别器logit作奖励,无需人类偏好,显著提升流匹配模型的图像质量与语义一致性。
Compute Efficiency and Serial Runtime Tradeoffs for Stochastic Momentum Methods
机制引导的选择性遗忘用于RLVR诱导的推理
MAST通过注意力张量排序实现选择性遗忘,减少对保留任务的损害,保持推理性能。
VLA模型真的了解基础知识吗?评估视觉-语言-动作模型中的常识与世界知识保留
提出Act2Answer协议评估VLA知识保留:简单概念表现良好,语义类别差距大,VQA联合训练提升保留。
SCAN:通过多尺度邻域中心聚类增强时间序列异常检测
SCAN利用多尺度邻域中心聚类,在表示和异常准则层面结合聚类与重建,平衡泛化问题,实现最优检测性能。
利用零开销遥测检测隐藏的ML训练
通过零开销NVML遥测分类GPU工作负载,对抗鲁棒性评估显示识别训练任务准确率98.2%,对伪装负载达43-87%。
一种人在回路的贝叶斯优化框架用于考虑约束的生物过程开发
提出约束感知的人在回路贝叶斯优化框架,通过多目标Pareto展示性能与鲁棒性折衷,支持专家交互选择。
基于普适环境感知信息的ICU谵妄风险分层
研究发现环境声音是谵妄主要预测因子,结合光照可提升短期预测,卷积模型AUC达0.80,为多模态预防提供新途径。
预测关键要素:面向未知出发时间的电动汽车充电控制决策聚焦强化学习
提出决策聚焦RL框架联合训练预测器与控制器,总奖励提升14%,未供应能量减少55%。
AGDN:基于各向异性图扩散网络学习求解旅行商问题
提出AGDN框架,利用MixScore过渡矩阵和各向异性图扩散,高效求解TSP,性能优越且泛化性强。
面向网络入侵数据集的XGBoost模型机器遗忘
针对表格网络入侵数据,提出XGBoost-Forget方法,高效遗忘且保持模型性能。
扩散证明:超越自回归生成的形式化定理证明方案
提出Diffusion-Proof框架,通过扩散模型实现长程连贯证明与局部修正,显著超越自回归基线,并攻克IMO难题。
随机热力学与基于SDE的生成模型
将SDE生成模型融入随机热力学,定义轨迹功、热、熵产生,导出广义Jarzynski恒等式及类第二定律不等式。
利用神经网络预测中微子质量顺序
神经网络能有效预测中微子质量顺序,性能与传统方法相当,提供灵活交叉检验。
P-K-GCN: 物理增强的Koopman增强图卷积网络用于深度时空超分辨率
P-K-GCN融合物理增强与Koopman理论,实现不规则几何时空超分辨率,理论降低误差且实验精度高。
用程序合成解释注意力
提出用可执行程序近似模型注意力头,自动生成Python程序再现注意模式,替换25%头仅增16%困惑度,保持下游任务性能。
融合多标签分类与生成式AI的用户反馈可扩展分析
采用多标签分类和生成式AI高效处理用户评论,发现情感分析无法可靠反映满意度,需通过调查直接评估。
UBP2: 不确定性平衡的偏好规划——高效基于偏好的强化学习方法
提出UBP2方法,联合推理奖励、动态和价值函数不确定性主动探索,显著提升样本效率,理论有亚线性遗憾保证。
一种物理自适应材料运动单元神经网络:基于湿敏变形复合材料的机器
利用木质碳黑温湿致动器构建神经网络,经实验数据训练实现动态遮阳预测与配置优化。
A Guide to Estimating Conditional Average Treatment Effects in Competing Risks Settings
图实例景观:结构相似性何时(不)反映最短路径性能
实例景观法发现图结构相似性不一定对应最短路径性能,不同基准族结构区域分离。
多智能体大型语言模型系统中并发异常的可验证检测与预防
建模四种并发异常并验证一致性层级,部署Rust运行时,修复实际系统中异常。
探测、融合与可信度:基础模型表示在多模态癌症分析中的系统评估
基础模型表示在分布外数据表现优异,多模态融合在单模态不占优时有效,共形预测提升诊断可信度。
信息性缺失用于生成不规则临床时间序列
扩散模型联合建模实验室值和缺失模式,生成与真实轨迹匹配的临床时间序列。
成对时正确,拆开时错误:多模态大语言模型中模态特异性神经元的解耦与编辑
DECODE解耦模态特异性神经元,解决多模态编辑在成对和拆分输入下知识更新不一致问题。
中文标题
模型预填充阶段记笔记,KV缓存可编辑(修正字段恢复决策)且可组合(拼接技能),延迟降低14.9倍,兼容前缀缓存。
模型选择在因果推断中的关键作用:药物警戒中InferBERT框架内分类模型的比较分析
领域特定预训练模型BioBERT准确率最高,大型医学LLM表现不佳,表明领域适配比模型规模更关键。
噪声驱动的亚稳态逃逸解释深度神经网络中的顿悟现象
顿悟源于噪声驱动亚稳态逃逸,逃逸时间符合Arrhenius定律,与L2正则化一阶相变滞后一致。
面向复杂地质构造中CO2运移的快速图神经网络替代模型
提出图神经网络替代模型预测CO2运移,在基准测试中实现竞争性预测,误差可控。
MODE:面向MoE多模态大语言模型的模态分解专家级混合精度量化
MODE通过模态分解与冗余过滤,结合敏感度评估实现混合精度量化,降低MoE多模态模型性能损失至2.9%以内。
诊断与修复长距离单次条纹投影轮廓术中的形状先验捷径
通过机械可解释性与不确定性量化诊断出形状先验捷径,提出PhiCalNet架构修复,物体平均误差从14.54mm降至4.46mm。
棒球投球序列的反事实优化及其对赛季水平统计影响的估计
利用Transformer模型优化MLB投球序列,反事实分析显示优化最终及前期投球可显著提升赛季表现(如K/9提高超1.0)。
裂隙:语言模型中欺骗行为的冲突信号
发现自欺模型残差秩比错误高2.1-2.3倍,可100%准确检测欺骗,跨模型语言,不可注入。
基于多项式混沌展开与多元主动学习的工程结构不确定性量化
针对多输出工程问题,提出自适应序贯采样PCE方法,平衡空间探索与方差利用,提升代理精度与稳定性。
ProCUA-SFT技术报告
提出310万步骤级SFT数据集,自动管道生成,微调UI-TARS 7B在OSWorld达45.0%,提升18.7个百分点。
重新思考免评论家RLVR中的分组问题
提出负标记过滤策略,实现单rollout训练,克服分组低效与同步障碍,性能更优。
不确定性下的决策驱动地质导向:顺序决策优化的统一框架
整合粒子滤波与强化学习的地质导向框架,评估三种决策方法,在工业仿真器中验证决策稳定性。
基于原始-对偶推理的约束扩散模型
提出原始-对偶推理约束扩散模型,联合推断分布与对偶变量,通过反向扩散中对偶上升更新,收敛到最优邻域。
芬斯勒几何、图神经网络与你
提出芬斯勒拉普拉斯算子的图神经网络层,证明其收敛,恢复非线性扩散几何。
PowerOPD:通过有界幂变换稳定在线策略蒸馏
PowerOPD用有界幂变换替代对数比率奖励,稳定训练,数学推理性能提升达6.37%,计算成本降低59%。
鲁棒半空间学习中重加权铰链方法的平方和度障碍:一种Christoffel函数刻画
盲点大小由Christoffel函数精确刻画,导出重加权铰链方法的度-2障碍与裕度-度权衡。