UltraEP:在机架级节点上以近最优负载均衡释放MoE训练与推理能力
UltraEP首个精确负载实时均衡器,在机架级节点上实现近最优均衡,吞吐达理想94.3%,不平衡降至1.01-1.04。
veriFIRE:基于深度神经网络的野火检测系统的一致性属性验证的工业案例研究
合作验证野火检测系统一致性属性,获得领域特定保证,但高维规格验证仍具挑战。
D^2SD:使用双扩散草稿模型加速推测解码
提出双扩散草稿框架,通过置信度引导前缀树批量生成候选并联合验证,提升推测解码效率。
迈向针对稀疏、连续及结构化参数攻击的通用防御
提出ParDef通用防御,结合重参数化、纠错量化与自适应推理,有效抵御多种参数攻击,保持高模型性能。
带学习相互作用的非局部平均场薛定谔桥
用神经网络近似非局部相互作用,将计算成本从二次降为线性,导出稳定性界,在导航和意见动态任务上有效。
表征在音频分类的随机平滑中至关重要
音频随机平滑需明确认证对象与预处理策略,不同表示影响鲁棒性认证,建议报告任务特定参数。
深度神经网络中晶体管长期与短期老化:影响与缓解
晶体管老化降低DNN精度,老化感知重训练能在激进保护带下维持精度,短期老化可检测硬件木马。
Calo三部曲:迈向现代量热器一步式、端到端、物理引导的簇射生成的突破
提出一步式端到端物理引导生成框架,结合速度场积分器与数据先验,几步评估即达SOTA质量并保持物理一致性。
基于Knockoffs的深度神经网络假发现率控制与简化
提出三种控制假发现率的变量筛选方法,有效简化深度神经网络,性能优越。
REGAIN:基于调和增益的辅助方向学习
REGAIN框架通过学习辅助方向并筛选,优化调和预测,降低目标不确定性。
平坦性与泛化:使用齐次神经网络学习多指标模型
揭示在齐次神经网络中,最平坦插值器总能泛化,建立平坦性与泛化的直接联系。
扩展数据集以支持自主系统中的多传感器、多智能体和多领域学习
提出模块化数据生成管道,生成TB级多传感器/智能体标注数据,支持可控实验与协同自主。
随机最短路径问题的贝叶斯学习
提出贝叶斯框架学习随机最短路径问题最优策略,直接构建后验分布,解决不可识别性问题,数据效率高。
Modeling and Interpreting Teamwork Dynamics in Cancer Care Outcome Prediction
分布近似最近邻搜索用于不确定性感知检索
DINOSAUR框架通过双端采样嵌入隐式纳入不确定性,提升长尾覆盖,不改变模型或索引。
ReSGA:一种用于学习风险价值与预期损失的大型尾部风险模型
ReSGA利用百万参数与资产特征,在1926-2023美国股票数据上超越12种模型并带来经济收益。
QPredSGG:面向长尾场景图生成的混合量子谓词学习
提出混合量子谓词头(QP-Head),仅用96个量子参数,在Visual Genome上mR@100达57.25%,超越经典方法。
基于仿真辅助智能感知重建不可观测温度场
基于随机物理仿真生成数据集,训练神经网络从稀疏传感器实时重建不可观测温度场,鲁棒性优于克里金法。
U-Net加速的质量多样性优化用于气候适应性城市布局
U-Net替代物理模拟,实现城市布局离线优化,仅需一次随机样本即达高精度,十分钟生成数千种布局。
在GPU上使用可选的单调性约束拟合散乱数据:LipFit包
提出GPU上带单调性约束的散乱数据Lipschitz插值/逼近法,基于紧上下近似,无训练阶段,LipFit包实现。
COP-Q:基于Cholesky有序投影的安全优先强化学习方法
COP-Q通过Cholesky分解联合估计Q值,在保证安全的同时降低奖励过度保守,提升样本效率。
网络上的近最优分布式随机凸优化
提出加速分布式方法,利用一步延迟方案使worker数达√ρ N^{3/4},保持集中速率且对数最优。
FoeGlass:简单上下文学习即可红队测试音频深度伪造检测器
FoeGlass首创黑盒自动红队方法,利用LLM上下文学习生成音频,使检测器假阴性率提升94%,无需人工,攻击可迁移,微调后鲁棒性提升41%。
动态一致性子模最大化的一般框架
提出全动态一致性子模最大化框架,首次实现常数因子近似与子线性一致性,涵盖基数与拟阵约束。
NLLog:通过日志到语言重写实现轻量级、可解释的SOC异常检测
NLLog将日志模板重写为自然语言句子,结合TF-IDF和树集成分类,在多个数据集上实现低误报率,适合SOC快速分诊。
用全同态加密保护因果结构学习中的数据隐私
提出基于全同态加密的因果结构学习方法,通过电路简化、除/对数近似和SIMD加速,实现隐私保护且高效实用。
基于Transformer的自动驾驶模型与面向部署的压缩综述
综述Transformer自动驾驶模型及部署导向压缩,强调压缩作为系统级设计影响可部署性与安全性。
人机交互的馈赠:混杂环境下的超级强化学习
利用人机交互的超级策略学习,在混杂环境中获得优于标准策略的超级策略,近端因果推断保障理论性质。
中文标题:用于可扩展、内存高效、几何灵活算子学习的核神经算子(KNOs)
中文摘要:KNO利用深度核积分算子实现算子学习,解耦核与积分,支持不规则几何,精度高且参数少一个数量级。
用Shapley组合解释单纯形上的概率预测
用Aitchison几何的Shapley组合,公理唯一解释多类概率预测,避免逐类计算的缺陷。
学习随机归约
提出Bitween自动学习随机自归约,Agentic Bitween结合LLM发现新查询,在80个函数中64个发现RSR,优于纯神经基线。
通过自编码器同时训练状态空间模型,学习控制仿射降阶模型,扩展序列模型提高预测精度
提出用自编码器同时训练状态空间模型,学习控制仿射降阶模型,并扩展序列模型提高预测精度
随机化探索何时以及为何有效(在线性赌博机中)
提出新方法证明光滑强凸线性赌博机中随机探索算法可达最优维度依赖遗憾界。
使用结构化矩阵定制Softmax注意力机制的归纳偏置
利用高效结构化矩阵设计注意力评分函数,解决高维输入信息损失与计算偏置缺失问题,在语言建模与长程预测中表现优异。
结合深度表示与浅层探索的神经方差感知对决式强盗
首个方差感知对决式强盗算法,网络宽度从T^{14}降至T^{6},实现亚线性遗憾,性能领先。
后训练校正:提升时间序列预测性能
提出后训练校正方法,顺序校正预测结果,轻量模型无关,提升准确率最高30%,计算开销小。
非线性动力学的认证神经近似
新方法提供形式化误差界,使神经近似安全替代非线性动力学,性能超越现有技术并解决新场景。
MesaNet:通过局部最优测试时训练进行序列建模
提出可并行化的Mesa层,用共轭梯度优化上下文损失,在十亿参数规模下优于现有RNN,但推理计算量更大。
模型保持自适应舍入
提出YAQA自适应舍入算法,直接优化网络输出误差并给出首个端到端误差界,误差比GPTQ降低30%,优于量化感知训练,无推理开销。
利用数据驱动的人工智能揭示复合洪水机理
研究发现复合洪水受地下水饱和度等空间耦合状态主导,挑战了以降雨和时间序列为中心的预测范式。
时间序列预测即推理:采用强化LLMs的慢思考方法
提出Time-R1,两阶段强化微调增强LLM多步推理,显著提升预测性能。
策略梯度中重用轨迹实现快速收敛
RT-PG算法重用过往轨迹并采用多重重要性加权,使策略梯度样本复杂度降至Õ(ε^{-1}),实现快速收敛。
DiScoFormer: 基于Transformer的即插即用密度与得分估计
一次训练、随处推理的等变Transformer,从样本估计密度和得分,精度优于KDE,用作即插即用得分解偏器。
KITE:上下文学习中的核化与信息论示例选择方法
提出基于信息论的查询特定示例选择方法,结合核技巧与多样性正则化,显著提升分类任务性能。
利用受控释放提示绕过生产中的提示防护
提出受控释放提示攻击,利用资源不对称绕过LLM输入过滤器,成功攻破四大聊天平台并提取版权数据,现有防护模型难以检测。
基于方差门控分布的不确定性估计
提出基于信噪比的不确定性估计框架,用方差门控度量分解不确定性,并探讨模型多样性坍塌。
加速静电生成模型
提出逆泊松流匹配(IPFM)加速静电生成模型,通过逆问题蒸馏实现高质量生成,有限D下收敛更快。
单纯形嵌入提升执行者-评论者智能体的样本效率
提出单纯形嵌入,利用几何归纳偏置生成稀疏离散特征,稳定评论家自举并强化策略梯度,显著提升样本效率与性能,且不损失运行速度。
提示转权重
将提示转化为与令牌无关的思想向量和矩阵,实现可复用的权重更新,用于直接编辑模型。
测试时基于预对数空间重要性采样的奖励引导语言模型对齐
提出AISP方法,在预对数空间加高斯扰动,通过重要性采样最大化期望奖励,优于其他测试时对齐方法。