E³-Agent:面向边缘生成推理资源管理的可执行与进化智能体
E³-Agent通过分离快速路由与慢速LLM控制,在线适应边缘生成推理动态,降低延迟65%-73%。
HEAL: 弹性自愈型枢纽学习
HEAL融合联邦与流行病学习,动态选聚合器,去中心化且容错,无崩溃时性能接近联邦学习,崩溃环境更优。
用混合专家模型应对多模态学习挑战:综述
综述MoE如何通过高效扩展、表示学习与灵活适配解决多模态挑战,并指出关键研究空白。
度量感知PCA作为几何深度学习的线性实例
MAPCA通过正定度量矩阵参数化PCA,实现等变性与不变性,是几何深度学习的线性实例。
液态神经网络与LSTM在序列模式识别中的对比分析:鲁棒性、效率与临床实用性
液态神经网络在参数效率和鲁棒性上均优于LSTM,尤其在临床数据稀疏场景表现更佳。
架构驱动偏移:捕捉logit偏移趋势的轻量级选择器
提出架构驱动偏移(ADS)作为logit偏移趋势的轻量级代理,高效选择持续学习模型,实验验证强单调相关性。
自行检测:面向少样本图异常检测的自设计代理工作流
提出SignGAD框架,将固定检测器转为自设计工作流,结合护式重拟合策略,提升少样本下检测性能。
异构仿真环境中联邦强化学习的个性化观测归一化
针对异构环境,提出个性化观测归一化,本地归一化状态输入,加速训练且性能更优。
IGADA-IoT:自动数据增强驱动的无线传感器网络中物联网传感器能效优化
提出IGADA-IoT框架,通过分层多生成器协作与信息差距-性能联合闭环,提升数据增强决策,平均精度提高7.27%。
GenSBI:基于JAX的仿真推理生成方法
GenSBI是一个基于JAX的开源库,实现流匹配与去噪扩散,提供三种Transformer架构,在仿真推理基准上达到接近理想性能。
SparseOpt:解决稀疏训练中归一化引起的梯度偏斜
动态稀疏训练因批归一化导致梯度偏斜而收敛慢;提出SparseOpt优化器,实现更快收敛和更好泛化。
能源盲点:英伟达旗舰边缘AI硬件无法支持进程级能耗归因
英伟达GB10边缘AI硬件缺乏CPU能耗监测,导致进程级能耗归因不可行,需外部计量或标准路径解决。
银行卡支付欺诈检测的根本局限
支付欺诈检测瓶颈在于反馈延迟、审查与缺失等结构性信息障碍,而非模型复杂度。
信息论视角下的心电图信号多模态表示学习
提出MERIT框架,结合掩码建模与文本对比学习,显著提升心电图分类与零样本性能。
梯度变换器:学习为大语言模型生成更新
提出梯度变换器,将小模型更新向量转换为大模型更新向量,无需私数据且支持多组织协作,性能领先。
基于方差正则化剪枝的资源受限情感建模
提出方差正则化剪枝框架,在80%稀疏度下保持高准确性,适用于资源受限的实时情感系统。
通过对称注意力分解在扩散模型中平衡保真度与多样性:Hopfield视角
将注意力矩阵分解为对称与斜对称部分,分别控制能量与循环,推导Hopfield稳定性度量,调控保真度-多样性权衡。
基于能量结构的低秩适应持续学习
E²-LoRA通过能量集中与排序优化低秩适应,动态分配秩平衡稳定与可塑性,实现持续学习SOTA。
面向工业自动化中多变量时间序列异常检测的联邦学习
提出含循环动态的联邦学习多变量时序异常检测数据集,填补现有数据不足。
利用机器学习自适应有限差分模型加速月球车热分布分析
PIML框架集成自适应网格,精度提升50%/39%,速度提升3倍,实现月球车热建模的准确高效。
用于KV缓存压缩的Hurwitz四元数乘法量化
提出无校准的HQMQ,用四元数乘积量化压缩KV缓存,约5比特下性能近fp16,最高5倍压缩。
测试时集体行动:基于代理的扰动用于纠正算法伤害
用户群体通过共享API访问提取代理,优化通用扰动以纠正算法偏差,无需平台参与,实验证明有效降低子群准确率差距。
对齐LLM与人类不确定性:一种用于LLM预测的Beta-Bernoulli校准器
提出Beta-Bernoulli校准器(BBC),利用人类预测和二元结果监督,将点估计转为分布,提升LLM预测校准与准确性,且不确定性更可靠。
优化器如何塑造等变神经网络的学习解
Muon优化器在等变网络上优于Adam,解具更大曲率但更规则损失面,更高稳定与有效秩,提示优化器与几何偏置交互需关注。
基于概率潜在嵌入和动态策略适应的Sim-to-Real可迁移强化学习
提出利用潜在上下文推断和动态风险调整的强化学习框架,实现Sim2Real安全高效迁移。
Evaluating Local Explainability Metrics for Machine Learning Models on Tabular Data
复数神经网络何时有帮助?表示、几何与优化的研究
复数神经网络在幅度-相位任务中有效,但非普遍优越;其增益源于结构化归纳偏差,依赖表示、对称性与优化。
多模态大语言模型训练中的异构并行性
提出异构并行方法,模块独立布局放置,边界通信器保持张量语义,提升TFLOPS/GPU达49%,吞吐量达13%。
通过最优传输和依赖性最大化的监督分布约简
提出监督分布约简(SDR),结合最优传输与依赖最大化,学习紧凑表征,兼顾几何结构与监督信号,支持非平稳高斯过程。
从自己的隐变量学习,而非从词元:一种样本复杂度理论
证明隐变量预测样本复杂度与树深度无关,优于基于词元的学习,显式层级堆叠冗余。
Transformer中上下文事实回忆的微调动态
研究Transformer上下文事实回忆微调,证明模型通过成对注意力模式在极少样本下成功检索预先存储的事实。
用于对齐扩散模型的显式评论家指导
提出状态对齐潜在actor-critic框架,扩散模型自身作为值函数,实现轨迹级PPO及多奖励优化,性能超越基线。
NUCLEUS-MoE:液体冷却中池沸腾的统一模型
NUCLEUS混合专家模型统一建模池沸腾,覆盖多种流体,展现零样本和少样本泛化能力。
有限推出验证下学习型着陆控制器的贝叶斯部署批准
用贝叶斯后验推断评估着陆控制器部署准备,解决有限证据下过度自信问题。
基于几何感知算子学习与内存高效低秩注意力的高保真工业碰撞动力学预测
提出GeoTransolver框架,结合FLARE低秩注意力模块,实现工业级碰撞高保真预测,内存减半且精度提升。
工作节点分歧揭示本地SGD中的陡峭方向
工作节点分歧可廉价估计Hessian主导子空间,捕获梯度在尖锐方向的分量。
逐元素截断能否实现随机梯度的谱控制?
逐元素截断可平衡噪声结构与成本,实现谱控制,节省训练token并有理论保证。
Restoring the Sweet Spot: Pass-Rate Weighted Self-Distillation for LLM Reasoning
批次条件下LLM服务拒绝鲁棒性的配对测试协议
批次条件导致LLM拒绝安全标签翻转仅0.16%,输出不稳定性是关键;启用批不变核可消除翻转;建议配对测试并分报方向翻转与零效应。
密度感知的样本特定攻击
利用密度感知样本特定攻击,将触发样本置于数据低密度区域,实现>99%攻击成功率且免疫微调和剪枝防御。
SYNAPSE: 通过拓扑语义去噪的神经符号视觉思维到文本解码
SYNAPSE利用推理时符号正则化稳定脑电到文本生成,避免微调大模型,在多个基准上提升语义稳定性。
从检测到机制:交叉注意力图神经网络实现药物相互作用类型预测——基于乙酰水杨酸验证的消融研究
交叉注意力GNN使DDI类型预测F1提升45%,ASA验证全正确,证实原子级通信对机制分类的关键作用。
ReSAE:用于多层变压器干预的残差稀疏自编码器
ReSAE通过去除层间线性可预测结构,减少字典冗余,提升多层替换下的交叉熵恢复。
基于压缩八卦的分布式无参数在线学习
提出DECO-EF算法,针对压缩通信的分布式在线学习实现无参数化,首次证明期望次线性网络遗憾界。
CAREF:校准感知正则化方法用于解释忠实性而无需理由监督
提出CAREF,统一熵与稀疏正则化联合优化准确性和解释忠实性,轻量变体达最优性能。
从逆强化学习的奖励迁移:一种耦合极小极大方法
提出耦合极小极大法实现逆强化学习奖励迁移,消除源贝尔曼残差一阶影响,理论保证并实验验证。
面向LLM深度压缩的局部感知冗余剪枝
LoRP利用表征局部性,通过层间相似性聚类分配剪枝,无训练即可提升LLM推理效率。
重新审视全同态加密下的机器学习训练:收敛保证、差分隐私与高效算法
首次理论分析全同态加密下机器学习训练的收敛性,结合差分隐私算法,提高效率并保证收敛。
知道何时求助:大语言模型工具使用的段级信用分配
CARL通过段级信用训练评论家,让模型学会何时求助,在五个基准上提升准确率,减少不必要调用,小型模型获益最大。
现代Hopfield网络中的持续学习及其在扩散模型中的应用
利用Hopfield能量分析持续学习遗忘:高能量异常样本更易遗忘,能量引导回放可缓解遗忘。