电子商务中基于混合Ret-DNN与XGBoost模型的客户行为预测分析
提出混合Ret-DNN与XGBoost模型预测客户购买,MAE达0.2193,优于现有Ret-DNN。
LoopCoder-v2:仅需一次循环的高效测试时计算扩展
并行循环Transformer中两次循环性能最优,更多循环因位置偏移成本压倒收益导致性能下降。
KANLib——一个模块化、可扩展且快速的科尔莫戈罗夫-阿诺德网络实现
KANLib是模块化、可扩展、高效的KAN框架,统一多种实现,性能优异,为可扩展KAN研究奠定基础。
多重周期性与通道相关的小波分解用于长期时间序列预测
McWC模型分别建模周期、趋势与通道相关,结合多层周期构建和小波分解,高效实现长期预测,达到最优性能。
SoftMoE: 面向大语言模型专家混合的软可微路由
SoftMoE以可微软路由替代离散top-k,实现专家容量跨层自适应分配,性能相当且激活更少专家。
半链接足以预测完整链接:知识图谱基础模型的泛化理解
研究发现KGFMs依赖已见半链接预测,未见半链接构成新挑战,提出细粒度分类作为泛化诊断协议。
C2FL:空间和时间漂移下的聚类持续联邦学习
C2FL通过空间聚类自组织学习组,结合经验回放与停留时间自适应平均,应对时空漂移,恢复鲁棒集体适应。
单调柯尔莫戈洛夫-阿诺德网络:单调性作为归纳偏置的理论与实证研究
提出MKAN,通过指数重参数化实现硬单调性,证明表示成本定理,在基准测试中表现优异。
掩码扩散模型中的递归缩放
R-MDMs通过递归深度实现缩放,提升参数效率,减少推理前向传递次数,性能媲美更大模型。
维度控制模块化在持续学习中的生效条件
初始化尺度决定模块化在持续学习中的优势,低维丰富模式下模块化网络形成可解释组合结构。
灾难性遗忘是低秩的:持续适应的函数空间理论
发现遗忘集中在少量旧任务NTK本征模,提出低秩特性及Kronecker缩放规则。
ConTex:重构面向时间序列预测的反事实生成
ConTex通过全局一致干预策略与分解架构,实现实时反事实生成,计算成本降低12-36倍。
三元Mamba:W1.58A16状态空间模型的分组量化感知训练
从预训练检查点QAT训练,以千分之一token预算压缩Mamba-2至3.61倍,精度接近SOTA,发现零比率坍缩。
Volterra生成模型
提出基于分数核的路径相关噪声连续时间生成模型,用马尔可夫提升处理非马尔可夫动力学,在MNIST和CIFAR-10上提升生成效果。
边缘流:稳定边缘梯度下降的可处理且可预测的连续时间模型
提出Edge Flow模型,分解动力学,锐度自稳定反馈,有效跟踪预测梯度下降的稳定边缘行为。
NoiseTilt: 噪声倾斜反向核用于扩散奖励对齐
通过噪声注入奖励梯度的噪声倾斜反向核,固定反向均值,在保持采样质量的同时实现高效奖励引导,计算量降低20倍。
从推理迹到可复用模块:理解语言模型推理中的组合泛化
SFT提供模块材料,RL分解迹并识别原子模块,两者互补实现推理组合泛化,复合迹训练泛化更强。
S4oP:面向资源受限设备的结构化状态空间模型算子级剪枝
提出S4/S4D模型算子级剪枝,剪除70%算子仍保持性能,显著降低推理延迟。
面向最小零强制集的深度强化学习方法
本文提出基于S2V-DQN的强化学习框架SD-ZFS,解决NP难的图最小零强制集问题,性能优于最优解与贪心启发式。
多目标强化学习中学习公平的帕累托最优策略
提出多策略MORL框架,学习公平帕累托最优策略集,通过状态增广和随机策略提高公平性。
RadSEM:一种针对放射学报告临床一致性的逐发现度量指标
RadSEM利用LLM分解报告为发现句子,通过矛盾约束匹配与异常加权评分,提升临床一致性评估的准确性与可解释性。
符号秩、指数与列表可复制性:联系与分离
证明Z2指数受列表可复制数线性上界,实现符号秩与Z2指数强分离,并给出列表可复制数的组合上界。
损失景观投毒:从大语言模型中定向提取未见过的训练数据
投毒重塑损失景观,强制模型记忆未见数据,提取成功率最高100%,差分隐私可被新攻击绕过。
基于CFD合成数据的船舶自由航行机动系统辨识的正则化机器学习:一项比较研究
正则化机器学习从CFD数据辨识船舶水动力系数,Ridge回归有效缓解多重共线性,提升预测精度且效率佳。
嵌入式机器学习用于微控制器类边缘设备:数据、特征、评估与部署流水线
本文系统阐述微控制器平台嵌入式机器学习工作流,聚焦采样、特征提取、验证及部署等工程决策,并给出鲁棒推理设计规则。
科尔莫戈罗夫回归用于鲁棒扩散策略
提出科尔莫戈罗夫回归将扩散策略的随机匹配转为确定PDE,提升收敛与轨迹正则,无需奖励检测故障,两任务中性能大幅提升。
循环世界模型
循环世界模型(LoopWM)通过参数共享迭代优化,实现百倍参数效率,开辟深度迭代新维度。
重思分类中的数据集蒸馏:蒸馏集能胜过核心集吗?
大规模实验表明,当前蒸馏方法不优于核心集,且成本更高,核心集更具竞争力。
Another Look at Log-PCA for Probability Measures: A Dynamical Formulation and Statistical Convergence
从压缩到部署:超受限微控制器上实时且能效优化的FastGRNN
566字节权重部署FastGRNN于8/16位MCU,F1达0.918,50Hz实时推理,查找表节能96.7%
基于确定性积分时间的哈密顿动力学的加速凸优化
利用哈密顿流平均轨迹压缩性,实现加速凸优化算法的确定性收敛保证,并推导出最优一阶复杂度离散实现。
VISTA:通过动作历史条件化的尺度感知视觉导航
提出VISTA,用动作历史条件化解决归一化动作的尺度敏感问题,结合DINOv3编码器,实现零样本高精度导航。
贝叶斯布尔矩阵分解及其在癌症拷贝数分析中的应用
提出贝叶斯布尔矩阵分解,通过全共轭吉布斯采样实现布尔约束与不确定性量化,应用于癌症拷贝数分析,发现可解释的共变异模式。
Turning music identification into a neural forward pass
面向架构材料的秒级损伤适应
利用低维损伤表示与集成方法,软驱动系统可在一分钟内实时适应灾难性损伤,样本复杂度从指数降至线性。
无穷可交换序列的有界差分集中性及其在AI基准不确定性中的应用
提出无穷可交换序列集中不等式,零和对比消除混合项,为AI基准不确定性提供紧界。
深入探究大型音频语言模型的时间理解失败模式
发现模型误用文本忽视音频,重分配注意力比放大更有效,缩放可提升准确率至59.1%。
低次稀疏布尔多项式的紧$L_\infty$样本复杂度
研究布尔多项式代理的均匀$L_\infty$样本复杂度,得到度$d$和$s$稀疏的紧界分别为$n^{d+1}$和$ns^2$。
关于生成式推荐中LLM的记忆行为:观察、启示与训练策略
LLM在推荐中过度依赖单跳记忆,提出IIRG策略学习多跳协作与语义关系,显著提升其他用户性能。
面向基于流的视觉-语言-动作模型的不确定性量化
利用速度场差异量化不确定性,用于故障检测与主动微调,SAVE框架减少22%专家演示样本。
AoiZora:面向扩散变换器推理的拓扑感知自动并行优化
AoiZora通过拓扑感知编译优化,在TPU子片上实现视频扩散推理延迟降低1.42倍。
科学机器学习替代模型的域有效性门控蜕变测试
提出域有效性门控蜕变测试方法,筛选并执行替代模型的蜕变关系,区分模型错误与域外应用。
纽约市拥堵收费后公共交通收益与空间不均的出行需求变化
纽约市拥堵收费后,公交地铁客流显著增加,总出行需求微降,空间影响不均,凸显公平性问题。
超越IGO流:连续空间中IGO收敛性分析探讨
研究离散时间IGO在连续空间的收敛性,证明协方差矩阵趋于零,均值向量在条件数有界时收敛至全局最优。
图神经网络中的几何公平性
通过修改拉普拉斯算子结合子空间投影、谱调整等操作提升图扩散公平性,理论分析与实验验证效果。
快速非参数条件独立性检验的两阶段回归方法
BLITZ通过宽到局部残差化,实现快速且校准良好的非参数条件独立性检验,适用于因果发现。
高斯过程后验抽样的差分隐私
推导GP后验抽样的Rényi-DP界限,揭示隐私依赖于正则化,可加噪声增强。
INI-VPINN:一种隐式处理Neumann和界面的变分物理信息神经网络,适用于含几何奇异性的多材料区域
提出INI-VPINN,隐式施加通量和连续性约束,在多材料复杂几何问题上实现更高精度、更平滑和更快收敛。