新闻中心
-
08-01【AI达人特训营】基于飞桨实现系统认证风险预测-异常检测该项目基于百度飞桨实现系统认证风险预测的异常检测。先对用户认证行为数据处理,提取特征如时间差、不同维度的统计量等。构建含多层全连接层的分类模型,用kl_loss...
-
08-01【NIPS 2025】弥合鸿沟:重新考虑Softmax和线性注意力本文分析了Softmax与线性注意力的性能差距,指出核心在于单射性质和局部建模能力。线性注意力因非单射导致语义混淆,且局部建模不足;Softmax注意力则具备单...
-
08-01HarDNet:一个低内存占用率网络本文介绍HarDNet模型,其通过设计CNN减少特征图DRAM内存交互,以CIO为衡量指标,优化计算量与显存交换,提升推理时间30%~40%。文中含Pytorc...
-
08-01【动手学Paddle2.0系列】CosineWarmup本文介绍CosineWarmup训练策略的实战教程,含理论与代码。理论部分说明Warmup(学习率预热,初始用小学习率再调大)和余弦退火策略(依余弦函数降学习率...
-
08-01【ICLR 2025】自适应傅里叶神经算子:Transfomer的有效令牌混合器自适应傅里叶神经算子(AFNO)是一种高效令牌混合器,基于傅里叶神经算子(FNO)改进,在傅里叶域实现令牌混合。通过块对角结构、自适应权重共享及软阈值稀疏化频率...
-
08-01【ICLR 2025】RegionViT:从区域到局部的ViTRegionViT提出从区域到局部的视觉Transformer结构,以金字塔结构引入区域到局部注意替代全局自注意。先生成不同贴片大小的区域和局部令牌,经区域自注...

