[AAAI-2025]STDN:时空感知趋势-季节性分解网络在交通流预测中的应用

深度学习之LoRA(低秩适配)原理与实战 【代码】深度学习之LoRA(低秩适配)原理与实战。 阅读详情

论文简介:这篇论文提出了一种 时空感知的趋势–季节性分解网络(STDN) 用于交通流预测,针对现有方法在时空建模和序列分解方面存在的不足,联合建模交通数据中的空间依赖、时间周期性以及趋势与季节性结构。该方法通过引入时空嵌入来刻画时间周期特征与路网空间结构,并在此基础上学习动态关系图以捕捉节点间的高阶时空交互;随后,模型利用时空感知的分解机制将交通序列显式拆分为趋势项和季节项,并通过编码器–解码器架构进行预测。实验结果表明,STDN 在多个真实交通数据集上均优于现有主流方法,在保证较低计算开销的同时显著提升了预测精度,验证了时空嵌入驱动的分解建模在交通预测任务中的有效性。

论文链接:https://arxiv.org/pdf/2502.12213

代码链接:https://github.com/roarer008/STDN

1. 引言(Introduction)

1.1 研究背景

        随着智能交通系统(Intelligent Transportation Systems, ITS)的不断发展,大规模交通传感器被广泛部署于城市与高速路网中,用于持续采集交通流量、速度等关键时序数据。基于历史交通数据对未来交通状态进行准确预测,是交通调度优化、拥堵缓解与公共安全保障的重要基础。然而,交通流数据通常同时具有显著的空间相关性与时间动态性,其复杂的时空依赖结构为高精度预测带来了巨大挑战。

1.2 问题与挑战

        尽管近年来基于深度学习的时空预测方法取得了显著进展,但现有交通流预测模型在刻画复杂时空依赖结构方面仍存在若干不足。首先,在空间建模方面,许多方法依赖于基于道路拓扑或物理距离构建的静态图结构,难以刻画交通节点之间随时间变化的高阶交互关系,从而限制了模型对全局空间动态的表达能力。其次,在时间建模方面,虽然部分模型通过引入周期性特征或注意力机制来捕捉时间依赖,但往往未能显式区分不同时间尺度下的趋势变化与周期波动,导致对交通序列内在结构的建模不够充分。

        此外,近年来趋势–季节性分解被证明能够有效提升时间序列预测性能,但现有分解方法多针对单节点时间序列进行设计,忽略了交通网络中不同节点在空间与时间维度上的差异性与关联性。这种将分解过程与时空建模相互割裂的方式,难以充分发挥分解建模在复杂交通场景中的潜力。因此,如何在统一框架下联合建模交通流的动态空间关系、时间周期特性以及趋势–季节性结构,仍然是交通流预测领域面临的重要挑战。

2. 模型架构(Model Architecture)

2.1 整体框架概述

       为了联合刻画交通流数据中的动态空间依赖、时间周期特性以及趋势–季节性结构,本文采用一种端到端的时空预测框架,其整体架构如图所示。模型以历史交通流序列及道路网络结构作为输入,通过多个相互协同的功能模块逐步提取和增强时空特征,最终输出未来时刻的交通流预测结果。

       具体而言,模型首先通过时空嵌入学习模块对时间周期信息与道路网络的空间结构进行编码,从而为后续建模提供具有先验意义的时空上下文表示。在此基础上,引入动态关系图学习机制,以刻画交通节点之间随时间变化的高阶交互关系,增强模型对全局空间动态的感知能力。随后,结合所学习到的时空嵌入信息,模型通过趋势–季节性分解模块将交通流表示显式拆分为趋势项与季节项,从而更有针对性地建模不同时间尺度下的变化模式。最后,分解后的表示被送入编码器–解码器结构进行时序建模与预测,生成未来多个时间步的交通流结果。

       通过上述设计,模型在统一框架下实现了动态空间关系建模、时空感知的序列分解以及高效的时序预测,有效缓解了传统方法在时空建模与结构表达方面的局限。

2.2 关键模块设计

2.2.1 时空嵌入学习模块(Spatio-Temporal Embedding Learning)

       交通流数据在时间维度上通常呈现出显著的周期性特征,例如日周期与周周期;在空间维度上,不同交通节点则受到其在路网中所处位置及拓扑结构的影响。为显式刻画上述时空先验信息,模型首先引入时空嵌入学习模块,对时间周期特征与道路网络空间结构进行统一编码。

       在时间维度上,模型利用时间片对应的“时刻”和“星期”信息构建时间特征,并通过嵌入映射将离散的时间标识转化为连续的向量表示,从而使模型能够感知不同时间段之间的周期性差异。在空间维度上,模型基于道路网络的拉普拉斯矩阵提取节点的结构信息,并通过低维嵌入形式刻画各交通节点在全局路网中的相对位置关系。随后,时间嵌入与空间嵌入被映射到统一的特征空间,并融合生成时空感知嵌入表示,用以刻画不同节点在不同时刻所对应的时空上下文。

        通过引入时空嵌入,模型在后续建模过程中能够在数据驱动学习之外,引入具有明确物理和语义意义的先验信息,为动态关系建模和序列分解提供有效的引导。

2.2.2 动态关系图学习模块(Dynamic Relationship Graph Learning)

       在交通预测任务中,交通节点之间的空间依赖关系不仅受道路拓扑结构的影响,还会随着时间和交通状态的变化而动态调整。传统基于固定邻接矩阵的图建模方法难以刻画这种随时间演化的高阶空间交互关系。为此,模型引入动态关系图学习模块,以自适应的方式建模不同时间片下交通节点之间的动态关联。

       该模块通过学习节点嵌入和时间嵌入之间的交互关系,构建随时间变化的动态邻接矩阵,从而在不同时间步刻画交通节点之间的潜在联系。与仅依赖物理距离或静态拓扑的图结构不同,所学习的动态关系图能够捕捉到更丰富的全局空间依赖,使得模型在空间维度上具备更强的表达能力。在此基础上,模型利用动态图卷积操作对交通节点特征进行信息聚合,从而在每个时间步整合来自不同节点的动态空间信息。

        通过动态关系图学习,模型能够突破静态图结构的限制,更有效地刻画交通网络中随时间变化的空间交互模式,为后续趋势–季节性分解与时序预测提供更加准确的空间表征。

2.2.3 时空感知的趋势–季节性分解模块(Spatio-Temporal Aware Trend–Seasonality Decomposition)

        交通流时间序列通常同时包含长期变化趋势与周期性波动模式,对不同成分进行显式建模有助于提升预测性能。然而,现有分解方法大多针对单变量时间序列进行设计,忽略了交通网络中不同节点在时间与空间维度上的差异性与关联性。为解决这一问题,模型在前述时空嵌入与动态空间表征的基础上,引入时空感知的趋势–季节性分解模块,对交通流表示进行结构化拆分。

        该模块利用时空嵌入所提供的上下文信息,对交通节点在不同时刻的表示进行引导式分解。具体而言,模型根据节点的时空上下文信息提取与时间位置和空间位置强相关的趋势成分,并将剩余部分视为刻画周期性和局部波动的季节性成分。通过这种方式,模型能够在统一的时空框架下,对不同节点、不同时刻的交通流变化模式进行差异化建模。

        通过引入时空感知的分解机制,模型不仅避免了对交通序列进行粗粒度或静态分解,还使趋势与季节性成分在空间和时间维度上具备明确的语义约束,从而为后续的时序建模提供更加结构化和可解释的输入表示。

3. 实验结果与分析(Experiments and Analysis)

3.1 实验设置

        为全面评估所提出模型的预测性能,本文在多个真实交通流数据集上进行了系统实验。所使用的数据集涵盖不同规模和结构的交通网络,能够反映多样化的交通运行场景。各数据集均按照统一的时间间隔采样,并包含连续的历史交通流观测序列。

        在实验设置中,模型以固定长度的历史时间序列作为输入,用于预测未来多个时间步的交通流变化。为保证结果的可比性,所有对比方法均采用相同的数据划分策略,将数据集划分为训练集、验证集和测试集。模型性能通过多种常用评价指标进行衡量,包括平均绝对误差(MAE)、均方根误差(RMSE)以及平均绝对百分比误差(MAPE),以从不同角度反映预测精度。

        在实现层面,所有模型均在相同的实验环境下进行训练与测试,并采用一致的优化策略与早停机制以避免过拟合。相关超参数通过验证集进行选择,从而确保实验结果能够客观反映不同方法在交通流预测任务中的实际表现。

3.2 性能对比结果

        为验证所提出模型在交通流预测任务中的有效性,本文将其与多种代表性基线方法进行了对比实验,包括传统时间序列模型、基于循环神经网络的方法以及近年来提出的主流时空图神经网络模型。各方法在相同实验设置和评价指标下进行测试,以确保对比结果的公平性。

        实验结果表明,所提出模型在多个数据集和不同预测指标上均取得了最优或次优的性能表现。相较于传统时间序列方法,基于深度学习的模型整体表现出更强的预测能力,验证了深度模型在刻画复杂非线性时空关系方面的优势。进一步地,与现有时空图神经网络方法相比,本文模型在预测精度上仍具有稳定提升,尤其在中长期预测场景下表现更为显著。

       上述结果表明,通过联合建模动态空间关系、时间周期特性以及趋势–季节性结构,模型能够更充分地捕捉交通流数据中的关键变化模式,从而在复杂交通场景中实现更为准确和稳健的预测。

3.3 消融实验与分析

        为进一步分析模型中各组成模块的作用,本文设计了一系列消融实验,对模型的关键组件进行逐一移除或替换,并在相同实验设置下评估其预测性能变化。通过对比不同变体模型的实验结果,可以更清晰地理解各模块对整体性能的贡献。

        实验结果显示,当移除时空嵌入学习模块或动态关系图学习模块时,模型的预测性能均出现不同程度的下降,表明显式引入时间周期信息和动态空间依赖对于准确建模交通流具有重要作用。特别地,去除动态关系图后,模型在部分数据集上的性能下降更为明显,说明动态图结构在捕捉交通节点间高阶空间交互方面具有不可替代的作用。

        此外,当将时空感知的趋势–季节性分解模块替换为不考虑时空上下文的分解方式时,模型性能同样出现明显退化。这一结果验证了在交通网络场景下,将序列分解过程与时空信息紧密结合,有助于提升模型对复杂交通模式的刻画能力。

3.4 参数敏感性与模型稳定性分析

       为评估模型对关键超参数设置的敏感性,本文进一步分析了解码器层数以及特征维度对预测性能的影响。如图 2 所示,在不同参数配置下,模型的预测误差整体变化较为平滑,表明所提出方法对超参数设置具有较好的稳定性。随着解码器层数的增加,模型性能在一定范围内逐步提升并趋于稳定,说明模型在捕捉复杂时空模式时并不依赖过深的结构。同时,特征维度在适当范围内的增加有助于提升模型表达能力,但过高的维度可能引入冗余信息,从而导致性能轻微下降。

3.5 计算效率与训练行为分析

        在保证预测精度的同时,模型的计算效率也是实际应用中需要考虑的重要因素。如图 3 所示,本文方法在训练时间和推理时间上均优于部分性能相近的基线模型,表明所提出的框架在建模能力与计算开销之间取得了较好的平衡。这一优势主要得益于模型在结构设计上的简化以及对时空特征的高效建模方式。

       此外,图 4 展示了模型在验证集上的训练过程变化情况。可以观察到,本文模型在较少的训练轮数内即可达到稳定性能,相较于对比方法具有更快的收敛速度。这一现象表明,通过引入结构化的时空建模与趋势–季节性分解机制,模型在训练过程中能够更高效地学习交通流的关键模式。

3.6 结果讨论   

        综合性能对比、消融实验以及参数敏感性与效率分析的结果,可以对本文方法的整体表现形成更为全面的认识。首先,在预测精度方面,模型在多个数据集和评价指标上均取得了稳定且一致的性能提升,表明联合建模动态空间关系、时间周期特性以及趋势–季节性结构,有助于更充分地捕捉交通流数据中的关键变化模式。这一结果验证了本文在模型架构层面所做设计选择的合理性。

        从消融实验与参数敏感性分析可以进一步观察到,模型的性能提升并非依赖于某一单一模块或特定超参数配置,而是源于各模块在统一框架下的协同作用。时空嵌入为模型提供了具有先验意义的上下文信息,动态关系图学习增强了对复杂空间交互的建模能力,而时空感知的趋势–季节性分解则有效提升了模型对多尺度时间模式的刻画能力。同时,模型在较宽的参数取值范围内均能保持相对稳定的性能,说明其对超参数设置具有较好的鲁棒性。

        此外,计算效率与训练行为分析表明,本文方法在取得较高预测精度的同时,并未引入过高的计算开销。模型在训练和推理阶段均表现出较为理想的时间效率,并且能够在较少的训练轮数内实现稳定收敛。这一特性对于实际交通系统中的在线预测或大规模部署具有重要意义。

        综合来看,实验结果从预测性能、模型稳定性以及计算效率等多个角度验证了本文方法的有效性与实用性,表明该模型不仅在理论建模层面具有优势,同时也具备在真实交通场景中应用的潜力。

4. 总结与展望(Conclusion and Future Work)

4.1 工作总结

        本文围绕交通流预测任务中复杂的时空依赖建模问题,系统介绍了一种时空感知的趋势–季节性分解网络。该方法在统一框架下融合了时间周期建模、动态空间关系学习以及结构化序列分解机制,能够更充分地刻画交通流数据在时间与空间维度上的内在特性。

        通过引入时空嵌入,模型显式建模交通节点在不同时间和空间位置下的上下文信息;借助动态关系图学习机制,模型进一步增强了对全局空间交互关系的表达能力;在此基础上,时空感知的趋势–季节性分解有效提升了对多尺度时间变化模式的建模效果。大量实验结果表明,该方法在多个真实交通数据集上均取得了优于现有主流方法的预测性能,验证了所提出框架在交通流预测任务中的有效性与实用性。

4.2 未来工作

        尽管本文方法在多个交通流预测场景中取得了较为理想的效果,但仍存在一些有待进一步研究的方向。

         首先,在模型层面,当前方法在动态图结构学习和时空嵌入构建过程中仍引入了一定的计算开销,如何在保持预测性能的同时进一步提升模型效率,是未来值得关注的问题。

        其次,在建模假设方面,本文主要依赖固定形式的时间周期信息与预定义的空间结构先验,对于突发事件、异常交通状况或结构发生显著变化的路网场景,其适应能力仍有提升空间。未来可以考虑引入更加自适应的时间建模机制或外部辅助信息,以增强模型在复杂真实场景下的鲁棒性。

        最后,在应用层面,本文方法目前主要针对交通流预测任务进行验证,未来有望将该框架拓展至交通速度预测、拥堵检测以及其他时空序列建模任务,从而进一步验证其在更广泛时空预测场景中的通用性。

AI对战五子棋——深度学习策略网络 在本篇博文中,我们完成了:✔ 构建一个 CNN 五子棋策略网络✔ 让神经网络输出落子概率✔ 使用 Policy Gradient 强化学习训练 AI✔ 让 AI 实现人与 AI、AI 自对弈博弈。 阅读详情

相关推荐

瑞芯微RK809音频驱动

瑞芯微RV1126中的RK809音频驱动开发

m0_61899715的博客 5222

交通预测-STDN-论文阅读

1.文章标题 《Revisiting Spatial-Temporal Similarity: A Deep Learning Framework for Traffic Prediction》 2.简介 虽然现有的工作对空间依赖以及时间动态做出了强有力的假设,但在实践过程中,空间依赖性可能是动态的,时间的周期性特性是动态变化的; 本文提出了一种新的时空动态网络(STDN),引入一种流动门控机制来学习位置之间的动态依赖,设计了一种周期转移注意机制来处理长期的周期性时间转移; 经过真实交通数据集上的实验结果验

一个博客 1298

转录组数据提取技巧汇总

数据整理是数据分析的前提,而数据的正确提取则是数据整理的前提。

zfyyzhys的博客 1784

【文献阅读】ST-GDN——图神经网络预测交通流量(Xiyue Zhang等人,ArXiv,2021)

一、背景 文章题目:《Traffic Flow Forecasting with Spatial-Temporal Graph Diffusion Network》 文献下载地址:2110.04038.pdf (arxiv.org)https://arxiv.org/pdf/2110.04038.pdf 文献引用格式:Xiyue Zhang, Chao Huang, Yong Xu, Lianghao Xia, Peng Dai,Liefeng Bo,...

QQ704630835的博客 3235

Nest的限流方案

多维度限流(如 IP、用户 ID、接口级别、请求类型)可配置化(支持不同环境和接口动态配置)可观测性(接入日志、监控系统)高性能和分布式支持(Redis 限流器)与鉴权鉴权链路集成(结合 JWT、API Token)以下是一个“标准// 优先按用户ID限流,否则按IP在main.ts维度建议限流存储推荐 Redis 支持多实例限流 Key 设计支持 IP + 用户ID + 路由等多种维度限流策略精细化配置,接口粒度调整异常处理自定义响应体、日志告警观测性。

Bruce__taotao的博客 1197

c语言【分糖果】2023蓝桥杯4124(枚举,递归,dfs)

但是这是不符合我们糖果刚好分完的条件的,我们应该往回退到上一层,也就是孩子6这层,然后j+1=3,孩子7分到3个第二种糖果,这也不符合我们糖果刚好分完的条件,然后就会再次回退到孩子6这里,然后j+1=4,让我们的孩子7获得5块第二种糖果,然后还是不符合糖果刚分完的条件,于是再一次退回到孩子6这里,然后就会有外循环i+1=1,j=1,孩子7分到1块第一种糖果1块第二块糖果......然后就是这样的不停地回溯,试探,直到把整棵树遍历一遍,并且记录所有的满足条件的组合。先放一下我的代码,我的代码超时啦救命!

weixin_74331419的博客 732

(9) 交通预测-如何在深度学习框架下考虑动态时空相似性?

交通预见未来(9) 考虑动态时空相似性的交通预测深度学习框架 文章信息 《Revisiting Spatial-Temporal Similarity: A Deep Learning Framework for Traffic Prediction 》 AAAI (美国人工智能协会)2019大会上的论文。作者: 宾夕法尼亚州立大学的Huaxiu Yao。 2、摘要 如何对复杂的时空依赖关...

zuiyishihefang的博客 2689

STM32F103 CAN通信避坑指南:从标准库配置到收发测试的完整流程

本文详细介绍了STM32F103 CAN通信的实现流程,从标准库配置到收发测试,帮助开发者避开常见陷阱。内容涵盖硬件连接、波特率计算、过滤器配置及错误处理等关键环节,提供实用的代码示例和调试技巧,确保CAN通信的稳定性和可靠性。

weixin_30627341的博客 325

【AAAI-2019】论文速读——交通领域

本文选读了AAAI-19上几篇交通领域的论文,同时附上论文相关链接、代码解读等便于查找。持续更新中… Revisiting Spatial-Temporal Similarity: A Deep Learning Framework for Traffic Prediction – github链接:https://github.com/tangxianfeng/STDN – 由于大规模交通数...

TiffanyRabbit的博客 9243

一文搞懂深度学习:最全神经网络介绍

本文是深度学习系列文章的第二篇,我们将深入探讨各种类型的人工神经网络,探索它们独特的特性和应用。

2402_82802238的博客 2802

RK3588嵌入式AI部署实战:从环境搭建到模型推理全链路

嵌入式AI部署涉及交叉编译、NPU驱动、模型量化与运行时环境等多个技术环节,其核心挑战在于软硬件版本矩阵的严格匹配。在边缘计算场景中,RK3588凭借6TOPS NPU算力成为热门平台,但环境搭建与模型转换的复杂性常导致部署效率低下。通过容器化工具链管理、量化参数对齐及多线程推理优化,可显著提升部署稳定性与推理性能。典型应用包括智能安防、工业质检与视频结构化分析。本文围绕RK3588的AI部署与环境搭建,系统梳理从系统烧录到板端推理的完整实践路径。

weixin_42520573的博客 284

Transformer 为什么能取代 RNN?从自注意力讲起

2017 年谷歌在《Attention Is All You Need》中提出 Transformer,核心是。它如今是 GPT、BERT、ChatGPT 的共同底座。

anew___的博客 802

YOLO11涨点优化:SPPF原创自研创新 | SPPF创新结构,重新设计全局平均池化层和全局最大池化层,增强全局视角信息和不同尺度大小的特征

SPPF_improve利用全局平均池化层和全局最大池化层,加入一些全局背景信息和边缘信息,从而获取全局视角信息并减轻不同尺度大小所带来的影响

①答疑群聊服务;②YOLO大模型知识问答系统;③计算机视觉论文生成智能体; 1870

基于深度学习的商品评论情感分析系统-毕业设计

面向商品评论的中文情感分析系统,支持单条预测、批量分析、情感分布与关键词、报告导出。TextCNN、BiLSTM、Transformer 在同一词表、同一数据切分、同一种子与超参下公平对比,测试集 F1 分别为 0.9101、0.9089、0.9075。结论是这一规模下模型复杂度未带来收益,但误差结构不同。附技术栈、截图、文档预览与演示视频。

csbysj2020 141

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

【原创深度学习项目】基于深度学习的建筑工地防护装备检测系统|安全帽与反光衣检测系统(RT-DETR-L 模型)

本文设计并实现了一套基于RT-DETR-L的建筑工地防护装备检测系统,采用Django+Vue前后端架构,实现对安全帽、反光背心等7类装备及“无PPE”“未戴安全帽”等缺失状态的精准识别。系统支持图片、视频、摄像头实时检测,具备参数可调、数据可视化与统计分析功能,有效解决小目标漏检、误检及管理难问题,助力智慧工地安全管理落地。文末可获取源码。

qq_1445749146的博客 228

Devexpress16.2.6破解工具

Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具

图解循环神经网络(RNN)

RNN(循环神经网络)就是“带记忆的网络”:让网络拥有一块“记忆”,在处理当前数据时,能同时参考之前看过的内容;它不一次性看完全部输入,而是像人读书一样,一个字一个字地读,每读一个字就更新一次脑子里的记忆,然后用这份记忆去理解当前这个字。但便签一直在被改写,新信息不断挤占旧信息,传到第 40 步时,“巴黎”的痕迹已经淡得几乎没了。读到“贵”的时候,网络并没有重新去查“好看”这个词——但“好看”的影响已经融在了便签里(那个 1.5)。这三个困难的共同点:答案不在当前这一个字里,而在“前面那串东西”里。

技术管理两手抓,两手都要硬. 398

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

神经网络入门指南:从 CNN、RNN 到 Attention

神经网络的学习,本质是“预测—比较—纠错”的循环;CNN 通过局部连接与权重共享理解图像;RNN 通过隐藏状态传递上下文;LSTM 和 GRU 用门控机制管理记忆;Encoder–Decoder 把理解与生成拆成两个阶段;Attention 则让模型在每一步都能主动寻找最相关的信息。到这里,我们已经走完了从普通神经网络到 Attention 的完整路线。下一篇将正式进入 Transformer,看看它如何摆脱 RNN 的顺序计算,又如何让每个 Token 直接找到与自己相关的信息。

爱敲代码的小黄 380

CNN 卷积神经网络深度解析:卷积、池化与特征提取的底层原理

卷积核(Kernel),也叫滤波器(Filter),本质上是一个可以训练的权重矩阵。1 0 -11 0 -11 0 -1这个卷积核可以对图像中的局部像素进行加权计算。不同的卷积核能够提取不同类型的特征:水平边缘特征垂直边缘特征纹理特征角点特征局部形状特征在传统图像处理中,滤波器通常由人工设计。而在 CNN 中,卷积核的权重通过训练数据和反向传播自动学习得到。这也是 CNN 能够自动提取图像特征的关键。# 第一层卷积padding=1# 第二层卷积padding=1。

2503_90237586的博客 259

图解常用深度学习优化器

来隐式构造 Hessian 逆的近似,从而直接估计出“谷底在哪”,而非仅仅判断“哪边最陡”。即SGD/Adam 主要看“当前坡度”,LBFGS 还会看“最近几步坡度怎么变”,像用局部地形图来规划路线。训练 Transformer 时,有些层梯度大,有些层梯度小。如果用 Adam + L2,梯度大的参数反而可能被“少衰减”,正则效果不稳定;:你要下山,但每次迈步前都要派侦察兵把整座山的每一个坡面都测量一遍,算出“绝对最陡”的方向才走一步。:还是下山,但这次你只问身边一个路人“哪边最陡”,然后就走。

技术管理两手抓,两手都要硬. 218

【无标题】无人机视角道路坑洞坑洼目标检测数据集深度学习 目标检测 无人机航拍 道路坑洞 路面病害 YOLO格式 数据集发布9032期

(一)类别构成该数据集聚焦单一类别——坑洞(类别 ID 为 0),任务指向明确,围绕无人机俯视视角下的道路坑洞目标开展检测标注。类别体系精简,与公路路面病害巡检的实际需求高度契合,图像中的坑洞样本可直接作为路面破损识别的核心正样本,便于对接道路养护排查流程。(二)数据数量数据集规模为 3285 张无人机俯视航拍图像,采用标准 YOLO txt 标注格式,标注框总计 4457 个,其中带有效标注的图片 2007 张,全部图片均带有有效标注。

qq_2529413168的博客 179

基于深度学习的猫图像目标检测方法研究:YOLOv8s模型海选、多种子对比训练与Django+ONNX部署实现详解

本课题基于深度学习研究猫图像目标检测问题。数据集含1000张猫图像、1188个标注框,按固定比例划分并冻结清单;训练前在多个候选族中短训海选,确定YOLOv8s为主模型,经学习率搜索与显存标定后完成150轮训练,验证集mAP50达到0.92,并以7个随机种子的对比实验验证稳定性。最优权重导出为ONNX接入Django系统,提供图片、视频、摄像头三种识别方式,配套识别记录管理与统计大屏,形成从训练到应用的完整闭环。

WEIXIN_JSJBSZDS的博客 207

第 05/24 期:计算图与自动微分:深度学习如何计算梯度

本文系统阐述了神经网络训练中梯度计算的本质:损失对参数的敏感性。通过构建计算图,将复杂函数分解为基本运算,利用链式法则实现反向传播。核心在于反向模式自动微分——以一次前向计算为基础,通过传播输出对中间变量的敏感性,高效求得所有参数梯度。相比前向模式,反向模式在参数多、目标为标量的场景下更高效。计算图不仅适用于神经网络,也广泛适用于任意可微程序。关键思想是:梯度是局部导数与上游敏感性的乘积,分支路径的贡献需累加,从而保证导数计算的正确性与效率。

weixin_47502228的博客 305

【深度学习项目实战·30】PM2.5短期预测:用LSTM构造没有未来信息的滑动窗口

本文基于北京PM2.5数据,使用LSTM实现从最近24小时历史观测预测下一小时PM2.5。重点解决时间切分、因果填补、滑动窗口构建与标准化等关键问题,确保模型仅依赖过去信息,避免未来泄漏。通过滚动单步预测与持续性基线对比,评估在原始单位下的MAE/RMSE,验证模型有效性。强调时间顺序与数据完整性,为时序预测提供可复现的实践框架。

银尘博客 493

无人机巡检道路路面异常检测数据集 深度学习 目标检测 无人机巡检 道路病害 路面异常 YOLO格式 数据集发布9028期

无人机巡检道路路面异常检测数据集 深度学习 目标检测 无人机巡检 道路病害 路面异常 YOLO格式 数据集发布9028期

qq_2529413168的博客 204

AI 学习第 14 课:CNN 训 6 轮卡在 0.5352,数据没打乱

第 13 课把 Conv2d 的参数量和池化后的尺寸算清了,这课把卷积块拼成一个能训练的完整网络,跑满 6 个 epoch。第一版直接卡死:loss 从 2.6104 掉到 0.6989 就再也不动,

aifannihao的博客 247

深度学习基本原理:从数学基础到神经网络训练

深度学习训练的核心,是先确定模型结构,再通过前向计算得到损失,利用链式法则和反向传播计算梯度,最后借助优化器与学习率不断更新参数。真正理解这条链路,后续学习更复杂的网络结构才有可靠的基础。

chh563的博客 142
上一篇: SDS-Complete: 利用预训练文生图模型进行点云补全
下一篇: ACM MM 2024 | GeoFormer:基于三平面(Tri-Plane)与Transformer的高维点云补全原理解析
山科智能信息处理实验室
博客等级 码龄6年 809粉丝 74原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值