ASKTOM 关于更新上百万的数据方法

介绍了一种高效更新数百万乃至数亿条记录的方法,通过创建新表并进行数据迁移,而非直接更新原有表,以此减少重做日志和回滚日志,实现快速数据更新。
<p>假设如果我要更新数百万以上的数据, 我大概会选择不去’更新’ (UPDATE)吧.<br><br>
我很有可能会用以下的方法:<br><br>
CREATE TABLE new_table as select <在此更新> from old_table;<br>
index new_table (给新的表创建索引)<br>
grant on new table (授权于新的表)<br>
add constraints on new_table (给新的表加上约束)<br>
etc on new_table (加上其它所须的东西在新表)<br>
drop table old_table (删除旧的表)<br>
rename new_table to old_table; (给新的表重新命名为旧的表名)<br><br>
在大多数的操作上, 你可以使用并行查询(PARALLEL QUERY)并加上NOLOGGING的语句来产生非常少重做日志(REDO LOG) 及 UNDO LOG . 这样的做法可以在很短的时间就可以更新数据了.</p>
<p>这绝对是可施行的方法, 而且也是我们一直在不断重复使用的方法. 我们其中的一个应用程式便用于这方法来更新含有数亿数据的表.<br><br>
经我们的计算CURSOR … FOR LOOP 的方式将会需要53.7年来完成数据的更新. 我们采用INSERT INTO DUMMY TABLE的方式并加上NOLOGGING的语句的结果使我们在在30分以内就完成了数据更新.<br><br>
在用NOLOGGING的语句, 假若系统中断, 只要再重新执行更新(UPDATE)就可以了.因为所有的数据还在原来的表.
当结束时(INSERT), 只要把表DUMMY(含有以更新的数据)跟原来的表中的分区(PARTITION)交换就可以了(译着注:
用exchange partition的语句). <br><br>
更新表中FIELD2<br>
(1) 首先, 创建表DUMMY, <br>
create table xyz_HOLD as select * from xyz where rownum<1<br>
Alter tablexyz nologging<br><br>
(2) ) insert /*+ append parallel (xyzhold,12) */ <br>
into xyz_hold xyzhold (field1, field2, field3) <br>
select /*+ parallel (x,12) */ xyz.field1, my_new_value_for_field2, xyz.field3 <br>
from xyz x <br>
where <等等..><br><br>
(3) 当结束时, 可以给表重新命名 (RENAME)或是如果原来的表如是分区(PARTITION)的话, 与分区交换数据; 或更新所需要的分区就好了. 当然你必须重创索引(REBUILD INDECIES), 及其它所需的.</p>
内容概要:本文介绍了一个基于多传感器融合的定位系统设计方案,采用GPS、里程计和电子罗盘作为定位传感器,利用扩展卡尔曼滤波(EKF)算法对多源传感器数据进行融合处理,最终输出目标的滤波后位置信息,并提供了完整的Matlab代码实现。该方法有效提升了定位精度与稳定性,尤其适用于存在单一传感器误差或信号丢失的复杂环境,如自动驾驶、移动采用GPS、里程计和电子罗盘作为定位传感器,EKF作为多传感器的融合算法,最终输出目标的滤波位置(Matlab代码实现)机器人导航等领域。文中详细阐述了各传感器的数据建模方式、状态转移与观测方程构建,以及EKF算法的具体实现步骤,具有较强的工程实践价值。; 适合人群:具备一定Matlab编程基础,熟悉传感器原理和滤波算法的高校研究生、科研人员及从事自动驾驶、机器人导航等相关领域的工程技术人员。; 使用场景及目标:①学习和掌握多传感器融合的基本理论与实现方法;②应用于移动机器人、无人车、无人机等系统的高精度定位与导航开发;③作为EKF算法在实际工程中应用的教学案例或项目参考; 阅读建议:建议读者结合Matlab代码逐行理解算法实现过程,重点关注状态预测与观测更新模块的设计逻辑,可尝试引入真实传感器数据或仿真噪声环境以验证算法鲁棒性,并进一步拓展至UKF、PF等更高级滤波算法的研究与对比。
内容概要:文章围绕智能汽车新一代传感器的发展趋势,重点阐述了BEV(鸟瞰图视角)端到端感知融合架构如何成为智能驾驶感知系统的新范式。传统后融合与前融合方案因信息丢失或算力需求过高难以满足高阶智驾需求,而基于Transformer的BEV融合方案通过统一坐标系下的多源传感器特征融合,在保证感知精度的同时兼顾算力可行性,显著提升复杂场景下的鲁棒性与系统可靠性。此外,文章指出BEV模型落地面临大算力依赖与高数据成本的挑战,提出“数据采集-模型训练-算法迭代-数据反哺”的高效数据闭环体系,通过自动化标注与长尾数据反馈实现算法持续进化,降低对人工标注的依赖,提升数据利用效率。典型企业案例进一步验证了该路径的技术可行性与经济价值。; 适合人群:从事汽车电子、智能驾驶感知算法研发的工程师,以及关注自动驾驶技术趋势的产品经理和技术管理者;具备一定自动驾驶基础知识,希望深入了解BEV架构与数据闭环机制的专业人士。; 使用场景及目标:①理解BEV+Transformer为何成为当前感知融合的主流技术路线;②掌握数据闭环在BEV模型迭代中的关键作用及其工程实现逻辑;③为智能驾驶系统架构设计、传感器选型与算法优化提供决策参考; 阅读建议:本文侧重技术趋势分析与系统级思考,建议结合实际项目背景阅读,重点关注BEV融合逻辑与数据闭环构建方法,并可延伸研究相关企业在舱泊一体等场景的应用实践。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值