将历史记录移到历史表中

【数据分析概述、职业操守】 CDA Level1 数据分析概述、职业操守 阅读详情

现在表中的数据量越来越大,需要将历史记录移到历史表中。以下过程可以实现此功能。如果觉得有问题请联系我。


--用一配制表存需要转移数据的大表名称

--每次都查表名与tab_name相匹配且is_used=1的 说明是当前的历史表
create table config_table(configID int,             --ID
                          tab_name varchar(64),     --需要转移数据大表名称
                          condition_col varchar(32),--需要移动时间列名称
                          history_name varchar(64), --历史表名称
                          is_used int               --是否正在使用
                          )
                      --   1           test                 test_history             1


                     

create procedure sp_moveHistoryData(@tab_name varchar(32),@move_time varchar(12))                      
as
--sql
declare @sql           varchar(4000)
--column_name
declare @col_name      varchar(512)
--history column_name
declare @hiscol_name   varchar(512)
--history table_name
declare @histab_name   varchar(32)
declare @condition_col varchar(32)
declare @count         int
begin

select @histab_name = history_name,@condition_col=condition_col from config_table where tab_name=@tab_name and is_used=1

--if there is not history_name then return
if @histab_name is null or @histab_name=''
   return
--select source_table column into @col_name
set @sql = N'SELECT @sc_name = LEFT(colList,LEN(colList)-5)' +
' FROM ('+
' SELECT object_id,'+
' (SELECT replicate('' '',30-LEN( [name]))+[name]+'','' FROM sys.columns WHERE object_id=A.object_id  FOR XML PATH('''')) AS colList'+
' FROM sys.columns A where object_id=object_id('''+@tab_name+''')'+
' GROUP BY object_id'+
' ) b'
exec sp_executeSql @sql,N'@sc_name varchar(512) output',@sc_name=@col_name output

select @count=COUNT(1) from sys.objects where object_id=object_id(@histab_name)
-- if there is not exists history_table then crate and insert data to history_table
-- delete   from   tab_name when match  the  condition
if @count is null or @count ='' or @count =0
   begin
     set @sql = 'select '+@col_name +' into '+@tab_name+'_his1'+' from '+@tab_name+' where '+@condition_col+' <= convert(datetime,'+@move_time+' 23:59:59 )'     
     exec (@sql)
     set @sql = 'delete from '+@tab_name +' where '+@condition_col+' <= convert(datetime,'+@move_time+' 23:59:59 )'
     exec (@sql)    
   end
else
   begin
    --select source_table column into @hiscol_name
    set @sql = N'SELECT @hc_name = LEFT(colList,LEN(colList)-5)' +
    ' FROM ('+
    ' SELECT object_id,'+
    ' (SELECT replicate('' '',30-LEN( [name]))+[name]+'','' FROM sys.columns WHERE object_id=A.object_id  FOR XML PATH('''')) AS colList'+
    ' FROM sys.columns A where object_id=object_id('''+@histab_name+''')'+
    ' GROUP BY object_id'+
    ' ) b'
    exec sp_executeSql @sql,N'@sc_name varchar(512) output',@hc_name=@hiscol_name output
    
    if @col_name = @hiscol_name
    begin
        set @sql = 'insert into '+@histab_name+' select '+@col_name +' from '+@tab_name+' where '+@condition_col+' <= convert(datetime,'+@move_time+' 23:59:59 )'     
        exec (@sql)
        set @sql = 'delete from '+@tab_name +' where '+@condition_col+' <= convert(datetime,'+@move_time+' 23:59:59 )'
        exec (@sql)
    end
    else
    begin
        -- get historytable_name 's last char set add one  then rename histab_name
        set @count = cast(RIGHT(@histab_name,1) as int)
        set @count = @count+1
        set @histab_name = SUBSTRING(@histab_name,1,len(@histab_name)-1)+CAST(@count as varchar(1))
        
        set @sql = 'select '+@col_name +' into '+@tab_name+'_his1'+' from '+@tab_name+' where '+@condition_col+' <= convert(datetime,'+@move_time+' 23:59:59 )'     
        exec (@sql)
        set @sql = 'delete from '+@tab_name +' where '+@condition_col+' <= convert(datetime,'+@move_time+' 23:59:59 )'
        exec (@sql)    
        select @count = COUNT(1) from config_table
        set @count = @count+1
        update config_table set is_used = 0 where tab_name=@tab_name
        insert into config_table(configID,tab_name,condition_col, history_name,is_used )
              values(@count,@tab_name,@condition_col,@histab_name,1)
    end
   end
end


BPMN流程生命周期详解:从部署到完成的六个核心阶段 业务流程管理(BPM)是现代企业实现自动化与效率提升的核心技术,其核心在于将静态的业务流程图转化为可执行、可监控的动态流程。BPMN作为标准建模语言,定义了流程的完整生命周期,而流程引擎则负责驱动这一生命周期的运转。理解流程生命周期,意味着掌握流程从部署、启动、执行、等待、任务处理到完成或终止的全过程状态跃迁,这是实现可靠流程自动化的基础。在实际工程中,生命周期管理直接关联到系统的可观测性与可维护性,例如通过监控流程实例的活跃状态与任务停留时间,可以快速定位性能瓶颈;通过干预卡住的任务或处理异常终止,能保障 阅读详情

相关推荐

Spring Boot + Vue + Flowable 构建企业级工作流系统实战指南

工作流引擎是自动化和管理复杂业务流程的核心技术,它通过预定义的模型驱动任务流转,实现业务逻辑与流程控制的解耦。其核心原理基于BPMN 2.0标准,将流程可视化建模为节点与连线,由引擎解析执行,从而提升系统灵活性、可维护性和协作效率。在技术选型中,Spring Boot以其快速构建RESTful API和微服务的能力,成为后端开发的事实标准;Vue则以其渐进式框架特性和优秀的开发体验,主导着现代前端开发。将两者与专业的工作流引擎结合,能高效搭建前后端分离的流程应用。本文聚焦于如何整合Spring Boot、V

weixin_30527423的博客 426

数据库管理员道德规范

DBA 道德规范旨在用作所有参与数据库管理专业的人的指南,以促进和维护道德实践、个人行为和职业诚信的最高标准。本守则中表达的指导方针不应被视为包罗万象的情况,这些情况可能会在特定原则下发展,并且旨在补充可能适用的其他专业守则(例如:心理学、社会工作、护理、制造例如 cGMP、经过验证的系统等)。此外,该模型应该具有更专业的基调,为 DBA 的行为方式设置适当的环境。道德准则可能永远不会被执行,除了被认为是非法的之外,但是当涉及到我们所做的事情和我们如何做时,该准则是关于努力成为一个更具凝聚力的职业。

allway2的博客 1459

深入理解CPU流水线冲突:数据、控制与结构冲突的实战解析

流水线技术是提升处理器性能的核心方法,它将指令执行过程划分为多个阶段,允许多条指令重叠执行,从而显著提高吞吐率。其基本原理类似于工厂流水线,通过并行化来加速任务处理。然而,这种并行性也带来了数据冲突、控制冲突和结构冲突等挑战。数据冲突通常由指令间的数据依赖引起,例如写后读(RAW)冲突,这可能导致流水线停顿。控制冲突则源于分支或跳转指令,使得后续指令的取指方向不确定。结构冲突发生在多条指令同时竞争同一硬件资源时。为了解决这些冲突,现代处理器采用了前递(Forwarding)和分支预测等技术。前递通过将计算结

weixin_30475039的博客 355

迁移数据到历史表SQL

有时工作需要需要把当前表的数据,移到历史表中,而历史表基本是以时间(年)为后缀来命名历史表的,如 A_2011,A_2012,在移数据时,要按数据的时间,移到不同的表中,且由于如果数据有同步。一次处理的数据不能太大。否则同步链会被Block.所以需要批理处理。 下面是一个通用的写法,可以作为参考!(这个应该是出自邹建大侠之手,因为需要写这样的处理,去找了下类似代码,找到的) -- row ba

otong的专栏 5096

缓慢变化维度SCD实战:从Type 1/2/3到Snowflake落地全解析

缓慢变化维度(SCD)是数据仓库中处理维度属性随时间演化的基础机制,其核心在于平衡历史准确性、存储成本与查询性能。它源于星型模型对‘背景信息动态性’的天然需求,通过Type 1(覆盖)、Type 2(快照)、Type 3(列式存档)等策略,为事实表提供可追溯的时间上下文。在Snowflake等现代数仓平台上,SCD不再仅是建模理论,而是依赖MERGE原子操作、精确时间边界(start_date/end_date)和源头变更有序性实现的工程实践。典型应用场景包括商品价格调整归因、客户等级变更分析、类目体系迁移

chengli1824的博客 444

Matlab停车场计时计费系统:状态机+事件驱动实战

停车场计费系统本质上是基于时间序列的状态管理问题,核心在于车辆入场、驻停、出场构成的完整状态闭环与精确时长计算。其技术原理涉及datetime时间对象解析、duration时长差值运算、阶梯式分段费率映射等数值计算逻辑,并依托事件驱动机制实现GUI控件与业务规则的实时联动。该方案凸显Matlab在时间处理、向量化计算和快速GUI原型开发中的工程优势,适用于毕业设计、课程实践及轻量级智能停车系统验证。文中重点覆盖汽车出入库计时计费、Matlab GUI状态机设计等关键能力。

weixin_30843121的博客 334

mysql 日志表迁移通过存储过程从当前表迁移到历史表

mysql 日志表迁移通过存储过程从当前表迁移到历史表

在知识的海洋里遨游 1576

workflow 普元 数据转历史方案 数据备份

workflow 普元 数据转历史方案 数据备份

navicat 数据迁移一次只能一张表_记一次生产Oracle数据库千万级别以上的表迁移方案...

概述今天这部分瘦身内容主要是为了清理XX表空间千万级别以上的大表数据,每个表只保留最近一年的数据。下面先看下目前大表的数据情况。1、查看大表数据情况1.1、先创建一张表用于存放表名及该表的行数drop table table_rows purge;create table table_rows(table_name varchar(100),count_rows number);1.2、统计数据脚...

weixin_39620629的博客 845

从0开始学GEE python——Google Earth Engine (GEE) 和 geemap 库来获取 Sentinel-2 卫星影像,并将其可视化

这段代码的目的是从 Sentinel-2 卫星影像中获取特定地点的影像,并将其可视化在地图上。通过设置合适的波段和可视化参数,用户可以清晰地查看该地区的卫星影像。

此星光明博客 1167

利用Arcgis提取nc数据并计算区域年均温

1.下载数据。2.解压数据至不含中文的路径中。打开工具箱中的多维分析工具-创建NetCDF栅格图层,导入数据。3.打开工具箱中的数据管理工具-图层和表视图-创建栅格图层,导入数据,对输出数据进行命名,得到月均温栅格数据。4.选择工具箱-Spatial Analyst工具(空间分析工具)-地图代数-栅格计算器,计算全国一年年均温。​5.将其导出为.tif格式数据,方便后期使用。6.选择工具箱-Spatial Analyst工具(空间分析工具)-区域分析--以表格显示分区统计,得到分区域的气温数据。

什么都学亿点点的博客 7997

OS_Workflow集成Spring问题

目前,部门技术脚手架prophet集成了OSWorkflow的工作流开源框架,OSWorkflow比起JBPM是比较低级的工作流,很多功能需要开发,   但是非常灵活,对于我们部门的比较简单的流程,如绩效考核中的帐户归属流程、定性考核流程是比较适合的。       在使用过程中,项目组发现了一些问题,现总结如下,请大家讨论。     1、集成到spring中的事务问题   OS_...

keep working 350

GPT Researcher 的win docker安装攻略

github网址是:https://github.com/assafelovic/gpt-researcher/blob/master/README-zh_CN.md。使用 Docker 运行 AI-Researcher 项目的。因为docker安装方法不够清晰,因此写一个使用方法。打开设置——docker engine ,增加代码。如有其他问题,可提供错误截图或日志进一步排查!

weixin_43818488的博客 1127

OSWorkFlow使用总结

OSWorkflow比起JBPM是比较低级的工作流,很多功能需要开发,但是非常灵活,对比较简单的流程,如商业银行绩效考核中的帐户归属流程、定性考核流程是比较适合的。      在使用过程中,项目组发现了一些问题,现总结如下,请大家讨论。    1、集成到spring中的事务问题  OS_Workflow中没有直接集成IBatis的数据操作类,因此需要自己写一个数据操作类,可采用同一data

shuangyidehudie的专栏 1072

BLDC方波控制 vs. FOC:技术选型指南与未来演进

本文深入对比BLDC电机方波控制与FOC技术的核心差异,分析两者在成本、性能和应用场景上的权衡。方波控制凭借低成本和易实现性,在电动工具和家电领域优势明显;而FOC则以平滑高效控制见长,适用于高端精密应用。文章为工程师提供了实用的技术选型指南,并展望了未来技术融合的发展趋势。

yhn4567890的博客 1173

AD20.多对多工程中将某个原理图导入PCB工程

AD20将多个原理图中的一个或多个导入到PCB文件中

鬼爷杂货铺 1万+

Linux下shell简介

shell是系统的用户界面,提供了用户与内核进行交互操作的一种接口。它接受用户输入的命令并把它送入内核去执行。实际上shell是一个命令解释器,它解释由用户输入的命令并且把他们送到内核。不仅如此,shell由自己的编程语言用于对命令的编辑。举一个有趣的例子:在整个系统下 shell就像是一个媒婆一样,用户就像是一个相亲对象,想把自己的想法告诉另一个相亲对象,就要从媒婆这个媒介透漏给系统,系统知道了...

mignatian的博客 536

2、欧洲期权的赫斯顿模型

本文详细介绍了赫斯顿随机波动率模型在欧洲期权定价中的应用。模型通过引入随机方差过程,克服了布莱克-斯科尔斯模型中波动率恒定的局限性,更贴近市场实际。文章阐述了模型的动态结构、风险中性转换、期权定价公式及其半封闭解的计算方法,并提供了基于VBA的数值实现方案。通过梯形法则与高斯积分等数值方法对比,分析了不同积分策略的精度与效率。同时验证了当波动率为零时,赫斯顿模型退化为布莱克-斯科尔斯模型的一致性。最后讨论了模型的优势、挑战及实际应用建议,强调了数值积分稳定性和参数估计的重要性。

tequila的博客 350

办公系统数据库分区及历史数据清理优化方案一

一、概述 1、需要分区优化表    OA_OA.DOC_DOCMAIN,按DOC_TYPE分区;    OA_OA.DOC_WF_OPINION,按DOCUMENT_ID分区;    OA_YWLC.BD_WF_OPTION,按BD_ID分区;    OA_YWLC.BD_CONTENT,按BD_ID分区;    CORDYS.TASK_LIST,按WORKFLOW_MODULE分区;    CO

肖永威的专栏 1843

11、机器学习中的聚类与隐马尔可夫模型

本文介绍了机器学习中的两种重要方法:聚类算法和隐马尔可夫模型(HMM)。聚类作为无监督学习的代表,适用于发现无标签数据中的结构,常见算法包括K-均值和自组织映射(SOM),并在传感器数据分析等场景中展现应用价值。隐马尔可夫模型则是一种可解释的序列模型,用于从观测数据中推断隐藏状态,广泛应用于语音识别、自然语言处理和生物信息学等领域。文章详细讲解了HMM的核心概念如马尔可夫性质、转移与发射概率,并通过TensorFlow实现了前向算法,展示了其计算观测序列概率的动态规划思想。最后对比了两类方法的应用场景,展望

garlic的博客 181

数据结构课程设计--基于知识图谱的中医食疗数据管理与应用

【代码】数据结构课程设计--基于知识图谱的中医食疗数据管理与应用。

M_inherit的博客 568

ajax事件及方法

javaScript浏览器对象 1.window对象 是Document、Location和History对象的父对象。 属性: name:指定窗口名称 parent:代表当前的父窗口。返回属性和方法。 opener:返回当前窗口。返回属性和方法。 top:代表主窗口(所有的父窗口)。返回属性和方法。 self:返回当前窗口的一个对象。返回属性和方法。 ...

forever 231

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

图解拉链表:小白也能懂的数据历史管理

经过一番摸索后,发现它其实是管理历史数据变化的利器,特别适合记录像员工部门调整、商品价格变更这类需要追踪完整变化轨迹的场景。这里用最直白的语言总结我的学习笔记,帮同样刚入门的朋友少走弯路。尝试实现了这个案例,他们的Jupyter Notebook环境开箱即用,连我这样的新手都能快速跑通示例。最惊喜的是写完代码可以直接生成可交互的教程页面,分享给同事时对方不用配环境就能查看运行效果。有次我做的员工变动分析报表,部署后HR部门同事直接通过链接就能查看最新组织架构演变,不用每次找我导数据。

BlackironPanther23的博客 425

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

linux 相关快捷键

linux 相关快捷键 http://linux.chinaunix.net/begin/2004-10-05/34.shtml#_Toc41417098 1.使用虚拟控制台登录后按“Alt+F2”键可以看到“login:”提示符, 这就是第二个虚拟控制台。 一般新安装的Linux有四个虚拟控制台, 可以用“Alt+F1”到“Alt+F4”来访问。虚拟控制台最有用的时候是当一个程序出错锁住输入...

weixin_30591551的博客 144

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

EduRAG智能回答项目V1.0

本文介绍了基于企业私有数据构建RAG(检索增强生成)系统的完整流程。主要内容包括: 项目背景:针对大模型知识局限性和"幻觉"问题,提出两种解决方案——垂直领域微调和RAG问答系统,分析各自的优缺点及适用场景。 技术工具: 使用Ollama管理本地大模型 采用LangChain框架简化LLM应用开发 利用Milvus向量数据库存储和检索非结构化数据 系统实现: MySQL问答系统:基于BM25算法实现高频问答对检索 RAG系统:包含文档处理、向量存储、查询分类和策略选择等模块。

专注前端开发领域,深耕 Python AI Agent应用开发,热爱探索 Web 与人工智能的前沿技术。 271
上一篇: Sqlserver双机热备文档(无域)
下一篇: 备份恢复命令
sql_xeppp
博客等级 码龄18年 34粉丝 66原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值