《SQL Server企业级平台管理实践》读书笔记——SQL Server中关于系统库Tempdb总结

SQL Server使用游标处理Tempdb究极竞争-DBA问题-程序员必知 SQL Server tempdb分配竞争算是DBA老生常谈的问题了,几乎现在所有的DBA都知道多建几个文件来解决/缓解问题.但是深层次的的竞争依旧不可避免.这里给大家剖析下游标在tempdb中的特点使其在一定场景下替代临时表/表变量对象,解决深层次的tempdb竞争问题. 在抛出这个不可避免的问题之前我们先简要看下什么是tempdb竞争. 我们拿SQL Server创建一个临时表的过程来描述 1 在系统表中创建表的条目(系统数据页中) 2 分配一个IAM页并找到一个混合区在PFS页中标记 3 分配一个数据页(查看SGAM页,查看PFS页后并更新,更新IAM页) 4 表记录记录到系统表中 从上 立即下载

Tempdb系统数据库是一个全局资源,可供连接到SQL Server实例的所有用户使用。

存储的内容项:

1、用户对象

用户对象由用户显示创建。这些对象可以位于用户会话的作用域中,也可以位于创建对象所用例程的作用域中。例程可以是存储过程、触发器或用户自定义函数。用户对象可以是一下项内容之一:

  • 用户定义的表和索引
  • 系统表和索引
  • 全局临时表和索引
  • table变量
  • 表值函数中返回的表

2、内部对象

内部对象是根据需要由SQL Server数据库引擎创建的,用户处理SQL Server语句。内部对象可以在语句的作用域中创建和删除。内部对象可以是下列项之一:

  • 用于游标或假脱机操作以及临时大型对象(LOB)存储的工作表
  • 用于哈希连接或哈希聚合操作的工作文件
  • 用于创建或重新生成索引等操作(如果指定了SORT_IN_TEMPDB)的中间排序结果,或者某些GROUP BY、ORDER BY或UNION查询的中间排序结果。
  • 每个对象至少使用9页:一个IAM页,一个8页的区。

3、版本存储区

版本存储区是数据页的集合,它包含支持使用行版本控制的功能所需的数据行。主要用来支持快照(Snaphot)事务隔离级别,以及SQL Server2005推出的一些其它提高并法度的新功能。在SQL Server2005中,有两个版本存储区:公用版本存储区和索引生产版本区。包含以下内容:

  • 由使用快照隔离界别或已提交读隔离界别(基于行版本控制)的数据库中的数据修改事务生成的行版本
  • 由数据修改事务为实现联机索引操作、多个活动的结果集(MARS)以及AFTER触发器等功能而生成行版本

在SQL Server2005以后,tempdb需要的磁盘空间会多于早期版本。因此当升级到SQL Server2005或SQL Server2008后,管理员提供的tempdb磁盘空间可能得比以前要大一些,用以容纳当前生产工作负荷并满足使用tempdb的SQL Server功能的额外空间要求。

 

Tempdb空间使用跟踪

tempdb空间使用的一大特点,是只有一部分对象,比如:临时表、table 变量等,可以用sys.allcoation_units和sys.partitions这样的管理视图来管理。所以用sp_spaceused的结果和真实情况会有很大差异。

提示:tempdb的空间使用是不能用sp_spaceused来跟踪的。

DBCC SHOWFILESTATS还是可以反映数据库文件使用的整体情况的。

在2005版本以后引入了一个新的视图:sys.dm_db_file_space_usage;这张视图能反映出tempdb在如下几个大类的空间里使用分布:

select * from sys.dm_db_file_space_usage

其中:

database_id:数据库ID

file_id:文件ID,file_id映射到sys.dm_io_virtual_file_stats中的file_id,并且映射到sys.sysfile中的fileid

unallocated_extent_page_count:文件未分配区中的总页数,不包含已分配区中的未使用页

version_store_reserved_page_count:为版本存储分配的统一区中的总页数

user_object_reserved_page_count:为从统一区为数据库中的用户对象分配的总页数。计数中包括已分配区中未使用的页。可以使用sys.allocation_units目录视图中的total_pages列来返回用户对象每个分配单元保留的页计数

internale_object_reserved_page_count:从统一区为文件中的内部对象分配的总页数。计数包括已分配区中未使用的页

mixed_extent_page_count:文件的已分配混合区中的已分配和未分配总页数。混合区包含分配给不同对象的页。此计数器包含文件中的所有的IAM页

 

通过这个表的监视,就能知道temdb的空间被那个一块对象使用掉了,是用户对象(user_object_reserved_page_count),还是系统对象(internal_object_reserved_page_count),还是版本存储区对象(version_store_reserved_page_count)。

 

tempdb在生产环境中的设置的初始大小其实是一个经验值,也就是说没有一个好的固定值,但是我们可以根据工作负荷来确定该值的大小值:

1、设置tempdb的自动增长

2、模拟各个单独的查询或工作任务,同时监视tempdb空间使用

3、模拟执行一些系统维护操作,例如,重新生成索引,同时监视tempdb空间

4、使用前面2和3步中tempdb空间使用值来预测总的工作负荷下,会使用多少空间;并针对计划的并发度调整此值。例如,如果一个任务会使用10GB的tempdba空间,而在生产环境里,最多可能会有4个这样的任务同时运行,那就要至少预留40GB的空间。

5、设置tempdb在生产环境下的初始大小。同时也开始自动增长。

 

Temp文件个数以及大小设置,不但满足用户任务的需求,还要考虑到性能优化。

 我们利用脚本来跟踪一下,看看是什么样的操作导致了SQL Server要这样大规模的使用tempdb,然后分析一下是正常行为还是异常行为,监视SQL Server的行为当然可以利用SQL Trace来完成。可是管理员并不能预期造成大量使用tempdb的语句会在什么时刻运行。这些语句可能一周只做一次。而且开跟踪毕竟对SQL Server来讲是一个比较昂贵的事情,就算没有性能副作用,如果一直开着SQL Trace,也会产生大量的跟踪文件,对硬盘是个比较重的负担。

推荐的“轻量级”的操作是以一定的时间间隔运行能够监视系统运行状况的DBCC命令、查询管理视图(DMV)以及管理函数(DMF)等,把这个结果输出到一个文件里。

新开一个连接,我们输入以下常规脚本:

复制代码
select @@SPID
go
use AdventureWorks
go 
select GETDATE()
go 
select * into #MyOrdersDetail
from Sales.SalesOrderDetail
--创建一个临时表
--这个操作应该会申请用户对象页面
go
waitfor delay '0:0:2'
select GETDATE()
go
drop table #MyOrdersDetail
--删除一个临时表
--这个操作用户对象页面数量应该会下降
go
waitfor delay '0:0:2'
select GETDATE()
go
select top 100000 * from
[Sales].[SalesOrderDetail] 
inner join [Sales].[SalesOrderHeader] 
on [Sales].[SalesOrderHeader].[SalesOrderID] =
[Sales] .[SalesOrderHeader].SalesOrderID;
--这里做了一个比较大的连接,应该会有系统对象申请
go
select GETDATE()
--join 语句做完以后系统对象页面数目应该会下降
go
复制代码

然后另开一个窗口,我们输入监控脚本,输出结果以文本方式存储

复制代码
use tempdb
--每隔1s运行一次,直到用户手工终止脚本运行
while 1=1
begin
select GETDATE()
--从文件级看temp使用情况
dbcc showfilestats
--第一个会话
--返回所有做过空间申请的会话信息
select 'Tempdb' as DB,GETDATE() as Time,
sum(user_object_reserved_page_count)*8 as user_obectskb,
SUM(internal_object_reserved_page_count)*8 as internal_objects_kb,
SUM(version_store_reserved_page_count)*8 as version_store_kb,
SUM(unallocated_extent_page_count)*8 as freespace_kb
from sys.dm_db_file_space_usage
where database_id=2

--第二个会话
--这个管理视图能够反映当时tempdb空间的总体分配
select t1.session_id,
t1.internal_objects_alloc_page_count,
t1.user_objects_alloc_page_count,
t1.internal_objects_dealloc_page_count,
t1.user_objects_dealloc_page_count,
t3.*
from sys.dm_db_session_space_usage t1,
--反映每个会话累计空间申请
sys.dm_exec_sessions as t3
--每个会话信息
where 
t1.session_id=t3.session_id
and (t1.internal_objects_alloc_page_count+t1.internal_objects_dealloc_page_count+t1.user_objects_alloc_page_count+t1.user_objects_dealloc_page_count)>0

--第三会话
--返回正在运行并且做过空间申请的会话正在运行的语句
select t1.session_id,
st.text
from sys.dm_db_session_space_usage as t1,
sys.dm_exec_requests as t4
cross apply sys.dm_exec_sql_text(t4.sql_handle) as st
where t1.session_id=t4.session_id
and t1.session_id>50
and (t1.internal_objects_alloc_page_count+t1.internal_objects_dealloc_page_count+t1.user_objects_alloc_page_count+t1.user_objects_dealloc_page_count)>0

waitfor delay '0:0:1'
end
复制代码

我们先运行监控,然后再运行一般脚本,可以分析一下跟踪结果。

可以看到在新建临时表的时候,对于Tempdb的申请空间有所增加。 四川www.sczygb.com/

dolphinscheduler-3.4.0 dolphinscheduler集群部署 阅读详情

相关推荐

共封装光学(CPO):下一代互联革命

Nvidia:产品:Quantum-X Q3450(115.2T,144×800G,2025H2上市)、Spectrum 6800(409.6T,512×800G,2026H2上市);技术路线:TSMC COUPE封装、MRM调制器、光栅耦合、外部激光源(Lumentum/Ayar Labs供应);战略定位:以横向扩展CPO验证供应链,最终聚焦纵向扩展场景(Feynman架构)。

存储随笔 4973

《SQL Server企业级平台管理实践》读书笔记——SQL Server中关于系统库Tempdb总结...

Tempdb系统数据库是一个全局资源,可供连接到SQL Server实例的所有用户使用。 存储的内容项: 1、用户对象 用户对象由用户显示创建。这些对象可以位于用户会话的作用域中,也可以位于创建对象所用例程的作用域中。例程可以是存储过程、触发器或用户自定义函数。用户对象可以是一下项内容之一: 用户定义的表和索引 系统表和索引 全局临时表和索引 table变量 表值函数中返回的表...

weixin_34124651的博客 195

oVirt 4.4.10超详细安装指南:从零搭建企业级虚拟化环境(附常见错误排查)

本文提供了oVirt 4.4.10企业级虚拟化平台的超详细安装指南,涵盖环境规划、系统准备、Engine安装配置、计算节点部署、存储系统集成及高级运维技巧。通过实战操作手册和常见错误排查方法,帮助用户从零搭建稳定高效的虚拟化环境,特别适合企业IT管理员参考实施。

wasm7browser的博客 351

sqlserver 定位大量占用tempdb的sql语句

有时会收到tempdb日志文件使用率超过90%的告警,最准确的处理方式是直接登上去看有哪些长时间运行且会大量消耗tempdb的语句在执行,但有时刚好不方便操作,在登录查看时sql已经执行完了,事后难判断。 查询文章发现还可以通过tempdb分配情况去分析,不过要注意这种方法找到的只是问题会话,未必能找到导致问题的sql,感觉配合扩展事件的慢sql监控应该能解决这个问题。 查看tempdb...

Hehuyi_In的博客 6232

Windows游戏多开检测实战:5种技术原理与破解方法详解(附C++代码)

本文深入解析了Windows游戏多开检测的5种核心技术原理,包括进程枚举、互斥体、信号量、窗口及文件映射检测,并详细探讨了对应的破解方法。通过分析这些基于进程和内核对象的攻防机制,为开发者与逆向爱好者提供了从底层理解Windows系统进程管理的实战视角,并附有核心C++代码示例。

weixin_29315091的博客 243

3D点云修复实战:用PCN网络快速补全缺失的激光雷达数据(附代码)

本文详细介绍了PCN(Point Completion Network)网络在3D点云修复领域的实战应用。针对激光雷达数据常见的缺失问题,PCN通过端到端的深度学习架构,直接处理原始点云,实现由粗到精的快速补全。文章深入解析了其核心思想与编码器-解码器架构,并提供了完整的环境搭建、数据准备、模型实现、训练评估及在真实场景下的优化策略与代码示例,为自动驾驶、机器人等领域的开发者提供了高效的数据修复解决方案。

weixin_29041195的博客 392

Tempdb数据库详细介绍

一、Tempdb简介 tempdb是SQLServer的系统数据库一直都是SQLServer的重要组成部分,用来存储临时对象。可以简单理解tempdb是SQLServer的速写板。应用程序与数据库都可以使用tempdb作为临时的数据存储区。一个实例的所有用户都共享一个Tempdb。很明显,这样的设计不是很好。当多个应用程序的数据库部署在同一台服务器上的时候,应用程...

amq48426的博客 1686

python中有趣的库 freegames 的详细使用

freegames 是一个包含多个简单 Python 游戏的开源库,适合初学者学习 Python 编程和游戏开发。以下是 freegames 的详细介绍和用法示例。

数据知道的博客 3万+

TempDB 收缩方法

1.重启服务,tempdb自动重建 2.执行脚本,避免服务重启 USE [tempdb] GO dbcc freesystemcache('ALL') Go DBCC SHRINKfile(N'tempdev' ,10240) --收缩到2MB GO 查占用大的语句 use tempdb go SELECT top 10 t1.session_id, ...

xiaoye1202的博客 1265

2026年复旦微电数字IC笔试试卷带答案解析

摘要: 本文为复旦微电子MCU/SOC岗位笔试模拟题,涵盖单片机架构、数字电路、存储技术等核心知识点。内容包括: 单选题(30分):考察Cortex-M中断机制、时序分析(建立/保持时间)、逻辑化简、跨时钟域设计(格雷码应用)、存储器特性(NAND Flash操作单元)等; 波形分析(15分):聚焦D触发器行为、时钟分频、建立时间违例判断及跨时钟域同步; 多选题(25分):涉及亚稳态成因与处理、异步FIFO设计要点、MCU低功耗策略、NAND Flash特性及复旦微电市场地位; 简答题(20分):解析建立/

Open 344

利用 HTML5 与 SICF 打造 CRM WebClient UI 多附件上传 —— 从原型到生产的全流程揭秘

通过HTML5 标准 + SICF 服务 + BOL/GOS API的三位一体方案,我们无需修改 SAP 标准代码,就能让 CRM WebClient UI 获得现代化的多附件上传体验。浏览器负责多选与进度提示,SICF 负责安全中转,ABAP 负责权限校验与落库。你可以先在质量系统快速原型,再逐步完善权限、异常处理与 UI 细节。按照本文的方法落地,哪怕一次上传几百份文件,也能轻松搞定,真正把时间还给业务。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 336

SqlServer 一个查询语句导致tempdb增大55G

今天操作着服务器,突然右下角提示“C盘空间不足”! 吓一跳!~ 看看C盘,还有7M!!!这么大的C盘空间怎么会没了呢?搞不好等下服务器会动不了! 第一反应就想可能是日志问题,很可能是数据库日志问题 于是查看日志,都不大,正常。 dbcc sqlperf(logspace) 看看系统报错: 是tempdb问题,但是刚才看日志才几M,根据提示查看日志状态: se

1万+

【Unity引擎技术整合】 Unity学习路线 | 知识汇总 | 持续更新 | 保持乐趣 | 共同成长

本文对Unity引擎的知识进行了一个整理总结,基本包含了Unity中大部分的知识介绍。 网上也有很多Unity相关的学习资料,但大多数都不成体系,学起来的时候难免会东奔西走的摸不着头脑。 本文整理的多数文章都是有对应的系列性文章专栏,可以更方便的进行系统学习相关知识体系。

努力前行,总会成为自己心中的那道光 15万+

《SQL Server企业级平台管理实践》读书笔记——几个系统库的备份与恢复

master数据库 master作为数据库的主要数据库,记录着SQL Server系统的所有系统级信息,例如登录用户、系统配置设置、端点和凭证以及访问其他数据服务器所需要的信息。master数据库还记录着启动服务器实例所需要的初始化信息,每个其它数据库的主文件位置。master数据库是SQL Server启动的时候打开的第一个数据库。SQL Server是从这个数据库里找到其它数据的信息的。如果...

weixin_34218890的博客 173

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

sqlserver TempDB详解

本人使用的测试数据库是2012版本的 TempDB就是临时数据库。它具有以下特性: 1、重启服务之后,没有东西会存储在TempDB中,因为每次重启都会重建。隐含的意思就是你不可以对这个库进行备份还原。 2、它永远是简单恢复模式。 3、它只是一个文件组,就是Primary文件组,不能增加额外的文件组,但是可以增加文件。 4、它主要存放3类对象:用户对象、内部对象、版本存储。 下面介绍一下...

begeneral的专栏 5293

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

SQL Server 2008性能故障排查(四)——TempDB

接着上一章:I/O TempDB: TempDB是一个全局数据库,存储内部和用户对象还有零食表、对象、在SQLServer操作过程中产生的存储过程等数据。在一个SQLServer实例中,只有一个TempDB。所以容易成为性能和磁盘空间瓶颈。TempDB可能因为空间可用程度和过量的DDL和DML操作而变得超负荷。这可能导致不相关的应用运行缓慢甚至失败。 常见的TempDB问题如下...

java开发指南博客 【转载】 444

最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版

Part-E1-SDIO-Specification-Ver4.00-Final-120220.pdf:最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版,包括SDIO 接口的外设,SDIO 接口官方协议等。

SQL Server TempDB异常增长问题定位

在日常运维工作中,有时会出现TempDB数据量剧增的情况,此时可从如下方面进行问题的排查。 一、查看日志 –查看日志大小 dbcc sqlperf(logspace) –查看日志状态 select name,log_reuse_wait_desc from sys.databases –查看虚拟日志 dbcc loginfo 若TempDB数据文件过大,可考虑收缩数据文件。 收缩方法请参考《SQL Server TempDB 收缩方法》 二、查看tempdb记录的分配情况 use tempdb go

Ruishine的博客 1169

SQL Server 日常维护之九:TempDB优化

文章目录TEMPDB概述TEMPDB常用命令TEMPDB优化建议TEMPDB位置调整 TEMPDB概述 tempdb全局存储内部对象,用户对象,临时表,临时对象,以及SQL Server操作创建的存储过程。每个数据库实例只有一个tempdb,所以可能存在性能以及磁盘空间瓶颈。如下是tempdb空间的运用途径: 各种形式的可用空间及过度饿DDL/DML操作都会导致tempdb负载过重。这会导致运行在服务器上不相干程序运行缓慢或者运行失败。   tempdb的一些常见通病如下:   - 耗完了tempdb的所

Eric.zhong 3712

tempdb SQL Server系统数据库的配置,操作和限制

介绍 (Introduction) tempdb is one of the 4 system databases that exists in all SQL Server instances. The other databases are master, model and msdb. In case of using Replication, a fifth system databas...

culuo4781的博客 2889

tempdb数据库清理_tempdb数据库,简介和建议

tempdb数据库收缩 介绍 ( Introduction ) Many times the people focus on the user databases to improve the performance, but sometimes the problem is not the user database itself. Sometimes the problem is ...

culuo4781的博客 3470

SQL Server 2012笔记分享-18:理解并设置tempdb数据库

TEMPDB简介tempdb 系统数据库是一个全局资源(一个实例一个tempdb),可供连接到 SQL Server 实例的所有用户使用,并可用于保存下列各项:? 显式创建的临时用户对象,例如全局或局部临时表、临时存储过程、表变量或游标。? SQL Server 数据库引擎创建的内部对象,例如,用于存储假脱机或排序的中间结果的工作表。? 由使用已提交读(使用行版本控制隔离或快照隔离事务)的数据库中...

weixin_34114823的博客 514

认识Tempdb----配置最佳实践

一些问题需要改变配置,这里会整合所有的tempdb配置的最佳实践。主要包括:tempdb放置的位置,初始化大小及自动增长,配置多个文件。 Tempdb文件放置(File Placement) 众所周知的最佳实践是把数据、事务日志和tempdb分开放置,该建议的原委在于不同物理存储之间工作负载的类型的分离,例如分离物理磁盘。分离有助于管理,潜在问题更容易隔离。例如,把tempdb分离到它自己的逻

Burgess_Liu的专栏 6517

sqlserver dba常用的sql语句

sqlserver查看实例级别的信息,使用SERVERPROPERTY函数 select SERVERPROPERTY (‘propertyname’) 查看实例级别的某个参数XX的配置 select * from sys.configurations where name=‘XX’ 更改实例级别的某个参数XX的值 sp_configure ‘XX’,‘0’ RECONFIGURE WITH OVERRIDE sp_configure显示或更改当前服务器的全局配置设置。 RECONFIGURE表示SQL S

lusklusklusk的博客 1432
上一篇: jrae源码解析(二)
下一篇: DPDK收发包处理流程-----(一)网卡初始化【1】
小少爷984645
博客等级 码龄12年 4粉丝 12原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值