DBA大神成长轨迹(二)|SQLSERVER数据库性能优化实践总结
ztj100 2025-06-10 04:15 4 浏览 0 评论
一、性能优化工具
1.1 日志分析
1.1.1 PerforMonitor
1、内存
- Page Life Expectancy
- Lazy writes/sec
- 分支主题
2、磁盘
- AVG.Disk Aueue Length
- AVG.Disk sec/Read Write
- % Disk time
- Disk Reads Writes/sec
3、CPU
- Processor% Privilege Time
- SQL Compilations/sec
- SQL Re-Compilations/sec
4、SQL Server
- SQL Server General:User Connections
- SQL Server Buffer:Average Latch Wait Time( ms)
- SQL Server Buffer:Latch Waits/sec
- SQL Server Locks:Lock requests/sec
- SQL Server Locks:Number of Deadlocks/sec
- SQL Server Locks:Average Wait Time(ms)
1.1.2 PAL
PAL(日志性能分析)工具读入性能监视器计数器日志(任何已知格式)并使用复杂但已知的阈值(已提供)对其进行分析。该工具生成基于 HTML 的报告,以图形方式绘制重要的性能计数器并在超过阈值时发出警报。这些阈值最初基于 Microsoft 产品团队(包括 BizTalk Server)和 Microsoft 支持成员定义的阈值。该工具不能替代传统的性能分析,但它可以自动分析性能计数器日志,足以帮助您节省时间。PAL 工具:
- 分析性能计数器日志的阈值
- 对大型 Perfmon 日志很有帮助
- 通过分析阈值识别 BizTalk Server 和操作系统性能计数器瓶颈
- 可扩展以对任何性能计数器进行分析
- 可用于帮助编写您自己的计数器
1.2、DMV&DMO
- 等待类型分析
- 索引DMV分析
Microsoft SQL Server 在2005以后提供了一些工具来监控数据库,这对我们进行数据库方面的调优提供了极大的便利,下面我们就来了解一下DMO和他的孩子DMV[动态管理视图]。
首先我们先要看下DMO都能做些什么?
- 执行相关的DMO(sys.dm_exec_*):提供与执行相关的统计信息。可以用于监控与缓存查询、执行计划、活动连接/会话和带有执行计划的当前运行的查询的相关统计信息。
- 索引相关的DMO(sys.dm_db_index*和sys.dm_db_missing*):提供关于索引的统计信息。这些DMO可以用于监控和分析因为丢失索引、无效索引而导致的性能问题,也可以用来检查索引的使用情况。
- 数据库相关DMO(sys.dm_db_*):提供数据库相关统计信息。可以用于监控和分析数据库的性能问题,分析数据库相关文件的统计信息、会话统计信息和任务统计信息。
- I/O相关DMO(sys.dm_io_*):提供I/O操作的统计信息,用于监控和分析SQLServer的I/O性能问题。
- OS相关DMO(sys.dm_os_*):提供关于sqlos内部统计信息,用于监控和分析服务器配置问题。
- 事务相关的DMO(sys.dm_trn_*):提供事务相关的统计信息,用于监控和分析长时间运行的事务的锁定、死锁问题。
1.3、DBCC
DBCC是SQL Server提供的一组控制台命令,功能很强大,掌握一些必要的语句,对操作数据库有不少帮助。
- DBCC SQLPERF(LOGSPACE)查看SQL日志文件大小命令:dbcc sqlperf(logspace)
- DBCC INPUTBUFFER(n)显示从客户机发送到服务器的最后一个语句
- DBCC LOGINFO()一个数据库可以有多个日志文件。但是,在许多情况下,单个日志文件就足够了。从逻辑上讲,一个日志文件被划分为多个虚拟日志文件。虚拟日志文件概念允许 SQL Server 管理对日志文件的各种操作,包括检查点、恢复的各个阶段,如分析、撤消和重做。在虚拟日志文件 (VLF) 的帮助下,日志文件的部分被标记为活动、可恢复、可重用和未使用。VLF 的数量可以达到数百(但不可取)。当日志文件增长和缩小时,它始终以 VLF 为单位。我们可以使用 SQL Server DBCC LOGINFO 语句观察虚拟日志文件。
1.4 Extended Events
DBCC SQLPERF("sys. dm os wait stats".CLEAR)
1.5 执行计划分析工具
SOL Sentry Plan Explorer
1.6 Trace分析工具
- Clear TraceClearTrace for Trace 将 SQL Server 2016、SQL Server 2016、SQL Server 2014、SQL Server 2012、SQL Server 2008、SQL Server 2005、SQL Server 2000 跟踪和 Profiler 文件导入 SQL Server 并显示摘要性能信息。(最新版本的 SMO 不再支持读取跟踪文件。这意味着无法支持从 SQL Server 2019 读取跟踪文件。)
- SQL ProfilerMicrosoft SQL Server Profiler 是 SQL 跟踪的图形用户界面,用于监视数据库引擎或 Analysis Services 的实例。 您可以捕获有关每个事件的数据并将其保存到文件或表中供以后分析。RPC:CompletedSQL:StmtCompleted
1.7 Idera Tools
- 实时监测工具IderaSOL CheckSQL Server 数据库对组织至关重要。确保本地和云中 SQL Server 数据库的可用性、运行状况和性能。通过使用免费的 SQL Server 监控工具在单个概览仪表板中实时显示关键性能指标,监控 SQL Server 的性能。监控 20 个关键绩效指标查看不同类型的吞吐量查看不同时间间隔的“心跳”统计信息使用简单的安装向导在几分钟内启动并运行无需代理连接到云端并在云端运行(临时)
- IderaSQL job managerSQL 作业管理器为管理整个企业的 SQL 代理作业提供了一种节省时间的解决方案。SQL 作业管理器简化了跨服务器 SQL Server 作业管理的过程,显着降低了作业失败率和在繁琐的作业管理活动上花费的时间。查看和管理跨多台服务器的 SQL Server 作业 轻松查找和修复作业争用 跨服务器拖放作业以调整工作负载 通过作业历史的“一目了然”视图识别失败或失控的作业 不需要代理
1.8 Redgate Tools
Redgate 的 SQL Toolbelt 包含用于 SQL Server 开发、部署、备份和监控的行业标准产品。它们共同提高了您的工作效率、团队的敏捷性和数据的安全性。每天都有数以千计的 SQL Server 专业人员依赖 SQL Toolbelt,因为它可靠、易于使用,并且可以插入他们已经用于应用程序开发的工具中。主要包括以下产品:
- SQL Compare
- SQL Data Compare
- SQL Backup
- SQL Source Control
- SQL Monitor Installer
- SQL Prompt 9.0
- SQL Dependency Tracker
- SQL Data Generator
- SQL Multi Script
- SQL Doc
- SQL Comparison SDK
- SQL Test
- SQL Search
- SSMS Integration Pack
- DLM Dashboard
- DLM Automation
- ReadyRoll
二、索引优化
- 重复索引
- 无效、低效索引
- 丢失索引
- 无聚集索引或主键
三、查询优化
- Top 100(SQLIProc)DurationCPUexecution countelapsed timelogicalwritesworker_timelogicalreads
- SQL执行计划分析
- 隐式转化
- 参数嗅探
- 条件列类型转化
- 统计分析
- 表读写率
四、数据库配置
- 内存大小配置
- 最大并行度配置
- Adhoc配置
五、TempDB优化
5.1 TempDB是什么?
- TempDB是一个系统数据库从SQL Server 2000开始就一直存在。
- 只有Simple恢复模式,自动截断模式。
- 存放局部变量/全局临时表/表变量/临时用法(如hash表等)。
- 机器重启或SQL Server服务重启后,都会按照Model库的配置重新创建。
- 如果临时对象是在会话或存储过程范围内产生的,在会话结束后就会自动回收,不能再查询或使用。
- 默认情况下都具有访问权限。
5.2 TempDB优化
1.配置文件的大小
默认配置:
初始大小8M
自动增长10%,不限制增长。
这个配置可以修改,要视生产环境的情况而修改。
建议如下配置
tempdb 文件大小 | FILEGROWTH 增量 |
0 至 100 MB | 10 MB |
100 至 200 MB | 20 MB |
200 MB 或更多 | 10% |
2.存放文件的地方
一般要将TempDB的文件单独放到一个磁盘中。
3.文件的个数
TempDB只有一个primary文件组,所有的数据文件都会存放到这个文件组中。常规建议是4个文件开始,并且需要进行监控,如果发现不够,可以再增加4个。依次类推。建议将文件个数控制在两位数以内。
相关推荐
- 再说圆的面积-蒙特卡洛(蒙特卡洛方法求圆周率的matlab程序)
-
在微积分-圆的面积和周长(1)介绍微积分方法求解圆的面积,本文使用蒙特卡洛方法求解圆面积。...
- python创建分类器小结(pytorch分类数据集创建)
-
简介:分类是指利用数据的特性将其分成若干类型的过程。监督学习分类器就是用带标记的训练数据建立一个模型,然后对未知数据进行分类。...
- matplotlib——绘制散点图(matplotlib散点图颜色和图例)
-
绘制散点图不同条件(维度)之间的内在关联关系观察数据的离散聚合程度...
- python实现实时绘制数据(python如何绘制)
-
方法一importmatplotlib.pyplotaspltimportnumpyasnpimporttimefrommathimport*plt.ion()#...
- 简单学Python——matplotlib库3——绘制散点图
-
前面我们学习了用matplotlib绘制折线图,今天我们学习绘制散点图。其实简单的散点图与折线图的语法基本相同,只是作图函数由plot()变成了scatter()。下面就绘制一个散点图:import...
- 数据分析-相关性分析可视化(相关性分析数据处理)
-
前面介绍了相关性分析的原理、流程和常用的皮尔逊相关系数和斯皮尔曼相关系数,具体可以参考...
- 免费Python机器学习课程一:线性回归算法
-
学习线性回归的概念并从头开始在python中开发完整的线性回归算法最基本的机器学习算法必须是具有单个变量的线性回归算法。如今,可用的高级机器学习算法,库和技术如此之多,以至于线性回归似乎并不重要。但是...
- 用Python进行机器学习(2)之逻辑回归
-
前面介绍了线性回归,本次介绍的是逻辑回归。逻辑回归虽然名字里面带有“回归”两个字,但是它是一种分类算法,通常用于解决二分类问题,比如某个邮件是否是广告邮件,比如某个评价是否为正向的评价。逻辑回归也可以...
- 【Python机器学习系列】拟合和回归傻傻分不清?一文带你彻底搞懂
-
一、拟合和回归的区别拟合...
- 推荐2个十分好用的pandas数据探索分析神器
-
作者:俊欣来源:关于数据分析与可视化...
- 向量数据库:解锁大模型记忆的关键!选型指南+实战案例全解析
-
本文较长,建议点赞收藏,以免遗失。更多AI大模型应用开发学习视频及资料,尽在...
- 用Python进行机器学习(11)-主成分分析PCA
-
我们在机器学习中有时候需要处理很多个参数,但是这些参数有时候彼此之间是有着各种关系的,这个时候我们就会想:是否可以找到一种方式来降低参数的个数呢?这就是今天我们要介绍的主成分分析,英文是Princip...
- 神经网络基础深度解析:从感知机到反向传播
-
本文较长,建议点赞收藏,以免遗失。更多AI大模型应用开发学习视频及资料,尽在...
- Python实现基于机器学习的RFM模型
-
CDA数据分析师出品作者:CDALevelⅠ持证人岗位:数据分析师行业:大数据...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- idea eval reset (50)
- vue dispatch (70)
- update canceled (42)
- order by asc (53)
- spring gateway (67)
- 简单代码编程 贪吃蛇 (40)
- transforms.resize (33)
- redisson trylock (35)
- 卸载node (35)
- np.reshape (33)
- torch.arange (34)
- npm 源 (35)
- vue3 deep (35)
- win10 ssh (35)
- vue foreach (34)
- idea设置编码为utf8 (35)
- vue 数组添加元素 (34)
- std find (34)
- tablefield注解用途 (35)
- python str转json (34)
- java websocket客户端 (34)
- tensor.view (34)
- java jackson (34)
- vmware17pro最新密钥 (34)
- mysql单表最大数据量 (35)