数据库性能调优架构师所需的skillset

简介:

 1.数据访问机制,如table full scanindex range scanindex full scanfast index scan等,这些内容让我明白SQL语句与Oracle的交互方式,数据是如何从物理的数据文件返回给界面的,是调整SQL语句必须的知识

2.表之间的连接方式,主要是nested looghash joinmerge sort,明白各个连接方式的运作机制,对于调整多表查询的SQL是必

3.索引结构,理解索引B树的数据分布,和物理表之间是怎样的对应关系,各个DML对索引空间有什么样的影响,在Oracle还包括了位图索引,函数索引,反向索

4.Oracle的空间存储机制,本地表空间管理与字典管理的区别,ASSM特性,表中 freelistpctfreepctusedHWM(高水位线)间有什么样的联系,他们对DML操作的性能影响

5.Oracle的内存结构,SGA区,包括db_cacheshared_poollarger_pooljava_poolPGA 区,对于各个区内部大小的设定,调整,监控等,其中db_cache习了LRU数据缓冲机制,划分不同块大小的缓冲块,及keeprecycle池的 使用,shared_pool包括其内部结构,Bucket划分,绑定变量,SQL查询计划,执行树,硬解析,软解析等,PGA调整包括大小设定,连接 话的PGA使用情况,磁盘排序

6.种等待事件的调整(OWI),磁IO方面的主要是db file sequential read  db file scattered readdirect path read等,这些事件的调整要看其等待的时间长短来进行,因为等待是不可能消失的,根据P1P2P3参数可以获取具体等待的数据库对象,结合话话的 SQL,用SQL_TRACEEXPLAIN做具体

锁定方面(enqueue)主要是判断会话为什么会阻塞,引起阻塞的会话正在执行什么语句,锁定的对象是什么,锁的类型是什么,出现非常频繁的 enqueue等待估计系统的设计存在很大的问题

锁存器(latch)这个是关于内存的锁定,调整起来比较棘手,需要理解内存的访问,修改,扫描机制,比如偌大一个db_cache区域,他里面 的数据是怎样定位的,修改,访问时又是怎样一种互斥的机制来保障内存块的一致性,等等,在9I中,这种机制大致如下,cache中有一定数量的 hash latch每一个hash latch下面挂载若干个hash bucket每一个hash bucket下面连接一条hash chainhash chain的内容就是链接起来的数据块缓存头,这样一个hash latch对应多个hash bucket每个hash bucket对应一条hash chain,当Oracle访问某一个块时,他要知道这个块是属于哪个数据文件,他是第几个块,根据这些信息对块做Hash运算,会得到相应的hash bucket内存地址,然后定位到内存中的bucket,再扫描跟着的hash chain,如果找到,则直接使用,如果不能找到,这hash chain链接新块,这整个过程的前提是进程必须获取控制这个bucketlatch,如果有多个进程,他们访问的数据块正好hash到相同的 Latch辖区,将出现针对这个管辖Latch的争用,体现的latch等待就是cache buffer chains.

再比如buffer busy wait事件,A话读取数据块CC不在内存中,将进行磁盘IO,此B话也进行C块的读取,那这时会产生C数据块的两次物理IO吗?答安是NO话会在内存中预留出以容纳C数据块的内存空间,并将他暂时锁定,以便进行随后的磁盘IOB话会等待锁定的结束,直到C块被读进内存空间,此时一个 BUFFER BUSY的等待事件就会被记录,当然以后对C块的访问就不会有什么障碍了,因为他已经被缓存

其他主要的latch等待包括library cacheshared pool等,关于这部分的学习我推荐Steve Adams编写的Oracle8i Internal Service for WaitsLatchesLocks and Memory,世界顶尖级高手的杰作,不看可惜,英文不行的请自备金山词

7.SQL_TRACE/TKPROF这个是调整的极佳工具,特别是调整不是自己写的程序,他可以对任何你认为可以的会话进行跟踪,捕获会话的 SQL语句,查询计划,CPU使用,消耗时间,一致性读次数,具体的等待事件等,这些信息是极有价值的,想充分利用的话最好能读懂原始的trace文件, 而不是通tkprof

8.statspack这是一个很好数据库调整工具,他采集数据库的系统信息,生成快照,通过对比两个快照之间的差异生成报表,反映系统在这段时 间内的运作情况,包括磁盘IOCPU,内存,锁定,等待事件,buffer gets最大的10SQL执行次数最多的SQL,表空间,数据文件IO分布等等等等,在调整时,如果实在没办法找出问题了我会使用他,他也是个很好的 统信息采集工

9.UNIX拟分页的运作机制,及些乱七八糟的OS性能调整的工具,这部分学的很差,很无味,不知道为什么





本文转自 charles_wang888 51CTO博客,原文链接:http://blog.51cto.com/supercharles888/840157,如需转载请自行联系原作者

目录
相关文章
|
1月前
|
SQL NoSQL 前端开发
基于BS架构的饰品购物平台设计与实现(程序+文档+数据库)
基于BS架构的饰品购物平台设计与实现(程序+文档+数据库)
|
2月前
|
存储 监控 安全
360 企业安全浏览器基于阿里云数据库 SelectDB 版内核 Apache Doris 的数据架构升级实践
为了提供更好的日志数据服务,360 企业安全浏览器设计了统一运维管理平台,并引入 Apache Doris 替代了 Elasticsearch,实现日志检索与报表分析架构的统一,同时依赖 Doris 优异性能,聚合分析效率呈数量级提升、存储成本下降 60%....为日志数据的可视化和价值发挥提供了坚实的基础。
360 企业安全浏览器基于阿里云数据库 SelectDB 版内核 Apache Doris 的数据架构升级实践
|
3月前
|
存储 缓存 关系型数据库
鱼和熊掌如何兼得?一文解析RDS数据库存储架构升级
阿里云RDS率先推出新型存储类型通用云盘,提供低延迟、低成本、高持久性的用户体验。
鱼和熊掌如何兼得?一文解析RDS数据库存储架构升级
|
4月前
|
存储 SQL Java
数据库TiDB-01.数据库架构概述
TiDB兼容MySQL 5.7协议,支持水平扩容或者缩容的金融级高可用的云原生分布式数据库。
264 2
数据库TiDB-01.数据库架构概述
|
1月前
|
SQL 存储 数据管理
数据库系统架构与DBMS功能探微:现代信息时代数据管理的关键
数据库系统架构与DBMS功能探微:现代信息时代数据管理的关键
35 1
|
2月前
|
敏捷开发 弹性计算 架构师
浅谈微服务架构下的数据库设计与实践
在当今快速发展的软件工程领域,微服务架构因其高度的模块化和灵活性而受到广泛欢迎。然而,随之而来的是对数据库设计和管理提出了新的挑战。本文将探讨在微服务架构下,如何有效地设计和实践数据库以支持服务的独立性、数据的一致性和系统的扩展性。我们将从微服务的数据库隔离策略谈起,深入分析数据库的分库分表、事务管理、数据一致性解决方案等关键技术,并通过实例说明如何在实际项目中应用这些原则和技术。本文旨在为软件开发者和架构师提供一份指南,帮助他们在微服务架构的环境下,更好地进行数据库设计和管理。
204 1
|
3月前
|
SQL 关系型数据库 MySQL
Mysql高可用,索引,事务与调优:提高数据库性能的关键技术
在当今互联网时代,高可用性、稳定性和性能是数据库的三大关键要素。本文将深入探讨Mysql高可用、索引、事务和调优等方面的技术,为读者提供实用的解决方案和经验。
24 0
|
7月前
|
存储 SQL 缓存
Mysql数据库(3)—架构和日志
Mysql数据库(3)—架构和日志
68 0
Mysql数据库(3)—架构和日志
|
3月前
|
SQL 监控 关系型数据库
解密SQL性能异常事件及阿里云数据库的性能调优实践
作为开发者想必都知道数据库是现代应用的核心组件之一,而且在当今互联网时代之下,SQL查询的性能直接影响系统的整体性能,它的性能对于系统的稳定性和响应速度至关重要。那么本文就来讨论一下SQL性能异常的排查和优化方法,包括我个人印象深刻的SQL性能异常事件,以及分享一下使用阿里云数据库产品/工具进行SQL性能调优的经验和心得体会。
84 1
解密SQL性能异常事件及阿里云数据库的性能调优实践
|
3月前
|
NoSQL Java 关系型数据库
基于java Swing 和 mysql实现的飞机订票系统(源码+数据库+ppt+ER图+流程图+架构说明+论文+运行视频指导)
基于java Swing 和 mysql实现的飞机订票系统(源码+数据库+ppt+ER图+流程图+架构说明+论文+运行视频指导)
232 0