数据

当前位置:永利皇宫463登录 > 数据 > Server内情之数据页,学习类别之四

Server内情之数据页,学习类别之四

来源:http://www.makebuLuo.com 作者:永利皇宫463登录 时间:2019-11-03 14:21

数据页是包含已添加到数据库表中的用户数据的结构。

SQL Server 学习系列之四(SQL 内幕)

1、创建表

如前所述, 数据页有三种, 每个都以不同的格式存储数据。

     SQL Server 学习系列之一(薪酬方案+基础)

create table Table_test
(
    ID int identity(1,1) primary key,
    username nvarchar(20) not null,
    userpd nvarchar(20) not null,
    useremail nvarchar(500) null
)

SQL server 有行内数据页、行溢出数据页和 LOB 数据页。

     SQL Server 学习系列之二(日期格式问题)

2、写入测试数据

与 SQL server 中的所有其他类型的页一样, 数据页的大小固定为 8 KB 或8192字节。

     SQL Server 学习系列之三(SQL 关键字)

set identity_insert Table_test on 
declare @count int 
set @count=1
while @count<=200000
begin 
    insert into Table_test(ID,username,userpd,useremail) values(@count,'admin','admin888','lli0077@yahoo.com.cn')
    set @count=@count+1
end

它们由三主要组件组成: 页面页眉、数据行和行偏移量数组, 如图6-4 所示。

学习《Microsoft SQL Server 2005技术内幕:存储引擎》的代码笔记备录于此:

3、利用select top 和select not in进行分页

图片 1

图片 2图片 3

create procedure proc_paged_with_notin
(
    @pageIndex int,
    @pageSize int
)
as
begin
    set nocount on;
    declare @timediff datetime
    declare @sql nvarchar(500)
    select @timediff=Getdate()
    set @sql='select top'+str(@pageSize)+'* from Table_test where (ID not in (select top '+str(@pageSize*@pageIndex)+' id from Table_test order by ID ASC)) order by ID' 
    execute(@sql)
    select datediff(ms,@timediff,GetDate()) as 耗时
    set nocount off;
end

 

  1 select @@VERSION
  2 
  3 select * from sys.dm_exec_requests  --资源监视器 DMV
  4 
  5 select tb.status
  6 ,tb.command
  7 ,tb.statement_end_offset
  8  from sys.dm_os_workers ta,sys.dm_exec_requests tb
  9 where ta.task_address=tb.task_address
 10 
 11 select parent_node_id
 12 --调度器所属节点的ID,表示非一致性内存访问节点(NUMA)
 13 ,scheduler_id--调度器的ID
 14 ,cpu_id
 15 ,is_online--0表示此调度器不会用来处理查询或批
 16 ,current_tasks_count
 17 ,current_workers_count--线程数
 18 ,active_workers_count
 19 ,work_queue_count
 20 ,pending_disk_io_count--挂起的I/O数
 21 load_factor --内部值,指示此调度器感觉到的负载
 22 from sys.dm_os_schedulers --视图为每个调度器返回一行
 23 
 24 select is_preemptive
 25 --1=正在抢先计划运行工作线程
 26 ,is_fiber --1=正在以轻型池运行的工作线程
 27 ,*
 28 from sys.dm_os_workers  --视图为每个工作任务返回一行
 29 
 30 select 
 31 started_by_sqlservr
 32  --线程发起方 0:由其他组件启动(如,扩展进程);1:SQL已启动进程
 33 ,creation_time
 34 ,stack_bytes_committed
 35 ,affinity 
 36 --进程在其运行的CPU掩码,取决于sp_configure affinity mask 配置选项中的值
 37 ,locale --线程的缓冲的区域设置为LCID
 38 from sys.dm_os_threads  --返回在SQL Server进程中的所有SQLOS线程列表
 39 
 40 select 
 41 task_state
 42 --SUSPENDED:具有工作线程,但正在等待事件
 43 --RUNNING:当前正在调度器中运行
 44 --DONE:已完成
 45 --PENDING:正在等待的工作线程
 46 --RUNNABLE:可运行,但正在等待接收量程
 47 --SPINLOOP:当等待一个信号时,陷入自旋锁
 48 ,context_switches_count
 49 ,pending_io_count --此任务执行的物理I/O数
 50 ,pending_io_byte_average
 51 ,pending_io_byte_count
 52 ,scheduler_id --父调度器ID
 53 ,session_id --与任务关联的会话ID
 54 from sys.dm_os_tasks--为实例上每一个活动的任务返回一行
 55 
 56 select 
 57 session_id
 58 ,exec_context_id--与任务关联的执行上下文的ID
 59 ,wait_duration_ms
 60 ,wait_type
 61 ,resource_address
 62 ,blocking_session_id
 63 ,blocking_exec_context_id--正在阻塞的任务的执行上下文的ID
 64 ,resource_description
 65 from sys.dm_os_waiting_tasks --返回正在等待资源的任务队列的信息
 66 
 67 select *
 68 from sys.tcp_endpoints ta,sys.dm_exec_sessions tb
 69 where ta.endpoint_id=tb.endpoint_id
 70 
 71 select removed_last_round_count,* from sys.dm_os_memory_cache_clock_hands
 72 
 73 --内存经纪(Broker):分析SQL Server 有关内存消耗的行为并改善动态内存分配的
 74 
 75 select * from sys.dm_os_ring_buffers
 76 where ring_buffer_type='RING_BUFFER_MEMORY_BROKER'
 77 
 78  --显示一个内存组件使用了多少缓存池之外的空间
 79 select type
 80 ,SUM(multi_pages_kb) as 'total(kb)'
 81  from sys.dm_os_memory_clerks
 82  where multi_pages_kb!=0
 83  group by type
 84  
 85  select SUM(multi_pages_kb)/1024.0 as 'total(M)'
 86  from sys.dm_os_memory_clerks
 87  where multi_pages_kb!=0
 88  
 89  select distinct type from sys.dm_os_memory_clerks
 90 
 91 select physical_memory_in_bytes--/(8.0*1024*1024*1024) --可用物理内存的数量
 92 ,virtual_memory_in_bytes--/(8.0*1024*1024*1024)  
 93 --对用户模式进程可用的虚拟内存的数量,通过3G开关,可以用它来确定SQLServer是否启动
 94 ,bpool_committed --缓冲池中的8K缓冲区数:已提交的物理内存
 95 ,bpool_commit_target --缓存池中最优的缓冲区数量
 96 ,bpool_visible  
 97 from sys.dm_os_sys_info  --动态管理视图
 98 
 99 select single_pages_kb
100 ,single_pages_in_use_kb
101 ,multi_pages_kb
102 ,multi_pages_in_use_kb
103 ,entries_count--缓存中的条目数
104 ,entries_in_use_count
105 ,*
106 from sys.dm_os_memory_cache_counters
107 --为用户存储仓库和高速缓冲仓库类型的每个高速缓冲返回一份关于其健康情况的快照
108 
109 select buckets_count --哈希表中的存储桶数
110 ,buckets_in_use_count
111 ,buckets_min_length
112 ,buckets_max_length
113 ,buckets_avg_length  --如果这个数字很大,可能意味着所用的哈希算法不太理想
114 ,buckets_avg_scan_hit_length --如果这个数字很大,可能意味着高速缓存并不是最优的
115 --详见http://technet.microsoft.com/zh-cn/library/ms178529.aspx
116 from sys.dm_os_memory_cache_hash_tables  --为SQL Server实例中的每个活动的高速缓存返回一行
117 
118 --A.从资源调控器池缓存释放未使用的缓存条目
119 --下面的示例说明如何清除专属于某个指定资源调控器资源池的缓存。
120 DBCC FREESYSTEMCACHE ('ALL');
121 --B.当不再使用条目后,将它们分别从其各自所属的缓存中释放
122 --下面的示例使用 MARK_IN_USE_FOR_REMOVAL 子句,在不再使用条目后将它们从所有当前缓存中释放。
123 DBCC FREESYSTEMCACHE ('ALL') WITH MARK_IN_USE_FOR_REMOVAL;
124 
125 
126 select clock_hand  --表类型:外部和内部
127 ,clock_status --时钟的状态:挂起和运行
128 ,rounds_count --时钟表针已经转过的圈数
129 ,removed_all_rounds_count --时钟表针在所有的周转中删除的条目数
130 from sys.dm_os_memory_cache_clock_hands
131 
132 --观察内存
133 dbcc memorystatus
134  

4、分页查询的方法

页标题

View Code

select top 20 * 
from Table_test 
where ID not in(select top (2*20) ID from Table_test order by ID asc) order by ID

select top 20 *
from Table_test
where ID>(
select max(ID) 
from (select top (2*20) ID from Table_test order by ID) as TempTable)
order by ID

 

 

 

如图6-4 所示, 页标题占据每个数据页的前96个字节 (为数据、行开销和行偏移保留8096个字节)。表6-5 列出了检查页标题时显示的一些信息。

图片 4

 

行内数据的数据行

 

页标题后面是存储表实际数据行的区域。单个数据行的最大大小为8060字节的行内数据。

行还可以在单独的页上存储行溢出和 LOB 数据。

在给定页上存储的行数根据表结构和存储的数据而变化。

具有所有固定长度列的表始终可以存储每页相同的行数;

可变长度行可以根据输入数据的实际长度, 存储尽可能多的行。

保持行长更短可以使更多行适合页面, 从而减少 i/o 并增加所需数据在缓存中的可能。

 

行偏移量数组

 

行偏移量数组是2字节项的块, 每个条目表示相应数据行开始的页面上的偏移量。

每行在这个数组中都有一个2字节的条目 (正如前面所讨论的, 当您阅读每行所需的10个开销字节时)。

虽然这些字节没有存储在数据行中, 但它们确实会影响适合页面的行数。

 

行偏移量数组指示页上行的逻辑顺序。

例如, 如果表具有聚集索引, SQL server 将按聚集索引键的顺序存储这些行。

这并不意味着行按聚集索引键的顺序物理地存储在页面上。

相反, 偏移量数组中的插槽0引用聚集索引键顺序中的第一行, 插槽1引用第二行, 依此类推。

正如您在检查实际页面时所看到的那样, 这些行的物理位置可以位于页面的任何位置。

 

查看数据页

 

可以使用 DBCC 页命令查看数据页的内容, 

这允许您查看数据库中任何给定页的页标题、数据行和行偏移表。

只有系统管理员才能使用 DBCC 页。

但是, 由于通常不需要查看数据页的内容, 因此在 SQL server 文档中找不到有关 DBCC 页的信息。

不过, 如果您想使用它, 下面是语法:

DBCC PAGE ({dbid | dbname}, filenum, pagenum[, printopt])

 

DBCC 页面命令包含表6-6 中显示的参数。

清单6-4 中的代码和结果显示来自 DBCC 页的示例输出, 其 printopt 值为1。

请注意, DBCC TRACEON (3604) 指示 SQL server 将结果返回给客户端。

如果没有此 traceflag, 则不会为 DBCC 页命令返回输出。

 

图片 5

正如所看到的, DBCC 页的输出分为四主要部分: 缓冲区、页标题、数据和偏移量表 (实际上是偏移量数组)。

缓冲区部分显示有关给定页的缓冲区的信息。

此上下文中的缓冲区是管理页的内存结构, 本节中的信息仅在页处于内存中时才相关。

 

从 DBCC 页的 "输出" 页标题部分显示页上所有标题字段的数据。

(表6-5 显示了大多数这些字段的含义。数据节包含每行的信息。

使用具有 printopt 值1或3的 DBCC 页表示插槽位置, 即每行的6个表存储257、页上的行的偏移量和行的长度。

行数据分为三部分。

 

左列指示显示数据所在行内的字节位置。

中间部分包含存储在页面上的实际数据, 每五列显示八个十六进制数字。

最右边的列包含数据的 ASCII 字符表示形式。 此列中只有字符数据是可读的, 尽管可能会显示某些其他数据。

"偏移量表" 部分显示页面末尾的行偏移量数组的内容。

 

在 DBCC 页的输出中, 您可以看到此页包含23行, 第一行 (由插槽0指示) 从偏移量 1585 (0x631) 开始。

实际存储在页面上的第一行实际上是6行, 而行偏移量数组中的偏移量为96。printopt 值为1的 DBCC 页显示 "插槽编号" 顺序中的行, 即使可以从每个插槽的偏移量中看到, 也不是在页面上实际存在行的顺序。

如果使用 printopt 值为2的 DBCC 页, 则会看到页的所有8096个字节 (标头之后) 的转储, 按它们存储在页面上的顺序排列。

 

本文由永利皇宫463登录发布于数据,转载请注明出处:Server内情之数据页,学习类别之四

关键词:

上一篇:没有了

下一篇:没有了