這一周的背景是公司感測數據即將大增，突然意識到需要對所有的資料庫表進行索引優化，以及查詢語句優化。這一篇博文主要是實現對聚集索引、非聚集索引的一些淺層原理的理解。 1、看懂Set Statistics on中提示的意思。例如：“掃描計數 1，邏輯讀取 3282 次，物理讀取 44 次，預讀 3282 ...
這一周的背景是公司感測數據即將大增，突然意識到需要對所有的資料庫表進行索引優化，以及查詢語句優化。這一篇博文主要是實現對聚集索引、非聚集索引的一些淺層原理的理解。
1、看懂Set Statistics on中提示的意思。例如：“掃描計數 1，邏輯讀取 3282 次，物理讀取 44 次，預讀 3282 次”，
“預讀”指的是查詢優化器預估要從硬碟讀取數據到緩存的次數；
“物理讀取”指的是sql從緩存中讀取數據，發現數據不足，需要從硬碟再次讀取數據到緩存的次數。註：當SQL語句不變時，如果再次執行，由於緩存中已經存在相關數據，則無需再從硬碟讀取，此時“物理讀取”次數為0；
“邏輯讀取”指的是SQL從緩存中獲取數據的次數。
2、資料庫數據的存儲。最小單位是“頁”，而每個“頁”大約能保存8000位元組的數據，也就是說即便只想取一行數據，也至少要載入一整頁。而頁的存在結構是平衡二叉樹，也就是說當頁中數據增加到一定程度，就會迫使頁產生分拆，而且不會舊頁是滿的，新頁只有一條數據，事實上是可能拆分成新頁5條數據，舊頁6條數據，所以叫平衡二叉樹。索引數據的保存也是利用這種平衡樹模式
3、聚集索引。數據表中的數據會按照聚集索引進行物理排序，因此更換聚集索引會導致所有數據重新排序開銷極大。聚集索引的非葉級節點保存的是指針數據，葉級節點保存則是真實數據。設置聚集索引的列對於開發者來說，並非一定是要有唯一性，但是SQL會自動給聚集索引添加尾碼，使其變成具有唯一性。
4、非聚集索引（也叫書簽）。這個概念是相對於聚集索引的，數據表數據不會根據它進行物理排序。它其實是按指定列的順序把該列的指針保存， 它所有的節點包含都是指針，沒有真實數據。這裡分兩種情況，一種是表中沒有設置聚集索引，這叫堆上的非聚集索引，它的葉級節點保存的是所要查找的數據的行號，也就是RID，最後通過RID得到真實數據。另一種是表上建立了聚集索引，這叫聚集表上的非聚集索引，他的葉級節點上存放的是所要查找的數據的聚集索引葉級節點的鍵，最後通過聚集索引獲取真實數據。
==============================================
本周開發筆記彙總：
開發筆記2019.02.14
一、聚集索引的相關知識
1、主鍵一定是索引，但是不一定是聚集索引，預設情況如果不設置，就會被創建為聚集索引。
2、除了聚集索引，也可以是唯一非聚集索引，這裡面的“唯一”指的是 列中的內容不重覆。
3、聚集索引是數據的物理排序位置，所有新插入的數據都會按照這個順序插入，所以儘量把索引建立在自增ID欄位上。如果是Guid欄位，排序的效率就會很低，每次插入位置不確定，都會導致大量碎片。
4、如果想要在已經創建主鍵的表上 新增聚集索引，必須先去掉主鍵約束，但是去掉主鍵約束就會導致該欄位的主鍵特性被刪除。
刪除主鍵約束命令：alter table [T_EquipVoiceLog_123456] drop constraint PK__T_Equipm__3214EC273CE9E9DD
5、創建非聚集索引主鍵
CREATE TABLE t2(
id INT NOT NULL
,d DATETIME NOT NULL
,c INT NOT NULL
CONSTRAINT PK_t2 PRIMARY KEY NONCLUSTERED (
id
)
)
6、查看表索引信息： exec sp_helpindex 表名
查看碎片情況：select * from sys.dm_db_index_physical_stats(DB_ID() ,object_id('agent') ,NULL,NULL,NULL)
.avg_fragmentation_in_percent =>當前索引碎片百分比 【如果碎片小於10%~20%，碎片不太可能會成為問題，如果索引碎片在20%~40%，碎片可能成為問題，但是可以通過索引重組來消除索引解決，大規模的碎片(當碎片大於40%)，可能要求索引重建。】
.avg_page_space_used_in_percent =>所有頁中使用的可用數據存儲空間的平均百分比
.page_count =>索引或數據頁的總數
7、清空查詢緩存，得到真實查詢速度
CHECKPOINT;
DBCC DROPCLEANBUFFERS;
DBCC FREEPROCCACHE;
DBCC FREESYSTEMCACHE ('ALL');
SET STATISTICS TIME ON ;
--查詢條件
SET STATISTICS TIME OFF;
創建非唯一聚集索引
create clustered index macClustered on [T_EquipVoiceLog_123456](MacStr)
創建非聚集索引
create Nonclustered index vtnonClustered on [T_EquipVoiceLog_123456](voiceTime)
刪除普通索引
drop index macClustered on [T_EquipVoiceLog_123456];
開發筆記2019.02.15
1、datediff函數中的欄位，無法使用索引，所以在大數據場景應該避免使用。
查詢分鐘相等的數據的可選方案：
and DATEDIFF(minute,voicetime,'2018-10-13 22:58:16.527')=0
改為
AND voicetime>=CONVERT(VARCHAR(16),'2018-10-13 22:58:16.527',120)
AND voicetime<DATEADD(mi,1,CONVERT(VARCHAR(16),'2018-10-13 22:58:16.527',120))
開發筆記2019.02.16
1、在winForm中創建子線程
Thread thread=new Thread( 需要在子線程中運行的方法名);
thread.Start();
2、子線程預設無法修改主線程中控制的值，如果需要，則需要通過委托回調完成。
private delegate void SetTextCallback(string text);
private void SetText(string text)
{
if(this.textBox1.InvokeRequired)
{
SetTextCallback d=new SetTextCallback(SetText);
this.Invoke(d,new object[]{text});
}
else
{
this.textBox1.Text=text;
}
}
