資料庫優化方案 一)

2021-06-19 10:18:56 字數 2922 閱讀 7715

關於資料庫優化方面的文章很多,但是有的寫的似是而非,有的不切實際,對乙個資料庫來說,只能做到更優,不可能最優,並且由於實際需求不同,優化方案還是有所差異,根據實際需要關心的方面(速度、儲存空間、可維護性、可拓展性)來優化資料庫,而這些方面往往又是相互矛盾的,下面結合網上的一些看法和自己的一些觀點做個總結。

乙個系統的效能的提高,不單單是試執行或者維護階段的效能調優,也不單單是開發階段的事情,而是在整個軟體生命週期都需要注意。所以我希望按照軟體生命週期的不同階段來總結資料庫效能優化相關的注意事項。

一、 分析階段

一般來說,在系統分析階段往往有太多需要關注的地方,系統各種功能性、可用性、可靠性、安全性

需求往往吸引了我們大部分的注意力,但是,我們必須注意,效能

是很重要的非功能性需求,必須根據系統的特點確定其實時性需求、響應時間的需求、硬體的配置等。最好能有各種需求的量化的指標。

另一方面,在分析階段應該根據各種需求區分出系統的型別,大的方面,區分是oltp(聯機事務處理系統)和olap(聯機分析處理系統)。

二、 設計階段

設計階段可以說是以後系統效能的關鍵階段,在這個階段,有乙個關係到以後幾乎所有效能調優的過程—資料庫設計。

在資料庫設計

完成後,可以進行初步的索引設計

,好的索引設計可以指導編碼階段寫出高效率的**,為整個系統的效能打下良好的基礎。

以下是效能要求設計階段需要注意的:

1、資料庫邏輯設計的規範化

資料庫邏輯設計的規範化就是我們一般所說的正規化,我們可以這樣來簡單理解正規化:

第1規範:沒有重複的組或多值的列,這是資料庫設計的最低要求。

第2規範: 每個非關鍵字段必須依賴於主關鍵字,不能依賴於乙個組合式主關鍵字的某些組成部分。消除部分依賴,大部分情況下,資料庫設計都應該達到第二正規化。

第3規範: 乙個非關鍵字段不能依賴於另乙個非關鍵字段。消除傳遞依賴,達到第三正規化應該是系統中大部分表的要求,除非一些特殊作用的表。

更高的正規化要求這裡就不再作介紹了,個人認為,如果全部達到第二正規化,大部分達到第三正規化,系統會產生較少的列和較多的表,因而減少了資料冗餘,也利於效能的提高。

2、合理的冗餘

完全按照規範化設計的系統幾乎是不可能的,除非系統特別的小,在規範化設計後,有計畫地加入冗餘是必要的。

冗餘可以是冗餘資料庫、冗餘表或者冗餘字段,不同粒度的冗餘可以起到不同的作用。

冗餘可以是為了程式設計方便而增加,也可以是為了效能的提高而增加。從效能角度來說,冗餘資料庫可以分散資料庫壓力,冗餘表可以分散資料量大的表的併發壓力,也可以加快特殊查詢的速度,冗餘字段可以有效減少資料庫表的連線,提高效率。

3、主鍵的設計

主鍵是必要的,sql server的主鍵同時是乙個唯一索引,而且在實際應用中,我們往往選擇最小的鍵組合作為主鍵

,所以主鍵往往適合作為表的聚集索引。聚集索引對查詢的影響是比較大的,這個在下面索引的敘述。

在有多個鍵的表,主鍵的選擇也比較重要,一般選擇總的長度小的鍵,小的鍵的比較速度快,同時小的鍵可以使主鍵的b樹結構的層次更少。

主鍵的選擇還要注意組合主鍵的字段次序

,對於組合主鍵來說,不同的字段次序的主鍵的效能差別可能會很大,一般應該選擇重複率低、單獨或者組合查詢可能性大的字段放在前面。

4、外來鍵的設計

外來鍵作為資料庫物件,很多人認為麻煩而不用,實際上,外來鍵在大部分情況下是很有用的,理由是:

外來鍵是最高效的一致性維護方法,資料庫的一致性要求,依次可以用外來鍵、check約束、規則約束、觸發器、客戶端程式,一般認為,離資料越近的方法效率越高。

謹慎使用級聯刪除和級聯更新,級聯刪除和級聯更新作為sql server 2000當年的新功能,在2005作了保留,應該有其可用之處。我這裡說的謹慎,是因為級聯刪除和級聯更新有些突破了傳統的關於外來鍵的定義,功能有點太過強大,使用前必須確定自己已經把握好其功能範圍,否則,級聯刪除和級聯更新可能讓你的資料莫名其妙的被修改或者丟失。從效能看級聯刪除和級聯更新是比其他方法更高效的方法。

5、欄位的設計

欄位是資料庫最基本的單位,其設計對效能的影響是很大的。需要注意如下:

a、資料型別盡量用數字型,數字型的比較比字元型的快很多。

b、資料型別盡量小,這裡的盡量小是指在滿足可以預見的未來需求的前提下的。

c、 盡量不要允許null,除非必要,可以用not null+default代替。

d、少用text和image,二進位製字段的讀寫是比較慢的,而且,讀取的方法也不多,大部分情況下最好不用。

e、自增字段要慎用,不利於資料遷移。

6、資料庫物理儲存和環境的設計

在設計階段,可以對資料庫的物理儲存、作業系統環境、網路環境進行必要的設計,使得我們的系統在將來能適應比較多的使用者併發和比較大的資料量。

這裡需要注意檔案組

的作用,適用檔案組可以有效把i/o操作分散到不同的物理硬碟,提高併發能力。

7、系統設計

整個系統的設計特別是系統結構設計對效能是有很大影響的,對於一般的oltp系統,可以選擇c/s結構、三層的c/s結構等,不同的系統結構其效能的關鍵也有所不同。

系統設計階段應該歸納一些業務邏輯放在資料庫程式設計實現,資料庫程式設計包括資料庫儲存過程、觸發器和函式

。用資料庫程式設計實現業務邏輯的好處是減少網路流量並可更充分利用資料庫的預編譯和快取功能。

8、索引的設計

在設計階段,可以根據功能和效能的需求進行初步的索引設計,這裡需要根據預計的資料量和查詢來設計索引,可能與將來實際使用的時候會有所區別。

關於索引的選擇,應改主意:

a、根據資料量決定哪些表需要增加索引,資料量小的可以只有主鍵。

b、根據使用頻率決定哪些字段需要建立索引,選擇經常作為連線條件、篩選條件、聚合查詢、排序的字段作為索引的候選字段。

c、把經常一起出現的字段組合在一起,組成組合索引,組合索引的字段順序與主鍵一樣,也需要把最常用的字段放在前面,把重複率低的字段放在前面。

d、乙個表不要加太多索引,因為索引影響插入和更新的速度。

資料庫優化方案一

關於資料庫優化方面的文章很多,但是有的寫的似是而非,有的不切實際,對乙個資料庫來說,只能做到更優,不可能最優,並且由於實際需求不同,優化方案還是有所差異,根據實際需要關心的方面 速度 儲存空間 可維護性 可拓展性 來優化資料庫,而這些方面往往又是相互矛盾的,下面結合網上的一些看法和自己的一些觀點做個...

資料庫優化方案

對查詢最有效果的優化,自然是建立索引了,id自然是自增 主鍵,這個前人已經做了 從where語句分析,時間字段作為查詢條件很多,時間是8位元組,而且不重複,設定索引比較適合。我把時間設定為索引,有一點效果,但不大,估算一下 8 4000 0000 320 000 000 位元組,4000萬記錄的表僅...

資料庫優化方案

1.sql 優化 2.索引 where 條件加索引 3.連線池 處理連線數問題,druid 4.快取 持久層快取 記憶體資料庫redis 5.分割槽 分成不同的檔案,不解決根本問題 6.儲存過程 業務 難維護 7.讀寫分離 主從複製 8.集群 與主從的區別 集群是通過負載均衡的方式,目的是容錯性和高...