分庫分表的依據

2021-10-04 07:19:34 字數 370 閱讀 1864

1、磁碟io瓶頸    分庫和垂直分表

2、網路io瓶頸,請求的資料太多,網路頻寬不夠 -> 分庫

1、sql問題,如sql中包含join,group by,order by,非索引字段條件查詢等,增加cpu運算的操作 

-> sql優化,建立合適的索引,在業務service層進行業務計算

2、單錶資料量太大,查詢時掃瞄的行太多,sql效率低,cpu率先出現瓶頸 -> 水平分表。

分庫分表需要考慮的問題

是否存在關聯查詢  -  》 冗餘儲存

是否存在非分表字段進行查詢        需要分表字段和非分表字段之間對映關係的儲存

mysql分表分庫實現 MySql分表分庫思路

一.資料庫瓶頸 1.1io瓶頸 第一種 磁碟讀io瓶頸,熱點資料太多,資料庫快取放不下,每次查詢時會產生大量的io 分庫和垂直分表 第二種 網路io瓶頸,請求的資料太多,網路頻寬不夠 分庫 1.2cpu瓶頸 第一種 sql問題,如sql中包含join,group by,order by,非索引字段條...

MySQL範圍分表分庫 mysql 分表分庫策略

唯一id的生成 下面列舉幾種常見的唯一id生成方案,需要滿足兩大核心需求 1.全域性唯一 2趨勢有序 1.用資料庫的auto increment 自增id 來生成,每次通過寫入資料庫一條記錄,利用資料庫id自增的特性獲取唯一,有序的id。優點 使用資料庫原有的功能,相對簡單 能夠保證唯一 能夠保證遞...

mysql 分庫分表實戰 MySQL分庫分表實戰

為什麼要分庫分表 在大型 中,當使用者量以及使用者產生的業務資料量達到單庫單錶效能極限時,為了支撐業務可持續發展,對於重要的核心業務必然要進行分庫分表來儲存業務資料。對於非核心業務產生的大量資料,例如爬蟲爬取的資訊,論壇產生的資料等,可以考慮把資料儲存在像mongodb這樣的nosql儲存裡面,這些...