solr需要流式匯出海量資料，匯出資料是基於流式的，當服務端match到第一條資料之後就會向客戶端flush出資料。
需要匯出的列需要將schema中field元素的docvalue設定為true，並且在solrconfig.xml中配置
客戶端的查詢**如下：xsort
false
query
exportqparserplugin 在export handler中使用qp
查詢結果流式排序輸出：
sortingresponsewriter
海量url mysql 海量資料mysql優化步驟
第一優化你的sql和索引 第二加快取，memcached,redis 第三以上都做了後，還是慢，就做主從複製或主主複製，讀寫分離，可以在應用層做，效率高，也可以用三方工具，第三方工具推薦360的atlas,其它的要麼效率不高，要麼沒人維護 第四如果以上都做了還是慢，不要想著去做切分，mysql自帶分...
海量資料分頁
language vbscript codepage 936 分頁sql語句生成 function getpagesql tblname,fldname,pagesize,pageindex,ordertype,strwhere dim strtemp,strsql,strorder 根據排序方式生...
海量資料排序
海量資料排序 2011 04 12 19 33 1億資料找出最大的1w個 1.分塊法 解法 a.採用分塊法，將1億資料分成100w一塊，共100塊。b.對每塊進行快速排序，分成兩堆，如果大堆大於1w個，則對大堆再次進行快速排序，直到小於等於1w停止 假設此時大堆有n個 此時對小堆進行排序，取最大的1...