利用微查詢和資料銳化進行大資料探索

2021-09-12 19:03:27 字數 954 閱讀 8530

微查詢和資料銳化™

微查詢和資料銳化是專利技術,它們協同工作以允許使用者與大資料進行互動。zoomdata查詢引擎根據所請求的聚合值型別和預期查詢執行時間等條件呼叫它們。微查詢和資料銳化非常適合按日期分割槽並在具有多個處理核心的群集上執行的大資料。此功能是可選的,可以在資料來源定義級別禁用。

microqueries分批執行以跨資料庫分割槽對資料進行取樣。查詢引擎提交乙個完整的長時間執行查詢,該查詢與第一組微查詢一起執行,進度指示器估計完整查詢的進度。完整查詢和微查詢一直執行,直到完整查詢執行完成或使用者改變方向(使用者改變方向的想法是重要的部分,留在我們身邊以了解原因)。如果使用者更改方向,則會取消長時間執行的查詢和微查詢,以節省處理和網路資源。

資料銳化分析累積樣本資料,並通過websocket連線將估計結果流式傳輸到瀏覽器(或其他客戶端)。資料銳化的估計值可能會向上或向下波動,直到報告最終查詢。然而,隨著資料的銳化,每組的相對值通常保持一致。例如,圖表中最高的10%完成條形圖幾乎總是在100%完成時仍然是最高的條形圖。即使在資料流傳輸到儀表板時,您也可以自信地探索資料。

ad-hoc exploration與報告

您可以在**資料載入時放大,過濾,重新分組,重新排列,更改甚至建立新的指標和屬性 - 或採取任何其他操作。為什麼要這麼做?因為大量的資料探索和發現是關於識別不符合預期的異常值或資料。使用zoomdata等視覺化分析應用程式,您可以看到它。立即。使用我們的專利技術可以非常快速地形成資料,因此您無需等待令人難以忍受的長時間查詢才能解決問題,正如他們所說的那樣。

下推式處理redux

還記得zoomdata如何執行下推式處理嗎?重要的是,當您進行需要再次訪問資料來源的更改時,zoomdata會取消完整的長時間執行查詢和微查詢,以便為下乙個查詢序列釋放它。但是,取消活動查詢並非易事,許多jdbc和odbc驅動程式都不支援它。在這些情況下,即使zoomdata智慧型資料聯結器主要使用jdbc和sql,它也可以發出本機api呼叫來完成驅動程式不支援的任務,例如查詢取消。它太酷了。

利用微查詢和資料銳化進行大資料探索

微查詢和資料銳化 微查詢和資料銳化是專利技術,它們協同工作以允許使用者與大資料進行互動。zoomdata查詢引擎根據所請求的聚合值型別和預期查詢執行時間等條件呼叫它們。微查詢和資料銳化非常適合按日期分割槽並在具有多個處理核心的群集上執行的大資料。此功能是可選的,可以在資料來源定義級別禁用。micro...

利用微查詢和資料銳化進行大資料探索

微查詢和資料銳化 微查詢和資料銳化是專利技術,它們協同工作以允許使用者與大資料進行互動。zoomdata查詢引擎根據所請求的聚合值型別和預期查詢執行時間等條件呼叫它們。微查詢和資料銳化非常適合按日期分割槽並在具有多個處理核心的群集上執行的大資料。此功能是可選的,可以在資料來源定義級別禁用。micro...

利用大資料創業

大資料元年 今年 上一直宣稱,我們公司的銷售也是一直把這句話掛在嘴邊。我個人覺得,是相關處理工具發展到一定階段的產物,同時也是市場的需要。今年的大資料專案比較多,客戶總是要往雲上靠,要是沒有靠上,就會覺得自己out了。總之,資料的金礦隨著時間的推移,從特殊到一般發展,從高階到低端發展,從大企業到小企...