節省60 費用!巧用阿里雲歸檔儲存降低基因測序成本

2022-09-17 18:06:17 字數 1325 閱讀 4499

「如果有款儲存產品能在保證業務正常執行的時候節省60%的成本,我會毫不猶豫選擇它」。

我的工作是做生物基因測序的,我們公司很早就在雲上搭建了資料分析平台(雲的優勢不多說了,省心省錢),資料通過採集裝置生成後,會立即上傳到雲端進行預訂的測序分析。當然了,考慮到演算法更新,這些資料都是儲存在雲端的,有了新的分析方法就可以進行更多維度的分析,無需重新採集。

儲存周期長是基因資料的特點,在採集後的最初幾個月內會被頻繁訪問,對於資料實時的響應性要求極高。但經過開始的幾個月後,原始資料訪問頻率就開始大幅下降,所以我們盡量會尋找不同訪問特性的儲存,去降低總儲存成本。

之前我們用的一直是阿里雲的oss標準儲存,雖然速度快、延遲低、吞吐能力強,但對我們業務的不同時期來說有些「效能過剩」。所以當我們看到阿里雲新上線的歸檔儲存ossarchive的**的時候,說句實話,挺驚訝的:畢竟這款產品比oss便宜得多。然後又想到阿里雲看的挺遠,不免有些服氣。

歸檔儲存有多便宜呢?相比標準儲存低了近60%,適用於長期(幾年甚至更長時間)儲存的歸檔資料取回。按照儲存容量300tb來計算,如果使用歸檔型別儲存一年是221184元,即使與300tb年儲存包相比,也可節省11萬元以上。

首先通過控制台建立乙個歸檔型別bucket,當前阿里雲oss開放的是華北2(北京)區域,開通歸檔型別bucket流程和其他儲存型別bucket是相同的。

oss提供的ossutil工具可以自動根據檔案大小適配上傳模式,包括put 上傳、分片上傳。基因檔案普遍都是gb級以上,需要通過分片機制,將大檔案能夠拆分成多個片段獨立上傳。

oss api和相關工具可以實時查詢檔案列表。

歸檔儲存與標準型別在讀取object前,需要有乙個restore操作,按照ossarchive文件中介紹,上傳到歸檔型別的object處於冷凍狀態,需要先解凍後進入到可讀取狀態,restore操作後需要等待1~4個小時的等待時間。

解凍操作是需要收取費用的,每解凍 1gb資料需要0.06元,所以不需要立即使用的object還是讓它安安靜靜的儲存吧。解凍完成24小時後object會重新回到冷凍狀態,參考官網文件處於解凍狀態下,可以通過多次呼叫restore,使object最長保持七天可讀狀態。

阿里巴巴集團宣布60億戰略增資阿里雲

本文講的是阿里巴巴集團宣布60億戰略增資阿里雲 it168 資訊 北京時間7月29日,阿里巴巴集團 baba 宣布對旗下阿里雲戰略增資60億元 約折合10億美元 用於國際業務拓展,雲計算 大資料領域基礎和前瞻技術的研發,以及dt生態體系的建設。阿里巴巴集團ceo張勇認為,阿里雲已迎來最好的機遇,在技...

阿里雲推出節省計畫的每小時承諾消費怎麼樣

阿里雲推出節省計畫的每小時承諾消費怎麼樣?我們在阿里雲節省計畫購買頁面購買節省計畫前請根據實際需求計算好合適的每小時承諾消費金額。如果您不知道如何選擇合適的節省計畫,您可以訪問節省計畫購買推薦頁面獲取推薦建議,系統將基於您選擇的參考消費資料 節省計畫型別 支付方式等條件,為您推薦合適的節省計畫。阿里...

巧用阿里雲共享頻寬包,為企業降低50 頻寬成本

在過去,使用者需要為每臺雲伺服器單獨購買公網頻寬,所以需要維護複雜的多個公網出口,同時購買多份公網頻寬,也為企業帶來了巨大的成本。而採用共享頻寬包了以後,企業可以通過頻寬共享,讓所有雲伺服器共享同乙份公網頻寬,只需要運維乙個公網出口,購買乙份公網頻寬,極大的降低了企業的頻寬成本。如下圖所示,三颱ec...