海量數(shù)據(jù)時代,由于本地存儲的局限,互聯(lián)網(wǎng)公司紛紛將目光投向了云原生數(shù)據(jù)倉庫。作為專注中大型數(shù)據(jù)庫與數(shù)據(jù)倉庫研發(fā)、運營及銷售的企業(yè),某數(shù)據(jù)公司近日在億萬克蛟云SoveCloud DM分布式存儲系統(tǒng)的助力下,成功構(gòu)建了新一代云原生數(shù)據(jù)倉庫——該系統(tǒng)每日可處理百萬條級別數(shù)據(jù)查詢,同時支持PB級數(shù)據(jù)量存儲,實現(xiàn)了數(shù)據(jù)處理能力與存儲容量的雙重突破。
該數(shù)據(jù)公司云原生數(shù)據(jù)倉庫面臨以下難題:
1、 倉庫不夠大裝不下:云原生數(shù)據(jù)倉庫經(jīng)常要服務(wù)多家企業(yè),每家企業(yè)動輒就是幾十萬個普通硬盤容量的數(shù)據(jù),傳統(tǒng)的存儲方式并不能滿足這一容量需求。
2、 倉庫反應(yīng)速度太慢:存算分離架構(gòu)下,傳統(tǒng)存儲系統(tǒng)總是會因為“存儲性能不匹配計算需求”而導(dǎo)致查詢延遲,拖慢百萬級查詢的響應(yīng)速率。
3、 多租戶之間調(diào)取數(shù)據(jù)易“打架”:面對多租戶并發(fā)調(diào)取數(shù)據(jù)需求,傳統(tǒng)存儲常出現(xiàn)租戶間"搶資源"的情況,既難以適配主流虛擬化架構(gòu),又導(dǎo)致數(shù)據(jù)訪問沖突,影響業(yè)務(wù)連續(xù)性。
4、 可靠性與運維雙重困局:可靠性是云原生數(shù)據(jù)倉庫的“生命線”。傳統(tǒng)存儲的可靠性卻常存在“單點故障、跨中心備份難”的問題;運維管理時界面不直觀、權(quán)限管理也亂成一鍋粥。
面對該數(shù)據(jù)公司在構(gòu)建云原生數(shù)據(jù)倉庫的不足,億萬克給出全新解決方案——蛟云SoveCloud DM分布式存儲系統(tǒng)。
裝得多算得也快
億萬克DM分布式存儲系統(tǒng)具有超大單機(jī)群存儲容量,單個集群管理存儲達(dá)EB級,比數(shù)據(jù)倉庫PB級需求還高一個等級,為未來數(shù)據(jù)量增長留足空間。支持“多集群共管”,輕松突破單集群容量上限,實現(xiàn)接近“無限”的存儲空間。速度方面,性能線性增長+資源池協(xié)同工作,確保節(jié)點擴(kuò)容時性能跟得上,遠(yuǎn)程調(diào)用資源能達(dá)到毫秒級響應(yīng)。
多人共用互不打擾
DM分布式存儲系統(tǒng)具備優(yōu)秀的虛擬化能力。計算層基于獨立的虛擬倉庫集群,作為租戶可以根據(jù)需求定制“房間大小”,后續(xù)數(shù)據(jù)增多也不用重新?lián)Q地方,直接在原來的虛擬倉庫加空間;虛擬倉庫采用物理隔離,就像“一把鑰匙只能開一把鎖”,再也不用擔(dān)心資源搶占被打擾。系統(tǒng)全場景虛擬化適配,完美兼容VMware、Hyper-V、Citrix、OpenStack 等主流虛擬化架構(gòu)。
靈活又安全
DM分布式存儲系統(tǒng)可容忍其架構(gòu)的所有層次中節(jié)點級故障,每個資源池都支持“多副本”、“糾刪碼”,故障域可靈活配置,實現(xiàn)“某節(jié)點故障,其他節(jié)點秒級接替”的無感切換能力,杜絕單點故障引發(fā)的業(yè)務(wù)中斷風(fēng)險;考慮到運維效率問題,DM存儲系統(tǒng)針對運維管理進(jìn)行了易用性設(shè)計,安裝配置擴(kuò)容全流程自動化部署。運維界面采用可視化看板設(shè)計,權(quán)限管理明確什么人在什么時候可以做什么操作,提升運維效率和管理精度。
億萬克蛟云SoveCloud DM分布式存儲系統(tǒng),突破傳統(tǒng)存儲的極限,支持各種虛擬化場景、主流的云平臺和云原生應(yīng)用,是大型數(shù)據(jù)倉庫搭建的“靠譜”基石。
(來源:億萬克)