日本在线看黄a美女久草|日本动漫亚洲在线一区|日韩人妻无码免费视频|A√有码中文字幕|日韩一级片视频热久久久|一区二区三区四区精品无码在线|亚洲AV成人无码一二三app|亚洲综合图片绯色|91极品人妻在线网站|国产成人精品一区二三区四区五区

您正在使用IE低版瀏覽器,為了您的雷峰網(wǎng)賬號安全和更好的產(chǎn)品體驗,強(qiáng)烈建議使用更快更安全的瀏覽器
此為臨時鏈接,僅用于文章預(yù)覽,將在時失效
行業(yè)云 正文
發(fā)私信給王德清
發(fā)送

0

如何釋放非結(jié)構(gòu)化數(shù)據(jù)的價值?

本文作者: 王德清 2021-04-19 11:20
導(dǎo)語:不再讓存儲成為限制

人們正在從不斷產(chǎn)生的數(shù)據(jù)中挖掘著價值,作為新的生產(chǎn)要素,數(shù)據(jù)量越大將代表著人工智能將越智能。

因此,人們渴望從大量的數(shù)據(jù)中挖掘出價值,在此前,對于數(shù)據(jù)潛能的挖掘的最大限制就是算力,而現(xiàn)如今,存儲日益成為一大限制因素。

隨著非機(jī)構(gòu)化數(shù)據(jù)的的不斷涌現(xiàn),存儲這一限制則越發(fā)明顯,而據(jù)Gartner數(shù)據(jù)顯示,目前全世界80%的數(shù)據(jù)是非結(jié)構(gòu)化數(shù)據(jù);同樣,IDC也預(yù)測,截至到2023年,文件和對象數(shù)據(jù)的容量將增長3倍,且90%的新企業(yè)的應(yīng)用將是基于云原生設(shè)計的。

而這也就對非結(jié)構(gòu)化數(shù)據(jù)的存儲、使用和管理提出了更高要求,同時也對存儲基礎(chǔ)設(shè)施的性能和可擴(kuò)展性提出了前所未有的挑戰(zhàn)。

給企業(yè)用戶提供一個高效、高可用、高可靠的存儲產(chǎn)品,則成為了存儲廠商發(fā)力的重點。

對象存儲成為企業(yè)“新寵”

“今天的非結(jié)構(gòu)化數(shù)據(jù)可謂‘無處不在’”。

在戴爾科技集團(tuán)大中華區(qū)非結(jié)構(gòu)化數(shù)據(jù)存儲事業(yè)部技術(shù)總監(jiān)胡淵汶看來,企業(yè)和機(jī)構(gòu)的非結(jié)構(gòu)化數(shù)據(jù)主要就有三大部分:

  • 一是IT部門管理的數(shù)據(jù),包括文件共享,主目錄,文件檔案庫,甚至包括視頻監(jiān)控;

  • 二是行業(yè)應(yīng)用的數(shù)據(jù),包括媒體里面有4K編輯、播出系統(tǒng)和媒資系統(tǒng),生命科學(xué)有基因測序分析、石油能源、氣象、地震的高性能計算,EDA、ADAS(汽車自動駕駛輔助系統(tǒng)),銀行影像系統(tǒng)等等;

  • 三是大量的新興業(yè)務(wù)產(chǎn)生的數(shù)據(jù),特別是隨著企業(yè)采用新的應(yīng)用架構(gòu)、微服務(wù)、容器等技術(shù),傳統(tǒng)的存儲解決方案和數(shù)據(jù)庫無法提供這些新應(yīng)用和新架構(gòu)所需的簡易性和靈活性。

在這一背景下,對象存儲由于主要操作對象是對象(Object),它既能夠像塊存儲一樣高效檢索,又能像文件存儲一樣極致擴(kuò)展,結(jié)合了塊和文件存儲的優(yōu)勢,受到了市場不斷的認(rèn)可。其存儲協(xié)議,也是大家熟知的S3、Swift等。

如何釋放非結(jié)構(gòu)化數(shù)據(jù)的價值?

戴爾科技集團(tuán)大中華區(qū)非結(jié)構(gòu)化數(shù)據(jù)存儲事業(yè)部技術(shù)總監(jiān)胡淵汶

胡淵汶表示:“對象存儲由于其具有高擴(kuò)展性和易管理的特性,作為企業(yè)存儲戰(zhàn)略的關(guān)鍵元素,對象存儲已經(jīng)成為更多企業(yè)在數(shù)字化轉(zhuǎn)型中的第一選擇?!?/p>

同時,越來越多的公有云廠商把對象存儲當(dāng)做“云存儲”在售賣。

但在實際應(yīng)用中,雖然公有云的對象存儲服務(wù)有其優(yōu)勢,但考慮到安全合規(guī)以及帶寬成本等問題,企業(yè)傾向于部署企業(yè)私有的對象存儲方案。

胡淵汶介紹說,在企業(yè)私有化部署場景中,對象存儲主要有兩類用法,一類是面向傳統(tǒng)場景提供歸檔存儲。另外一類,面向現(xiàn)代化的應(yīng)用程序,比如互聯(lián)網(wǎng)大數(shù)據(jù)分析、AI等場景,比如云原生架構(gòu)這類負(fù)載。

第一類用法利用的是對象存儲低成本以及寫入少讀取多(WORM)的特性;第二類主要利用其高擴(kuò)展性和高靈活性的優(yōu)點,更為關(guān)鍵的是,就是其存儲協(xié)議支持S3,而大多數(shù)現(xiàn)代化應(yīng)用和云原生應(yīng)用都能夠兼容S3,這就讓對象存儲有了更多的“用武之地”。

此外,為了克服對象存儲性能上的不足,業(yè)內(nèi)近幾年來開始嘗試用全閃存來提升性能,性能型的對象存儲成為趨勢后,應(yīng)用場景將進(jìn)一步擴(kuò)大。

企業(yè)需要什么樣的對象存儲產(chǎn)品?

當(dāng)前,對象存儲越來越快的走入到了企業(yè)的應(yīng)用場景之中,并在各個方面擔(dān)當(dāng)“重任”。

隨著非結(jié)構(gòu)數(shù)據(jù)呈現(xiàn)指數(shù)級的增長,對于面向企業(yè)的對象存儲產(chǎn)品提供了更多更高的要求。

基于對企業(yè)用戶的需求,戴爾科技集團(tuán)更新了旗下的企業(yè)級對象存儲平臺——戴爾易安信ECS。

據(jù)胡淵汶介紹,ECS采用橫向擴(kuò)展式架構(gòu),在容量、對象數(shù)量、文件規(guī)?;蚬?jié)點數(shù)量等方面無限制,因此無論行業(yè)客戶的數(shù)據(jù)中心位于何處,都可以輕松跟上指數(shù)級數(shù)據(jù)增長的步伐,同時也只需以類似于公有云的規(guī)模添加新節(jié)點和支持工作負(fù)載,就能同時實現(xiàn)私有云基礎(chǔ)架構(gòu)的可靠性和控制。

由此也實現(xiàn)了更好的TCO成本,數(shù)據(jù)顯示,與行業(yè)領(lǐng)先的公有云提供商相比,通過ECS構(gòu)建一個對象存儲云,總擁有成本可降低59.5%。

如何釋放非結(jié)構(gòu)化數(shù)據(jù)的價值?

同時,它還具備全球可訪問能力,支持8個站點的虛擬數(shù)據(jù)中心的聯(lián)合;此外,ECS采用Active-active架構(gòu),支持XOR等能力,也帶來更加簡化的管理;ECS還能充當(dāng)二級存儲,為關(guān)鍵業(yè)務(wù)應(yīng)用釋放昂貴的主存儲資源。

在存儲協(xié)議方面,ECS支持包括S3、NFS、SMB、CIFS、Swift、CAS、ATMOS、HDFS等多協(xié)議,同時也能通過RESTful API來支持云原生的應(yīng)用,這樣就能適應(yīng)目前企業(yè)往云原生轉(zhuǎn)型的趨勢;更為關(guān)鍵的是,多協(xié)議支持和良好的互操作性,企業(yè)也可以借助ECS構(gòu)建現(xiàn)代數(shù)據(jù)湖,進(jìn)而通過數(shù)據(jù)湖實現(xiàn)Splunk分析,以及流數(shù)據(jù)分析存儲等能力。

在數(shù)據(jù)安全保護(hù)方面,ECS內(nèi)置了數(shù)據(jù)保護(hù)功能,具有靜態(tài)數(shù)據(jù)加密、糾刪碼、三重鏡像等功能,能夠使得存儲平臺安全性增強(qiáng),同時還新增了更多的安全能力,包括支持新的安全管理員角色,能夠?qū)⑻囟ǖ氖褂脵?quán)和特權(quán)授予安全管理員;提供了新的安全API,不僅方便自動化地報告安全設(shè)置,同時企業(yè)也能將ECS整合到已有的安全解決方案中;此外,也支持外部的密匙管理器,幫助企業(yè)滿足合規(guī)要求。

在部署方面,ECS支持軟件定義模式部署,也可以通過一體機(jī)這種“交鑰匙”的方式部署,同時服務(wù)供應(yīng)商也能通過ECS提供相應(yīng)的部署,靈活的部署方式,可以讓企業(yè)擁有更好的可擴(kuò)展性、性能、彈性和經(jīng)濟(jì)性,真正滿足了企業(yè)現(xiàn)代化應(yīng)用的需求。

除此之外,ECS還能夠定制元數(shù)據(jù),內(nèi)置元數(shù)據(jù)搜索功能,可以支持多達(dá)30個元數(shù)據(jù)字段,不但可以快速輕松定位數(shù)據(jù),也能支持元數(shù)據(jù)更加精細(xì)的搜索。

值得注意的是,ECS還具有強(qiáng)一致性的多站點訪問能力,能夠通過全局命名空間,讓任意數(shù)據(jù)可以在任意站點進(jìn)行讀寫,支持應(yīng)用訪問無縫切換。

“ECS的多站點和強(qiáng)一致性能力,能夠給前端業(yè)務(wù)帶來很大的便利性,不需要處理很復(fù)雜的一致性的關(guān)系,就能實現(xiàn)數(shù)據(jù)的完整性、數(shù)據(jù)一致性的保證?!贝鳡柨萍技瘓F(tuán)大中華區(qū)非結(jié)構(gòu)化數(shù)據(jù)存儲事業(yè)部資深系統(tǒng)工程師白光茁說到。

對象存儲如何實踐應(yīng)用?


隨著云原生相關(guān)理念的逐步升溫,越來越多的企業(yè)都將目光瞄向了對象存儲。

據(jù)IDC《2020年Q2,中國軟件定義存儲及超融合存儲系統(tǒng)市場季度跟蹤報告》顯示,SDS在2020年上半年較去年同期實現(xiàn)38.3%增長,其中對象存儲出貨比例增長46%,超過軟件定義存儲市場總體增長率,對象存儲是存儲市場增長的新動力。

這表明著越來越多的企業(yè)都開始選擇使用對象存儲,據(jù)胡淵汶介紹,海通證券利用ECS對象存儲的擴(kuò)展性建立了存儲資源池,不僅降低了初期成本投入和TCO ,還解決了傳統(tǒng)磁帶庫性能低下、可靠性不足等問題,同時還獲得了數(shù)據(jù)全生命周期管理能力,更為后續(xù)在業(yè)務(wù)中融入人工智能等技術(shù)做好了準(zhǔn)備。

如何釋放非結(jié)構(gòu)化數(shù)據(jù)的價值?

胡淵汶認(rèn)為,企業(yè)在對舊的定制應(yīng)用系統(tǒng)做現(xiàn)代化改造時,最好的做法是改變應(yīng)用使用存儲的方式。

因為基于NAS文件存儲來開發(fā)傳統(tǒng)應(yīng)用的體系其實非常復(fù)雜,有幾個應(yīng)用就需要對應(yīng)有幾套文件系統(tǒng),甚至還有五花八門的專有API,這導(dǎo)致應(yīng)用開發(fā)和存儲管理的成本都很高。而且,許多應(yīng)用都只能本地使用,無法以Web應(yīng)用和移動應(yīng)用方式來訪問,非常不現(xiàn)代化。

現(xiàn)代化的云原生應(yīng)用中直接使用對象存儲來存儲數(shù)據(jù),數(shù)據(jù)繞過Web服務(wù)器,直接通過API存取數(shù)據(jù)到對象存儲,開發(fā)過程簡化。而且對象存儲的管理成本很低,一個人就能輕松管理PB級的數(shù)據(jù)。配合對象存儲,云原生架構(gòu)會使得企業(yè)軟件的開發(fā)迭代速度變得非??臁?/p>

從胡淵汶的介紹中了解到,國內(nèi)某大型商業(yè)銀行的手機(jī)銀行有許多新應(yīng)用需要大量頻繁迭代,于是,該銀行逐步把這部分業(yè)務(wù)轉(zhuǎn)型為云原生業(yè)務(wù),底層存儲中采用了ECS,存放著超過100億個對象,每天大概要接受2億左右的請求,在ECS之上部署了200多個應(yīng)用。

該銀行的應(yīng)用開發(fā)部署的節(jié)奏明顯加快,最多一個季度上線了50個應(yīng)用這在以前是不可想象的,這是云原生架構(gòu)以及對象存儲技術(shù)的價值體現(xiàn)。(雷鋒網(wǎng)雷鋒網(wǎng)雷鋒網(wǎng))

雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。

分享:
相關(guān)文章

云基建主編

云基建主編,關(guān)注云計算賽道,尋求報道、爆料請聯(lián)系作者:15811539880
當(dāng)月熱門文章
最新文章
請?zhí)顚懮暾埲速Y料
姓名
電話
郵箱
微信號
作品鏈接
個人簡介
為了您的賬戶安全,請驗證郵箱
您的郵箱還未驗證,完成可獲20積分喲!
請驗證您的郵箱
立即驗證
完善賬號信息
您的賬號已經(jīng)綁定,現(xiàn)在您可以設(shè)置密碼以方便用郵箱登錄
立即設(shè)置 以后再說