丁香五月天婷婷久久婷婷色综合91|国产传媒自偷自拍|久久影院亚洲精品|国产欧美VA天堂国产美女自慰视屏|免费黄色av网站|婷婷丁香五月激情四射|日韩AV一区二区中文字幕在线观看|亚洲欧美日本性爱|日日噜噜噜夜夜噜噜噜|中文Av日韩一区二区

您正在使用IE低版瀏覽器,為了您的雷峰網(wǎng)賬號安全和更好的產(chǎn)品體驗,強烈建議使用更快更安全的瀏覽器
此為臨時鏈接,僅用于文章預覽,將在時失效
行業(yè)云 正文
發(fā)私信給王德清
發(fā)送

0

如何釋放非結構化數(shù)據(jù)的價值?

本文作者: 王德清 2021-04-19 11:20
導語:不再讓存儲成為限制

人們正在從不斷產(chǎn)生的數(shù)據(jù)中挖掘著價值,作為新的生產(chǎn)要素,數(shù)據(jù)量越大將代表著人工智能將越智能。

因此,人們渴望從大量的數(shù)據(jù)中挖掘出價值,在此前,對于數(shù)據(jù)潛能的挖掘的最大限制就是算力,而現(xiàn)如今,存儲日益成為一大限制因素。

隨著非機構化數(shù)據(jù)的的不斷涌現(xiàn),存儲這一限制則越發(fā)明顯,而據(jù)Gartner數(shù)據(jù)顯示,目前全世界80%的數(shù)據(jù)是非結構化數(shù)據(jù);同樣,IDC也預測,截至到2023年,文件和對象數(shù)據(jù)的容量將增長3倍,且90%的新企業(yè)的應用將是基于云原生設計的。

而這也就對非結構化數(shù)據(jù)的存儲、使用和管理提出了更高要求,同時也對存儲基礎設施的性能和可擴展性提出了前所未有的挑戰(zhàn)。

給企業(yè)用戶提供一個高效、高可用、高可靠的存儲產(chǎn)品,則成為了存儲廠商發(fā)力的重點。

對象存儲成為企業(yè)“新寵”

“今天的非結構化數(shù)據(jù)可謂‘無處不在’”。

在戴爾科技集團大中華區(qū)非結構化數(shù)據(jù)存儲事業(yè)部技術總監(jiān)胡淵汶看來,企業(yè)和機構的非結構化數(shù)據(jù)主要就有三大部分:

  • 一是IT部門管理的數(shù)據(jù),包括文件共享,主目錄,文件檔案庫,甚至包括視頻監(jiān)控;

  • 二是行業(yè)應用的數(shù)據(jù),包括媒體里面有4K編輯、播出系統(tǒng)和媒資系統(tǒng),生命科學有基因測序分析、石油能源、氣象、地震的高性能計算,EDA、ADAS(汽車自動駕駛輔助系統(tǒng)),銀行影像系統(tǒng)等等;

  • 三是大量的新興業(yè)務產(chǎn)生的數(shù)據(jù),特別是隨著企業(yè)采用新的應用架構、微服務、容器等技術,傳統(tǒng)的存儲解決方案和數(shù)據(jù)庫無法提供這些新應用和新架構所需的簡易性和靈活性。

在這一背景下,對象存儲由于主要操作對象是對象(Object),它既能夠像塊存儲一樣高效檢索,又能像文件存儲一樣極致擴展,結合了塊和文件存儲的優(yōu)勢,受到了市場不斷的認可。其存儲協(xié)議,也是大家熟知的S3、Swift等。

如何釋放非結構化數(shù)據(jù)的價值?

戴爾科技集團大中華區(qū)非結構化數(shù)據(jù)存儲事業(yè)部技術總監(jiān)胡淵汶

胡淵汶表示:“對象存儲由于其具有高擴展性和易管理的特性,作為企業(yè)存儲戰(zhàn)略的關鍵元素,對象存儲已經(jīng)成為更多企業(yè)在數(shù)字化轉型中的第一選擇?!?/p>

同時,越來越多的公有云廠商把對象存儲當做“云存儲”在售賣。

但在實際應用中,雖然公有云的對象存儲服務有其優(yōu)勢,但考慮到安全合規(guī)以及帶寬成本等問題,企業(yè)傾向于部署企業(yè)私有的對象存儲方案。

胡淵汶介紹說,在企業(yè)私有化部署場景中,對象存儲主要有兩類用法,一類是面向傳統(tǒng)場景提供歸檔存儲。另外一類,面向現(xiàn)代化的應用程序,比如互聯(lián)網(wǎng)大數(shù)據(jù)分析、AI等場景,比如云原生架構這類負載。

第一類用法利用的是對象存儲低成本以及寫入少讀取多(WORM)的特性;第二類主要利用其高擴展性和高靈活性的優(yōu)點,更為關鍵的是,就是其存儲協(xié)議支持S3,而大多數(shù)現(xiàn)代化應用和云原生應用都能夠兼容S3,這就讓對象存儲有了更多的“用武之地”。

此外,為了克服對象存儲性能上的不足,業(yè)內(nèi)近幾年來開始嘗試用全閃存來提升性能,性能型的對象存儲成為趨勢后,應用場景將進一步擴大。

企業(yè)需要什么樣的對象存儲產(chǎn)品?

當前,對象存儲越來越快的走入到了企業(yè)的應用場景之中,并在各個方面擔當“重任”。

隨著非結構數(shù)據(jù)呈現(xiàn)指數(shù)級的增長,對于面向企業(yè)的對象存儲產(chǎn)品提供了更多更高的要求。

基于對企業(yè)用戶的需求,戴爾科技集團更新了旗下的企業(yè)級對象存儲平臺——戴爾易安信ECS。

據(jù)胡淵汶介紹,ECS采用橫向擴展式架構,在容量、對象數(shù)量、文件規(guī)模或節(jié)點數(shù)量等方面無限制,因此無論行業(yè)客戶的數(shù)據(jù)中心位于何處,都可以輕松跟上指數(shù)級數(shù)據(jù)增長的步伐,同時也只需以類似于公有云的規(guī)模添加新節(jié)點和支持工作負載,就能同時實現(xiàn)私有云基礎架構的可靠性和控制。

由此也實現(xiàn)了更好的TCO成本,數(shù)據(jù)顯示,與行業(yè)領先的公有云提供商相比,通過ECS構建一個對象存儲云,總擁有成本可降低59.5%。

如何釋放非結構化數(shù)據(jù)的價值?

同時,它還具備全球可訪問能力,支持8個站點的虛擬數(shù)據(jù)中心的聯(lián)合;此外,ECS采用Active-active架構,支持XOR等能力,也帶來更加簡化的管理;ECS還能充當二級存儲,為關鍵業(yè)務應用釋放昂貴的主存儲資源。

在存儲協(xié)議方面,ECS支持包括S3、NFS、SMB、CIFS、Swift、CAS、ATMOS、HDFS等多協(xié)議,同時也能通過RESTful API來支持云原生的應用,這樣就能適應目前企業(yè)往云原生轉型的趨勢;更為關鍵的是,多協(xié)議支持和良好的互操作性,企業(yè)也可以借助ECS構建現(xiàn)代數(shù)據(jù)湖,進而通過數(shù)據(jù)湖實現(xiàn)Splunk分析,以及流數(shù)據(jù)分析存儲等能力。

在數(shù)據(jù)安全保護方面,ECS內(nèi)置了數(shù)據(jù)保護功能,具有靜態(tài)數(shù)據(jù)加密、糾刪碼、三重鏡像等功能,能夠使得存儲平臺安全性增強,同時還新增了更多的安全能力,包括支持新的安全管理員角色,能夠將特定的使用權和特權授予安全管理員;提供了新的安全API,不僅方便自動化地報告安全設置,同時企業(yè)也能將ECS整合到已有的安全解決方案中;此外,也支持外部的密匙管理器,幫助企業(yè)滿足合規(guī)要求。

在部署方面,ECS支持軟件定義模式部署,也可以通過一體機這種“交鑰匙”的方式部署,同時服務供應商也能通過ECS提供相應的部署,靈活的部署方式,可以讓企業(yè)擁有更好的可擴展性、性能、彈性和經(jīng)濟性,真正滿足了企業(yè)現(xiàn)代化應用的需求。

除此之外,ECS還能夠定制元數(shù)據(jù),內(nèi)置元數(shù)據(jù)搜索功能,可以支持多達30個元數(shù)據(jù)字段,不但可以快速輕松定位數(shù)據(jù),也能支持元數(shù)據(jù)更加精細的搜索。

值得注意的是,ECS還具有強一致性的多站點訪問能力,能夠通過全局命名空間,讓任意數(shù)據(jù)可以在任意站點進行讀寫,支持應用訪問無縫切換。

“ECS的多站點和強一致性能力,能夠給前端業(yè)務帶來很大的便利性,不需要處理很復雜的一致性的關系,就能實現(xiàn)數(shù)據(jù)的完整性、數(shù)據(jù)一致性的保證?!贝鳡柨萍技瘓F大中華區(qū)非結構化數(shù)據(jù)存儲事業(yè)部資深系統(tǒng)工程師白光茁說到。

對象存儲如何實踐應用?


隨著云原生相關理念的逐步升溫,越來越多的企業(yè)都將目光瞄向了對象存儲。

據(jù)IDC《2020年Q2,中國軟件定義存儲及超融合存儲系統(tǒng)市場季度跟蹤報告》顯示,SDS在2020年上半年較去年同期實現(xiàn)38.3%增長,其中對象存儲出貨比例增長46%,超過軟件定義存儲市場總體增長率,對象存儲是存儲市場增長的新動力。

這表明著越來越多的企業(yè)都開始選擇使用對象存儲,據(jù)胡淵汶介紹,海通證券利用ECS對象存儲的擴展性建立了存儲資源池,不僅降低了初期成本投入和TCO ,還解決了傳統(tǒng)磁帶庫性能低下、可靠性不足等問題,同時還獲得了數(shù)據(jù)全生命周期管理能力,更為后續(xù)在業(yè)務中融入人工智能等技術做好了準備。

如何釋放非結構化數(shù)據(jù)的價值?

胡淵汶認為,企業(yè)在對舊的定制應用系統(tǒng)做現(xiàn)代化改造時,最好的做法是改變應用使用存儲的方式。

因為基于NAS文件存儲來開發(fā)傳統(tǒng)應用的體系其實非常復雜,有幾個應用就需要對應有幾套文件系統(tǒng),甚至還有五花八門的專有API,這導致應用開發(fā)和存儲管理的成本都很高。而且,許多應用都只能本地使用,無法以Web應用和移動應用方式來訪問,非常不現(xiàn)代化。

現(xiàn)代化的云原生應用中直接使用對象存儲來存儲數(shù)據(jù),數(shù)據(jù)繞過Web服務器,直接通過API存取數(shù)據(jù)到對象存儲,開發(fā)過程簡化。而且對象存儲的管理成本很低,一個人就能輕松管理PB級的數(shù)據(jù)。配合對象存儲,云原生架構會使得企業(yè)軟件的開發(fā)迭代速度變得非常快。

從胡淵汶的介紹中了解到,國內(nèi)某大型商業(yè)銀行的手機銀行有許多新應用需要大量頻繁迭代,于是,該銀行逐步把這部分業(yè)務轉型為云原生業(yè)務,底層存儲中采用了ECS,存放著超過100億個對象,每天大概要接受2億左右的請求,在ECS之上部署了200多個應用。

該銀行的應用開發(fā)部署的節(jié)奏明顯加快,最多一個季度上線了50個應用這在以前是不可想象的,這是云原生架構以及對象存儲技術的價值體現(xiàn)。(雷鋒網(wǎng)雷鋒網(wǎng)雷鋒網(wǎng))

雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權禁止轉載。詳情見轉載須知

分享:
相關文章

云基建主編

云基建主編,關注云計算賽道,尋求報道、爆料請聯(lián)系作者:15811539880
當月熱門文章
最新文章
請?zhí)顚懮暾埲速Y料
姓名
電話
郵箱
微信號
作品鏈接
個人簡介
為了您的賬戶安全,請驗證郵箱
您的郵箱還未驗證,完成可獲20積分喲!
請驗證您的郵箱
立即驗證
完善賬號信息
您的賬號已經(jīng)綁定,現(xiàn)在您可以設置密碼以方便用郵箱登錄
立即設置 以后再說