本文由IPFS原力區原作
人工智慧(AI)現在碰到了一個很大的瓶頸,那就是資料。人工智慧發展的前提是要擁有龐大的資料,但是現在的資料擁有者並沒有足夠的動力去提供這些資料,尤其是極具價值的隱私資料。
——斯坦福大學終身教授、物理學家張首晟
張首晟
回顧《Filecoin儲存革命與生態價值,劍指何方?(上)》Filecoin商業落地探索系列文章,我們把Filecoin與傳統專案Curve、HDFS、Ceph、GlusterFS展開橫向對比,以及與區塊鏈專案Arweave、Crust、Burst、Bluzelle、Storj、Sia進行縱向對比,多維度深度探索了HDFS和Ceph的商業發展路徑。
這次我們帶著張首晟的疑問繼續探索Filecoin的商業落地,本文會對Filecoin與GlusterFS展開對比,然後分析各自落地方向的市場價值。
3)GlusterFS:原生協議的擁躉
Gluster
2011年10月4日,紅帽斥資1.36億美元收購Gluster。
2014年4月30日,紅帽以1.75億美元的價格收購Ceph企業級產品提供商Inktank。
2018年10月28日,IBM以每股190美元收購紅帽所有流通股票,總股本約為340億美元。
GlusterFS是一個開源的分散式檔案系統,具有高擴充套件性、高可用性、高效能、可橫向擴充套件等特點,橫向擴充套件能夠支援數PB儲存容量以及同時處理數千客戶端。GlusterFS也並非完美,在資料儲存安全方面還存在一定的不足。
GlusterFS主攻是儲存的原生協議,很多雲開發服務平臺都支援其應用,包括谷歌Kubernetes和紅帽OpenShift。GlusterFS主要適用場景有以下三類:
媒體類:文件、圖片、音訊、影片
共享儲存:雲端儲存、虛擬化儲存、HPC(高效能運算)
大資料:日誌檔案、RFID(射頻識別)資料
根據以上Ceph、HDFS和GlusterFS發展路徑的分析,分散式儲存最終落地的方向有:雲端計算設施、資料分析軟體和儲存原生協議。除此之外,分散式儲存還有哪些落地探索?我們先回顧一下分散式儲存大事件。
四、分散式儲存的趨勢發展方向
來源:《2020:下一個十年,儲存發展的趨勢是什麼?》,製作:IPFS原力區,2020-10-27
分散式儲存進化論。從2010-2019年分散式儲存發展的過程,可以分為三類:分散式塊儲存、分散式檔案儲存、分散式物件儲存。隨著分散式儲存的相對市場份額不斷增長,兩者將處於並存局面。其中,戴爾收購的Compellent、惠普收購的3Par,實現了塊級虛擬化,將硬碟和RAID解耦;VMware Virtual SAN(現命名為vSAN)、Nutanix有別於以往的專用儲存,將檔案系統軟體與伺服器解耦,都體現了分散式儲存征程中的不同階段。隨之而來的是,分散式儲存衍生出很多新的落地場景:
1)2024年去中心化計算市場規模:162.3億美元。去中心化計算作為一種新的計算模式,其透過整合儲存、網路、資料、硬體等分散式資源為使用者提供強大的計算能力,從根本上實現並行處理、分散式計算與網格計算。其在一定程度上可以彌補中心化計算的高昂成本、計算慢和資料洩露等問題,同時也促進了閒置計算資源的利用。
來源:Technavio,2020-03
根據Technavio最新市場研究報告顯示,從2020年(70.9億美金)至2024年(162.3億美金),全球去中心化計算市場預計將增長91.4億美元,以32%的複合年增長率擴大市場規模,去中心化計算市場正在醞釀待發。
2)2020年Q1季度去中心化超融合市場規模:39億美元。去中心化超融合框架是基於分散式儲存基礎上的進一步升級,其架構透過軟體實現計算、儲存、網路融合,以虛擬化、去中心化來定義資料中心的技術架構。其主要解決的是業務新架構的敏捷響應、大資料處理與訪問。
超融合基礎架構,製作:IPFS原力區,2020-10-27
根據國際資料公司(IDC)全球季度融合系統跟蹤報告資料顯示,全球融合系統市場收入在2020年Q1同比增長4.5%至39億美元。其把超融合系統分為三類:認證參考系統和整合基礎架構、整合平臺以及超融合系統,其中超融合系統在2020年Q1季度中佔整個融合系統市場的50.9%,近20億美元。
全球季度融合系統市場佔比,來源:IDC,2020-06-18
3)2024年智慧化+儲存儲存市場規模:34.5億美元。智慧化+儲存主要有兩塊:儲存智慧化和儲存賦能智慧AI。
儲存智慧化希望實現的是根據業務負載、運維管理等,預測未來事件,以及可以根據預測結果進行動態地調整儲存資源池。儲存資源調配的方式很適合分散式儲存的礦池概念,因為礦池天生就適合彈性調配的調整方式,只要匹配上成熟的AI技術即可實現隨增隨減的資源配置功能。
儲存賦能智慧AI就是以AI的準備、訓練、推理和歸檔等階段為基本功能,儲存以配合不同AI場景的需求,包含效能和響應。
總之,兩者融合解決了資料的存放、保護和最佳化,實現了低成本、高效率地存放。
全球人工智慧-儲存市場份額預算,來源:marketsandmarkets.com,2019-12
全球人工智慧-儲存市場規模預計將從2019年104億美元增長到2024年345億美元(複合年增長率為27.1%)。其中,亞太地區以人工智慧-儲存市場保持最高複合年增長率增長。
4)私有云間對接,公私雲互相滲透
私有云對接本質就是B端企業的資訊交流,其主要是要實現儲存礦池化、自動化、API橋接,和私有云管理平臺按需驅動儲存資源的建立、調整、最佳化甚至回收。
方興未艾的公、私雲互動市場需要區塊鏈實現脫敏變現。公、私雲互相滲透本質就是B端企業與C端的交流。因為早期公有云主要是針對C端(或者小B),隨著雲端計算的深入和普及,B端與C端需要資訊互動。但出於隱私保護、安全性、政府合規、管理、相容性、慣性、遷移成本等多種因素的考慮,儲存市場亟需分散式儲存的誕生,以保障脫敏資訊的互動和資訊的隱私保護。
張首晟在《區塊鏈技術是網際網路世界新的分合轉折點》文章中找到了文前疑問的答案:“一旦有了區塊鏈之後,如果創造資料能被價值化、共識化,就會形成一個大的資料市場,使得人工智慧也能夠更進一步”。
區塊鏈不僅僅可以讓隱私資料價值化、公式化,更可以讓AI的發展更進一步,如AI操作記錄的儲存、資料的脫敏使用等。總的來說,區塊鏈+儲存可實現有價資料的利用,AI是賦予整個過程更加智慧。
5)原生協議賦能實體的無限潛力。分散式儲存原生協議主要是為各家應用提供最根本的儲存架構,便於協議層與應用層的銜接。從建房子角度看,原生協議主要是建設房子框架的工具,應用層主要是裝潢房子,滿足不同喜好的人群。該塊市場針對的規模可能會更大,但凡是與儲存有關,都可能是真需求,如醫療資料儲存、金融資料儲存和大檔案冷儲存等。
來源:marketsandmarkets.com,2020-09
其中,全球雲端儲存市場規模預計將從2020年501億美元增長到2025年1373億美元(複合年增長率為22.3%)。雲端儲存市場的增長隨著企業資料量劇增而不斷增長,為遠端使用者提供無處不在的資料和需求,其中其涵蓋的垂直領域有電信、醫療保健與生命科學、媒體與娛樂、消費品和零售、製造業、政府與公共部門、能源與公用事業和其他(教育和旅行等)。
五、Filecoin會如何聯動?
根據Coinmarketcap資料顯示,Filecoin目前總市場價值為8億美金左右。以上幾個領域可以作為分散式儲存的探索方向。儘管這些都處於雛形階段,年市值都還只有幾十億美金規模,但未來潛力無限。總的來說Filecoin嵌合實體進去有三個方向可實踐:
Filecoin儲存價格,來源:storage.codefi.network,2020-10-20
儲存為本,技術支撐更多方向。早期Filecoin透過高價效比的服務來積累儲存容量(Filecoin費用0.052美金/G/Y,亞馬遜 S3 0.276美金/G/Y),只有資料積累起來之後,才能體現資料的價值。同時,協議實驗室在協同開發四個全節點(IPFS原力區負責維護的go-filecoin、lotus 、fuhon、forest ),以提高Filecoin網路安全性和滿足Filecoin生態系統的更大需求。
自由市場發展,多點並行探索。在架構穩定了之後,全球團隊可基於Filecoin網路特性搭建應用,創新者可以根據其對市場的認識開發不同的產品,進行多領域、多維度探索。
沉默資料亟需區塊鏈喚醒價值。張首晟認為,往往是隱私資料(即是沉默資料)其價值可能是最大的,所以他才致力於使用區塊鏈+AI喚醒沉默資料。目前,市場上對大多數的沉默資料都沒有被使用,其價值是不可估量,一旦該資料被利用起來,對世界可能是新的一種改變。