備受關(guān)注的Distributed Cloud|2021全球分布式云大會·北京站于4月7日隆重召開,分布式云是2021年全球十大重要戰(zhàn)略科技趨勢,利用分布式架構(gòu)技術(shù)創(chuàng)新,連接邊緣節(jié)點、私有云和公有云的IT資源組成分布式混合云。
全球分布式云聯(lián)盟力求打造分布式云計算旗艦級技術(shù)盛會,本次大會共設(shè)有分布式云報告會、邊緣計算論壇、Serverless云原生論壇、分布式數(shù)據(jù)庫論壇、分布式存儲論壇,跨境SD-WAN咨詢會等六大論壇,圍繞分布式云、分布式算力、Serverless、云原生、HTAP、IPFS等技術(shù)與實踐展開。聯(lián)合阿里云、騰訊云、百度云、金山云等全棧技術(shù)引領(lǐng)者與全球分布式云聯(lián)盟攜手打造這場技術(shù)饕餮盛宴。
在4月7日下午舉辦的分布式數(shù)據(jù)論壇上,上海焜耀網(wǎng)絡(luò)科技有限公司(IPFS原力區(qū))品牌商務(wù)總監(jiān) 柏禮發(fā)表了題為《分布式存儲引領(lǐng)新數(shù)據(jù)時代》的主題演講。
01 新數(shù)據(jù)時代
大數(shù)據(jù)經(jīng)過了一段時間發(fā)展之后,現(xiàn)在已經(jīng)進入一個新數(shù)據(jù)的時代,簡單來講新數(shù)據(jù)時代的首要特征是數(shù)據(jù)量非常大,現(xiàn)在的存儲單位都是已經(jīng)達到EiB或者ZiB級別,數(shù)據(jù)量非常大。另外整體數(shù)據(jù)的要求非常高,數(shù)據(jù)的存儲方式也是多種多樣,數(shù)據(jù)存儲類型也很豐富。
一些新的應(yīng)用存儲集中在短視頻領(lǐng)域,這些數(shù)據(jù)對它讀取速度和處理效率整體要求非常高。另外這些數(shù)據(jù)價值非常大,日前在Facebook上面的數(shù)據(jù)泄露事件波及約5.3億用戶,整體的數(shù)據(jù)價值已經(jīng)變得非常之大。
物聯(lián)網(wǎng)數(shù)據(jù)方面,目前全世界互聯(lián)網(wǎng)用戶的數(shù)量已經(jīng)接近50億,互聯(lián)網(wǎng)在全球的普及率已經(jīng)達到了將近60%,這還是2020年的統(tǒng)計數(shù)據(jù),今后還有更大的發(fā)展。
在全球G20國家的GDP中,互聯(lián)網(wǎng)經(jīng)濟近年來所占的比重已經(jīng)達到了5.5%,在美國這個數(shù)字更高,是10%。而大家最為關(guān)心的肯定是中國的數(shù)據(jù),根據(jù)互聯(lián)網(wǎng)世界統(tǒng)計,中國互聯(lián)網(wǎng)經(jīng)濟占比在2025年會超過25%,中國無論是在互聯(lián)網(wǎng)普及率、整體的用戶規(guī)模、用戶日常使用習(xí)慣方面,在全球都是領(lǐng)先的。如此龐大的市場和用戶體量給與了從業(yè)者巨大的信心,能夠更好的來推動互聯(lián)網(wǎng)向前發(fā)展。
全球的數(shù)據(jù)規(guī)模在2018年數(shù)據(jù)是33ZB,按照目前的增長趨勢,到2025年能夠增長4倍多,達到175ZB,并且接下來這個數(shù)據(jù)還會繼續(xù)往上漲,因為有太多的互聯(lián)網(wǎng)應(yīng)用、區(qū)塊鏈生態(tài)應(yīng)用,都注重更大數(shù)據(jù)存儲應(yīng)用的開發(fā)。
存儲市場前景方面,全球云存儲市場預(yù)計在2027年時能夠達到2.7億美金,屆時數(shù)據(jù)市場的規(guī)模應(yīng)該還要大更多,因為這只是對于云存儲市場的估計。
未來自動駕駛會成為新能源汽車的標配,自動駕駛產(chǎn)生的數(shù)據(jù)量是非常龐大的;另外,大家拍攝觀看4K/8K高清甚至是超高清視頻產(chǎn)生的數(shù)據(jù)量也是非常大的。
隨著5G在全球范圍內(nèi)的普及,中國5G普及率也是最高的,大量的智能終端的設(shè)備,包括物聯(lián)網(wǎng)的使用,以及AI大數(shù)據(jù)的接入,接下來的數(shù)據(jù)量肯定還是要進一步向前爆發(fā)的。
02 數(shù)據(jù)問題
除了這些數(shù)據(jù)量龐大之外,一些數(shù)據(jù)的價值也值得關(guān)注,這些都是非常利好的要素,但是現(xiàn)在數(shù)據(jù)方面也存在一些問題。
首先是隱私泄露,剛才提到Facebook近期有5.3億的用戶數(shù)據(jù)被泄露,這些數(shù)據(jù)被泄露掉之后可能會招來個人隱私侵犯,對正常的生活產(chǎn)生惡劣影響,這是非??膳碌氖虑椋?/p>
另一個問題是數(shù)據(jù)之間不能打通,我們的證件在這個地方可以使用,但是在另外一個地方就需要重新錄入,相信大家最有感觸的就是每到一個地方就要使用當?shù)氐慕】荡a、行程碼,就是因為數(shù)據(jù)沒有打通才會有這樣的問題;
再者就是數(shù)據(jù)的所有權(quán)的問題,現(xiàn)在在網(wǎng)上的數(shù)據(jù)實際上不屬于用戶,這些數(shù)據(jù)都是存儲在偏中心化的機構(gòu)或者存儲上,用戶自己不能掌控,這是非常大的問題;
此外,數(shù)據(jù)濫用也是目前較為嚴重的問題之一,大家之前在使用安卓手機會發(fā)生這樣的現(xiàn)象,每次下載完應(yīng)用要調(diào)用你的聯(lián)系人,其實完全沒有任何相關(guān)的關(guān)系,還有就是一定要讀取你的聯(lián)系人和個人的圖片、照片庫,之后發(fā)現(xiàn)各種隱私泄露事件頻發(fā)。
03 分布式存儲發(fā)展動態(tài)
我們應(yīng)該怎么解決這樣的問題?柏禮表示,作為區(qū)塊鏈從業(yè)者當然希望利用區(qū)塊鏈天然去中心化的屬性能夠幫普羅大眾、整體行業(yè)所面臨的問題。
在使用應(yīng)用或者組件應(yīng)用的時候可以跳過中心化機構(gòu)或者中心層,這對我們來說能夠產(chǎn)生更多的生態(tài)應(yīng)用,能夠推動更好的互聯(lián)網(wǎng)往下發(fā)展。
作為全球最大的分布式存儲網(wǎng)絡(luò),作為Filecoin從業(yè)者,肯定也是期待能夠幫助大家、幫助行業(yè)解決這樣的問題。
Filecoin并不只是挖礦,挖礦是它前期的一個簡單的應(yīng)用,挖礦也是在組建這樣的基礎(chǔ)設(shè)施。Filecoin的初心和最大的目的是要存儲人類社會最重要的信息,因為這些信息放在分布式存儲網(wǎng)絡(luò)里面能夠更好的保存,并且更加經(jīng)濟,對隱私也會更加安全。
柏禮對迄今為止分布式網(wǎng)絡(luò)的發(fā)展狀況進行了介紹,他表示每次提到最新狀況都會感到振奮,因為能夠切實地看到整個網(wǎng)絡(luò)是在非常蓬勃地往前發(fā)展。
截止到4月1日,上線不到6個月的時間里,平均每天的數(shù)據(jù)增長量達到了29PB,現(xiàn)在甚至能夠看到單日增長達到40+PB,在很多傳統(tǒng)的中心化存儲領(lǐng)域一年整體的數(shù)據(jù)量都不能達到分布式存儲網(wǎng)絡(luò)一天的數(shù)據(jù)增長量,這個是非常龐大的。另外非常多的活躍礦工參與進來,目前已有超過1800名礦工,說明生態(tài)已經(jīng)初具規(guī)模,形成非常強大的共識。
Filecoin要如何存儲人類社會最重要的信息呢?關(guān)鍵就在于利用IPFS技術(shù),以及其他的區(qū)塊鏈技術(shù),基于區(qū)塊鏈的應(yīng)用體現(xiàn)出來,更好地存儲人類社會的重要信息。
IPFS是一個底層技術(shù),有激勵層能夠鼓勵更多人參與進來,柏禮認為整體Filecoin能夠把分布式存儲這個事情做好,其他的技術(shù)領(lǐng)域都可以類似block參與進來,共同的實現(xiàn)整個區(qū)塊鏈生態(tài)的發(fā)展。
在整體的分布式存儲能夠落地的基礎(chǔ)上,柏禮暢想了它的應(yīng)用場景。首先用戶會有這樣的需求,有一個文件要存儲在網(wǎng)絡(luò)上一個月,發(fā)起需求后,有非常多的礦工可以接單,網(wǎng)絡(luò)會驗證這個礦工有沒有存你的數(shù)據(jù)、文件,有它自己的一套機制,通過網(wǎng)絡(luò)機制能夠確保礦工一直在規(guī)定的單位時間之內(nèi)很好地存儲用戶的文件系統(tǒng)。
如果用戶感知到自己的這些文件的存儲情況良好,到期了就把文件取出來,也可以支持被檢索?,F(xiàn)在分布式存儲網(wǎng)絡(luò)更多在存儲這個層面,接下來在檢索層面也會更多發(fā)力。
在分布式存儲的生態(tài)方面,有非常多的參與者,例如開發(fā)者、礦工、生態(tài)合作伙伴、持幣者、二級市場,包括還有一些客戶,客戶有真實數(shù)據(jù)要去存儲。
當然我們是作為礦工,另外一個層面也是作為持幣者,也是作為開發(fā)者,一直投入到這個網(wǎng)絡(luò)當中去開發(fā)應(yīng)用。
柏禮隨后又對近期Filecoin動態(tài)做了介紹,分布式存儲市場并不只是挖礦,焜耀科技(IPFS原力區(qū))也一直在積極推動生態(tài)構(gòu)建。
目前雖然存儲數(shù)據(jù)非常多,但是這些真正有價值的數(shù)據(jù)還是比較少的,我們也在積極的推動更多有價值的存儲的地。
提到slingshot,我們現(xiàn)在處在2.3階段,有非常多的人存儲非常強大的數(shù)據(jù)在里面,整體推動真實數(shù)據(jù)的應(yīng)用項目要求越來越高,比如要求存數(shù)據(jù)一定不能存在單一的礦工那里,要涉及各個層面,要完全的仿生真實的應(yīng)用場景,在真實的情況下很多用戶會選擇不同的礦工存儲自己的數(shù)據(jù),也完全可以自己去做這樣的選擇。
另外一個層面,近期NFT非?;穑瑢⒅蜿?、球星的藝術(shù)品放到區(qū)塊鏈網(wǎng)絡(luò)里面,甚至有藝術(shù)家將真實藝術(shù)品燃燒掉,只保留在列上那一份。
NFT相結(jié)合有一個非常好點——注重隱私,非常安全,它是分布式存儲,用戶完全可以把這樣一個文件很好的放在存儲網(wǎng)絡(luò)里面,而不用擔心丟失。NFT項目比真實的一些名畫價格還要高,存在網(wǎng)絡(luò)上面可以永續(xù)存儲下去。
現(xiàn)在有非常多的資本方也有意愿參與進來,他們成立專項的資金做這件事,包括tachyon和fenbushi longhash,有非常多的優(yōu)秀團隊加入進來,涉及在線教育和醫(yī)療等,這些項目能夠?qū)ο乱淮ヂ?lián)網(wǎng)應(yīng)用開發(fā)提供一個非常好的參照,并且能夠幫助我們厘清分布式存儲和真實的場景怎樣更好地結(jié)合。
分布式存儲網(wǎng)絡(luò)可以更好地推動web3.0到來,3.0時代分布式存儲作為基礎(chǔ)設(shè)施更好地發(fā)展,我們非常期待在未來不久的時間內(nèi)可以發(fā)生的事情。
04 共建web3.0生態(tài)
IPFS原力區(qū)在2018年左右的時候參與到這個賽道里,一直到現(xiàn)在保持這樣的初心,也非常開心能夠看到更多人參與到這個賽道,不光是傳統(tǒng)的行業(yè),包括一些新進場的友商,非常開心能夠看到大家一起共建生態(tài)。
之前看到這個生態(tài)只有原力區(qū)這一家,我們并不是作為礦工,而是作為開發(fā)者進來,一路走來從開發(fā)網(wǎng)、測試網(wǎng)到組網(wǎng)上線這樣一個心路歷程還是比較辛酸的,我們在網(wǎng)絡(luò)里面發(fā)現(xiàn)非常多的問題,我們一起幫助同行的朋友共同解決這些問題,我們的技術(shù)實力也是獲得了廣泛的認可。
IPFS原力區(qū)一直在推動分布式存儲網(wǎng)絡(luò)的發(fā)展,一直以來我們每周都會有原力開放日活動,這個活動在整體行業(yè)里面持續(xù)最久的,近期將在成都和上海協(xié)議學(xué)院積極推動分布式存儲,讓更多的傳統(tǒng)行業(yè)接觸、進入,更好地了解分布式存儲項目。
柏禮又簡單提到了VENUS項目,它是Filecoin的四個實現(xiàn)之一,也是Filecoin的第一個實現(xiàn),現(xiàn)在由原力區(qū)進行技術(shù)維護,并且原力區(qū)針對這個項目做更多模塊化的實現(xiàn),包括分布式礦池。
絕大多數(shù)是中小礦工,大約有1800名,我們非常樂意通過VENUS挖礦實現(xiàn)能夠幫助他們獲取更多的出塊權(quán),也會獲得更多的獎勵,有更多的獎勵可以更好的參與到生態(tài)項目中來,我們會更加實現(xiàn)更好的模塊化實現(xiàn),包括各個層組件的分離,對錢包各個項目優(yōu)化。
我們近期一直在做優(yōu)化工作,相信很快分布式礦池就可以推出,對于中小礦工來講是非常好的消息。
針對分布式存儲這個項目目前最好的應(yīng)用還是在挖礦層面,我們也是一直在推廣集群礦池的服務(wù),我們的集群架構(gòu)目前大家都在使用集群化的結(jié)構(gòu),相信在接下來大家考慮單體礦機進場的話相對來講會比較困難,因為全場的算力規(guī)模越來越大。
另外一個層面,我們有專業(yè)的運維團隊,并且完全保證你的挖礦是全程無憂的,公司技術(shù)團隊最主要做的事情就是圍繞軟件展開,公司提供的服務(wù)最主要和一直堅持的是技術(shù)服務(wù),希望能夠更好的服務(wù)好大家。
柏禮表示,公司對自身的定位就是web3.0時代基礎(chǔ)設(shè)施服務(wù)商,非常看好分布式存儲項目,因為它是web3.0的基礎(chǔ)設(shè)施。
原力區(qū)作為一個服務(wù)商希望能夠和更多的合作伙伴一起推動互聯(lián)網(wǎng)向前更好地發(fā)展,擺脫掉web2.0時代的詬病問題,更好的奔向web3.0!