大數(shù)據(jù)安全現(xiàn)在已經(jīng)上升成為國家安全極為關(guān)鍵的組成部分。最近我們正在這方面做探索，比如與金融界合作，嘗試將分布式數(shù)據(jù)庫與區(qū)塊鏈技術(shù)結(jié)合在一起，這意味著可以即時(shí)發(fā)現(xiàn)數(shù)據(jù)庫中的數(shù)據(jù)進(jìn)出狀況，從而真正保障數(shù)據(jù)安全。
　　區(qū)塊鏈應(yīng)用平臺(tái)的風(fēng)險(xiǎn)防范
　　從技術(shù)背景看，區(qū)塊鏈基于分布式網(wǎng)絡(luò)技術(shù)才得以誕生，在金融領(lǐng)域，區(qū)塊鏈就是分布式賬本。分布式賬本總賬的特點(diǎn)，將導(dǎo)致金融交易由凈額交收變成逐筆交收，它可以24小時(shí)全天候運(yùn)轉(zhuǎn)。這使得金融服務(wù)可以離開銀行的物理網(wǎng)點(diǎn)直接進(jìn)入到生活場景。同時(shí)也從根本上顛覆改變了金融機(jī)構(gòu)的組織結(jié)構(gòu)和業(yè)務(wù)結(jié)構(gòu)。因此，現(xiàn)在華爾街的一些金融機(jī)構(gòu)已經(jīng)公開宣稱自己其實(shí)是一家科技公司。
　　區(qū)塊鏈作為一種分布式數(shù)據(jù)管理技術(shù)，受到了越來越多的關(guān)注。從金融業(yè)到政府部門、醫(yī)療業(yè)、零售業(yè)乃至新興制造業(yè)，區(qū)塊鏈幾乎成了能夠創(chuàng)造更多價(jià)值的神器。但最近基于區(qū)塊鏈技術(shù)全球最大眾籌項(xiàng)目The Dao被黑客攻擊，導(dǎo)致價(jià)值6000萬美元的360多萬以太幣被劫持，引起業(yè)內(nèi)震動(dòng)和高度關(guān)注。恰恰是該事件，除了反映出區(qū)塊鏈技術(shù)整體依然處于測試階段，去中心化的智能合約根本無法避免技術(shù)上的操作風(fēng)險(xiǎn)，和主觀上的道德風(fēng)險(xiǎn)等方面問題之外，這個(gè)事件最重要的啟示還在于：對區(qū)塊鏈技術(shù)應(yīng)用平臺(tái)存在的風(fēng)險(xiǎn)，需建立一套嚴(yán)密追蹤規(guī)則，以確保大數(shù)據(jù)應(yīng)用安全。
　　區(qū)塊鏈技術(shù)應(yīng)用平臺(tái)的風(fēng)險(xiǎn)到底如何防范？ The Dao被攻擊事件反映出基于區(qū)塊鏈技術(shù)應(yīng)用平臺(tái)的技術(shù)風(fēng)險(xiǎn)可能將長期存在。由于區(qū)塊鏈所具有的不可篡改和不可逆性質(zhì)，一旦遭到黑客攻擊，無論是硬分叉還是軟分叉的解決方案，其成本都相當(dāng)高昂。因此，區(qū)塊鏈技術(shù)在金融等場景的應(yīng)用上，更需要高度關(guān)注潛在的風(fēng)險(xiǎn)，而我們擁有的分布式內(nèi)存數(shù)據(jù)庫技術(shù)，恰恰可以讓這樣的技術(shù)公司幫助制定相應(yīng)的風(fēng)控措施和應(yīng)急預(yù)案。
　　在數(shù)字貨幣的發(fā)展中如何突破區(qū)塊鏈的技術(shù)障礙？區(qū)塊鏈?zhǔn)菄野l(fā)行的加密數(shù)字貨幣的基礎(chǔ)設(shè)施，也是其發(fā)行、流通和結(jié)算的技術(shù)實(shí)施渠道。因此必須建立嚴(yán)謹(jǐn)?shù)陌l(fā)展規(guī)劃和設(shè)計(jì)，盡量找到能使區(qū)塊鏈現(xiàn)有特征得到充分體現(xiàn)并且能突破區(qū)塊鏈發(fā)展障礙的運(yùn)用案例。而減少“試錯(cuò)成本”，是區(qū)塊鏈和國家發(fā)行數(shù)字貨幣的重要條件。在這方面，我們的分布式內(nèi)存數(shù)據(jù)庫恰逢其時(shí)，能夠在數(shù)據(jù)安全保障方面做出貢獻(xiàn)。
　　分布式結(jié)構(gòu)所具備的技術(shù)和經(jīng)濟(jì)可行性表明，區(qū)塊鏈技術(shù)發(fā)展至今已經(jīng)可以通過構(gòu)建分布式結(jié)構(gòu)體系和參與者共事協(xié)議，形成不需要中心的、大規(guī)模的數(shù)據(jù)庫系統(tǒng)，所有約定的參與者都參與數(shù)據(jù)的記錄和驗(yàn)證，再通過分布式傳播發(fā)送給各個(gè)節(jié)點(diǎn)。即使部分節(jié)點(diǎn)受到攻擊或損害，也不會(huì)影響整個(gè)數(shù)據(jù)庫的完整性和信息更新，但任意點(diǎn)的變更都會(huì)被各個(gè)點(diǎn)記錄。
　　分布式聯(lián)盟鏈與計(jì)算集群的作用
　　從區(qū)塊鏈技術(shù)應(yīng)用的可行性可以看出，分布式的概念更加貼切準(zhǔn)確。中國大型金融機(jī)構(gòu)目前已經(jīng)建成超高速、大流量、中心化的信息技術(shù)系統(tǒng)，在區(qū)塊鏈技術(shù)應(yīng)用中，各金融機(jī)構(gòu)共同組建分布式的聯(lián)盟鏈，充分利用現(xiàn)有技術(shù)，可確保交易速度，實(shí)現(xiàn)合規(guī)控制的目的。
　　數(shù)據(jù)可能會(huì)泄露，也可能會(huì)透過某種方式滲透進(jìn)入網(wǎng)絡(luò)，可以通過排序、機(jī)器學(xué)習(xí)，通過人工干預(yù)的半監(jiān)督學(xué)習(xí)、深度學(xué)習(xí)，拼湊出某種完整圖景，以探索出并固定住某種經(jīng)驗(yàn)。人類過去從沒做到這一點(diǎn)。機(jī)器累積的這種認(rèn)知能力，將大為提升人類使用知識(shí)的能力。
　　中國大陸做分布式數(shù)據(jù)庫的人很少，而做內(nèi)存式數(shù)據(jù)庫的幾乎根本就沒有。上世紀(jì)90年代中期以后，中國大陸數(shù)據(jù)庫行業(yè)一直為美、德等國外廠商所壟斷。當(dāng)時(shí)中國本土眾多軟件公司所追求的，可能更多的是短期效益，而不愿掙數(shù)據(jù)庫這樣的慢錢。再加上數(shù)據(jù)庫本身技術(shù)標(biāo)準(zhǔn)嚴(yán)苛，對算法穩(wěn)定性要求很高，實(shí)現(xiàn)難度較大，是一種慢工出細(xì)活的領(lǐng)域，中國公司如果起步晚，積累少，在當(dāng)時(shí)肯定就會(huì)顯得落后，所以這種支撐大數(shù)據(jù)核心發(fā)展的基礎(chǔ)技術(shù)真的需要國家的大力支持。
　　兩年前我即開始啟動(dòng)流數(shù)據(jù)庫研究，那時(shí)國內(nèi)還沒有人提這項(xiàng)研究。因?yàn)闀r(shí)勢都未到，但它所發(fā)生的必要條件均已具備。所以當(dāng)我們做出這個(gè)數(shù)據(jù)庫后，今后將要充分發(fā)揮這些必要條件。中美專家包括中國工信部專家都對流數(shù)據(jù)庫在中國國內(nèi)出現(xiàn)感到驚訝。我們柏睿數(shù)據(jù)撰寫的數(shù)據(jù)庫標(biāo)準(zhǔn)已被國際信息標(biāo)準(zhǔn)化委員會(huì)通過，成為國際認(rèn)定的中國國家級標(biāo)準(zhǔn)，受到國內(nèi)外同行的充分肯定。同時(shí)，國家也在根據(jù)這一國際標(biāo)準(zhǔn)制定國家標(biāo)準(zhǔn)，我們國家現(xiàn)在國際大數(shù)據(jù)標(biāo)準(zhǔn)領(lǐng)域已經(jīng)擁有自己的發(fā)言權(quán)，美德日一統(tǒng)標(biāo)準(zhǔn)的時(shí)代已徹底成為了過去式。
　　下一代軟件開發(fā)技術(shù)趨勢可能會(huì)有很大變化。并行計(jì)算今后可能會(huì)要求很高，這其實(shí)也是我們正在做的事情之一。但對有些概念，國內(nèi)存在混淆現(xiàn)象。比如我一直堅(jiān)持說MPP內(nèi)存數(shù)據(jù)庫，有的人卻說這是分布式數(shù)據(jù)庫。其實(shí)MPP也是一種分布式，而原則上，MPP是海量并行處理，算是一種分布式，但分布式并不見得是MPP。所謂并行處理是說每個(gè)處理單元與其它單元有關(guān)聯(lián)。最近兩年，并行計(jì)算確實(shí)出現(xiàn)了一些語言或軟件開發(fā)方法，這一趨勢比較明顯。尤其是當(dāng)處理的數(shù)據(jù)量很多，則對之后的影響會(huì)很大。這方面，國內(nèi)積累真的不多。
　　3年前，我曾認(rèn)為，理想中一個(gè)分布式的MPP海量并行的內(nèi)存數(shù)據(jù)庫就已足夠，我能處理的數(shù)據(jù)，比如說當(dāng)時(shí)是64G內(nèi)存有100個(gè)節(jié)點(diǎn)6個(gè)T的數(shù)據(jù)，就讓我覺得很大了。但去年很多用戶已開始問我，你們能不能處理256G內(nèi)存的單節(jié)點(diǎn)數(shù)據(jù)。這個(gè)發(fā)展真是太快了。
　　下一個(gè)趨勢是，單節(jié)點(diǎn)可能至少要處理4個(gè)T的數(shù)據(jù)，4個(gè)T1000個(gè)節(jié)點(diǎn)就是4000T。在做好算法，系統(tǒng)穩(wěn)定的條件下，4個(gè)T數(shù)據(jù)可在數(shù)分鐘之內(nèi)處理完畢。這是一個(gè)比較漂亮的結(jié)果。就硬件而言，CPU自身速度在提高。而分布式計(jì)算集群現(xiàn)在越來越大。這在之前是很難預(yù)料的。
　　我們的內(nèi)存數(shù)據(jù)庫內(nèi)部測試現(xiàn)在已達(dá)到256個(gè)節(jié)點(diǎn)，下一步可能是512個(gè)節(jié)點(diǎn)，這是數(shù)據(jù)庫一個(gè)比較大的變化趨勢。3年前我開始考慮的流數(shù)據(jù)庫，去年這一想法已開始成熟，原以為可能要等候兩三年才能出成果。現(xiàn)在看，如果每個(gè)人手中的手機(jī)云端數(shù)據(jù)直接進(jìn)入我的有數(shù)百臺(tái)機(jī)器組成的內(nèi)存池子，進(jìn)入流數(shù)據(jù)庫，做一些簡單查詢，或進(jìn)入分布數(shù)據(jù)庫做非常復(fù)雜的分布查詢，這些過程都無需落地，只在內(nèi)存里跑。這是一個(gè)比較完整的體系。之后，是深度學(xué)習(xí)的算法，也存于內(nèi)存之中，而且要與數(shù)據(jù)庫緊密結(jié)合。也就是說，在只要有數(shù)據(jù)的地方，就有算法圍繞著它。今后朝著這個(gè)方向才是大數(shù)據(jù)發(fā)展的必然趨勢。
　　區(qū)塊鏈大數(shù)據(jù)安全應(yīng)用關(guān)涉國家戰(zhàn)略
　　從區(qū)塊鏈所具有的分布式功能也可以看出，通過構(gòu)建分布式數(shù)據(jù)庫系統(tǒng)和參與者共識(shí)協(xié)議，能夠保護(hù)數(shù)據(jù)的完整性。而區(qū)塊鏈的時(shí)間戳功能，可以通過生成一定時(shí)間段的信息區(qū)塊以及區(qū)塊之間的首尾相連數(shù)據(jù)鏈，形成不可偽造的數(shù)據(jù)。當(dāng)每個(gè)參與者進(jìn)入?yún)^(qū)塊時(shí)加蓋時(shí)間戳，就能夠證明原創(chuàng)性和所有權(quán)歸屬，這必然有利于保護(hù)信息的私密性。因?yàn)闊o論誰動(dòng)過你的奶酪，都會(huì)留下痕跡，動(dòng)你奶酪的人必然會(huì)謹(jǐn)慎對待。
　　雖然區(qū)塊鏈技術(shù)應(yīng)用目前還處于實(shí)驗(yàn)室階段，但人們已經(jīng)迫不及待地希望區(qū)塊鏈技術(shù)能夠提供某種安全保證，以便將復(fù)雜的經(jīng)濟(jì)生活變得簡單易行。比如便捷支付，比如在醫(yī)療保健等各種社會(huì)服務(wù)領(lǐng)域應(yīng)用區(qū)塊鏈技術(shù)，可以提高效率，節(jié)約成本。盡管區(qū)塊鏈技術(shù)應(yīng)用的潛在風(fēng)險(xiǎn)開始暴露，但與此同時(shí)，對區(qū)塊鏈技術(shù)應(yīng)用風(fēng)險(xiǎn)的管控也越來越受到重視。
　　從移動(dòng)互聯(lián)網(wǎng)到大數(shù)據(jù)、區(qū)塊鏈，當(dāng)今時(shí)代，技術(shù)變化的潮流勢不可擋，以至于很多人一時(shí)竟難以明白和適應(yīng)。但毫無疑問，區(qū)塊鏈正在讓大數(shù)據(jù)洶涌而來。區(qū)塊鏈的可信任性、安全性和不可篡改性，正在讓更多數(shù)據(jù)被釋放出來。
　　我們看到，數(shù)據(jù)的“看過、復(fù)制即被擁有”等特征，曾經(jīng)嚴(yán)重阻礙數(shù)據(jù)流通。但基于去中心化的區(qū)塊鏈，卻能夠破除數(shù)據(jù)被任意復(fù)制的威脅，從而保障數(shù)據(jù)擁有者的合法權(quán)益。區(qū)塊鏈還提供了可追溯路徑，能有效破解數(shù)據(jù)確權(quán)難題。有了區(qū)塊鏈提供安全保障，大數(shù)據(jù)將更加活躍涌動(dòng)。
　　大數(shù)據(jù)時(shí)代的來臨，為眾多企業(yè)帶來了全新的機(jī)遇和挑戰(zhàn)。隨著數(shù)據(jù)量、數(shù)據(jù)種類的增多，企業(yè)由歷史數(shù)據(jù)分析漸漸過渡到基于多源、海量數(shù)據(jù)的實(shí)時(shí)分析。我們都知道商場如戰(zhàn)場，誰能在企業(yè)運(yùn)營中做出快速、高效的分析決策，誰就能日益激烈的市場競爭中立于不敗之地。RDP通過提供從海量數(shù)據(jù)存儲(chǔ)、分布式內(nèi)存計(jì)算、分布式內(nèi)存數(shù)據(jù)庫、內(nèi)存數(shù)據(jù)分析挖掘以及數(shù)據(jù)可視化的整套支持，解決了企業(yè)在大數(shù)據(jù)和快數(shù)據(jù)存儲(chǔ)、分析、挖掘領(lǐng)域碰到的各種問題。作為企業(yè)級解決方案，可管理性是RDP的顯著優(yōu)勢，用戶友好的管理界面提供了系統(tǒng)安裝、系統(tǒng)及集群配置、監(jiān)控及預(yù)警等多方面的一站式支持。RDP架構(gòu)具有高可用性和快速故障恢復(fù)能力，HDFS2作為其底層數(shù)據(jù)持久化存儲(chǔ)系統(tǒng)的支撐技術(shù)保證了數(shù)據(jù)的持久化和冗余復(fù)制，并具有數(shù)據(jù)自動(dòng)檢測和修復(fù)的容錯(cuò)功能；強(qiáng)大、高效的內(nèi)存數(shù)據(jù)庫復(fù)制、持久化功能，保證內(nèi)存數(shù)據(jù)安全可靠。在安全領(lǐng)域，與Kerberos/LDAP進(jìn)行整合，支持細(xì)粒度訪問控制、應(yīng)用程序安全及數(shù)據(jù)加密及解密等等。
　　當(dāng)今從事大數(shù)據(jù)應(yīng)用者很多，也有很多從事大數(shù)據(jù)交易的企業(yè)，如果能形成合力，整個(gè)大數(shù)據(jù)生態(tài)系統(tǒng)能夠良性循環(huán)，將是一件令人樂觀的前景，也將會(huì)為中國大數(shù)據(jù)應(yīng)用發(fā)展積累經(jīng)驗(yàn)和人才。因此，政府需要在這方面積極加以引導(dǎo)。大數(shù)據(jù)應(yīng)用不應(yīng)只是一種熱潮，因?yàn)楫?dāng)熱潮散去，還會(huì)留下什么呢？如果形成生態(tài)系統(tǒng)，在數(shù)據(jù)庫和數(shù)據(jù)處理方面，包括中間件方面，也可能存在基礎(chǔ)軟件換代升級的問題要解決，以現(xiàn)有技術(shù)發(fā)展趨勢，而這很可能使中國出現(xiàn)一些大的基礎(chǔ)軟件公司，與甲骨文公司、SAP公司等國際巨頭競爭。大家拭目以待！
?

电信下载联通下载

相關(guān)電子資料下載

• 智能時(shí)代的三大核心技術(shù) 57
• 無人機(jī)的攔截方法系統(tǒng)技術(shù)盤點(diǎn) 32
• 榮澤科技基于openEuler打造高性能可信數(shù)據(jù)要素流通平臺(tái) 148
• 自動(dòng)化、機(jī)器學(xué)習(xí)和區(qū)塊鏈如何推動(dòng)電子制造業(yè)的未來發(fā)展 798
• 開源項(xiàng)目專訪 | XuperCore——讓信任的鏈接更加便捷 87
• 車聯(lián)網(wǎng)隱私安全威脅及保護(hù)方案 261
• 未來智能技術(shù)架構(gòu)的潛在應(yīng)用和影響因素 2620
• 圓周率智能X萬鏈信息｜戰(zhàn)略合作，開創(chuàng)Web3.0新篇章 245
• GPU一卡難求，數(shù)字幣“礦工”或變身AI算力提供商 4428
• 淺談元宇宙的三大基礎(chǔ)指標(biāo) 337