專訪存儲(chǔ)專家張冬：大數(shù)據(jù)時(shí)代存儲(chǔ)如何演變？（獲獎(jiǎng)名單已公布-2014-12-1）

pipihappy8888

獲獎(jiǎng)名單已公布，詳情請看：http://72891.cn/thread-4162509-1-1.html

大家好，歡迎大家做客第98期名人堂，我是主持人皮麗華。存儲(chǔ)是人類千百年來都在應(yīng)用并且探索的主題。在原始社會(huì)，人類用樹枝和石頭來記錄數(shù)據(jù)。后來，人類創(chuàng)造了鐵器，用鐵器在石頭上刻畫一些象形文字來記錄數(shù)據(jù)。再接下來，人們選擇用語言來記錄的東西。到現(xiàn)在的互聯(lián)網(wǎng)時(shí)代，人們發(fā)明了新的存儲(chǔ)技術(shù)，從最早的軟盤硬盤到如今的云存儲(chǔ)、閃存等新興技術(shù)，那么大數(shù)據(jù)時(shí)代傳統(tǒng)存儲(chǔ)該何去何從？本期名人堂我們邀請到了《大話存儲(chǔ)》的作者張冬，為我們聊聊大數(shù)據(jù)時(shí)代存儲(chǔ)背后的演變。

冬瓜頭（張冬），社區(qū)ID：東瓜頭，資深系統(tǒng)工程師，多年來一直就職于存儲(chǔ)設(shè)備公司，一直對存儲(chǔ)技術(shù)孜孜不倦的研究探索并且樂于幫助存儲(chǔ)初學(xué)者提高。著有暢銷書《大話存儲(chǔ)》，該書屢次獲獎(jiǎng)，包括2008年十大IT暢銷書排名第一、2009年全國技術(shù)品種暢銷書，版權(quán)被輸出至臺(tái)灣地區(qū)。更多嘉賓精彩專訪，請關(guān)注名人堂欄目：http://www.chinaunix.net/star/

皮皮（Q1）：我了解到您從事存儲(chǔ)行業(yè)多年了，也出過《大話存儲(chǔ)》的書，為什么會(huì)對存儲(chǔ)結(jié)下情緣呢？能否介紹下自己，和我們分享下背后的故事。

張冬（A1）:大學(xué)學(xué)的是化學(xué)專業(yè)。大二那年宿舍一起弄了臺(tái)電腦，當(dāng)然，主要都來打暗黑了。一直到大三，都在玩計(jì)算機(jī)，而從來沒有想過去搞清楚它到底是怎么運(yùn)作的。不知道哪一天，突然產(chǎn)生了好奇心，想弄清楚墻上的網(wǎng)線接口后面到底連接到哪里了，數(shù)據(jù)又是怎么傳過來發(fā)出去的。就這樣學(xué)習(xí)了一下網(wǎng)絡(luò)，圖書館借了不少書來看，過程中有本書叫做“存儲(chǔ)區(qū)域網(wǎng)絡(luò)”，帶著網(wǎng)絡(luò)的我都借來看，結(jié)果就是這本書，基本看不懂，完全不知所云，當(dāng)時(shí)就感覺很高端。后來工作了，也是計(jì)算機(jī)行當(dāng)，逐漸接觸存儲(chǔ)，這時(shí)候才知道所謂SAN網(wǎng)絡(luò)，然后就開始潛心學(xué)習(xí)存儲(chǔ)，鉆研，最終有了結(jié)晶，就是大話存儲(chǔ)這本書。

皮皮（Q2）：在大數(shù)據(jù)時(shí)代，軟件定義數(shù)據(jù)中心成為了新的方向，而作為數(shù)據(jù)中心的主角，存儲(chǔ)面臨著海量數(shù)據(jù)帶來的壓力，于是出現(xiàn)了一種新的觀點(diǎn)，軟件定義存儲(chǔ)，您怎么看？能否和我們談?wù)劥鎯?chǔ)的演變？

張冬（A2）:軟件定義這個(gè)詞我覺得被過度炒作和利用了。軟件定義的本質(zhì)是指讓原有的比較封閉且不靈活的系統(tǒng)變得可以開放且靈活定制，比如提供細(xì)粒度的控制接口等等，這并不意味著拿著開源軟件加上白牌機(jī)搭出一款產(chǎn)品來就叫軟件定義了。同樣，軟件定義數(shù)據(jù)中心，也是說提供靈活管理和配置的數(shù)據(jù)中心基礎(chǔ)架構(gòu)管理方案，以及將不靈活的硬件單元虛擬成靈活的虛擬部件，比如虛擬機(jī)。在這個(gè)趨勢下，傳統(tǒng)存儲(chǔ)的封閉做法就顯得不合時(shí)宜了，這一點(diǎn)剛好被一些二三線以及初創(chuàng)公司抓住狠狠的戳中了要害，舉著軟件定義的大旗，向這些一線大廠發(fā)起挑戰(zhàn)：憑什么你們基于過時(shí)的硬件搭出來的系統(tǒng)還賣的那么貴？我們要軟件定義掉你們。再加上固態(tài)存儲(chǔ)的挑戰(zhàn)，這些廠商的日子開始不好過了。最近又在炒作所謂server san，其實(shí)就是分布式存儲(chǔ)系統(tǒng)，因?yàn)槊嫦蚱髽I(yè)，所以不帶san這三個(gè)字說不過去。

皮皮（Q3）：隨著各種流媒體、社交網(wǎng)站、圖片等非結(jié)構(gòu)化數(shù)據(jù)鋪天蓋地，一時(shí)間云存儲(chǔ)風(fēng)生水起。那么云存儲(chǔ)與傳統(tǒng)的存儲(chǔ)有哪些不同？哪些應(yīng)用適合選擇云存儲(chǔ)？

張冬（A3）:其實(shí)我至今也不知道云存儲(chǔ)的精確定義。和軟件定義一樣，都是被過度炒作的結(jié)果。云則更是過度炒作了。云尚可定義為一堆被自動(dòng)化細(xì)粒度管理并向外提供服務(wù)的的計(jì)算機(jī)。云存儲(chǔ)是什么還真不好定義。之前的存儲(chǔ)系統(tǒng)，也是向外提供存儲(chǔ)服務(wù)，如果說云存儲(chǔ)就是分布式存儲(chǔ)的話，那也不太像那么回事。如果說網(wǎng)盤就是云存儲(chǔ)，那也沒什么可炒作的了。云存儲(chǔ)和傳統(tǒng)存儲(chǔ)，沒法比較，傳統(tǒng)存儲(chǔ)經(jīng)過包裝也可以作為云存儲(chǔ)，只不過貴，從這一點(diǎn)上說，似乎”便宜的存儲(chǔ)就是云存儲(chǔ)“。

皮皮（Q4）：“優(yōu)盤”是閃存走進(jìn)我們常生活的最明顯寫照，在數(shù)碼相機(jī)、錄音筆、手機(jī)、數(shù)字電視、電腦里我們都可以看到閃存的影子�，F(xiàn)如今，基于閃存的固態(tài)硬盤SSD更是成為了存儲(chǔ)市場的香餑餑，那么閃存的存儲(chǔ)原理是什么？采用FLASH的閃存與DRAM的閃存究竟各自有哪些應(yīng)用場景？

張冬（A4）:閃存的存儲(chǔ)原理是利用可充電的晶體管串聯(lián)加并聯(lián)形成二維矩陣來存儲(chǔ)數(shù)據(jù)。其與DRAM基本原理類似，DRAM采用電容來充電，F(xiàn)lash采用帶有一定絕緣性的浮柵來儲(chǔ)電，電容漏電太快，所以DRAM得不停的刷新，但是DRAM的Cell比Flash的Cell響應(yīng)快得多。基于DRAM的存儲(chǔ)產(chǎn)品就不叫閃存了，有NVRAM或者NVDIMM等不同形態(tài)。這些基于RAM的持久存儲(chǔ)都使用電容+Flash來保證掉電后RAM中數(shù)據(jù)拷貝到Flash。RAM比Flash快了幾個(gè)數(shù)量級，但是容量小，所以適用于容量較小但是又要求極低訪問時(shí)延的場景比如元數(shù)據(jù)、數(shù)據(jù)庫日志緩沖等。

皮皮（Q5）：IBM、微軟、谷歌、亞馬遜等IT巨頭都紛紛轉(zhuǎn)型擁抱云計(jì)算，進(jìn)而催生了存儲(chǔ)的虛擬化。對于用戶來說，虛擬化的存儲(chǔ)資源就像是一個(gè)巨大的“存儲(chǔ)池”，那么基于主機(jī)、存儲(chǔ)設(shè)備、網(wǎng)絡(luò)的存儲(chǔ)虛擬化究竟有哪些玄機(jī)呢？如何保證虛擬化之后的數(shù)據(jù)狀態(tài)不變，同時(shí)也能避免復(fù)雜的數(shù)據(jù)備份和遷移？它們用到了哪些技術(shù)？

張冬（A5）:存儲(chǔ)的虛擬化并不是云計(jì)算催生的，而是一直都有，同樣，計(jì)算的虛擬化也不是云計(jì)算催生的，云計(jì)算只是把一些技術(shù)包裝了一下。存儲(chǔ)虛擬化又有多種理解，至少有三種，一種是掛接其他廠商的設(shè)備形成一個(gè)池，這和卷管理層沒什么大區(qū)別；第二個(gè)是底層數(shù)據(jù)布局的虛擬化，比如Raid2.0、分布式存儲(chǔ)等；第三個(gè)是用一臺(tái)存儲(chǔ)設(shè)備虛擬出多個(gè)相互隔離的虛擬設(shè)備。當(dāng)然，多數(shù)人說的還是第一種理解。主機(jī)端就是用卷管理層來做，存儲(chǔ)設(shè)備則也是用卷管理層，只不過是其內(nèi)部的卷管理層，基于網(wǎng)絡(luò)設(shè)備來做那就是網(wǎng)絡(luò)設(shè)備上做一個(gè)卷管理層，反正都是卷管理層就對了，位置在哪的問題。一般來講，越靠近上層，靈活性越高。要做到虛擬化之后狀態(tài)不變，廠商一般是通過將原本要寫入源卷的元數(shù)據(jù)寫到其他地方保存，確保虛擬化設(shè)備不主動(dòng)寫入任何數(shù)據(jù)到源卷，在這個(gè)基礎(chǔ)上可以對源卷做快照鏡像容災(zāi)等功能加成，一旦虛擬化設(shè)備出了問題，主機(jī)直接掛載源卷，其看到的數(shù)據(jù)和原來一樣。

皮皮（Q6）：早在2011年，天蝎計(jì)劃就已經(jīng)被提出，由BAT三巨頭及中國電信主導(dǎo)，旨在為互聯(lián)網(wǎng)數(shù)據(jù)中心定制IT基礎(chǔ)架構(gòu)。從存儲(chǔ)的角度，能否和我們談?wù)勌煨��?jì)劃有哪些機(jī)遇？

張冬（A6）:存儲(chǔ)在天蝎中機(jī)遇很可觀。其實(shí)互聯(lián)網(wǎng)和大型數(shù)據(jù)中心不用SAN的原因并不是100%全盤否定其價(jià)值，SAN還是有價(jià)值的，如今可以看到各種服務(wù)器機(jī)型太多，其原因很大一部分是存儲(chǔ)需要多種配置，比如計(jì)算性，均衡型，存儲(chǔ)型，冷存儲(chǔ)型，這些配置都不一樣，如果使用SAN的思想，就不會(huì)出現(xiàn)這些問題。在Rack范圍內(nèi)，如果形成一個(gè)mini SAN，并且不帶有那些花哨功能的純硬件SAN，那其實(shí)還是很有意義的，服務(wù)器可以不設(shè)計(jì)存儲(chǔ)相關(guān)的部分，而從集中的存儲(chǔ)池中獲取對應(yīng)的空間，這個(gè)空間可以是物理的也可以是虛擬的。

      非常感謝張冬老師坐鎮(zhèn)本期名人堂，歡迎大家踴躍與專家互動(dòng)，就您所關(guān)心的話題與張東老師交流心得，截止11月20日，我們將由張冬老師評選3名會(huì)員，贈(zèng)送禮品一份。
      獲獎(jiǎng)會(huì)員：
     beyondfly
           想要了解張冬老師的更多大作，請關(guān)注以下公眾號。

bulletmarquis

搶個(gè)沙發(fā)慢慢看~~~

jackson198574

頂冬哥~~~

cryboy2001

看過大牛的大話存儲(chǔ)I，II。當(dāng)然只是挑著看，兩本都太厚了。寫的非常的易懂。

大話存儲(chǔ)II好象是12年出的吧，關(guān)于云存儲(chǔ)只是在后面提了一下，沒詳細(xì)寫。

我的理解云存儲(chǔ)在底層實(shí)現(xiàn)與虛擬花存儲(chǔ)差不多啊，只是在應(yīng)用上不同，是不是��？

seesea2517

都是其它專業(yè)的反而更容易獲得成功啊~

lhyangel2012

就目前而言，，，感覺存儲(chǔ)太慢還是個(gè)問題，，SSD價(jià)格偏高，，，但是分布式是個(gè)好東西，，，不過卻使系統(tǒng)變的復(fù)雜，，，找一個(gè)平衡，，，是最好的解決辦法

wsysx

回復(fù) 5# seesea2517


    東瓜頭是興趣做動(dòng)力，是發(fā)自內(nèi)心的想弄明白一些東西

abin9630

最近才有關(guān)注相關(guān)的存儲(chǔ)和云，看起來云技術(shù)就是使用了已有的相關(guān)虛擬技術(shù)？比如之前說的云存儲(chǔ)/虛擬存儲(chǔ)，云計(jì)算/虛擬計(jì)算技術(shù)？？

seesea2517

回復(fù) 7# wsysx


    原來如此……好像明白了點(diǎn)什么。

conqueryou

回復(fù) 1# pipihappy8888

     以規(guī)模化的SAN體系為支撐的大存儲(chǔ)更為壟斷、集權(quán)背景的單位所青睞，其背后的利益輸送環(huán)環(huán)相扣且不乏國產(chǎn)化隱憂，而錙銖必較的互聯(lián)網(wǎng)公司更多通過軟件和人的因素，在所謂“低端”存儲(chǔ)上榨取性能極限并獲得可觀成功，堪稱庶民的勝利！