走進(jìn)架構(gòu)新思維--分布式文件系統(tǒng)應(yīng)如何設(shè)計(jì)

heguangwu

回復(fù) 8# myworkstation


   

lyhabc

又是大數(shù)據(jù)的話題  

T-Bagwell

heguangwu 發(fā)表于 2015-07-28 20:56
GlusterFS確實(shí)有好的地方，但不好地方是遍歷整個(gè)目錄時(shí)比較麻煩并且不支持模糊查詢文件名，此外，有一些獨(dú)特 ...

默認(rèn)的肯定不好用，需要優(yōu)化很多地方
比如根據(jù)需求加一個(gè)metadata的xlator  rebalance可以優(yōu)化一下  dht xlator可以優(yōu)化一下

renxiao2003

回復(fù) 4# vermouth


    我全都要了。沒有你的傘了。哈哈。

niao5929

我相信分布式系統(tǒng)肯定是未來，因?yàn)椴豢赡艽嬖谝粋�(gè)機(jī)器能解決所有問題，就像永動(dòng)機(jī)不存在一樣。
分布式系統(tǒng)最怕的就是出現(xiàn)駱駝背水那樣的困局。這需要更多的算法已經(jīng)性能來支持，所以我也對所謂的“云”充滿疑惑。如果以細(xì)胞節(jié)點(diǎn)機(jī)為中心，那么分布式系統(tǒng)進(jìn)化的方向一是細(xì)胞節(jié)點(diǎn)機(jī)性能本身的不斷提高。二是細(xì)胞節(jié)點(diǎn)機(jī)之間數(shù)據(jù)傳輸?shù)男阅苄枰�不斷提高�?br /> 分布式系統(tǒng)必然關(guān)聯(lián)的技術(shù)就是集群以及并行計(jì)算。目的是從更大的粒度上來提高信息處理和計(jì)算性能，但這本身需要解決許多自身的問題。計(jì)算機(jī)技術(shù)很多時(shí)候其實(shí)就是為了解決計(jì)算機(jī)本身的技術(shù)而產(chǎn)生的技術(shù)。

renxiao2003

已經(jīng)轉(zhuǎn)發(fā)朋友圈，坐等徽章。

vermouth

回復(fù) 15# renxiao2003

鄙視。。。

hiyachen

1、異構(gòu)存儲（磁盤、SSD、內(nèi)存）以及冷溫?zé)釘?shù)據(jù)存儲架構(gòu)您覺得如何設(shè)計(jì)？比如數(shù)據(jù)熱度由熱到溫最后到冷，對應(yīng)的存儲如何自適應(yīng)的將數(shù)據(jù)轉(zhuǎn)換和保存？

2、有的應(yīng)用讀寫并發(fā)并不大，而對元數(shù)據(jù)的操作確異常頻繁，如何設(shè)計(jì)一個(gè)以讀為主的元數(shù)據(jù)服務(wù)架構(gòu)或者設(shè)計(jì)一個(gè)以寫為主的元數(shù)據(jù)服務(wù)架構(gòu)？

3、當(dāng)前無論是CEPH還是GFS，都存在IO路徑過長的問題，有什么方法能緩解這種情況?
    ceph存儲比不上硬件存儲。問題很多呀。

4、使用分布式文件系統(tǒng)后，如何快速的檢索數(shù)據(jù)？
     分布式檢索。內(nèi)存數(shù)據(jù)庫檢索，熱詞預(yù)處理檢索。

5、云存儲的數(shù)據(jù)分享、隔離和安全性怎么做？

6、你對IT架構(gòu)的發(fā)展前景怎么看？有什么新的想法嗎？

renxiao2003

回復(fù) 18# vermouth


    呵呵。你也全要啊。

vermouth

回復(fù) 20# renxiao2003

要要，切克鬧。