亚洲av成人无遮挡网站在线观看,少妇性bbb搡bbb爽爽爽,亚洲av日韩精品久久久久久,兔费看少妇性l交大片免费,无码少妇一区二区三区

  免費注冊 查看新帖 |

Chinaunix

  平臺 論壇 博客 文庫
最近訪問板塊 發(fā)新帖
樓主: shinelian
打印 上一主題 下一主題

[mooseFS] ▇▇▇mfs權(quán)威指南(moosefs)分布式文件系統(tǒng)一站式解決方案(部署,性能測試)不斷更新 [復(fù)制鏈接]

論壇徽章:
0
51 [報告]
發(fā)表于 2010-06-22 11:08 |只看該作者
{:3_191:}{:3_191:}{:3_191:}

論壇徽章:
0
52 [報告]
發(fā)表于 2010-07-08 17:05 |只看該作者
回復(fù) 1# shinelian


    正在測試mfs,發(fā)現(xiàn)個問題,生產(chǎn)1000個5K小文件,df顯示太大了,能調(diào)chunk默認值不,不知道是否這個原因。


mfs#192.168.5.101:9421
                      102G  1.4G  100G   2% /mnt/mfs
[root@mfs6 mfs]# pwd
/mnt/mfs
[root@mfs6 mfs]# du -sh
49M     .

df顯示1.4G,實際只有49M。

論壇徽章:
0
53 [報告]
發(fā)表于 2010-07-08 17:07 |只看該作者
回復(fù)  shinelian


    正在測試mfs,發(fā)現(xiàn)個問題,生產(chǎn)1000個5K小文件,df顯示太大了,能調(diào)chunk默認值 ...
361163 發(fā)表于 2010-07-08 17:05



環(huán)境:一臺master,3臺chunk,副本是2。

論壇徽章:
0
54 [報告]
發(fā)表于 2010-07-13 01:18 |只看該作者
回復(fù) 43# 999lhh


    這是因為, 通常數(shù)據(jù)沒有實際刪除。。,記錄下來了, mfs 應(yīng)該有其他的刪除機制。比如執(zhí)行某種回收操作。
mfs 這種系統(tǒng),針對的是海量的硬盤,海量的數(shù)據(jù),這樣的情況下,是不會存在問題的

論壇徽章:
0
55 [報告]
發(fā)表于 2010-07-13 01:24 |只看該作者
回復(fù) 44# 嗜血的豬


     這個不是缺點,而是bug. 分布式文件系統(tǒng)的目標之一就是容錯,一個chunkserver 壞了,數(shù)據(jù)能從另一份恢復(fù)。
然而當(dāng)一個chunkserver壞了的時候,如果這時候在寫數(shù)據(jù), 就很難處理。mfs 是一個不成熟的系統(tǒng),嚴重警告大家,不可用作商業(yè)環(huán)境,
像土豆, youku這樣的視頻應(yīng)用,可以冒險一試。

論壇徽章:
0
56 [報告]
發(fā)表于 2010-07-16 16:29 |只看該作者
回復(fù)  999lhh


    這是因為, 通常數(shù)據(jù)沒有實際刪除。。,記錄下來了, mfs 應(yīng)該有其他的刪除機制。比 ...
peidright 發(fā)表于 2010-07-13 01:18



    不是沒有刪除,以前沒數(shù)據(jù)的。這應(yīng)該和其64M的trunck有關(guān),存小文件將浪費大量空間,不適合小文件。

論壇徽章:
0
57 [報告]
發(fā)表于 2010-07-16 16:33 |只看該作者
回復(fù)  嗜血的豬


     這個不是缺點,而是bug. 分布式文件系統(tǒng)的目標之一就是容錯,一個chunkserver 壞 ...
peidright 發(fā)表于 2010-07-13 01:24



    謝謝。暫時放棄mfs,看lustre是否適用,都說開源分布式文件系統(tǒng)不適合海量小文件存儲。我只有2T,還是希望試試。

論壇徽章:
0
58 [報告]
發(fā)表于 2010-07-16 19:16 |只看該作者
回復(fù) 57# 361163


    2T 的數(shù)據(jù)應(yīng)該是可以的,放棄MFS的原因是? 如果不需要隨機偏移寫的話,MFS應(yīng)該不會存在問題
lustre主要是高性能計算, 應(yīng)該容錯功能也不好。

論壇徽章:
0
59 [報告]
發(fā)表于 2010-07-26 14:02 |只看該作者
回復(fù)  361163


    2T 的數(shù)據(jù)應(yīng)該是可以的,放棄MFS的原因是? 如果不需要隨機偏移寫的話,MFS應(yīng)該不會 ...
peidright 發(fā)表于 2010-07-16 19:16



    2T的數(shù)據(jù)至少需要20T硬盤,還會相應(yīng)增加服務(wù)器。浪費太大的空間和成本,無法跟老板解釋,自己都覺得是笑話哈。

論壇徽章:
0
60 [報告]
發(fā)表于 2010-07-26 23:53 |只看該作者
本帖最后由 peidright 于 2010-07-27 00:16 編輯

回復(fù) 59# 361163


    2T數(shù)據(jù),存2份,最多5T盤啊。。很小的文件,么。。不過2T數(shù)據(jù),是沒有必要存在
您需要登錄后才可以回帖 登錄 | 注冊

本版積分規(guī)則 發(fā)表回復(fù)

  

北京盛拓優(yōu)訊信息技術(shù)有限公司. 版權(quán)所有 京ICP備16024965號-6 北京市公安局海淀分局網(wǎng)監(jiān)中心備案編號:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年舉報專區(qū)
中國互聯(lián)網(wǎng)協(xié)會會員  聯(lián)系我們:huangweiwei@itpub.net
感謝所有關(guān)心和支持過ChinaUnix的朋友們 轉(zhuǎn)載本站內(nèi)容請注明原作者名及出處

清除 Cookies - ChinaUnix - Archiver - WAP - TOP