亚洲av成人无遮挡网站在线观看,少妇性bbb搡bbb爽爽爽,亚洲av日韩精品久久久久久,兔费看少妇性l交大片免费,无码少妇一区二区三区

  免費(fèi)注冊(cè) 查看新帖 |

Chinaunix

  平臺(tái) 論壇 博客 文庫(kù)
最近訪問(wèn)板塊 發(fā)新帖
查看: 3500 | 回復(fù): 2
打印 上一主題 下一主題

[其他] 求推薦些存儲(chǔ)“海量”小文件的分布式文件系統(tǒng) [復(fù)制鏈接]

論壇徽章:
14
水瓶座
日期:2014-06-10 09:51:0215-16賽季CBA聯(lián)賽之江蘇
日期:2017-11-27 11:42:3515-16賽季CBA聯(lián)賽之八一
日期:2017-04-12 14:26:2815-16賽季CBA聯(lián)賽之吉林
日期:2016-08-20 10:43:1215-16賽季CBA聯(lián)賽之廣夏
日期:2016-06-23 09:53:58程序設(shè)計(jì)版塊每日發(fā)帖之星
日期:2016-02-11 06:20:00程序設(shè)計(jì)版塊每日發(fā)帖之星
日期:2016-02-09 06:20:0015-16賽季CBA聯(lián)賽之上海
日期:2015-12-25 16:40:3515-16賽季CBA聯(lián)賽之廣夏
日期:2015-12-22 09:39:36程序設(shè)計(jì)版塊每日發(fā)帖之星
日期:2015-08-24 06:20:002015亞冠之德黑蘭石油
日期:2015-08-07 09:57:302015年辭舊歲徽章
日期:2015-03-03 16:54:15
跳轉(zhuǎn)到指定樓層
1 [收藏(0)] [報(bào)告]
發(fā)表于 2017-11-22 10:27 |只看該作者 |倒序?yàn)g覽
千萬(wàn)左右的小文件,大小基本小于1KB,存儲(chǔ)簡(jiǎn)單,全寫全讀
HDFS不太合適,即便其推出了一些個(gè)合并工具

性能達(dá)到每秒10k級(jí)別的讀寫就夠了

論壇徽章:
0
2 [報(bào)告]
發(fā)表于 2017-11-22 11:25 |只看該作者
試試GoogleFS,MogileFS, 還有國(guó)內(nèi)的fastDFS。
另外,如果小文件不要求直接讀寫,可以讀出來(lái)放到mongodb里。
每秒10k,有個(gè)leverdb能充分利用SSD。

論壇徽章:
14
水瓶座
日期:2014-06-10 09:51:0215-16賽季CBA聯(lián)賽之江蘇
日期:2017-11-27 11:42:3515-16賽季CBA聯(lián)賽之八一
日期:2017-04-12 14:26:2815-16賽季CBA聯(lián)賽之吉林
日期:2016-08-20 10:43:1215-16賽季CBA聯(lián)賽之廣夏
日期:2016-06-23 09:53:58程序設(shè)計(jì)版塊每日發(fā)帖之星
日期:2016-02-11 06:20:00程序設(shè)計(jì)版塊每日發(fā)帖之星
日期:2016-02-09 06:20:0015-16賽季CBA聯(lián)賽之上海
日期:2015-12-25 16:40:3515-16賽季CBA聯(lián)賽之廣夏
日期:2015-12-22 09:39:36程序設(shè)計(jì)版塊每日發(fā)帖之星
日期:2015-08-24 06:20:002015亞冠之德黑蘭石油
日期:2015-08-07 09:57:302015年辭舊歲徽章
日期:2015-03-03 16:54:15
3 [報(bào)告]
發(fā)表于 2017-11-22 15:12 |只看該作者
本帖最后由 lxyscls 于 2017-11-22 15:26 編輯

回復(fù) 2# sxcong

gfs是閉源的吧,開源的hdfs明確說(shuō)明不是很適合小文件,且其合并的解決方案也用不上
mogile和fastdfs活躍度太低,心有戚戚

本來(lái)就是用mongo存二進(jìn)制的,但是總覺得這種用文檔數(shù)據(jù)庫(kù)存binary的方式很蛋疼,還不如直接存文件系統(tǒng)
leveldb性能看起來(lái)杠杠的,但是沒辦法在多進(jìn)程環(huán)境中用呀,分布式多機(jī)就更別想了


您需要登錄后才可以回帖 登錄 | 注冊(cè)

本版積分規(guī)則 發(fā)表回復(fù)

  

北京盛拓優(yōu)訊信息技術(shù)有限公司. 版權(quán)所有 京ICP備16024965號(hào)-6 北京市公安局海淀分局網(wǎng)監(jiān)中心備案編號(hào):11010802020122 niuxiaotong@pcpop.com 17352615567
未成年舉報(bào)專區(qū)
中國(guó)互聯(lián)網(wǎng)協(xié)會(huì)會(huì)員  聯(lián)系我們:huangweiwei@itpub.net
感謝所有關(guān)心和支持過(guò)ChinaUnix的朋友們 轉(zhuǎn)載本站內(nèi)容請(qǐng)注明原作者名及出處

清除 Cookies - ChinaUnix - Archiver - WAP - TOP