亚洲av成人无遮挡网站在线观看,少妇性bbb搡bbb爽爽爽,亚洲av日韩精品久久久久久,兔费看少妇性l交大片免费,无码少妇一区二区三区

  免費注冊 查看新帖 |

Chinaunix

  平臺 論壇 博客 文庫
12下一頁
最近訪問板塊 發(fā)新帖
查看: 2939 | 回復(fù): 13
打印 上一主題 下一主題

[系統(tǒng)管理] linux系統(tǒng)下find命令導(dǎo)致高IO使用率問題 [復(fù)制鏈接]

論壇徽章:
0
跳轉(zhuǎn)到指定樓層
1樓 [收藏(0)] [報告]
發(fā)表于 2016-01-20 16:33 |只看該作者 |倒序瀏覽
請教一下各位，碰到了下面的問題，問題已經(jīng)解決了，但是不知道為什么find會產(chǎn)生這么高的IO使用率

一臺linux機器上，定時任務(wù)執(zhí)行一個find命令，每個find命令查找的目錄不一樣，目錄里的文件在30萬左右。
在執(zhí)行find命令的時候，IO使用率達到了90%以上。
而我用iotop抓到的信息來看，吞吐量并不大，在2M左右

為什么吞吐量不大，IO使用率卻那么高呢？

論壇徽章:
0
2樓 [報告]
發(fā)表于 2016-01-20 16:39 |只看該作者
本帖最后由 kevinadmin 于 2016-01-20 18:32 編輯

find  /data/aaa/ -name tst.txt
find /data/bbb/ -name cc.txt
aaa and bbb目錄各有文件30萬個左右，命令同時執(zhí)行，一執(zhí)行IO使用率就到90%以上

具體就是這樣執(zhí)行  

求職 : Linux運維
論壇徽章:
203
拜羊年徽章 日期:2015-03-03 16:15:432015年辭舊歲徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:57:092015小元宵徽章 日期:2015-03-06 15:58:182015年亞洲杯之約旦 日期:2015-04-05 20:08:292015年亞洲杯之澳大利亞 日期:2015-04-09 09:25:552015年亞洲杯之約旦 日期:2015-04-10 17:34:102015年亞洲杯之巴勒斯坦 日期:2015-04-10 17:35:342015年亞洲杯之日本 日期:2015-04-16 16:28:552015年亞洲杯紀(jì)念徽章 日期:2015-04-27 23:29:17操作系統(tǒng)版塊每日發(fā)帖之星 日期:2015-06-06 22:20:00操作系統(tǒng)版塊每日發(fā)帖之星 日期:2015-06-09 22:20:00
3樓 [報告]
發(fā)表于 2016-01-20 19:54 |只看該作者
IO使用率指的是什么？？？

求職 : Linux運維
論壇徽章:
203
拜羊年徽章 日期:2015-03-03 16:15:432015年辭舊歲徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:57:092015小元宵徽章 日期:2015-03-06 15:58:182015年亞洲杯之約旦 日期:2015-04-05 20:08:292015年亞洲杯之澳大利亞 日期:2015-04-09 09:25:552015年亞洲杯之約旦 日期:2015-04-10 17:34:102015年亞洲杯之巴勒斯坦 日期:2015-04-10 17:35:342015年亞洲杯之日本 日期:2015-04-16 16:28:552015年亞洲杯紀(jì)念徽章 日期:2015-04-27 23:29:17操作系統(tǒng)版塊每日發(fā)帖之星 日期:2015-06-06 22:20:00操作系統(tǒng)版塊每日發(fā)帖之星 日期:2015-06-09 22:20:00
4樓 [報告]
發(fā)表于 2016-01-20 19:57 |只看該作者
多個線程去find，IO使用率當(dāng)然高，并不能用吞吐量來衡量的，比如你有十億個小文件，文件不大，即使全部查詢也就2M左右
但是系統(tǒng)已經(jīng)無法處理其他進程的IO請求了

論壇徽章:
0
5樓 [報告]
發(fā)表于 2016-01-22 12:36 |只看該作者
lyhabc 發(fā)表于 2016-01-20 19:57
多個線程去find，IO使用率當(dāng)然高，并不能用吞吐量來衡量的，比如你有十億個小文件，文件不大，即使全部查詢 ...


IO使用率是指用iostat看到的 util值

論壇徽章:
0
6樓 [報告]
發(fā)表于 2016-01-22 12:37 |只看該作者
kevinadmin 發(fā)表于 2016-01-22 12:36
IO使用率是指用iostat看到的 util值


兩個find命令同時執(zhí)行，不是多線程。
文件量也沒有達到億級  每個find查找的目錄，文件數(shù)量在30萬左右

論壇徽章:
41
操作系統(tǒng)版塊每日發(fā)帖之星 日期:2016-08-21 06:20:00每日論壇發(fā)貼之星 日期:2016-05-05 06:20:00操作系統(tǒng)版塊每日發(fā)帖之星 日期:2016-05-05 06:20:00IT運維版塊每日發(fā)帖之星 日期:2016-05-05 06:20:0015-16賽季CBA聯(lián)賽之山西 日期:2016-04-27 08:49:00操作系統(tǒng)版塊每日發(fā)帖之星 日期:2016-04-25 06:20:00操作系統(tǒng)版塊每日發(fā)帖之星 日期:2016-04-17 06:23:2815-16賽季CBA聯(lián)賽之吉林 日期:2016-03-25 15:46:3415-16賽季CBA聯(lián)賽之四川 日期:2016-03-25 14:26:19操作系統(tǒng)版塊每日發(fā)帖之星 日期:2016-05-27 06:20:00操作系統(tǒng)版塊每日發(fā)帖之星 日期:2016-05-28 06:20:00IT運維版塊每日發(fā)帖之星 日期:2016-08-18 06:20:00
7樓 [報告]
發(fā)表于 2016-01-22 13:30 |只看該作者
小文件多就是這樣的，在windos下也一樣

求職 : Linux運維
論壇徽章:
203
拜羊年徽章 日期:2015-03-03 16:15:432015年辭舊歲徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:57:092015小元宵徽章 日期:2015-03-06 15:58:182015年亞洲杯之約旦 日期:2015-04-05 20:08:292015年亞洲杯之澳大利亞 日期:2015-04-09 09:25:552015年亞洲杯之約旦 日期:2015-04-10 17:34:102015年亞洲杯之巴勒斯坦 日期:2015-04-10 17:35:342015年亞洲杯之日本 日期:2015-04-16 16:28:552015年亞洲杯紀(jì)念徽章 日期:2015-04-27 23:29:17操作系統(tǒng)版塊每日發(fā)帖之星 日期:2015-06-06 22:20:00操作系統(tǒng)版塊每日發(fā)帖之星 日期:2015-06-09 22:20:00
8樓 [報告]
發(fā)表于 2016-01-22 14:49 |只看該作者
@kevinadmin
iostat和iotop這些第三方工具其實都一樣的
不管多線程還是單線程，反正線程不夠用了，cpu利用太高

論壇徽章:
0
9樓 [報告]
發(fā)表于 2016-01-22 16:11 |只看該作者
lyhabc 發(fā)表于 2016-01-22 14:49
@kevinadmin
iostat和iotop這些第三方工具其實都一樣的
不管多線程還是單線程，反正線程不夠用了，cpu利用 ...


關(guān)鍵是CPU利用率不高，就是IO使用率太高

論壇徽章:
0
10樓 [報告]
發(fā)表于 2016-01-22 18:05 |只看該作者
find 在執(zhí)行查找的時候  IO這塊 用的是順序IO還是隨機IO？
找了一圈都沒有找到答案  
您需要登錄后才可以回帖 登錄 | 注冊

本版積分規(guī)則 發(fā)表回復(fù)

  

北京盛拓優(yōu)訊信息技術(shù)有限公司. 版權(quán)所有 京ICP備16024965號-6 北京市公安局海淀分局網(wǎng)監(jiān)中心備案編號：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年舉報專區(qū)
中國互聯(lián)網(wǎng)協(xié)會會員  聯(lián)系我們：huangweiwei@itpub.net
感謝所有關(guān)心和支持過ChinaUnix的朋友們 轉(zhuǎn)載本站內(nèi)容請注明原作者名及出處

清除 Cookies - ChinaUnix - Archiver - WAP - TOP