java對大容量File copy的操作求助

bingley

java對大容量File copy的操作求助
需求描述:
將硬盤中指定的文件進(jìn)行掃描(或者對整個磁盤),找出一個時間點(diǎn)(以參數(shù)形勢傳入,可自己調(diào)整)以前沒有用過的文件.並可以設(shè)置需要copy的所有文件大小的sum值.比如說600M. 可以刻錄成光盤backup.
設(shè)置lastmodify && capability已實(shí)現(xiàn),現(xiàn)在就是實(shí)現(xiàn)copy的時候出現(xiàn)問題. 因?yàn)槿萘勘容^大.直接用遞歸和FileOutputStream && FileInputStream實(shí)現(xiàn)會很慢,而且內(nèi)存會被耜光.導(dǎo)致down機(jī).
哪位大蝆幫忙看看,怎麼釋放到.謝謝.
有類似的例子也可以.網(wǎng)上有很多File copy的例,但基本上都是實(shí)現(xiàn)單個文件的操作....大容量的copy(連同絕對路徑)還沒有找到......萬分感謝呀

sakulagi

有沒有試試NIO?

perryhg

這個是用nio的例子
http://www.javaalmanac.com/egs/java.nio/File2File.html
這個是普通io的例子。
http://www.javaalmanac.com/egs/java.io/CopyFile.html?l=new

一般來說，nio性能和效率會比普通的io好一些。

bingley

如果是大容量的文件呢?比如說有640M.而且要連同文件夾一起copy過去的...
這一操作偶還不是不明白.

sakulagi

這么大容量的復(fù)制，本來就是文件系統(tǒng)的工作，不應(yīng)該是Java的工作。不過如果用NIO的話，性能會好一些。

原帖由 "bingley" 發(fā)表：

這一操作偶還不是不明白.

樓主的意思是？

bingley

我是指這麼大容量的文件copy,會導(dǎo)致嚴(yán)重占用系統(tǒng)資源,內(nèi)存估計(jì)也會被耗光,如何進(jìn)行優(yōu)化呢?及時的釋放到資源/  NIO的操作例子也好像和IO的文件操作差不多吧.

perryhg

如果你看到j(luò)avaalmanac上的例子代碼的話，就會知道它采用了buffer進(jìn)行copy，也就是說，不需要把幾百兆的文件全部讀入內(nèi)存，可以在內(nèi)存中建立只有幾十k的buffer，然后讀和寫作為兩個不同的任務(wù)同時向buffer中填充和取出數(shù)據(jù)，所以不會把系統(tǒng)內(nèi)存全部用光。

javaalmanac里面很多例子已經(jīng)采用了很高級的設(shè)計(jì)理念，要好好學(xué)習(xí)啊。

bingley

十分感謝......thank you.

jamesbang2003

可以分批讀寫么，先讀一部分，寫入，再讀再寫，只是在讀之前和讀的過程中都需要標(biāo)記你讀的長度。