JAVA NIO——MappedByteBuffer 分割拷贝超大文件
/**
* NIO —— MappedByteBuffer 分割拷贝大文件
* @throws FileNotFoundException
* @throws IOException
* @author sdylag
* time: 2011-10-01 1:49
*
*
* 测试:拷贝4.96GB 电影:720p高清阿凡达178分钟加长收藏版.mkv 用时:4分钟0.1秒
* 机器配置:联想Z460 i5CPU 2.53GHz 4GB内存 500GB硬盘 1GB显存
*
*/
public static void NioCopyFile(String sourcePath , String targetPath) throws FileNotFoundException, IOException {
long before = System.currentTimeMillis();
File files = new File(sourcePath); //源文件
File filet = new File(targetPath); //目标文件
long size = files.length(); // 文件总大小
long copycount = size * 2 / Integer.MAX_VALUE; //获取读、写之和所占用虚拟内存 倍数
int copynum = copycount >= 1 ? (int) copycount + 2 : (int) copycount + 1; // 根据倍数确认分割份数
long countSize = Integer.MAX_VALUE / copynum; //每块分割大小<每次读写的大小>
long lontemp = countSize; //初始读、写大小
FileChannel channels = new RandomAccessFile(files, "r").getChannel(); //得到映射读文件的通道
FileChannel channelt = new RandomAccessFile(filet, "rw").getChannel(); //得到映射写文件的通道
long j = 0; // 每次循环累加字节的起始点
MappedByteBuffer mbbs = null; // 声明读源文件对象
MappedByteBuffer mbbt = null; // 声明写目标文件对象
while (j < size) {
mbbs = channels.map(FileChannel.MapMode.READ_ONLY, j, lontemp); //每次读源文件都重新构造对象
mbbt = channelt.map(FileChannel.MapMode.READ_WRITE, j, lontemp); //每次写目标文件都重新构造对象
for (int i = 0; i < lontemp; i++) {
byte b = mbbs.get(i); //从源文件读取字节
mbbt.put(i, b); //把字节写到目标文件中
}
System.gc(); //手动调用 GC <必须的,否则出现异常>
System.runFinalization(); //运行处于挂起终止状态的所有对象的终止方法。<必须的,否则出现异常>
j += lontemp; //累加每次读写的字节
lontemp = size - j; //获取剩余字节
lontemp = lontemp > countSize ? countSize : lontemp; //如果剩余字节 大于 每次分割字节 则 读取 每次分割字节 ,否则 读取剩余字节
}
System.out.println("MillTime : "
+ (double) (System.currentTimeMillis() - before) / 1000 + "s");
}
分享到:
相关推荐
Java nio 超大数据文件 超大数据文件Java nio 超大数据文件 超大数据文件Java nio 超大数据文件 超大数据文件Java nio 超大数据文件 超大数据文件Java nio 超大数据文件 超大数据文件Java nio 超大数据文件 超大数据...
NULL 博文链接:https://goon.iteye.com/blog/1775421
java nio和零拷贝 方面知识,适合对nio和零拷贝感兴趣的开发人员
本类,是专门为了处理大文件,按行读取开发的类。 采用读文件的缓存 fbb 1024*5 行缓存 bb 256 字节 设计思想: 每次通过nio读取字节到 fbb中 然后对fbb自己中的内容进行行判断即 10 回车 13 行号 0 文件结束 ...
java NIO和java并发编程的书籍java NIO和java并发编程的书籍java NIO和java并发编程的书籍java NIO和java并发编程的书籍java NIO和java并发编程的书籍java NIO和java并发编程的书籍java NIO和java并发编程的书籍java...
Java NIO系列教程(一) Java NIO 概述 Java NIO系列教程(二) Channel Java NIO系列教程(三) Buffer Java NIO系列教程(四) Scatter/Gather Java NIO系列教程(五) 通道之间的数据传输 Java NIO系列教程(六)...
本类,是专门为了处理大文件,按行读取开发的类。 采用读文件的缓存 fbb 1024*5 行缓存 bb 256 字节 设计思想: 每次通过nio读取字节到 fbb中 然后对fbb自己中的内容进行行判断即 10 回车 13 行号 0 文件...
java nio 读文件,java nio 读文件
Java NIO英文高清原版
讲解了 JavaIO 与 JAVA NIO区别,JAVA NIO设计理念,以及JDK中java NIO中语法的使用
Java NIO 深入探讨了 1.4 版的 I/O 新特性,并告诉您如何使用这些特性来极大地提升您所写的 Java 代码的执行效率。这本小册子就程序员所面临的有代表性的 I/O 问题作了详尽阐述,并讲解了 如何才能充分利用新的 I/O ...
java NIO.zip
Java NIO(New IO)是一个可以替代标准Java IO API的IO API(从Java 1.4开始),Java NIO提供了与标准IO不同的IO工作方式。 Java NIO: Channels and Buffers(通道和缓冲区) 标准的IO基于字节流和字符流进行操作的,...
java nio 实现socketjava nio 实现socketjava nio 实现socketjava nio 实现socketjava nio 实现socket
java NIO是 java New IO 的简称,在 jdk1.4 里提供的新 api 。 Sun 官方标榜的特性如下: – 为所有的原始类型提供 (Buffer) 缓存支持。 – 字符集编码解码解决方案。 – Channel :一个新的原始 I/O 抽象。 – 支持...
java nio 写文件,java nio 写文件
实例介绍了一个简单的nio实例,适合刚接触nio的童鞋们....
JAVA NIO 简单PFT 文件服务 上传 下载 列表
java侧起server(NioUdpServer1.java),基于Java Nio的selector 阻塞等候,一个android app(NioUdpClient1文件夹)和一个java程序(UI.java)作为两个client分别向该server发数据,server收到后分别打印收到的消息...
基于Java NIO实现五子棋游戏.zip基于Java NIO实现五子棋游戏.zip 基于Java NIO实现五子棋游戏.zip基于Java NIO实现五子棋游戏.zip 基于Java NIO实现五子棋游戏.zip基于Java NIO实现五子棋游戏.zip 基于Java NIO实现...