java NIO零拷贝、顺序读写、MappedByteBuffer

矫情吗；* 2022-09-02 04:26 296阅读 0赞

参考文章：

https://blog.csdn.net/zhxdick/article/details/81084672

https://blog.csdn.net/zl1zl2zl3/article/details/89378682

https://blog.csdn.net/emprere/article/details/98860883

一、顺序读写：

写数据，操作文件时，采用追加的方式。速度非常快（接近内存写的速度）

读数据，也不要自己去seek指定偏移量，而是按顺序read（因为read时会预读取后续一部分数据,而不是仅读取当前位置的数据，所以顺序读可以充分利用预读机制。如果自己seek，那么就无法预读，每次都要去操作本地磁盘）

二、拷贝（以从文件拷贝为例）

1、内核空间与用户空间

内核read缓冲区、内核write缓冲区都属于内核空间，

堆内存（HeapByteBuffer）和堆外内存（DirectByteBuffer）属于用户空间。

内核空间是内核代码运行的地方，用户空间是用户程序代码运行的地方。当进程运行在内核空间时就处于内核态，当进程运行在用户空间时就处于用户态。

2、普通拷贝（我是以java的角度解读）

（1）使用DirectByteBuffer（堆外内存）进行拷贝时

磁盘1 -> 内核read缓冲区 ->  堆外内存 -> 内核write缓冲区 -> 磁盘2

（2）使用HeapByteBuffer（堆内存）进行拷贝时

磁盘1 -> 内核read缓冲区 ->  堆外内存1 -> 堆内存-> 堆外内存2 -> 内核write缓冲区 -> 磁盘2

所以说，就算无法使用零拷贝，也应该尽可能利用堆外内存进行拷贝。比使用堆内存拷贝少了两次copy操作。

3、零拷贝：

（1）linux2.4前：

磁盘1 -> 内核read缓冲区 -> 内核write缓冲区 -> 磁盘2

（2）inux2.4后:

磁盘1 -> 内核read缓冲区(然后加个描述符的) -> 磁盘2

（3）也就是linux2.4后的零拷贝，又少了一次内核read缓冲区到内核write缓冲区的copy。即内核缓冲区之间不用再拷贝一次了。

零拷贝缺点就是：零拷贝时我们java程序中无法获取和修改数据，只能是做复制操作。而普通拷贝，我们的程序可以在中间根据数据进行一些自己的操作。

为了解决上面缺点，java又有一个MappedByteBuffer，具体请继续看

三、MappedByteBuffer是一种效率低于零拷贝，但高于传统IO的IO操作。

我的另一篇文章：https://blog.csdn.net/qq\_36951116/article/details/87308354

其实和上面普通拷贝中使用DirectByteBuffer（堆外内存）进行拷贝差不多。。DirectByteBuffer其实是MappedByteBuffer的子类。

关于堆外内存DirectByteBuffer的讲解可以看我另一篇文章：https://blog.csdn.net/qq\_36951116/article/details/87185240

————————————————  
版权声明：本文为CSDN博主「我叫周利东」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。  
原文链接：https://blog.csdn.net/qq\_36951116/article/details/103991396

发表评论取消回复

表情：

评论列表（有 0 条评论，296人围观）

还没有评论，来说两句吧...

相关阅读

相关 kafka高性能揭秘：顺序写和零拷贝

顺序写&MMF ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG

墨蓝/ 2023年10月05日 10:21/ 0 赞/ 65 阅读

相关 Java NIO 零拷贝演示

Java NIO 零拷贝演示一、传统IO演进（详细机制需要参考操作系统知识进行理解） 1.用户态与内核态，需要经过 4 次拷贝和 3 次切换

骑猪看日落/ 2023年10月01日 16:15/ 0 赞/ 61 阅读

相关深入剖析零拷贝与顺序写

这篇文章我们来学习下经常出现在各种数据库与中间件设计中的零拷贝和顺序写. 零拷贝零拷贝技术就是在文件传输时, 减少CPU执行的数据拷贝次数. 那如何减少数据的拷贝次数

秒速五厘米/ 2023年06月24日 04:43/ 0 赞/ 13 阅读

相关 Java NIO 零拷贝示例

零拷贝的“零”是指用户态和内核态间copy数据的次数为零。传统的数据copy（文件到文件、client到server等）涉及到四次用户态内核态切换、四次copy。四次cop

偏执的太偏执、/ 2023年01月16日 09:59/ 0 赞/ 232 阅读

相关 NIO 零拷贝

零拷贝文章目录零拷贝一、传统IO的问题二、NIO优化 1. Linux 2.1 优化（零拷贝）

- 日理万妓/ 2022年10月11日 10:57/ 0 赞/ 241 阅读

相关 java NIO零拷贝、顺序读写、MappedByteBuffer

参考文章： https://blog.csdn.net/zhxdick/article/details/81084672 https://blog.csdn.net/zl1

矫情吗；*/ 2022年09月02日 04:26/ 0 赞/ 297 阅读

相关 java nio 之MappedByteBuffer

其实掌握MappedByteBuffer并不难，只要记住“三方三法三特性”（我自己总结的，呵呵~~不要扔鸡蛋哦。。。）这句话就可以轻松搞定！MappedByteBuffer 只

淡淡的烟草味﹌/ 2022年08月27日 03:27/ 0 赞/ 194 阅读

相关 Java NIO教程 MappedByteBuffer

转：[Java NIO教程 MappedByteBuffer][Java NIO_ MappedByteBuffer] 之前跟大家说过，要讲MappedByteBuffer,

迷南。/ 2022年05月30日 08:49/ 0 赞/ 226 阅读

相关 NIO--零拷贝、AIO

零拷贝零拷贝是网络编程的关键，很多性能优化都离不开。在 Java 程序中，常用的零拷贝有 mmap(内存映射) 和 sendFile。传统IO数据读写

我就是我/ 2021年08月26日 19:01/ 0 赞/ 529 阅读

相关 java NIO之MappedByteBuffer

java io操作中通常采用BufferedReader，BufferedInputStream等带缓冲的IO类处理大文件，不过java nio中引入了一种基于MappedBy

墨蓝/ 2021年06月24日 15:57/ 0 赞/ 635 阅读