认识零拷贝[通俗易懂]

认识零拷贝[通俗易懂]注意事项(1)零拷贝的含义是数据不从内核空间拷贝到用户空间,也不从用户空间拷贝到内核空间(2)零拷贝完全依赖操作系统,操作系统提供了就是提供了,没有提供就没有提供,java本身做不了任何事情传统的IO拷贝需求java读取磁盘上的文件,并且输出出去。这个过程包含两个步骤,一个是读,一个是写图片解读三列分别为用户空间、内核空间、硬件(1)read()syscall…

大家好,又见面了,我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺

注意事项

(1)零拷贝的含义是数据不从内核空间拷贝到用户空间,也不从用户空间拷贝到内核空间

(2)零拷贝完全依赖操作系统,操作系统提供了就是提供了,没有提供就没有提供,java本身做不了任何事情

传统的IO拷贝

需求

java读取磁盘上的文件,并且输出出去。这个过程包含两个步骤,一个是读,一个是写

图片解读

认识零拷贝[通俗易懂]

三列分别为用户空间、内核空间、硬件

  • (1)read() syscall :java客户端(jvm虚拟机)向操作系统发起读磁盘数据的请求
  • (2)ask for data :系统向磁盘读数据
  • (3)data to kernel buffer through DMA: 磁盘数据通过DMA读到内核缓存区
  • (4)copy data to user buffer :把数据内核缓冲区复制到用户缓冲区(java堆)中
  • (5)code logic coutinues:业务逻辑处理
  • (6)wirte() syscall,copies data to kernel socket buffer:java客户端向系统发起写请求,并且把用户缓冲区(java堆)数据复制到内核缓冲区
  • (7)weites data:从内核缓冲区写到磁盘
  • (8)done:返回结果
  • (9)write() returns:返回写入结果

图片分析

上图有4次上下文切换:

(1)read() syscall :java客户端(jvm虚拟机)向操作系统发起读磁盘数据的请求  —-》从用户态切换为内核态

(4)copy data to user buffer :把数据内核缓冲区复制到用户缓冲区(java堆)中—-》从内核态切换为用户态

(6)wirte() syscall,copies data to kernel socket buffer:java客户端向系统发起写请求,并且把用户缓冲区(java堆)数据复制到内核缓冲区—-》从用户态切换为内核态

(9)write() returns:返回写入结果—-》从内核态切换为用户态

上图有2次没有必要的数据拷贝(假设没有步骤5):

(4)copy data to user buffer :把数据内核缓冲区复制到用户缓冲区(java堆)中

(6)wirte() syscall,copies data to kernel socket buffer:java客户端向系统发起写请求,并且把用户缓冲区(java堆)数据复制到内核缓冲区

代码

InputStream 、OutputStream

Socket基础使用_CBeann的博客-CSDN博客

零拷贝

图片解读 

  • (1)sendfile() syscall : java客户端(jvm虚拟机)向操作系统发起读磁盘数据sendfile的请求
  • (2)ask for data :系统向磁盘读数据
  • (3)data to kernel buffer through DMA: 磁盘数据通过DMA读到内核缓存区
  • (4)wirte data to target socket buffer:从内核空间缓冲区写到socket缓冲区
  • (5)writes data:socket向目标发送数据
  • (6)done:返回结果
  • (7) sendfile() returns :返回sendfile结果

认识零拷贝[通俗易懂]

图片分析

上图有2次上下文切换(比传统的IO减少了2次切换):

(1)sendfile() syscall : java客户端(jvm虚拟机)向操作系统发起读磁盘数据sendfile的请求 —-》从用户态切换为内核态

(7) sendfile() returns :返回sendfile结果—-》从内核态切换为用户态

上图有3次数据拷贝(比传统的IO减少了1次):

(3)data to kernel buffer through DMA: 磁盘数据通过DMA读到内核缓存区

(4)wirte data to target socket buffer:从内核空间缓冲区写到socket缓冲区

(5)writes data:socket向目标发送数据

代码

 fileChannel.transferTo(, , );
 fileChannel.transferFrom(, , );

零拷贝升级版

升级版需要解决的问题:

上面零拷贝的第四步((4)从内核空间缓冲区写到socket缓冲区)是可以优化的

图片解读

看图片的下半部分:

看kernel buffer —————> socket buffer

Linux2.4之前的零拷贝是把 kernel buffer 中全部的数据 拷贝 到 socket buffer

Linux2.4之后的零拷贝是把kernel buffer中的地址和数据长度拷贝到到 socket buffer(优化后),类似

当真正发送数据的时候,客户端会从socketbuffer中拿到地址和数据长度找到kernel buffer 进行发送

这个过程只有2次数据拷贝,是真正意义上的零拷贝

认识零拷贝[通俗易懂]

认识零拷贝[通俗易懂]

参考

2018年最新深入netty 零基础到精通 张龙老师

视频去哪了呢?_哔哩哔哩_bilibili

Netty、Kafka中的零拷贝技术到底有多牛?

https://mp.weixin.qq.com/s/dt0h2UhaoRECvjpeMZMsUA   (☆)

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/191078.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • django 框架模型之models常用的Field「建议收藏」

    django 框架模型之models常用的Field「建议收藏」网址https://blog.csdn.net/weixin_37773766/article/details/803302211.django模型models常用字段1、models.A

    2022年7月2日
    26
  • nextSibling 和nextElementSibling

    nextSibling 和nextElementSibling在使用DOM过程中发现一个问题:使用nextSibling属性返回指定节点之后紧跟的节点,在相同的树层级中。被返回的节点以Node对象返回。nextSibling属性与nextElement

    2022年7月4日
    19
  • php环境安装与配置_windows下php环境搭建

    php环境安装与配置_windows下php环境搭建配置时区打开php解压目录,找到php.ini-development文件,将其改名为php.ini,用记事本打开。找到(带分号);date.timezone=去掉前面的分好,修改为date.timezone=Asia/Shanghai测试:在根目录下的index.php文件夹中写入以下代码<?phpechodate(“Y:m:dH:i:s”…

    2022年9月22日
    0
  • bceloss和bcewithlogitsloss_binary cross entropy

    bceloss和bcewithlogitsloss_binary cross entropyBCELosstorch.nn.BCELoss(weight=None,size_average=None,reduce=None,reduction=‘mean’)评价预测值与真值的BinaryCrossEntropyl(x,y)=L={l1,l2,…lN}T,ln=−ωn[ynlogxn+(1−yn)log(1−xn)]l(x,y)=L=\{l_1,l_2,…l_N\}^T,l_n=-\omega_n[y_nlogx_n+(1-y_n)log(1-x_

    2022年9月18日
    0
  • ringbuffer 无锁队列_wear ring

    ringbuffer 无锁队列_wear ring最近常收到SOD框架的朋友报告的SOD的SQL日志功能报错:文件句柄丢失。经过分析得知,这些朋友使用SOD框架开发了访问量比较大的系统,由于忘记关闭SQL日志功能所以出现了很高频率的日志写入操作,从而偶然引起错误。后来我建议只记录出错的或者执行时间较长的SQL信息,暂时解决了此问题。但是作为一个热心造轮子的人,一定要看看能不能造一个更好的轮子出来。前面说的错误原因已经很直白了,就是频繁的日志写入导…

    2022年9月10日
    0
  • SpringBoot+Vue实现请求后台获取Base64编码的图片验证码并使用Redis缓存实现2分钟内有效

    SpringBoot+Vue实现请求后台获取Base64编码的图片验证码并使用Redis缓存实现2分钟内有效场景前端Vue的登录页面,验证码请求后台,后台生成验证码照片后使用Base64编码后,返回给前端,前端进行显示。注:博客:https://blog.csdn.net/badao_liumang_qizhi关注公众号霸道的程序猿获取编程相关电子书、教程推送与免费下载。实现首先看前端页面login.vue<el-form-itemprop=”code”><el-inputv-model=”log…

    2022年7月16日
    15

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号