Linux Sendfile 的原理与优点[通俗易懂]

Linux Sendfile 的原理与优点[通俗易懂]sendfile函数在两个文件描写叙述符之间直接传递数据(全然在内核中操作,传送),从而避免了内核缓冲区数据和用户缓冲区数据之间的拷贝,操作效率非常高,被称之为零拷贝。sendfile函数的定义例如以下:#include<sys/sendfile.h>ssize_tsendfile(intout_fd,intin_fd,off_t*offset,size_tc…

大家好,又见面了,我是你们的朋友全栈君。

sendfile 函数在两个文件描写叙述符之间直接传递数据(全然在内核中操作,传送),从而避免了内核缓冲区数据和用户缓冲区数据之间的拷贝,操作效率非常高,被称之为零拷贝。

sendfile 函数的定义例如以下:

#include<sys/sendfile.h>
ssize_t sendfile(int out_fd,int in_fd,off_t*offset,size_t count);

传统方式 read/write send/recv

在传统的文件传输里面(read/write方式),在实现上事实上是比較复杂的,须要经过多次上下文的切换。我们看一下例如以下两行代码:

  1. read(file, tmp_buf, len);
  2. write(socket, tmp_buf, len);

以上两行代码是传统的read/write方式进行文件到socket的传输。

当须要对一个文件进行传输的时候,其详细流程细节例如以下:

  1. 调用 read 函数,文件数据被 copy 到内核缓冲区。
  2. read 函数返回。文件数据从内核缓冲区 copy 到用户缓冲区。
  3. write 函数调用。将文件数据从用户缓冲区 copy 到内核与 socket 相关的缓冲区。
  4. 数据从 socket 缓冲区 copy 到相关协议引擎。

以上细节是传统 read/write 方式进行网络文件传输的方式,我们能够看到,在这个过程其中。文件数据实际上是经过了四次 copy 操作:

硬盘 —> 内核buf —> 用户 buf —> socket 相关缓冲区(内核) —> 协议引擎

新方式 sendfile

而 sendfile 系统调用则提供了一种降低以上多次 copy。提升文件传输性能的方法。

sendfile 系统调用是在 2.1 版本号内核时引进的:

sendfile(socket, file, len);

执行流程例如以下:

  1. sendfile 系统调用,文件数据被 copy 至内核缓冲区
  2. 再从内核缓冲区 copy 至内核中 socket 相关的缓冲区
  3. 最后再 socket 相关的缓冲区 copy 到协议引擎

相较传统 read/write 方式,2.1 版本号内核引进的 sendfile 已经降低了内核缓冲区到 user 缓冲区。再由 user 缓冲区到 socket 相关 缓冲区的文件 copy,而在内核版本号 2.4 之后,文件描写叙述符结果被改变,sendfile 实现了更简单的方式,系统调用方式仍然一样,细节与 2.1 版本号的 不同之处在于,当文件数据被拷贝到内核缓冲区时,不再将全部数据 copy 到 socket 相关的缓冲区,而是只将记录数据位置和长度相关的数据保存到 socket相关的缓存,而实际数据将由 DMA 模块直接发送到协议引擎,再次降低了一次 copy 操作。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/137911.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • java: 找不到符号「建议收藏」

    java: 找不到符号「建议收藏」java:找不到符号符号:类TypeInformationTestBase位置:程序包org.apache.flink.api.common.typeutils程序报这种错误,不是代码造成的。解决办法:0、首先要统一编码格式:file–>settings–>fileencodings1、右键–>maven–>reloadproject2、build或rebuild3、flile–>inv..

    2022年7月8日
    67
  • Tensor和NumPy相互转换「建议收藏」

    Tensor和NumPy相互转换我们很容易用numpy()和from_numpy()将Tensor和NumPy中的数组相互转换。但是需要注意的一点是:这两个函数所产生的Tensor和NumPy中的数组共享相同的内存(所以他们之间的转换很快),改变其中一个时另一个也会改变!1.Tensor转NumPya=torch.ones(6)b=a.numpy()print(a,b)a+=1print(a,b)b+=1print(a,b)tensor([1.,1.

    2022年4月5日
    371
  • linux 文件夹 775,Linux chmod目录权限命令图文详解

    linux 文件夹 775,Linux chmod目录权限命令图文详解原标题 Linuxchmod 目录权限命令图文详解在 Linux 文件系统模型中 每个文件都有一组 9 个权限位用来控制谁能够读写和执行该文件的内容 普通文件大家都了解 这里说说目录的情况 对于目录来说 执行位的作用是控制能否进入或者通过该目录 而不是控制能否列出它的内容 读取位和执行位的组合的作用才是控制是否列出目录中的内容 写入位和执行位的组合则是允许在目录中创建 删除 和重命名文件 下面用实例来说明

    2025年7月17日
    3
  • 灰度测试与AB测试_测试种类有哪些

    灰度测试与AB测试_测试种类有哪些这个“常见”,是说当我们经历多了之后,会发现这个概念其实很常见,在当前你所处的这个人群中,发现大家都挂在嘴上。在最开始的测试学习中,其实很少提到这些概念,在职业生涯的前期,也很少需要考虑这些概念。分级测试一般用在系统测试阶段。分级测试,就是说对测试进行分级,区分什么重要、什么不重要,做区别对待。之所以需要区别对待,我总结有两个原因。一个是因为资源上的限制,时间、人力,让我们没有条件来做无差别覆盖。二是本身的限制,在测试阶段,提测质量往往是不尽人意的,只能是层层深入去做测试。.

    2025年5月22日
    9
  • H3C : S6550XE-56HF-HI 25G+100G光口交换机配置动静态端口聚合

    H3C : S6550XE-56HF-HI 25G+100G光口交换机配置动静态端口聚合H3C:S6550XE-56HF-HI25G+100G光口交换机配置动静态端口聚合动态端口聚合:(WGE1/0/53WGE1/0/54)[H3C]interfaceBridge-Aggregation11[H3C-Bridge-Aggregation11]link-aggregationmodedynamic[H3C-Bridge-Aggregation11]quit[H3C]interfaceTwenty-FiveGigE1/0/53[H3C-Twenty-FiveG

    2022年6月5日
    33
  • 全局平均池化(全局池化代替全连接层)

    全局平均池化是在论文NetworkinNetwork中提出的,原文中全局平均池化的作用和优点:思想:对于输出的每一个通道的特征图的所有像素计算一个平均值,经过全局平均池化之后就得到一个维度==类别数的特征向量,然后直接输入到softmax层作用:代替全连接层,可接受任意尺寸的图像优点:1)可以更好的将类别与最后一个卷积层的特征图对应起来(每一个通道对应一种…

    2022年4月18日
    223

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号