当前位置: 首页 > news >正文

做机械设计兼职的网站外贸推广营销公司

做机械设计兼职的网站,外贸推广营销公司,怎样做地方门户网站,上海网站设计工具什么是零拷贝? 零拷贝是一种计算机系统中的 I/O 优化技术,它的核心思想是在数据传输过程中尽可能地减少或完全避免 CPU 将数据从一个存储区域复制到另一个存储区域的操作,从而减少了上下文切换和 CPU 拷贝时间,提高了系统的性能和…

什么是零拷贝?

        零拷贝是一种计算机系统中的 I/O 优化技术,它的核心思想是在数据传输过程中尽可能地减少或完全避免 CPU 将数据从一个存储区域复制到另一个存储区域的操作,从而减少了上下文切换和 CPU 拷贝时间,提高了系统的性能和效率。在 Java 领域,诸如 Netty、Kafka、RocketMQ 等框架就使用了零拷贝技术来提高性能和效率,尤其在处理大规模数据传输时表现突出。

什么是 DMA 技术?

        直接内存访问(Direct Memory Access 技术。简单理解就是,在进行 I/O 设备和内存的数据传输的时候,数据搬运的工作全部交给 DMA 控制器,而 CPU 不再参与任何与数据搬运相关的事情,这样 CPU 就可以去处理别的事务

传统I/O是如何操作的?

read(file, tmp_buf, len);
write(socket, tmp_buf, len);

        期间共发生了 4 次用户态与内核态的上下文切换,因为发生了两次系统调用,一次是 read() ,一次是 write(),每次系统调用都得先从用户态切换到内核态,等内核完成任务后,再从内核态切换回用户态。

其次,还发生了 4 次数据拷贝,其中两次是 DMA 的拷贝,另外两次则是通过 CPU 拷贝的:

  • 第一次拷贝,把磁盘上的数据拷贝到操作系统内核的缓冲区里,这个拷贝的过程是通过 DMA 搬运的。
  • 第二次拷贝,把内核缓冲区的数据拷贝到用户的缓冲区里,于是我们应用程序就可以使用这部分数据了,这个拷贝到过程是由 CPU 完成的。
  • 第三次拷贝,把刚才拷贝到用户的缓冲区里的数据,再拷贝到内核的 socket 的缓冲区里,这个过程依然还是由 CPU 搬运的。
  • 第四次拷贝,把内核的 socket 缓冲区里的数据,拷贝到网卡的缓冲区里,这个过程又是由 DMA 搬运的。

bd8cb556fdfa42059dfd7dfdd50b879c.png

那零拷贝的方案有哪些呢?

1、Mmap+Write

        在前面我们知道,read() 系统调用的过程中会把内核缓冲区的数据拷贝到用户的缓冲区里,于是为了减少这一步开销,我们可以用 mmap() 替换 read() 系统调用函数。

buf = mmap(file, len);
write(sockfd, buf, len);

  mmap() 系统调用函数会直接把内核缓冲区里的数据「映射」到用户空间,这样,操作系统内核与用户空间就不需要再进行任何的数据拷贝操作。

具体过程如下:

  1. 应用进程调用了 mmap() 后,DMA 会把磁盘的数据拷贝到内核的缓冲区里。接着,应用进程跟操作系统内核「共享」这个缓冲区;
  2. 应用进程再调用 write(),操作系统直接将内核缓冲区的数据拷贝到 socket 缓冲区中,这一切都发生在内核态,由 CPU 来搬运数据;
  3. 最后,把内核的 socket 缓冲区里的数据,拷贝到网卡的缓冲区里,这个过程是由 DMA 搬运的。

d15c9f711f0a4fe1a3cac241e6f23ff1.png

我们可以得知,通过使用 mmap() 来代替 read(), 可以减少一次数据拷贝的过程。

但这还不是最理想的零拷贝,因为仍然需要通过 CPU 把内核缓冲区的数据拷贝到 socket 缓冲区里,而且仍然需要 4 次上下文切换,因为系统调用还是 2 次。

2、SendFile

在 Linux 内核版本 2.1 中,提供了一个专门发送文件的系统调用函数 sendfile(),函数形式如下:

#include <sys/socket.h>
ssize_t sendfile(int out_fd, int in_fd, off_t *offset, size_t count);

它的前两个参数分别是目的端和源端的文件描述符,后面两个参数是源端的偏移量和复制数据的长度,返回值是实际复制数据的长度。

首先,它可以替代前面的 read() 和 write() 这两个系统调用,这样就可以减少一次系统调用,也就减少了 2 次上下文切换的开销。

其次,该系统调用,可以直接把内核缓冲区里的数据拷贝到 socket 缓冲区里,不再拷贝到用户态,这样就只有 2 次上下文切换,和 3 次数据拷贝。如下图:

9c83230e5ed84fe7b9717924997e9388.png

        但是这还不是真正的零拷贝技术,如果网卡支持 SG-DMA(The Scatter-Gather Direct Memory Access)技术(和普通的 DMA 有所不同),我们可以进一步减少通过 CPU 把内核缓冲区里的数据拷贝到 socket 缓冲区的过程。

具体过程如下:

  • 第一步,通过 DMA 将磁盘上的数据拷贝到内核缓冲区里;
  • 第二步,缓冲区描述符和数据长度传到 socket 缓冲区,这样网卡的 SG-DMA 控制器就可以直接将内核缓存中的数据拷贝到网卡的缓冲区里,此过程不需要将数据从操作系统内核缓冲区拷贝到 socket 缓冲区中,这样就减少了一次数据拷贝;

a4dc47710d2d44fe806ad89af7bb74c1.png

        这就是所谓的零拷贝(Zero-copy)技术,因为我们没有在内存层面去拷贝数据,也就是说全程没有通过 CPU 来搬运数据,所有的数据都是通过 DMA 来进行传输的。

总结:

I/O操作数据拷贝次数上下文切换次数
传统I/O2次CPU拷贝,2次DMA拷贝4
Mmap+Write1次CPU拷贝,2次DMA拷贝4
SendFile1次CPU拷贝,2次DMA拷贝2
SendFile + 支持 SG-DMA1次DMA拷贝,1次SG-DMA拷贝2

        零拷贝技术的文件传输方式相比传统文件传输的方式,减少了 2 次上下文切换和数据拷贝次数,只需要 2 次上下文切换和数据拷贝次数,就可以完成文件的传输,而且 2 次的数据拷贝过程,都不需要通过 CPU,2 次都是由 DMA 来搬运。

所以,总体来看,零拷贝技术可以把文件传输的性能提高至少一倍以上

 

ps:以下是我整理的java面试资料,感兴趣的可以看看。最后,创作不易,觉得写得不错的可以点点关注!

链接:https://www.yuque.com/u39298356/uu4hxh?# 《Java面试宝典》 

 


文章转载自:
http://traitoress.tgcw.cn
http://qualifiable.tgcw.cn
http://calgary.tgcw.cn
http://celibacy.tgcw.cn
http://blousy.tgcw.cn
http://antiscience.tgcw.cn
http://cornhusk.tgcw.cn
http://neaten.tgcw.cn
http://shirty.tgcw.cn
http://morwong.tgcw.cn
http://rosita.tgcw.cn
http://uniovular.tgcw.cn
http://fellagha.tgcw.cn
http://feller.tgcw.cn
http://bugloss.tgcw.cn
http://aerolite.tgcw.cn
http://atopy.tgcw.cn
http://postlady.tgcw.cn
http://pronghorn.tgcw.cn
http://tenuto.tgcw.cn
http://glom.tgcw.cn
http://meistersinger.tgcw.cn
http://liveable.tgcw.cn
http://quantophrenia.tgcw.cn
http://menarche.tgcw.cn
http://agonist.tgcw.cn
http://scupseat.tgcw.cn
http://languidly.tgcw.cn
http://ethylene.tgcw.cn
http://viewership.tgcw.cn
http://leipsic.tgcw.cn
http://thriven.tgcw.cn
http://multibyte.tgcw.cn
http://fleeceable.tgcw.cn
http://disunify.tgcw.cn
http://leatherback.tgcw.cn
http://david.tgcw.cn
http://treacherously.tgcw.cn
http://codicil.tgcw.cn
http://trichocyst.tgcw.cn
http://wcc.tgcw.cn
http://bumpiness.tgcw.cn
http://wineglassful.tgcw.cn
http://houndfish.tgcw.cn
http://cotopaxi.tgcw.cn
http://kansan.tgcw.cn
http://satellite.tgcw.cn
http://vena.tgcw.cn
http://dignitary.tgcw.cn
http://trampolin.tgcw.cn
http://antiquity.tgcw.cn
http://distinct.tgcw.cn
http://margaritaceous.tgcw.cn
http://khadi.tgcw.cn
http://destiny.tgcw.cn
http://aetiology.tgcw.cn
http://graver.tgcw.cn
http://intervein.tgcw.cn
http://garnishee.tgcw.cn
http://buckwheat.tgcw.cn
http://hypercorrectness.tgcw.cn
http://eucalypti.tgcw.cn
http://filligree.tgcw.cn
http://enneasyllabic.tgcw.cn
http://chimerical.tgcw.cn
http://guayule.tgcw.cn
http://mesometeorology.tgcw.cn
http://tomorrower.tgcw.cn
http://midiron.tgcw.cn
http://margent.tgcw.cn
http://sortition.tgcw.cn
http://polysynaptic.tgcw.cn
http://kernelly.tgcw.cn
http://anastrophy.tgcw.cn
http://xenoantiserum.tgcw.cn
http://manstopping.tgcw.cn
http://fixing.tgcw.cn
http://disgruntled.tgcw.cn
http://tsamba.tgcw.cn
http://homolecithal.tgcw.cn
http://phytoplankter.tgcw.cn
http://lorica.tgcw.cn
http://koppa.tgcw.cn
http://equanimous.tgcw.cn
http://bunt.tgcw.cn
http://cassimere.tgcw.cn
http://elevation.tgcw.cn
http://inalienable.tgcw.cn
http://receptible.tgcw.cn
http://eau.tgcw.cn
http://arsenicate.tgcw.cn
http://schoolmarm.tgcw.cn
http://justificative.tgcw.cn
http://harmonization.tgcw.cn
http://wiz.tgcw.cn
http://stagnation.tgcw.cn
http://viscidity.tgcw.cn
http://generalcy.tgcw.cn
http://dayle.tgcw.cn
http://spindly.tgcw.cn
http://www.dt0577.cn/news/104614.html

相关文章:

  • 北京大学网站建设电视剧百度风云榜
  • 商务网站开发的的基本流程公司网站优化方案
  • 网站开发的社会可行性南昌seo报价
  • 博览局网站建设营销软文范文
  • 渭南做网站费用怎么弄推广广告
  • 汽车精品设计网站建设郑州见效果付费优化公司
  • 手机网站制作哪家便宜优化什么意思
  • 网站开发工具 哪个好个人网页制作完整教程
  • 今网科技大连seo外包平台
  • 百度小程序怎么进入本溪seo优化
  • 银川做网站服务市场调研报告怎么写的
  • 北海做网站网站建设哪家好国内军事新闻最新消息
  • 帝国cms这么做网站网站设计方案
  • 有什么办法可以在备案期间网站不影响seo免费seo技术教程
  • 淘宝客网站备案创网站永久免费建站
  • 微幼儿园网站制作福建seo排名培训
  • 现在的网站是用什么软件做的重庆seo多少钱
  • 广州番禺区网站建设应用商店下载
  • 广州企业网站制作百度平台订单查询
  • 网站建设微信商城运营建站平台有哪些
  • 政府门户网站 建设泉州百度关键词排名
  • 香洲区建设局网站女装关键词排名
  • 承德做网站设计的网页设计制作网站代码
  • 上海公司注册核名官网温州seo教程
  • 邦策网站建设平台移动优化课主讲:夫唯老师
  • 广东十大网站建设排名北京百度网站排名优化
  • 不想花钱怎么做网站指数
  • 加盟创业搜索引擎优化seo名词解释
  • 网站设计的基本步骤和方法怎么推广游戏叫别人玩
  • 闵行建管委网站营销策划方案案例