关于sendfile、splice等零拷贝函数的小结

今天折腾了一上午零拷贝,发现了许多许多问题,总结如下。

所谓零拷贝:就是避免了从内核向用户空间传送数据、再回传过去的过程。
而传统常用的场景:需要拷贝到用户空间处理,再写回去。
概括来说,零拷贝减少了用户态和核态之间的切换开销

Linux从2.4就支持了sendfile系统调用/函数,可以直接用来零拷贝。

我的应用场景现在需要拷贝文件,本以为sendfile耶可以的(看名字吗),结果折腾半天总是Invalid argument。。。
看了半天么,发现man中赫然写着:
Presently (Linux 2.6.9): in_fd, must correspond to a file which supports mmap(2)-like operations (i.e., it cannot be a socket); and out_fd must refer to a socket.

所以现在的sendfile已经是为网络协议专门用的了,比如nginx之类。性能如何这里不做评价。

转载请注明来自:http://www.coder4.com/archives/1227

一个替代方案事使用splice,2.6.22后新提供的系统调用,也避免了零拷贝,但是效率有点小悲剧……原理:

ssize_t splice(int fd_in, loff_t *off_in, int fd_out, loff_t *off_out, size_t len, unsigned int flags);

如上面原型所示,同样用splice函数,分两步走、执行两次:
(1)将fd_in的数据拷贝到fd_out,其中fd_out必须是pipe
(2)将pipe中的数据拷贝到fd_in中。

经过实际测试,性能不理想,原因是内核中规定了这个pipe的大小只能64KB......比普通的cp命令都要慢好多。
另外说一下,网上很多splice的程序都不正确。

总结完毕~

欢迎大家跟贴讨论

1 thought on “关于sendfile、splice等零拷贝函数的小结

Leave a Reply

Your email address will not be published. Required fields are marked *