使用mmap实现文件的拷贝

2024-03-17 10:18
文章标签 实现 使用 拷贝 mmap

本文主要是介绍使用mmap实现文件的拷贝,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

原文地址:点击打开链接

今天看csapp看到了虚拟存储器的映射以及mmap函数的用法,作为练习,使用mmap来实现文件的拷贝操作,同时与传统的文件拷贝操作进行了性能比较。

mmap与munmap函数介绍:
#include <unistd.h>
#include <sys/mman.h>
void *mmap(void *start, size_t length, int prot, int flag, int fd, off_t offset);
//返回:若成功时则返回映射区域的指针,若出错则为MAP_FAILED(-1)

start: 最好从start开始的一个区域,这个是hint,具体映射结果还是要看返回结果
length: 映射区域的大小
prot: 映射区域的访问权限位 PROT_EXEC PROT_READ PROT_WRITE PROT_NONE
flags: 映射对象的类型 MAP_ANON MAP_PRIVATE MAP_SHARED

munmap函数删除映射区域

#include <unistd.h>
#include <sys/mman.h>
int munmap(void *start, size_t length);
实验

分别使用了mmap函数和普通的read write实现了文件的复制拷贝,下面是通过复制50M的文件性能分析:

[yangguang@sim124 ~]$ time ./workspace/mmapcopy linux-20101214.tar.gz ./output    
real    0m0.100s
user    0m0.034s
sys     0m0.065s

[yangguang@sim124 ~]$ time ./workspace/copy linux-20101214.tar.gz ./output
real    0m5.016s
user    0m0.000s
sys     0m0.124s

可以看到使用mmap的性能明显高于使用Read write的方式,这里主要原因是使用mmap减少了用户态和内核态间数据
的拷贝。

源码分析
/** Author: liyangguang <liyangguang@software.ict.ac.cn>* http://www.yaronspace.cn/blog** File: mmapcopy.c* Create Date: 2011-07-04 21:02:48**/
#include <stdio.h>
#include <sys/mman.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <unistd.h>
#include <string.h>
#include <errno.h>void
mmapcopy(int src_fd, size_t src_len, int dst_fd)
{void *src_ptr, *dst_ptr;src_ptr = mmap(NULL, src_len, PROT_READ, MAP_PRIVATE, src_fd, 0);dst_ptr = mmap(NULL, src_len, PROT_WRITE | PROT_READ, MAP_SHARED, dst_fd, 0);if (dst_ptr == MAP_FAILED) {printf("mmap error:%s\n", strerror(errno));return;}memcpy(dst_ptr, src_ptr, src_len);munmap(src_ptr, src_len);munmap(dst_ptr, src_len);
}int 
main(int argc, char* argv[])
{if (argc != 3) {printf("Usage: %s <src_file> <dst_file>\n", argv[0]);return -1;}int src_fd = open(argv[1], O_RDONLY);int dst_fd = open(argv[2], O_RDWR | O_CREAT | O_TRUNC);;struct stat stat;fstat(src_fd, &stat);truncate(argv[2], stat.st_size);mmapcopy(src_fd, stat.st_size, dst_fd);close(src_fd);close(dst_fd);return 0;
}

/** Author: liyangguang <liyangguang@software.ict.ac.cn>* http://www.yaronspace.cn/blog** File: copy.c* Create Date: 2011-07-04 21:38:00**/
#include <stdio.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <string.h>
#include <errno.h>
#include <unistd.h>void
copy(int src_fd, int dst_fd)
{char buffer[1024*1024];char *ptr = buffer;size_t nread, nwrite, nremain;while ((nread = read(src_fd, ptr, 1024*1024)) > 0) {nremain = nread;while (nremain > 0){nwrite = write(dst_fd, ptr, nremain);nremain -= nwrite; ptr   = ptr + nwrite; } ptr = buffer;}}int 
main(int argc, char* argv[])
{if (argc != 3) {printf("Usage: %s <src_file> <dst_file>\n", argv[0]);return -1;}int src_fd = open(argv[1], O_RDONLY);int dst_fd = open(argv[2], O_RDWR | O_CREAT | O_TRUNC, S_IRWXU);;copy(src_fd, dst_fd);close(src_fd);close(dst_fd);return 0;
}/* vim: set ts=4 sw=4: */


这篇关于使用mmap实现文件的拷贝的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/818662

相关文章

Python 字典 (Dictionary)使用详解

《Python字典(Dictionary)使用详解》字典是python中最重要,最常用的数据结构之一,它提供了高效的键值对存储和查找能力,:本文主要介绍Python字典(Dictionary)... 目录字典1.基本特性2.创建字典3.访问元素4.修改字典5.删除元素6.字典遍历7.字典的高级特性默认字典

使用Python构建一个高效的日志处理系统

《使用Python构建一个高效的日志处理系统》这篇文章主要为大家详细讲解了如何使用Python开发一个专业的日志分析工具,能够自动化处理、分析和可视化各类日志文件,大幅提升运维效率,需要的可以了解下... 目录环境准备工具功能概述完整代码实现代码深度解析1. 类设计与初始化2. 日志解析核心逻辑3. 文件处

python生成随机唯一id的几种实现方法

《python生成随机唯一id的几种实现方法》在Python中生成随机唯一ID有多种方法,根据不同的需求场景可以选择最适合的方案,文中通过示例代码介绍的非常详细,需要的朋友们下面随着小编来一起学习学习... 目录方法 1:使用 UUID 模块(推荐)方法 2:使用 Secrets 模块(安全敏感场景)方法

一文详解如何使用Java获取PDF页面信息

《一文详解如何使用Java获取PDF页面信息》了解PDF页面属性是我们在处理文档、内容提取、打印设置或页面重组等任务时不可或缺的一环,下面我们就来看看如何使用Java语言获取这些信息吧... 目录引言一、安装和引入PDF处理库引入依赖二、获取 PDF 页数三、获取页面尺寸(宽高)四、获取页面旋转角度五、判断

C++中assign函数的使用

《C++中assign函数的使用》在C++标准模板库中,std::list等容器都提供了assign成员函数,它比操作符更灵活,支持多种初始化方式,下面就来介绍一下assign的用法,具有一定的参考价... 目录​1.assign的基本功能​​语法​2. 具体用法示例​​​(1) 填充n个相同值​​(2)

Spring StateMachine实现状态机使用示例详解

《SpringStateMachine实现状态机使用示例详解》本文介绍SpringStateMachine实现状态机的步骤,包括依赖导入、枚举定义、状态转移规则配置、上下文管理及服务调用示例,重点解... 目录什么是状态机使用示例什么是状态机状态机是计算机科学中的​​核心建模工具​​,用于描述对象在其生命

Spring Boot 结合 WxJava 实现文章上传微信公众号草稿箱与群发

《SpringBoot结合WxJava实现文章上传微信公众号草稿箱与群发》本文将详细介绍如何使用SpringBoot框架结合WxJava开发工具包,实现文章上传到微信公众号草稿箱以及群发功能,... 目录一、项目环境准备1.1 开发环境1.2 微信公众号准备二、Spring Boot 项目搭建2.1 创建

IntelliJ IDEA2025创建SpringBoot项目的实现步骤

《IntelliJIDEA2025创建SpringBoot项目的实现步骤》本文主要介绍了IntelliJIDEA2025创建SpringBoot项目的实现步骤,文中通过示例代码介绍的非常详细,对大家... 目录一、创建 Spring Boot 项目1. 新建项目2. 基础配置3. 选择依赖4. 生成项目5.

使用Python删除Excel中的行列和单元格示例详解

《使用Python删除Excel中的行列和单元格示例详解》在处理Excel数据时,删除不需要的行、列或单元格是一项常见且必要的操作,本文将使用Python脚本实现对Excel表格的高效自动化处理,感兴... 目录开发环境准备使用 python 删除 Excphpel 表格中的行删除特定行删除空白行删除含指定

深入理解Go语言中二维切片的使用

《深入理解Go语言中二维切片的使用》本文深入讲解了Go语言中二维切片的概念与应用,用于表示矩阵、表格等二维数据结构,文中通过示例代码介绍的非常详细,需要的朋友们下面随着小编来一起学习学习吧... 目录引言二维切片的基本概念定义创建二维切片二维切片的操作访问元素修改元素遍历二维切片二维切片的动态调整追加行动态