大文件拷貝

假設有一個超大文件，需對其完成拷貝工作。為提高效率，可采用多進程并行拷貝的方法來實現。假設文件 大小為 len，共有 n 個進程對該文件進行拷貝。那每個進程拷貝的字節數應為 len/n。但未必一定能整除，我們可 以選擇讓最后一個進程負責剩余部分拷貝工作。可使用 len%(len/n)將剩余部分大小求出。
為降低實現復雜度，可選用 mmap 來實現源、目標文件的映射，通過指針操作內存地址，設置每個進程拷貝 的起始、結束位置。借助 MAP_SHARED 選項將內存中所做的修改反映到物理磁盤上

#include<stdio.h> #include<unistd.h> #include<sys/types.h> #include<fcntl.h> #include<sys/mman.h> #include<stdlib.h> #include<string.h> #include<sys/stat.h>int main(int argc,char *argv[]) {int n=5;//輸入參數至少是3，第四個參數可以是進程個數if(argc<3){printf("./a.out src dst [n]\n");return 0;} if(argc==4){n=atoi(argv[3]);} //打開源文件int srcfd=open(argv[1],O_RDONLY);if(srcfd<0){perror("open err");exit(1);} //打開目標文件int dstfd=open(argv[2],O_RDWR|O_CREAT|O_TRUNC,0644);if(dstfd<0){perror("open dst err");exit(1);} //目標拓展，從原文件獲得文件大小，statstruct stat sb; stat(argv[1],&sb);//為了計算大小int len=sb.st_size;truncate(argv[0],len);//將源文件映射到緩沖區char *psrc = mmap(NULL,len,PROT_READ,MAP_SHARED,srcfd,0); if(psrc == MAP_FAILED){perror("mmap dst err");exit(1);}//將目標文件映射char *pdst = mmap(NULL,len,PROT_READ|PROT_WRITE,MAP_SHARED,dstfd,0);if(pdst == MAP_FAILED){perror("mmap dst err");exit(1);}//創建多個子進程int i=0;for(i=0;i<n;i++){if(fork()==0)break;}//計算子進程需要拷貝的起點和大小int cpsize=len/n;int mod=len%n;//數據拷貝 ，memcpyif(i<n){ //子進程if(i== n-1){ //最后一個子進程memcpy(pdst+i*cpsize,psrc+i*cpsize,cpsize+mod);}else{memcpy(pdst+i*cpsize,psrc+i*cpsize,cpsize);}}else{for(i=0;i<n;i++){wait(NULL);}} //釋放映射區if(munmap(psrc,len)<0){perror("munmao src err");exit(1);}//關閉文件close(srcfd);close(dstfd);return 0; }

總結

以上是生活随笔為你收集整理的Linux下文件的多进程拷贝的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。