mmap（一種內存映射文件的方法）

mmap將一個文件或者其它對象映射進內存。文件被映射到多個頁上，如果文件的大小不是所有頁的大小之和，最后一個頁不被使用的空間將會清零。mmap在用戶空間映射調用系統中作用很大。

頭文件 <sys/mman.h>

函數原型

void* mmap(void* start,size_t length,int prot,int flags,int fd,off_t offset);

int munmap(void* start,size_t length);

 

 

外文名

mmap

釋    義

一個文件或者其它對象映射進內存

參    數

start、length

作用系統

Linux or Unix

 

條件

編輯

mmap()必須以PAGE_SIZE為單位進行映射，而內存也只能以頁為單位進行 映射，若要映射非PAGE_SIZE整數倍的地址范圍，要先進行內存對齊，強行以PAGE_SIZE的倍數大小進行映射。

參數說明

編輯

start：映射區的開始地址，設置為0時表示由系統決定映射區的起始地址。

length：映射區的長度。//長度單位是 以字節為單位，不足一內存頁按一內存頁處理

prot：期望的內存保護標志，不能與文件的打開模式沖突。是以下的某個值，可以通過or運算合理地組合在一起

PROT_EXEC //頁內容可以被執行

PROT_READ //頁內容可以被讀取

PROT_WRITE //頁可以被寫入

PROT_NONE //頁不可訪問

flags：指定映射對象的類型，映射選項和映射頁是否可以共享。它的值可以是一個或者多個以下位的組合體

MAP_FIXED //使用指定的映射起始地址，如果由start和len參數指定的內存區重疊於現存的映射空間，重疊部分將會被丟棄。如果指定的起始地址不可用，操作將會失敗。並且起始地址必須落在頁的邊界上。

MAP_SHARED //與其它所有映射這個對象的進程共享映射空間。對共享區的寫入，相當於輸出到文件。直到msync()或者 munmap()被調用，文件實際上不會被更新。

MAP_PRIVATE //建立一個寫入時拷貝的私有映射。內存區域的寫入不會影響到原文件。這個標志和以上標志是互斥的，只能使用其中一個。

MAP_DENYWRITE //這個標志被忽略。

MAP_EXECUTABLE //同上

MAP_NORESERVE //不要為這個映射保留交換空間。當交換空間被保留，對映射區修改的可能會得到保證。當交換空間不被保留，同時 內存不足，對映射區的修改會引起段違例信號。

MAP_LOCKED //鎖定映射區的頁面，從而防止頁面被交換出內存。

MAP_GROWSDOWN //用於堆棧，告訴 內核VM系統，映射區可以向下擴展。

MAP_ANONYMOUS //匿名映射，映射區不與任何文件關聯。

MAP_ANON //MAP_ANONYMOUS的別稱，不再被使用。

MAP_FILE //兼容標志，被忽略。

MAP_32BIT //將映射區放在進程 地址空間的低2GB，MAP_FIXED指定時會被忽略。當前這個標志只在x86-64平台上得到支持。

MAP_POPULATE //為文件映射通過預讀的方式准備好頁表。隨后對映射區的訪問不會被頁違例阻塞。

MAP_NONBLOCK //僅和MAP_POPULATE一起使用時才有意義。不執行預讀，只為已存在於內存中的頁面建立 頁表入口。

fd：有效的 文件描述詞。一般是由 open()函數返回，其值也可以設置為-1，此時需要指定flags參數中的MAP_ANON,表明進行的是匿名映射。

offset：被映射對象內容的起點。

返回說明

編輯

成功執行時，mmap()返回被映射區的 指針， munmap()返回0。失敗時，mmap()返回MAP_FAILED[其值為(void *)-1]，munmap返回-1。errno被設為以下的某個值

EACCES：訪問出錯

EAGAIN：文件已被鎖定，或者太多的內存已被鎖定

EBADF：fd不是有效的 文件描述詞

EINVAL：一個或者多個參數無效

ENFILE：已達到系統對打開文件的限制

ENODEV：指定文件所在的文件系統不支持內存映射

ENOMEM： 內存不足，或者進程已超出最大內存映射數量

EPERM：權能不足，操作不允許

ETXTBSY：已寫的方式打開文件，同時指定MAP_DENYWRITE標志

SIGSEGV：試着向只讀區寫入

SIGBUS：試着訪問不屬於進程的內存區

設備操作

編輯

mmap操作提供了一種機制，讓 用戶程序直接訪問設備內存，這種機制，相比較在 用戶空間和 內核空間互相拷貝數據，效率更高。在要求高性能的應用中比較常用。mmap映射內存必須是頁面大小的整數倍，面向流的設備不能進行mmap，mmap的實現和硬件有關。

系統調用

編輯

mmap()系統調用使得進程之間通過映射同一個普通文件實現共享內存。普通文件被映射到進程地址空間后，進程可以像訪問普通內存一樣對文件進行訪問，不必再調用read()，write（）等操作。
　　注：實際上，mmap()系統調用並不是完全為了用於共享內存而設計的。它本身提供了不同於一般對普通文件的訪問方式，進程可以像讀寫內存一樣對普通文件的操作。而Posix或System V的共享內存IPC則純粹用於共享目的，當然mmap()實現共享內存也是其主要應用之一。
　　1、mmap()系統調用形式如下：
　　void* mmap ( void * addr , size_t len , int prot , int flags , int fd , off_t offset )
　　參數fd為即將映射到進程空間的文件描述字，一般由open()返回，同時，fd可以指定為-1，此時須指定flags參數中的MAP_ANON，表明進行的是匿名映射（不涉及具體的文件名，避免了文件的創建及打開，很顯然只能用於具有親緣關系的進程間通信）。len是映射到調用進程地址空間的字節數，它從被映射文件開頭offset個字節開始算起。prot 參數指定共享內存的訪問權限。可取如下幾個值的或：PROT_READ（可讀） , PROT_WRITE （可寫）, PROT_EXEC （可執行）, PROT_NONE（不可訪問）。flags由以下幾個常值指定：MAP_SHARED , MAP_PRIVATE , MAP_FIXED，其中，MAP_SHARED , MAP_PRIVATE必選其一，而MAP_FIXED則不推薦使用。offset參數一般設為0，表示從文件頭開始映射。參數addr指定文件應被映射到進程空間的起始地址，一般被指定一個空指針，此時選擇起始地址的任務留給內核來完成。函數的返回值為最后文件映射到進程空間的地址，進程可直接操作起始地址為該值的有效地址。這里不再詳細介紹mmap()的參數，讀者可參考mmap()手冊頁獲得進一步的信息。
　　2、系統調用mmap()用於共享內存的兩種方式：
　　（1）使用普通文件提供的內存映射：適用於任何進程之間；此時，需要打開或創建一個文件，然后再調用mmap()；典型調用代碼如下：
　　fd=open(name, flag, mode);
　　if(fd<0)
　　...
　　ptr=mmap(NULL, len , PROT_READ|PROT_WRITE, MAP_SHARED , fd , 0); 通過mmap()實現共享內存的通信方式有許多特點和要注意的地方，我們將在范例中進行具體說明。
　　（2）使用特殊文件提供匿名內存映射：適用於具有親緣關系的進程之間；由於父子進程特殊的親緣關系，在父進程中先調用mmap()，然后調用fork()。那么在調用fork()之后，子進程繼承父進程匿名映射后的地址空間，同樣也繼承mmap()返回的地址，這樣，父子進程就可以通過映射區域進行通信了。注意，這里不是一般的繼承關系。一般來說，子進程單獨維護從父進程繼承下來的一些變量。而mmap()返回的地址，卻由父子進程共同維護。
　　對於具有親緣關系的進程實現共享內存最好的方式應該是采用匿名內存映射的方式。此時，不必指定具體的文件，只要設置相應的標志即可，參見范例2。
　　3、系統調用munmap()
　　int munmap( void * addr, size_t len )
　　該調用在進程地址空間中解除一個映射關系，addr是調用mmap()時返回的地址，len是映射區的大小。當映射關系解除后，對原來映射地址的訪問將導致段錯誤發生。
　　4、系統調用msync()
　　int msync ( void * addr , size_t len, int flags)
　　一般說來，進程在映射空間的對共享內容的改變並不直接寫回到磁盤文件中，往往在調用munmap（）后才執行該操作。可以通過調用msync()實現磁盤上文件內容與共享內存區的內容一致。

范例

編輯

　　下面將給出使用mmap()的一個范例：范例1給出兩個進程通過映射普通文件實現共享內存通信；系統調用 mmap()有許多有趣的地方，下面是通過mmap（）映射普通文件實現進程間的通信的范例，我們通過該范例來說明mmap()實現共享內存的特點及注意事項。
　　范例1：兩個進程通過映射普通文件實現共享內存通信
　　范例1包含兩個子程序：map_normalfile1.c及map_normalfile2.c。編譯兩個程序，可執行文件分別為 map_normalfile1及map_normalfile2。兩個程序通過命令行參數指定同一個文件來實現共享內存方式的進程間通信。 map_normalfile1試圖打開命令行參數指定的一個普通文件，把該文件映射到進程的地址空間，並對映射后的地址空間進行寫操作。 map_normalfile2把命令行參數指定的文件映射到進程地址空間，然后對映射后的地址空間執行讀操作。這樣，兩個進程通過命令行參數指定同一個文件來實現共享內存方式的進程間通信。

代碼示例

　　下面是兩個程序代碼：

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69

/*-------------map_normalfile1.c-----------*/ #include<sys/mman.h> #include<sys/types.h> #include<fcntl.h> #include<string.h> #include<stdio.h> #include<unistd.h> #include <errno.h> typedef  struct {      char  name[4];      int  age; }people; void  main( int  argc, char  **argv) //map a normal file as shared mem: {      int  fd,i;      people *p_map;      char  temp;      fd = open(argv[1],O_CREAT|O_RDWR|O_TRUNC,00777);      lseek(fd, sizeof (people)*5-1,SEEK_SET);      write(fd, "" ,1);      p_map=(people*)mmap(NULL, sizeof (people)*10,PROT_READ|PROT_WRITE,MAP_SHARED,fd,0);      if  (p_map == ( void  *)-1)      {          fprintf (stderr,  "mmap: %s\n" ,  strerror ( errno ));          return  ;      }      close(fd);      temp= 'a' ;      for (i=0;i<10;i++)      {          temp+=1;          (*(p_map+i)).name[1] =  '\0' ;          memcpy ((*(p_map+i)).name,&temp,1);          (*(p_map+i)).age=20+i;      }      printf ( "initializeover\n" );      sleep(10);      munmap(p_map, sizeof (people)*10);      printf ( "umapok\n" ); }   /*-------------map_normalfile2.c-----------*/ #include<sys/mman.h> #include<sys/types.h> #include<fcntl.h> #include<stdio.h> #include<unistd.h> #include <errno.h> typedef  struct {      char  name[4];      int  age; }people; void  main( int  argc, char  **argv) //map a normal file as shared mem: {      int  fd,i;      people *p_map;      fd=open(argv[1],O_CREAT|O_RDWR,00777);      p_map=(people*)mmap(NULL, sizeof (people)*10,PROT_READ|PROT_WRITE,MAP_SHARED,fd,0);      if  (p_map == ( void  *)-1)      {          fprintf (stderr,  "mmap: %s\n" ,  strerror ( errno ));          return  ;      }      for (i=0;i<10;i++)      {          printf ( "name:%s age%d;\n" ,(*(p_map+i)).name,(*(p_map+i)).age);      }      munmap(p_map, sizeof (people)*10); }

代碼解釋

map_normalfile1.c 首先定義了一個people數據結構，（在這里采用數據結構的方式是因為，共享內存區的數據往往是有固定格式的，這由通信的各個進程決定，采用結構的方式有普遍代表性）。map_normfile1首先打開或創建一個文件，並把文件的長度設置為5個people結構大小。然后從mmap()的返回地址開始，設置了10個people結構。然后，進程睡眠10秒鍾，等待其他進程映射同一個文件，最后解除映射。
　　map_normfile2.c只是簡單的映射一個文件，並以people數據結構的格式從mmap()返回的地址處讀取10個people結構，並輸出讀取的值，然后解除映射。
　　分別把兩個程序編譯成可執行文件map_normalfile1和map_normalfile2后，在一個終端上先運行./map_normalfile1 /tmp/test_shm，程序輸出結果如下：
　　initialize over
　　umap ok
　　在map_normalfile1輸出initialize over 之后，輸出umap ok之前，在另一個終端上運行map_normalfile2 /tmp/test_shm，將會產生如下輸出(為了節省空間，輸出結果為稍作整理后的結果)：
　　name: b age 20; name: c age 21; name: d age 22; name: e age 23; name: f age 24;
　　name: g age 25; name: h age 26; name: I age 27; name: j age 28; name: k age 29;
　　在map_normalfile1 輸出umap ok后，運行map_normalfile2則輸出如下結果：
　　name: b age 20; name: c age 21; name: d age 22; name: e age 23; name: f age 24;
　　name: age 0; name: age 0; name: age 0; name: age 0; name: age 0;

結論

　　從程序的運行結果中可以得出的結論
　　1、 最終被映射文件的內容的長度不會超過文件本身的初始大小，即映射不能改變文件的大小；
　　2、可以用於進程通信的有效地址空間大小大體上受限於被映射文件的大小，但不完全受限於文件大小。打開文件被截短為5個people結構大小，而在 map_normalfile1中初始化了10個people數據結構，在恰當時候（map_normalfile1輸出initialize over 之后，輸出umap ok之前）調用map_normalfile2會發現map_normalfile2將輸出全部10個people結構的值，后面將給出詳細討論。
　　注：在linux中，內存的保護是以頁為基本單位的，即使被映射文件只有一個字節大小，內核也會為映射分配一個頁面大小的內存。當被映射文件小於一個頁面大小時，進程可以對從mmap()返回地址開始的一個頁面大小進行訪問，而不會出錯；但是，如果對一個頁面以外的地址空間進行訪問，則導致錯誤發生，后面將進一步描述。因此，可用於進程間通信的有效地址空間大小不會超過文件大小及一個頁面大小的和。
　　3、文件一旦被映射后，調用mmap()的進程對返回地址的訪問是對某一內存區域的訪問，暫時脫離了磁盤上文件的影響。所有對mmap()返回地址空間的操作只在內存中有意義，只有在調用了munmap()后或者msync()時，才把內存中的相應內容寫回磁盤文件，所寫內容仍然不能超過文件的大小。

其他

munmap執行相反的操作，刪除特定地址區域的對象映射，基於文件的映射，在mmap和munmap執行過程的任何時刻，被映射文件的st_atime可能被更新。如果st_atime字段在前述的情況下沒有得到更新，首次對映射區的第一個頁索引時會更新該字段的值。用PROT_WRITE 和 MAP_SHARED標志建立起來的文件映射其st_ctime 和 st_mtime，在對映射區寫入之后但在msync()通過MS_SYNC 和 MS_ASYNC兩個標志調用之前會被更新