【Linux操作系统】Linux系统编程中的共享存储映射(mmap)

在Linux系统编程中,进程之间的通信是一项重要的任务。共享存储映射(mmap)是一种高效的进程通信方式,它允许多个进程共享同一个内存区域,从而实现数据的共享和通信。本文将介绍共享存储映射的概念、原理、使用方法和注意事项,以帮助读者更好地理解和应用共享存储映射。

【Linux操作系统】Linux系统编程中的共享存储映射(mmap)_第1张图片

文章目录

    • 1. 共享存储映射的概念
    • 2. 共享存储映射的原理
    • 3. 共享存储映射的使用方法
      • 3.1 mmap
        • 3.1.1 函数原型、参数及返回值
        • 3.1.2 注意事项
        • 3.1.3 函数示例
      • 3.2 munmap
        • 3.2.1 函数原型、参数及返回值
        • 3.2.2 注意事项
        • 3.2.3 函数示例
    • 4. 父子进程mmap通信
      • 4.1 具体步骤如下:
      • 4.2 示例
      • 4.3 代码解释
    • 5. 非血缘关系进程间mmap通信
      • 5.1 具体步骤如下:
      • 5.2 示例
      • 5.3 代码解释
    • 6. 结语

1. 共享存储映射的概念

共享存储映射是一种将文件或设备映射到进程的虚拟地址空间的技术。通过共享存储映射,多个进程可以访问同一个物理内存区域,从而实现数据的共享和通信。

共享存储映射的主要优势包括:

  • 高效性:共享存储映射避免了数据的复制和传输,提高了数据访问的效率。
  • 灵活性:共享存储映射可以用于不同类型的数据,包括文件、设备和匿名内存等。
  • 简单性:共享存储映射使用简单,只需要几个系统调用就可以完成映射和解除映射的操作。

2. 共享存储映射的原理

共享存储映射的原理是将一个文件或设备映射到进程的虚拟地址空间中的一段连续的内存区域。这个内存区域被称为共享内存段。多个进程可以通过访问共享内存段来实现数据的共享和通信。

共享存储映射的过程包括以下几个步骤:

  1. 创建或打开一个共享内存段。
  2. 将共享内存段映射到进程的虚拟地址空间中。
  3. 读写共享内存段中的数据。
  4. 解除共享内存段的映射。

3. 共享存储映射的使用方法

3.1 mmap

3.1.1 函数原型、参数及返回值

mmap函数的原型如下:

void *mmap(void *addr, size_t length, int prot, int flags, int fd, off_t offset);

参数说明:

  • addr:指定映射的起始地址,通常设置为NULL,让系统自动选择合适的地址。
  • length:指定映射的长度,以字节为单位。
  • prot:指定映射区域的保护方式,可以是以下几个值的组合:
    • PROT_READ:可读
    • PROT_WRITE:可写
    • PROT_EXEC:可执行
    • PROT_NONE:不可访问
  • flags:指定映射区域的标志,可以是以下几个值的组合:
    • MAP_SHARED:共享映射,多个进程可以访问同一个映射区域
    • MAP_PRIVATE:私有映射,每个进程有自己独立的映射区域
    • MAP_FIXED:映射区域必须从指定的地址开始,如果指定地址已被占用,则映射失败
    • MAP_ANONYMOUS:创建一个匿名映射区域,不与文件关联
  • fd:指定要映射的文件描述符,如果使用MAP_ANONYMOUS标志,则该参数为-1。
  • offset:指定文件的偏移量,通常设置为0。

返回值:

  • 成功时,返回映射区域的起始地址。
  • 失败时,返回MAP_FAILED。

3.1.2 注意事项

  1. 参数的正确设置:mmap函数的参数包括起始地址、映射长度、访问权限、映射方式等。需要根据具体需求正确设置这些参数,以确保映射的行为符合预期。

  2. 错误处理:mmap函数的返回值为映射区域的起始地址,如果映射失败,返回值为MAP_FAILED。在调用mmap函数后,需要检查返回值是否为MAP_FAILED,并根据errno的值来确定具体的错误原因,并进行相应的错误处理。

  3. 内存对齐:mmap函数返回的映射区域的起始地址通常是按照系统的内存页大小( 4096 )进行对齐的。在使用映射区域时,需要确保按照正确的偏移和长度进行访问,以避免访问越界或者未映射的内存。

  4. 解除映射:在不再需要映射区域时,应该使用munmap函数解除对映射区域的映射。解除映射后,之前映射的内存区域将不再可访问,对该区域的访问将导致段错误。因此,需要确保解除映射的时机和范围是正确的,避免出现内存泄漏或者访问非法内存的情况。

  5. 共享内存的同步:如果使用mmap函数创建了一个共享内存区域(使用MAP_SHARED标志),需要在多个进程之间进行同步,以避免竞争条件和数据不一致的问题。可以使用信号量、互斥锁等机制来实现进程间的同步。

  6. 文件映射的同步:如果使用mmap函数将文件映射到内存中,需要注意对内存中的数据的修改可能不会立即写入到文件中。可以使用msync函数来将修改的数据同步到文件中,或者使用munmap函数解除映射时自动进行同步。

  7. 安全性:使用mmap函数时需要注意安全性问题,尤其是在映射文件时。需要确保对映射区域的访问是合法的,避免出现潜在的安全漏洞,例如通过映射区域进行非法的内存访问或者代码注入等。

3.1.3 函数示例

下面是一个使用mmap函数的例子:

#include 
#include 
#include 
#include 

int main() {
    int fd;
    char *shared_memory;

    // 打开文件
    fd = open("shared_memory", O_RDWR);
    if (fd == -1) {
        perror("open");
        return 1;
    }

    // 将文件映射到进程的虚拟地址空间中
    shared_memory = (char *)mmap(NULL, 1024, PROT_READ | PROT_WRITE, MAP_SHARED, fd, 0);
    if (shared_memory == MAP_FAILED) {
        perror("mmap");
        return 1;
    }

    // 读取共享内存段中的数据
    printf("Data read from shared memory: %s\n", shared_memory);

    // 解除文件的映射
    if (munmap(shared_memory, 1024) == -1) {
        perror("munmap");
        return 1;
    }

    // 关闭文件
    close(fd);

    return 0;
}

这个例子中,我们打开了一个名为"shared_memory"的文件,并将其映射到进程的虚拟地址空间中。然后,我们读取了共享内存段中的数据,并解除了文件的映射。

两个进程间进行通信:

首先,进程A创建一个共享内存段,并将其映射到自己的虚拟地址空间中:

#include 
#include 
#include 
#include 
#include 

int main() {
    int fd;
    char *shared_memory;
    const char *message = "Hello from Process A!";

    // 创建或打开一个文件
    fd = open("shared_memory", O_CREAT | O_RDWR, 0666);
    if (fd == -1) {
        perror("open");
        return 1;
    }

    // 调整文件的大小
    if (ftruncate(fd, 1024) == -1) {
        perror("ftruncate");
        return 1;
    }

    // 将文件映射到进程的虚拟地址空间中
    shared_memory = (char *)mmap(NULL, 1024, PROT_READ | PROT_WRITE, MAP_SHARED, fd, 0);
    if (shared_memory == MAP_FAILED) {
        perror("mmap");
        return 1;
    }

    // 写入数据到共享内存段
    strcpy(shared_memory, message);

    // 解除文件的映射
    if (munmap(shared_memory, 1024) == -1) {
        perror("munmap");
        return 1;
    }

    // 关闭文件
    close(fd);

    return 0;
}

然后,进程B打开同一个共享内存段,并将其映射到自己的虚拟地址空间中:

#include 
#include 
#include 
#include 

int main() {
    int fd;
    char *shared_memory;

    // 打开文件
    fd = open("shared_memory", O_RDWR);
    if (fd == -1) {
        perror("open");
        return 1;
    }

    // 将文件映射到进程的虚拟地址空间中
    shared_memory = (char *)mmap(NULL, 1024, PROT_READ | PROT_WRITE, MAP_SHARED, fd, 0);
    if (shared_memory == MAP_FAILED) {
        perror("mmap");
        return 1;
    }

    // 读取共享内存段中的数据
    printf("Data read from shared memory: %s\n", shared_memory);

    // 解除文件的映射
    if (munmap(shared_memory, 1024) == -1) {
        perror("munmap");
        return 1;
    }

    // 关闭文件
    close(fd);

    return 0;
}

在上面的例子中,进程A创建了一个共享内存段,并写入了数据"Hello from Process A!"。进程B打开了同一个共享内存段,并读取了进程A写入的数据。

3.2 munmap

3.2.1 函数原型、参数及返回值

munmap函数用于解除对映射区域的映射。

函数原型如下:

int munmap(void *addr, size_t length);

参数:

  1. addr参数:

    • 指向要解除映射的起始地址。
    • 通常是通过mmap函数返回的映射区域的指针。
  2. length参数:

    • 要解除映射的长度。
    • 通常是通过mmap函数传入的映射区域的长度。

返回值:

munmap函数的返回值为0表示成功,-1表示失败,并设置errno来指示错误的原因。

3.2.2 注意事项

  • addr参数必须是一个有效的映射区域的起始地址,否则解除映射会失败。
  • length参数必须与原始映射时使用的长度一致,否则解除映射会失败。
  • 解除映射后,之前映射的内存区域将不再可访问,对该区域的访问将导致段错误。
  • 解除映射后,如果之前使用了MAP_SHARED标志,并且有其他进程仍在访问该映射区域,可能会导致意想不到的结果。
  • 解除映射后,如果之前使用了MAP_ANONYMOUS标志,并且没有保存映射区域的指针,将无法再次访问该映射区域。

在使用munmap函数时,需要确保解除映射的时机和范围是正确的,避免出现内存泄漏或者访问非法内存的情况。

3.2.3 函数示例

下面是一个使用munmap函数解除映射的示例:

#include 
#include 
#include 

int main() {
    int *data;
    size_t length = sizeof(int) * 10;

    // 使用mmap函数创建映射区域
    data = mmap(NULL, length, PROT_READ | PROT_WRITE, MAP_SHARED | MAP_ANONYMOUS, -1, 0);
    if (data == MAP_FAILED) {
        perror("mmap");
        exit(1);
    }

    // 在映射区域中写入数据
    for (int i = 0; i < 10; i++) {
        data[i] = i;
    }

    // 解除映射
    if (munmap(data, length) == -1) {
        perror("munmap");
        exit(1);
    }

    // 尝试访问解除映射的内存区域
    printf("%d\n", data[0]);  // 该行代码将导致段错误

    return 0;
}

在这个示例中,首先使用mmap函数创建了一个大小为10个int的映射区域,并将其保存在data指针中。然后,通过循环将0到9的数字写入映射区域。接下来,使用munmap函数解除对映射区域的映射。最后,尝试访问解除映射的内存区域,这会导致段错误。

4. 父子进程mmap通信

4.1 具体步骤如下:

  1. 父进程创建一个共享内存区域,可以使用shm_open函数创建一个具名的共享内存对象,也可以使用mmap函数将一个文件映射到内存中。

  2. 父进程使用fork函数创建子进程。

  3. 子进程通过继承父进程的共享内存的描述符或者文件映射的地址,可以直接访问共享内存。

  4. 父子进程可以通过共享内存进行通信,可以在共享内存中定义一个数据结构,父进程和子进程通过读写该数据结构来进行通信。

  5. 父子进程需要使用同步机制(例如信号量、互斥锁等)来确保对共享内存的访问是安全的,避免竞争条件和数据不一致的问题。

  6. 当通信完成后,父进程和子进程需要使用munmap函数解除对共享内存的映射,以释放资源。

4.2 示例

父子进程通过共享内存进行通信:

#include 
#include 
#include 
#include 
#include 

typedef struct {
    int value;
} SharedData;

int main() {
    int fd = shm_open("/myshm", O_CREAT | O_RDWR, 0666);
    ftruncate(fd, sizeof(SharedData));

    SharedData* sharedData = mmap(NULL, sizeof(SharedData), PROT_READ | PROT_WRITE, MAP_SHARED, fd, 0);
    close(fd);

    pid_t pid = fork();
    if (pid == 0) {
        // 子进程
        printf("Child process: value = %d\n", sharedData->value);
        sharedData->value = 100;
        printf("Child process: value = %d\n", sharedData->value);
        exit(0);
    } else if (pid > 0) {
        // 父进程
        sharedData->value = 50;
        printf("Parent process: value = %d\n", sharedData->value);
        wait(NULL);
        printf("Parent process: value = %d\n", sharedData->value);

        munmap(sharedData, sizeof(SharedData));
        shm_unlink("/myshm");
    } else {
        perror("fork");
        exit(1);
    }

    return 0;
}

4.3 代码解释

在这个示例中,首先使用shm_open函数创建了一个具名的共享内存对象,并设置了其大小为SharedData结构体的大小。然后,使用mmap函数将共享内存映射到内存中,并获取到共享内存的地址。接下来,使用fork函数创建子进程。

在子进程中,首先打印共享内存中的value值,然后将其修改为100,并再次打印。在父进程中,首先将共享内存中的value值设置为50,然后等待子进程退出。最后,打印共享内存中的value值,然后使用munmap函数解除对共享内存的映射,并使用shm_unlink函数删除共享内存对象。

5. 非血缘关系进程间mmap通信

5.1 具体步骤如下:

  1. 创建一个共享内存区域,可以使用shm_open函数创建一个具名的共享内存对象,也可以使用mmap函数将一个文件映射到内存中。

  2. 所有需要通信的进程都使用shm_open或者mmap函数打开或者映射同一个共享内存对象。

  3. 进程通过共享内存进行通信,可以在共享内存中定义一个数据结构,进程通过读写该数据结构来进行通信。

  4. 进程需要使用同步机制(例如信号量、互斥锁等)来确保对共享内存的访问是安全的,避免竞争条件和数据不一致的问题。

  5. 当通信完成后,进程需要使用munmap函数解除对共享内存的映射,以及shm_unlink函数删除共享内存对象。

5.2 示例

无血缘关系的进程通过共享内存进行通信:

#include 
#include 
#include 
#include 
#include 
#include 

typedef struct {
    int value;
} SharedData;

int main() {
    int fd = shm_open("/myshm", O_CREAT | O_RDWR, 0666);
    ftruncate(fd, sizeof(SharedData));

    SharedData* sharedData = mmap(NULL, sizeof(SharedData), PROT_READ | PROT_WRITE, MAP_SHARED, fd, 0);
    close(fd);

    pid_t pid = fork();
    if (pid == 0) {
        // 子进程
        printf("Child process: value = %d\n", sharedData->value);
        sharedData->value = 100;
        printf("Child process: value = %d\n", sharedData->value);
        exit(0);
    } else if (pid > 0) {
        // 父进程
        sharedData->value = 50;
        printf("Parent process: value = %d\n", sharedData->value);
        wait(NULL);
        printf("Parent process: value = %d\n", sharedData->value);

        munmap(sharedData, sizeof(SharedData));
        shm_unlink("/myshm");
    } else {
        perror("fork");
        exit(1);
    }

    return 0;
}

5.3 代码解释

这个示例与前面的父子进程间mmap通信的示例类似,但是在这里我们使用了具名的共享内存对象。无血缘关系的进程通过打开或者映射同一个具名的共享内存对象,实现了共享内存的通信。其他的步骤和前面的示例相同。

需要注意的是,在无血缘关系的进程间通信时,需要确保共享内存对象的创建和打开的顺序是一致的,以及共享内存的大小和数据结构的定义是一致的。此外,还需要使用适当的同步机制来确保对共享内存的访问是安全的。

6. 结语

共享内存是一种用于进程间通信的机制,它允许多个进程访问同一块内存区域,从而实现高效的数据共享。在使用共享内存进行进程间通信时,需要注意以下几个关键点:

  1. 创建共享内存:可以使用shm_open函数创建具名的共享内存对象,也可以使用mmap函数将一个文件映射到内存中。创建共享内存时需要指定大小。

  2. 访问共享内存:进程通过mmap函数将共享内存映射到自己的地址空间中,从而可以直接读写共享内存中的数据。需要注意保证共享内存对象的创建和打开的顺序一致。

  3. 同步机制:由于多个进程同时访问共享内存可能会导致竞争条件和数据不一致的问题,因此需要使用适当的同步机制来确保对共享内存的访问是安全的。常用的同步机制包括信号量、互斥锁、条件变量等。

  4. 解除映射和删除共享内存:当通信完成后,进程需要使用munmap函数解除对共享内存的映射,以及使用shm_unlink函数删除共享内存对象。

需要注意的是,使用共享内存进行进程间通信需要考虑同步和数据一致性的问题。在实际使用中,还需要根据具体需求进行适当的修改和扩展,以确保通信的正确性和可靠性。

常用的函数和系统调用包括:

  • shm_open:创建或打开具名的共享内存对象。
  • ftruncate:设置共享内存的大小。
  • mmap:将共享内存映射到进程的地址空间中。
  • munmap:解除对共享内存的映射。
  • shm_unlink:删除具名的共享内存对象。

此外,还可以使用其他的同步机制函数,如sem_init、sem_wait、sem_post等来实现对共享内存的同步访问。

你可能感兴趣的:(操作系统,linux,java,服务器)