当前位置:首页 > 文章列表 > 文章 > linux > LinuxIPC详解:匿名管道、命名管道与共享内存

LinuxIPC详解:匿名管道、命名管道与共享内存

2025-05-06 19:48:57 0浏览 收藏

在Linux系统中,进程间通信(IPC)是实现进程间数据交换的重要机制。本文详细介绍了三种常见的IPC方式:匿名管道、命名管道和共享内存。匿名管道通过内核缓冲区实现父子进程间的通信,适用于具有血缘关系的进程。命名管道则通过文件系统路径允许任意进程间通信,具有路径和文件名的唯一性。共享内存作为最快的IPC形式,通过映射同一块物理内存实现进程间的高效数据传递,但需要用户自行管理同步和互斥。本文通过代码示例和详细解释,帮助读者深入理解这些IPC机制的原理和应用。

1、管道

我们了解到进程是独立的,但有时进程间需要进行通信。那么,如何实现进程间的通信呢?

进程间通过文件的内核缓冲区实现资源共享,这个过程无需磁盘参与,因此设计了一种内存级的文件来专门实现进程间通信,这种内存级文件就是管道。管道是什么?

管道是Unix中最古老的进程间通信形式,从一个进程连接到另一个进程的数据流称为“管道”。管道的原理:

【Linux】IPC:匿名管道、命名管道、共享内存必须先打开文件,然后创建子进程,不能先创建子进程再打开文件。这个过程利用的是子进程会继承父进程相关资源的特性。

为什么父进程在打开文件时必须以“读写”方式打开,不能只读或只写?因为父进程打开文件,创建子进程后,父子进程必须有一个写,一个读,不能两个都读或两个都写。管道不需要路径,也就不需要名字,所以称为匿名管道。

【Linux】IPC:匿名管道、命名管道、共享内存上面的操作只是让父子进程看到了同一份资源,但还没有实现通信。这个内存资源由操作系统提供,因此进程间通信也应通过操作系统实现,即调用系统调用。

#include 
#include 
#include 
#include 
using namespace std;
int main(){
    //1、创建管道
    int fds[2] = {0};
    int n = pipe(fds);
    if (n != 0)
    {
        cerr << "pipe error" << endl;
        return -1;
    }
    //2、创建子进程
    pid_t id = fork();
    if (id < 0)
    {
        cerr << "fork error" << endl;
        return -1;
    }
    else if (id == 0)
    {
        //子进程
        //3、关闭不需要的fd
        close(fds[0]);//0是读
        int cnt = 0;
        while (true)
        {
            string message = "hello world, hello ";
            message += to_string(getpid());
            message += ", ";
            message += to_string(cnt++);
            write(fds[1], message.c_str(), message.size());
            sleep(1);
        }
        exit(0);
    }
    else
    {
        //父进程
        close(fds[1]);//1是写
        char buffer[1024];
        while (true)
        {
            ssize_t n = read(fds[0], buffer, 1024);
            if (n > 0)
            {
                buffer[n] = 0;
                cout << "father, message: " << buffer << endl;
            }
        }
    }
    return 0;
}

子进程写,父进程读。看待父子进程就像看待文件一样。在上面子进程sleep的过程中,父进程在做什么呢?在阻塞等待。父进程在读完子进程的数据后,操作系统就不让父进程读了,让其进入阻塞状态,等待子进程再次写入。这是为了保护共享资源,防止子进程写了一半父进程就读,或者父进程读了一半子进程就写。这个过程是管道内部自动完成的。

现象:

管道为空且管道正常,read会阻塞(read是一个系统调用)。管道为满(管道资源是有限的)且管道正常,write会阻塞。管道写端关闭且读端继续,读端读到0,表示读到文件结尾。管道读端关闭且写端继续,操作系统会终止写入的进程。

【Linux】IPC:匿名管道、命名管道、共享内存特性:

面向字节流。不关心对面是如何写的,按需读取。用来进行具有血缘关系的进程进行IPC,常用于父子进程。文件的生命周期随进程,管道也是。单向数据通信。管道自带同步互斥等保护机制。


2、进程池退出

当关闭写端,读端读到0,表示读到文件结尾,则结束进程。即将父进程所有的读端关闭,则相应的子进程就会结束,最后再由父进程等待回收。

void CleanProcessPool(){
    //virsion1
    for (auto &c : _channels)
    {
        c.Close();
    }
    for (auto &c : _channels)
    {
        pid_t rid = waitpid(c.GetId(), nullptr, 0);
        if (rid > 0)
        {
            cout << "child " << rid << " exit" << endl;
        }
    }
}

为什么要分开关闭读端和等待子进程,不能关一个等一个吗?

【Linux】IPC:匿名管道、命名管道、共享内存根据上面的分析,所有的子进程的file_struct都会指向第一个管道,越往后的子进程指向的管道越多。所以我们只是把masterfile_struct中指向管道关闭,这个管道还有其他子进程的file_struct指向,因此读端不会读到0,子进程不会退出,就会一直阻塞。解决这个问题有两种办法:

1、倒着关闭 因为通过分析可知,越早创建的管道指向越多,最后一个管道只被指向一次,只要将最后一个进程关闭,则前面的所有管道被指向都会少1,因此倒着关闭就不会出现阻塞的问题。

//virsion2
for (int i = _channels.size()-1; i >= 0; i--)
{
    _channels[i].Close();
    pid_t rid = waitpid(_channels[i].GetId(), nullptr, 0);
    if (rid > 0)
    {
        cout << "child " << rid << " exit" << endl;
    }
}

2、在子进程中关闭所有历史fd 因为父进程的3号文件描述符总为空,子进程只有3号文件描述符指向管道。在这之前子进程继承父进程对之前的管道的指向,所以只需要在子进程中把这些指向全部关掉就行。

【Linux】IPC:匿名管道、命名管道、共享内存

// 3、建立通信信道
if (id == 0)
{
    //关闭历史fd
    for (auto &c : _channels)
    {
        c.Close();
    }
    // 子进程
    //close(pipefd[1]);
    //dup2(pipefd[0], 0); // 子进程从标准输入读取
    //_work();
    //exit(0);
}

3、命名管道

我们知道,匿名管道的原理是让父子进程看到同一份资源,而父子进程看到同一份资源,是因为子进程继承了父进程的资源。所以不难得出,匿名管道两端必须是父子进程。而如果我们想在任意进程之间建立管道呢?首先可以肯定的是这任意两个进程之间也要能看到同一份资源,因为是任意进程之间,所以这个资源不能继承而来,因此就牵扯出了命名管道。

【Linux】IPC:匿名管道、命名管道、共享内存【Linux】IPC:匿名管道、命名管道、共享内存命名管道的原理:为什么叫做命名管道,因为有名字,是真实存在的文件,既然是真实存在的文件,就一定有路径+文件名,而路径+文件名具有唯一性。这样不同的进程可以用同一个文件系统路径标志同一个资源,也就是不同的进程看到了同一个资源。命名管道和普通文件的区别:这么看来命名管道和普通文件好像除了创建方式不同外也没多大区别,而普通文件好像也能实现进程间通信,但是普通文件有两个问题,我们往普通文件中写入的数据会被刷新到磁盘中保存,另外普通文件也没有被特殊保护,也就是我们可以往里写大量的数据,在写的过程中也有可能被其他进程读,这两个问题是命名管道需要重点处理的,所以命名管道和普通文件有很大的区别,是特殊设计的。这个命名管道,该由谁创建?公共资源:一般要让指定的一个进程现行创建。一个进程创建&&使用,另一个进程获取&&使用。


4、共享内存

共享内存区是最快的IPC形式。一旦这样的内存映射到共享它的进程的地址空间,这些进程间数据传递不再涉及到内核,换句话说是进程不再通过执行进入内核的系统调用来传递彼此的数据。

【Linux】IPC:匿名管道、命名管道、共享内存共享内存 = 共享内存的内核数据结构 + 内存块。让两个进程通过各自的虚拟地址空间,映射同一块物理内存,叫做共享内存。共享内存的本质还是让不同的进程看到同一个资源。

【Linux】IPC:匿名管道、命名管道、共享内存IPC_CEEAT:单独使用,如果shm不存在则创建,如果存在则获取。保证调用进程就能拿到共享内存。IPC_CEEAT | IPC_EXCL:组合使用,如果不存在则创建,如果存在则返回错误。只要成功,一定是新的共享内存。key为什么必须要用户传入,为什么内核自己不生成?

任意进程间是独立的,由某一个进程内生成key,其他的进程是拿不到的。理论上用户可以随意设置key,只要保证不冲突就可,为了保证key的唯一性有函数来减小冲突的概率。

【Linux】IPC:匿名管道、命名管道、共享内存定义全局的key,让进程间通过绝对路径都能看到,由某个进程设置进内核中,则其他进程也能够得到。所以在应用层面,不同进程看到同一份共享内存是通过唯一路径+项目ID来确定的,类似命名管道也是通过文件路径+文件名来确定的。

【Linux】IPC:匿名管道、命名管道、共享内存在OS看来,由shmget函数创建的共享内存是OS创建的,所以共享内存的生命周期随内核。和文件不同,文件的生命周期随进程。所以共享内存一旦创建出来,要么由用户主动释放,要么OS重启。

共享内存的管理指令:

ipcs -m:查看共享内存信息ipcrm -m shmid:删除共享内存shmid VS key:

shmid:仅供用户使用的shm标识符(类似文件描述符fd)key:仅供内核区分不同shm唯一性的标识符(类似文件地址)除了指令删除shm,还可以通过函数删除:

【Linux】IPC:匿名管道、命名管道、共享内存共享内存也有权限。

| 共享内存的特点:

不需要调用系统调用,通信速度快。让两个进程在各自的用户空间共享内存块,是真正的共享资源,但是不像管道,共享内存没有任何保护。共享内存的保护机制,需要用户自己完成。

【Linux】IPC:匿名管道、命名管道、共享内存本篇文章的分享就到这里了,如果您觉得在本文有所收获,还请留下您的三连支持哦~

好了,本文到此结束,带大家了解了《LinuxIPC详解:匿名管道、命名管道与共享内存》,希望本文对你有所帮助!关注golang学习网公众号,给大家分享更多文章知识!

MySQL建表详细步骤与实战攻略MySQL建表详细步骤与实战攻略
上一篇
MySQL建表详细步骤与实战攻略
Redis启动指定配置文件的详细攻略
下一篇
Redis启动指定配置文件的详细攻略
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    542次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    508次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    497次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    484次学习
查看更多
AI推荐
  • AI Make Song:零门槛AI音乐创作平台,助你轻松制作个性化音乐
    AI Make Song
    AI Make Song是一款革命性的AI音乐生成平台,提供文本和歌词转音乐的双模式输入,支持多语言及商业友好版权体系。无论你是音乐爱好者、内容创作者还是广告从业者,都能在这里实现“用文字创造音乐”的梦想。平台已生成超百万首原创音乐,覆盖全球20个国家,用户满意度高达95%。
    26次使用
  • SongGenerator.io:零门槛AI音乐生成器,快速创作高质量音乐
    SongGenerator
    探索SongGenerator.io,零门槛、全免费的AI音乐生成器。无需注册,通过简单文本输入即可生成多风格音乐,适用于内容创作者、音乐爱好者和教育工作者。日均生成量超10万次,全球50国家用户信赖。
    21次使用
  •  BeArt AI换脸:免费在线工具,轻松实现照片、视频、GIF换脸
    BeArt AI换脸
    探索BeArt AI换脸工具,免费在线使用,无需下载软件,即可对照片、视频和GIF进行高质量换脸。体验快速、流畅、无水印的换脸效果,适用于娱乐创作、影视制作、广告营销等多种场景。
    23次使用
  • SEO标题协启动:AI驱动的智能对话与内容生成平台 - 提升创作效率
    协启动
    SEO摘要协启动(XieQiDong Chatbot)是由深圳协启动传媒有限公司运营的AI智能服务平台,提供多模型支持的对话服务、文档处理和图像生成工具,旨在提升用户内容创作与信息处理效率。平台支持订阅制付费,适合个人及企业用户,满足日常聊天、文案生成、学习辅助等需求。
    22次使用
  • Brev AI:零注册门槛的全功能免费AI音乐创作平台
    Brev AI
    探索Brev AI,一个无需注册即可免费使用的AI音乐创作平台,提供多功能工具如音乐生成、去人声、歌词创作等,适用于内容创作、商业配乐和个人创作,满足您的音乐需求。
    24次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码