备案控制台
探索云世界
开发者社区 开发与运维 文章 正文

【操作系统】进程间的通信——管道

2022-08-23 137
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 【操作系统】进程间的通信——管道

进程间的通信—管道

管道

  • 进程间的通信(IPC-Inter-Process Communication)有多种方式，管道是其中最基本的方式。
  • 管道是半双工的，即是单向的。
  • 管道是FIFO(先进先出)的。
  • 在实际的多进程间通信时，可以理解为有一条管道，而每个进程都有两个可以使用管道的"端口"，分别负责进行数据的读取与发送。
  • 单进程中的管道:int fd[2]
  • 使用文件描述符fd[1],向管道写数据。
  • 使用文件描述符fd[0],从管道中读数据。

image-20220822185029945

  • 注意:
  • 单进程中的管道无实际用处，管道用于多进程间通信。

管道的创建

  • 函数原型: int pipe(int pipefd[2]);
  • 返回值:
  • 成功:返回0。
  • 失败:返回-1。
  • 注意:
  • 获取两个"文件描述符"，分别对应管道的读端和写端。
  • fd[0]:为管道的读端；
  • fd[1]:为管道的写端；
  • 如果对fd[0]进行写操作，对fd[1]进行读操作，可能会导致不可预期的错误。

管道的使用

实例1: 单进程使用管道进行通信

  • 注意：创建管道后，获得该管道的两个文件描述符，不需要使用普通文件操作中的open操作。如下图所示:

image-20220822203119551

#include <stdlib.h>
#include <stdio.h>
#include <string.h>

int main(void) 
{
    int fd[2];
    int ret;
    char buff1[1024];
    char buff2[1024];

    ret = pipe(fd);
    if (ret !=0) {
        printf("create pipe failed!\n");
        exit(1);
    }

    strcpy(buff1, "Hello!");
    write(fd[1], buff1, strlen(buff1)); //写进去一个hello
    printf("send information:%s\n", buff1);

    bzero(buff2, sizeof(buff2));
    read(fd[0], buff2, sizeof(buff2));//读出来hello
    printf("received information:%s\n", buff2);

    return 0;    
}

image-20220822203519377

实例2: 多进程使用管道进行通信

  • 注意:创建管道之后，再创建子进程，此时一共有4个文件描述符，4个端口，父子进程分别有一个读端口和一个写端口，如下图所示:

image-20220822203843540

#include <stdlib.h>
#include <stdio.h>
#include <string.h>

int main(void) 
{
    int fd[2];
    int ret;
    char buff1[1024];
    char buff2[1024];
    pid_t pd;

    ret = pipe(fd);
    if (ret !=0) {
        printf("create pipe failed!\n");
        exit(1);
    }

    pd = fork();
    if (pd == -1) {
        printf("fork error!\n");
        exit(1);
    } else if (pd == 0) {
        //子进程先读在写
        bzero(buff2, sizeof(buff2));
        read(fd[0], buff2, sizeof(buff2));//read在没收到数据时会阻塞
        printf("process(%d) received information:%s,buff2's address:%p\n", getpid(), buff2,buff2);
        
        sleep(5);
        strcpy(buff1, "Hello Dad!");
        write(fd[1], buff1, strlen(buff1)); 

    } else {
        //父进程先写再读
        strcpy(buff1, "Hello Kid");
        write(fd[1], buff1, strlen(buff1)); 
        sleep(5);
        
        bzero(buff2, sizeof(buff2));
        read(fd[0], buff2, sizeof(buff2));
        printf("process(%d) received information:%s,buff2's address:%p\n", getpid(), buff2,buff2);

    }

    if (pd > 0) {
        wait();
    }
    return 0;    
}

image-20220823084848178

  • 注意： 可以看到，我们在父子进程中都打印了buff2的地址，发现打印出来的(虚拟)地址是相同的，但是，内容却不一样，一个是hello kid，一个是hello dad,实际上，是两个不同的地址。
  • 在调用fork()函数创建子进程后，子进程会将父进程的所有资源都复制一遍。

实例3: 子进程使用execl启动新程序时管道的使用

  • 功能详情:有两个程序p1与p2，二者使用管道进行通信，p1给p2发送一个字符，p2收到后打印到屏幕上。

  • 具体操作流程:

    • p1

      • 创建管道。
      • 创建子进程。
      • 在子进程中使用execl()函数，将子进程替换为程序p2。(在使用execl函数时，把管道的读端作为的参数。)
      • 在父进程中，通过管道给子进程发送字符串。

    • p2

      • 从参数中获取管道的读端(参数即p2的main函数的参数)。
      • 读管道。
      • 将读取到的字符串打印出来。
  • execl()函数原型
int execl(const char *path, const char *arg, ...);

当进程调用一种exec函数时，该进程完全由新程序代换，而新程序则从其main函数开始执行。因为调用exec并不创建新进程，所以前后的进程ID并未改变。exec只是用另一个新程序替换了当前进程的正文、数据、堆和栈段。

  • main函数参数中的argc与argv——【C++】main函数的参数 argc 和 argv

    • argc：是argument count 的缩写，保存运行时传递给main函数的参数个数。
    • argv：是argument vector 的缩写，保存运行时传递main函数的参数，类型是一个字符指针数组，每个元素是一个字符指针，指向一个命令行参数。
  • 示例：

main3.c

#include <unistd.h>
#include <stdlib.h>
#include <stdio.h>
#include <string.h>

int main(void) {
    int fd[2];
    int ret;
    char buff1[1024];
    char buff2[1024];
    pid_t pd;

    ret = pipe(fd);
    if (ret !=0) {
        printf("create pipe failed!\n");
        exit(1);
    }

    pd = fork();
    if (pd == -1) {
        printf("fork error!\n");
        exit(1);
    } else if (pd == 0) {
        //bzero(buff2, sizeof(buff2));
        sprintf(buff2, "%d", fd[0]);//读
        execl("main3_2", "main3_2", buff2, 0);//子进程被main3_2这个程序取代了
        
        printf("execl error!\n");
        exit(1);
    } else {
        strcpy(buff1, "Hello!");
        write(fd[1], buff1, strlen(buff1)); //写
        printf("process(%d) send information:%s\n", getpid(), buff1);
    }

    if (pd > 0) {
        wait();
    }
    
    return 0;    
}

main3_2.c

#include <unistd.h>
#include <stdlib.h>
#include <stdio.h>
#include <string.h>

int main(int argc, char* argv[]) 
{
    int fd;
    char buff[1024] = {0,};

    sscanf(argv[1], "%d", &fd);
    read(fd, buff, sizeof(buff));

    printf("Process(%d) received information:%s\n",  getpid(), buff);    
    return 0;    
}

image-20220823102608188

实例4: 关闭管道的读端/写端

  • 注意:以下所有情况在两个进程下，即一个主进程+一个子进程。

小示例1:主进程关闭写进程后，无法给子进程使用管道发送数据，此时子进程使用read函数进行数据的读取，如果 没有数据可读，则会进行阻塞，代码&结果如下所示:

  • 解释:主进程循环5次，给子进程发送数据。5次之后之后，子进程便无法收到来自于主进程的数据,read()开始阻塞。
#include <stdlib.h>
#include <stdio.h>
#include <string.h>

int main(void) {
    int fd[2];
    int ret;
    char buff1[1024];
    char buff2[1024];
    pid_t pd;

    ret = pipe(fd);
    if (ret !=0) {
        printf("create pipe failed!\n");
        exit(1);
    }

    pd = fork();
    if (pd == -1) {
        printf("fork error!\n");
        exit(1);
    } else if (pd == 0) {
        for(;;){
            bzero(buff2, sizeof(buff2));
            sleep(3);
            read(fd[0], buff2, sizeof(buff2));
            printf("process(%d) received information:%s\n", getpid(), buff2);
        }
    } else {
        for(int i = 0;i<5;i++){
            strcpy(buff1, "Hello!");
            write(fd[1], buff1, strlen(buff1));
            sleep(3);
            printf("process(%d) send information:%s\n", getpid(), buff1);
        }
    }

    if (pd > 0) {
        wait();
    }
    
    return 0;    
}

image-20220823113611581

小示例2:管道间是" 共享的"，个人理解。注意，实际上， 并不是同一个内存地址。

在读取数据时，管道读端的数据会越读越少，而在写入数据时，写入的数据会累加，添加到尾部。

如下所示，

#include <stdlib.h>
#include <stdio.h>
#include <string.h>

int main(void) {
    int fd[2];
    int ret;
    char buff1[1024];
    char buff2[1024];
    pid_t pd;

    ret = pipe(fd);
    if (ret !=0) {
        printf("create pipe failed!\n");
        exit(1);
    }

    pd = fork();
    if (pd == -1) {
        printf("fork error!\n");
        exit(1);
    } else if (pd == 0) {
        for(;;){
            bzero(buff2, sizeof(buff2));
            sleep(3);
            strcpy(buff1, "Dad!");    
            //子进程写数据
            write(fd[1], buff1, strlen(buff1));
        }
    } else {
        for(int i = 0;i<5;i++){
            bzero(buff2, sizeof(buff2));
            strcpy(buff1, "Hello!");   
            //父进程写数据
            write(fd[1], buff1, strlen(buff1));
            sleep(10);
            //父进程读数据
            read(fd[0], buff2, sizeof(buff2));
            printf("dad process(%d) received information:%s\n", getpid(), buff2);
            sleep(3);
        }
    }

    if (pd > 0) {
        wait();
    }
    
    return 0;    
}

image-20220823160151186

  • 总结:

    • 没有数据可读后read会阻塞。

      • 例如:有两个进程，主进程给子进程发送数据，主进程的写端关闭了，无法给子进程再发送数据，那么子进程的read将会阻塞。
    • 关闭写端后，write并不会阻塞。这里要说明的是，不关闭写端，write也不会阻塞。
    • 关闭读端后，read就不会阻塞了。
    • 以上的关闭都是对一个进程而言，每一个进程既有写端也有读端。
    • 如果有多个进程，将每个进程的写端都关闭了，read()也将不会阻塞。

  • 小提示:

    • 为了避免不必要的麻烦,例如没有可读数据时read函数的阻塞，我们可以将没用的管道端口关闭。
    • 例如：如果主进程只负责写数据，子进程只负责读数据，可以将父进程的读端关闭，将子进程的写端关闭(当然要根据实际情况来),将这"4个端口"的管道,变成单向的"2个端口"的管道，如下图所示:
    • image-20220823162557110

实例5: 把管道作为标准输入和标准输出

把管道作为标准输入和标准输出的优点:

  • 子进程使用exec启动新进程时，就不需要再把管道的文件描述符传递给新程序了。
  • 可以标准输入(或标准输出)的程序。

实现流程:

  1. 使用dup复制文件描述符。
  2. 用exec启动新程序后，原进程中已打开的文件描述符扔保持打开。即可共享原进程中的文件描述符。

补充:

  • dup函数

    • 功能:使用dup函数复制一份原来的文件描述符所指向的内容，并且使用当前系统(进程)可使用的最小文件描述符。
    • 示例:先关闭标准输入文件描述符，然后就使用dup复制当前某一文件描述符，再关闭原来的文件描述符，即可完成文件描述符的替换。
    • 函数原型: int dup(int oldfd);

    • 返回值:

      • 成功:返回新的文件描述符。
      • 失败:返回-1,并设置errno。

  • execlp函数

main5.c

#include <unistd.h>
#include <stdlib.h>
#include <stdio.h>
#include <string.h>

int main(void) {
    int fd[2];
    int ret;
    char buff1[1024];
    char buff2[1024];
    pid_t pd;

    ret = pipe(fd);
    if (ret !=0) {
        printf("create pipe failed!\n");
        exit(1);
    }

    pd = fork();
    if (pd == -1) {
        printf("fork error!\n");
        exit(1);
    } else if (pd == 0) {
        //bzero(buff2, sizeof(buff2));
        //sprintf(buff2, "%d", fd[0]);
        close(fd[1]);

        close(0);//关闭标准输入文件描述符
        dup(fd[0]);//复制 fd[0] ，并且使用可用的最小的文件描述符作为此文件描述符
        //即，此子进程使用管道的读端替换标准输入文件描述符
        close(fd[0]);//关闭原来的读端
        
        execlp("./od.exe", "./od.exe", "-c", 0);
        //如果execlp执行成功，则下面不会执行
        printf("execl error!\n");
        exit(1);
    } else {
        close(fd[0]);//关闭读端
    
        //写
        strcpy(buff1, "Hello!");
        write(fd[1], buff1, strlen(buff1)); 
        printf("send...\n");
        close(fd[1]);//关闭写端
    }
    
    return 0;    
}

od.c

#include <stdio.h>
#include <stdlib.h>

int main(void){       
    int ret = 0;
    char buff[80] = {0,};
    
    //scanf从标准输入读——在本实例中，实际上从管道从来的
    ret = scanf("%s", buff);
    printf("[ret: %d]buff=%s\n", ret, buff);

    ret = scanf("%s", buff);
    printf("[ret: %d]buff=%s\n", ret, buff);//第二次scanf失败，返回-1
    return 0;
}

image-20220823170404331

使用popen/pclose

  • popen的作用:用于在两个进程之间传递数据：在程序A中使用popen调用程序B时，有两种用法:

    • 程序A读取程序B的输出(使用fread读取)；
    • 程序A发送数据给程序B，以作为程序B的标准输入(使用fwirte写入)。

  • 函数原型:FILE popen(const char command, const char *type);

    • 返回值:

      • 成功:返回FILE*(文件指针)。
      • 失败:返回空。

实例1:读取外部程序的输出

#include <stdio.h>
#include <stdlib.h>
#define BUFF_SIZE   1024

int main(void){
    FILE * file;
    char buff[BUFF_SIZE+1];
    int cnt;

    // system("ls -l > result.txt");
    file = popen("ls -l", "r");//以读的方式去读取ls -l这个程序输出的结果 
    if (!file) {//判断是否打开成功
        printf("fopen failed!\n");
        exit(1);
    }

    cnt = fread(buff, sizeof(char), BUFF_SIZE, file);//fread是从文件指针中读取
    if (cnt > 0) {
        buff[cnt] = '\0';
        printf("%s", buff);
    }    
    pclose(file);//关闭

    return 0;    
}

image-20220823174725877

实例2:把输出写到外部程序

main7.c

#include <stdio.h>
#include <stdlib.h>
#include <string.h>

#define BUFF_SIZE   1024

int main(void){
    FILE * file;
    char buff[BUFF_SIZE+1];
    int cnt;
    file = popen("./p2", "w");
    if (!file) {
        printf("fopen failed!\n");
        exit(1);
    }
    strcpy(buff, "hello world! i 'am 123456789testtest!!!");
    cnt = fwrite(buff, sizeof(char), strlen(buff), file);
    pclose(file);

    return 0;    
}

p2.c

#include <stdio.h>
#include <stdlib.h>
#include <string.h>

int main(int argc,char* argv[]){
    int fd;
    char buff[1024] =  {'\0'};

    int cnt = read(0,buff,sizeof(buff));
    if(cnt > 0)buff[cnt] = '\0';
    printf("receive: %s\n",buff);
    return 0;
}

image-20220823183047187

popen的原理

  • 先使用fork创建一个子进程，然后在子进程中使用exec执行指定外部程序，并返回一个文件指针(FILE*)给父进程。
  • 当使用"r"时，该FILE*指向外部进程的标准输出。
  • 当使用"w"时，该FILE*指向外部程序的标准输入。

popen的优缺点

  • 优点:可以使用shell扩展(比如命令中可以使用通配符)。使用方便。
  • 缺点:每调用一次popen，将要启动两个进程(shell和被指定的程序)。资源消耗大。
文章标签：
C++
Shell
Linux
关键词：
操作系统进程
操作系统通信
操作系统进程通信
半生瓜のblog
目录
相关文章
泡沫o0
|
30天前
|
消息中间件 存储 算法
【软件设计师备考 专题 】操作系统的内核（中断控制）、进程、线程概念
【软件设计师备考 专题 】操作系统的内核（中断控制）、进程、线程概念
泡沫o0
82 0
我不是游客20240119
|
25天前
|
资源调度 监控 算法
深入理解操作系统：进程管理与调度策略
本文旨在探讨操作系统中进程管理的核心概念及其实现机制，特别是进程调度策略对系统性能的影响。通过分析不同类型操作系统的进程调度算法，我们能够了解这些策略如何平衡响应时间、吞吐量和公平性等关键指标。文章首先介绍进程的基本概念和状态转换，随后深入讨论各种调度策略，如先来先服务（FCFS）、短作业优先（SJF）、轮转（RR）以及多级反馈队列（MLQ）。最后，文章将评估现代操作系统在面对多核处理器和虚拟化技术时，进程调度策略的创新趋势。
我不是游客20240119
24 4
杭电码农-NEO
|
1天前
|
Linux
【linux进程间通信(一)】匿名管道和命名管道
【linux进程间通信(一)】匿名管道和命名管道
杭电码农-NEO
11 3
天下无贼001
|
16天前
|
算法 Linux 调度
深入理解操作系统的进程调度策略
【4月更文挑战第8天】本文深入剖析了操作系统中的关键组成部分——进程调度策略。首先，我们定义了进程调度并解释了其在资源分配和系统性能中的作用。接着，探讨了几种经典的调度算法，包括先来先服务（FCFS）、短作业优先（SJF）以及多级反馈队列（MLQ）。通过比较这些算法的优缺点，本文揭示了它们在现实世界操作系统中的应用与局限性。最后，文章指出了未来进程调度策略可能的发展方向，特别是针对多核处理器和云计算环境的适应性。
天下无贼001
13 2
历年考试不作弊
|
17天前
|
算法 调度 UED
深入理解操作系统中的进程调度策略
【4月更文挑战第7天】 在多任务操作系统中，进程调度策略是决定系统性能和响应速度的关键因素之一。本文将探讨现代操作系统中常用的进程调度算法，包括先来先服务、短作业优先、轮转调度以及多级反馈队列等。通过比较各自的优势与局限性，我们旨在为读者提供一个全面的视角，以理解如何根据不同场景选择合适的调度策略，从而优化系统资源分配和提升用户体验。
历年考试不作弊
11 3
shuj
|
26天前
|
算法 Unix Linux
深入理解操作系统：进程管理与调度策略
在现代操作系统的核心功能中，进程管理及其调度机制是维护系统稳定与高效运行的基石。本文将深入探讨操作系统中的进程概念、进程状态、以及进程调度策略。我们将从理论和实践两个维度出发，解析不同操作系统如何通过进程管理来优化资源分配，提升系统响应速度，并保证多任务环境下的公平性与效率。特别地，文章还将讨论实时系统中的调度策略，以及它们对于确保关键任务按时完成的重要性。
shuj
14 1
请看我回答~
|
1月前
|
算法 调度 开发者
深入理解操作系统的进程调度策略
【2月更文挑战第30天】 在现代操作系统中，进程调度策略是其核心组成部分之一，关系到系统资源的合理分配和任务执行的高效性。本文将详细分析几种常见的进程调度算法，包括先来先服务（FCFS）、短作业优先（SJF）、轮转调度（RR）和多级反馈队列（MLFQ），并探讨它们在不同场景下的适用性和优缺点。通过对比分析，旨在帮助读者深入理解进程调度机制，以及在实际系统设计时如何根据需求选择合适的调度策略。
请看我回答~
19 0
请看我回答~
|
1月前
|
算法 大数据 Linux
深入理解操作系统之进程管理的艺术
【2月更文挑战第30天】 在现代计算机系统中，操作系统扮演着指挥官的角色，而进程管理则是其核心职能之一。本文旨在探讨操作系统中进程管理的关键技术和原理，以及它们如何影响系统性能和用户体验。文章将详细解析进程的概念、生命周期、调度算法及进程间的通信机制，并讨论当前操作系统如Linux和Windows在进程管理方面的创新策略。通过深入分析，本文揭示了高效进程管理对于提升操作系统响应速度和资源利用率的重要性。
请看我回答~
22 0
请看我回答~
|
1月前
|
机器学习/深度学习 算法 调度
深入理解操作系统中的进程调度策略
【2月更文挑战第30天】 本文聚焦于操作系统核心功能之一——进程调度，探究其背后的策略与影响性能的关键因素。不同于传统的摘要重述，我们将通过分析进程调度的复杂性、设计目标和不同调度算法的特点，来揭示操作系统如何在多任务环境中确保资源合理分配与系统响应效率。文章将详细讨论几种经典调度策略，并比较它们在不同应用场景下的表现和适用性。
请看我回答~
21 0
杭电码农-NEO
|
1天前
|
NoSQL Linux 程序员
【linux进程信号(一)】信号的概念以及产生信号的方式
【linux进程信号(一)】信号的概念以及产生信号的方式
杭电码农-NEO
15 4

热门文章

最新文章

  • 1
    阿里云服务器实例、CPU内存、带宽、操作系统选择参考
  • 2
    操作系统究竟是什么？在计算机体系中扮演什么角色？
  • 3
    面试题：Ctrl + C在不同操作系统下的应用
  • 4
    Linux设备树解析：桥接硬件与操作系统的关键架构
  • 5
    深入理解操作系统的内存管理机制
  • 6
    Linux操作系统调优相关工具(四)查看Network运行状态 和系统整体运行状态
  • 7
    深入理解操作系统的内存管理机制
  • 8
    探索现代操作系统中的虚拟内存管理
  • 9
    操作系统（1）——学习导论（Ⅲ）
  • 10
    Linux操作系统调优相关工具(三)查看IO运行状态相关工具 查看哪个磁盘或分区最繁忙？
  • 1
    【linux进程信号(一)】信号的概念以及产生信号的方式
    15
  • 2
    【linux进程间通信(一)】匿名管道和命名管道
    11
  • 3
    【linux进程控制(三)】进程程序替换--如何自己实现一个bash解释器?
    11
  • 4
    【linux进程(二)】如何创建子进程?--fork函数深度剖析
    5
  • 5
    【linux进程(一)】深入理解进程概念--什么是进程?PCB的底层是什么?
    7
  • 6
    Linux的学习之路：17、进程间通信（1）
    17
  • 7
    Linux的学习之路：9、冯诺依曼与进程（1）
    17
  • 8
    多ip多进程代理的实现方法
    20
  • 9
    Python多线程、多进程与协程面试题解析
    27
  • 10
    深入理解Linux内核的进程调度机制
    9

    • 相关课程

    更多
  • 操作系统学习
  • Linux操作系统实战
  • 高校精品课-西安电子科技大学 -操作系统课程设计
  • 服务器硬件基础

    • 相关电子书

    更多
  • 国产服务器操作系统发展报告（2023年）
  • 开放算力·云启未来
  • 服务上云加速大家居产业C2M进程

    • 相关实验场景

    更多
  • ECS操作系统无法登录诊断能力
  • ECS操作系统故障诊断能力
  • 基于Conditions在不同操作系统创建ECS
  • Alibaba Cloud Linux操作系统的安装及使用
  • 观察进程的并发性
  • Alibaba Cloud Linux操作系统Shell程序
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）