当前位置: 首页 > news >正文

Linux入门——08 进程间通讯——管道

1.进程间通讯

1.1什么是通讯

  • 进程具有独立性(每个进程都有自己的PCB,独立地址空间,页表)
  • 但是要进行进程的通信,通信的成本一定不低,打破了独立性

进程间通信目的

  • 数据传输:一个进程需要将它的数据发送给另一个进程
  • 资源共享:多个进程之间共享同样的资源。
  • 通知事件:一个进程需要向另一个或一组进程发送消息,通知它(它们)发生了某种事件(如进程终止时要通知父进程)。
  • 进程控制:有些进程希望完全控制另一个进程的执行(如Debug进程),此时控制进程希望能够拦截另一个进程的所有陷入和异常,并能够及时知道它的状态改变。

1.2为什么要有通讯

  • 有时候需要多进程协同,完成某种业务! cat file | grep 'hello' //管道

1.3如何进行进程间通讯

两种通信方式

  • System V进程间通信------聚焦在本地通信(共享内存,信号量,消息队列)(被主流排斥了)
  • POSIX进程间通信-------让通讯过程可以跨主机(消息队列,共享内存,信号量,互斥量,条件变量,读写锁)
  • 管道---------基于文件标准(匿名管道,命名管道)

1.3.1管道

管道是Unix中最古老的进程间通信的形式。我们把从一个进程连接到另一个进程的一个数据流称为一个“管道”

该如何理解通讯的本质?

要把一个进程的数据保留到一个地方,让 另一个进程去读取,这个地方必须要第三方提供,不能是进程,进程是具有独立性的。

第三方就是操作系统,直接或间接为进程通讯提供”内存空间“

要通讯的进程,必须想看到一份公共的资源(OS直接或间接提供)

不同的通讯种类

本质就是:上面所说的资源,是OS中的哪一个模块提供的!

如果i这个资源是文件体统提供的就叫这种通讯为管道

通讯的成本:

  • 1.把必须让不同的进程看到同一份资源
  • 2.然后通讯

任何一个文件都有自己的操作方法和属于自己的内核缓冲区(struct Page{}缓冲区)

此时我们再看父子进程,他们两个是不是共同看到了同一份资源。是由文件管理系统提供的。

父进程 向文件缓冲区内写入,子进程向文件缓冲区内读取(这就是一个进程向文件中写数据,另一个进程向文件中读数据)

我们把这种通过文件的方式完成进程间的通讯的方式叫管道,操作系统提的内核级文件称为管道文件(本质就是文件)。

具有缓冲区就是为了不让文件再写入磁盘,再让另一个进程去磁盘里面读取,这样效率太慢了,需要在磁盘内存在该文件,

可以直接让OS创建struct file,只需要struct file的地址填入进程描述符表中就可以了,然后父进程创建子进程,拷贝文件描述符表,父子进程就可以直接在内存中进行通讯。

得到管道是内存级文件(不需要磁盘刷新)

如何让两个进程看到同一个管道文件呢?

fork创建子进程完成的。父子进程使用同一个文件描述符表

1.3.2匿名管道

前面我们说的管道文件,没有名称,所以称为匿名管道!

(pipe)管道函数

创建成功返回0,失败返回-1

int pipe(int pipefd[2]);//pipefd[2] 为输出型参数
调用pipe的时候,操作系统内部,帮你打开对应的文件(读和写的方式,同一个文件打开两次,得到两个文件描述符),填充到你当前进程的文件描述符表中,
然后把文件描述符表中的对应数组下标传给pipefd[2],这样就以读和写的方式,分别打开了同一文件#include <iostream>
#include <unistd.h>
#include <cassert>
#include <sys/types.h>
#include <sys/wait.h>
#include <string>
#include <cstdio>
#include <cstring>int main()
{// 1.创建管道通讯int fds[2];int n = pipe(fds);assert(n == 0);std::cout << "fds[0]:" << fds[0] << std::endl;std::cout << "fds[1]:" << fds[1] << std::endl;// 父进程读取,子进程写入// 2.fork()pid_t id = fork();assert(id >= 0);if(id == 0) //子进程{//子进程的通讯//子进程关闭读的描述符[0]close(fds[0]);//string msg = "hello,i am child!";const char *s = "我是子进程,我正在给你发消息";int cnt = 0;while(true){char buffer[1024];//只有子进程能看到!snprintf(buffer,sizeof(buffer),"child->parent say:%s[%d][%d]",s,cnt,getpid());// snprintf(buffer,sizeof(buffer),"child->parent say:[%d][%d]",cnt,getpid());write(fds[1],buffer,strlen(buffer));  //不用+1,\0只是在C语言中,这是系统sleep(1);//细节,我每隔1s写一次cnt ++;}exit(0);}//父进程的通讯代码//父进程关闭写的描述符[1]close(fds[1]);while(true){char buffer[1024]; //只有父进程能看到//ssize_t s = read(fds[0],buffer,sizeof(buffer)-1); //把读到的数据当作字符串来处理//这里用sizeof(buffer)//read 函数返回的是读取的字节数,如果读取成功,则返回值大于 0。//在读取前,需要清空 buffer 数组,以避免读取到之前的残留数据。//在判断是否有数据可读时,你使用了 strlen(buffer)-1,这可能导致读取的数据长度为负数,//因为 buffer 数组未初始化。应该使用 sizeof(buffer)。if(s > 0) buffer[s] = 0; //主动添加反斜杠0std::cout << "Get Message#" << buffer <<" | My Pid:"<< getpid() <<std::endl;//细节:父进程没有sleep}n = waitpid(id,nullptr,0);assert(n == id);return 0;}
//谁读谁写
fds[0]:3   ---》下标0对应读取0对应嘴(读)
fds[1]:4   ---》下标1对应写入1对应笔(写)

管道的四种情况:
  • 读慢写快

在进程通讯的时候,故意让子进程写的慢,sleep了一下,但当sleep的时间变长的时候,父进程读取的时间也变长,

那么在父进程读取前的时间,他在干什么?他在读取,read是一种阻塞,如果管道中没有了数据,读端在读,默认会直接阻塞当前正在读取的进程

  • 读快写慢

相反 ,如果让子进程不sleep,父进程sleep(500);让子进程不断向管道中写,管道的总容量是有大小的,固定大小,

当写端向缓冲区写满的时候,写端会进入阻塞,等读端进行读取。缓冲区的数据不会被覆盖。

缓冲区的读写特点

当缓冲区有很多数据的时候,看似是一行一行写入,一行一行读取,其实是以二进制的形式指定大小进行读取

  • 写关闭,读端读到0也会关闭。

当子进程写一条消息,直接break,这时写端的文件描述符已经关闭,只有读端还在读。总会过一段时间,将管道内的数据读完。

当读到0个字符的时候,将读的管道也关闭,读是为写作服务的,没有了写,读也没有意义。

  • 读关闭,写就没有意义了,浪费资源,所以OS会给写进程发信号,终止写端!

1.3.3总结管道的特征

1.管道的生命周期进程就是进程的周期

2.管道可以用来进行具有血缘关系的进程之间的进程通信,常用于父子通讯。

3.管道是面向字节流的(网络部分)

4.半双工 ------ 单向通讯(特殊情况)

5.互斥与同步机制--------对共享资源进行保护的方案

1.4命名管道 两个没有血缘关系进程之间的通讯。

  • 命令行命令 mkfifo

mkfifo name_pipe

出现以p开头的文件管道,

这个文件的特点,可以一个进程进行写入,另一个进程从管道中读取

ls > named_pipe    //一个终端写

cat < named_pipe  //另一个终端读

这是命令行式的两进程之间的管道通讯.但是管道文件的内容大小为0

  • 当打开同一个文件两次,操作系统不会给我们创建两个struct file对象,而是公用一个对象。
  • 这时候向这个文件写,并不会保存到磁盘,而是在内存让另一个线程去读取,这不就是一个管道吗。

请问命名管道,让把不同的进程看到同一文件呢?

  • 让不同的进程,打开指定名称(路径+文件名(唯一性))的同一个文件。
  • 这就是命名管道的规则,可以通过名字来标志唯一性的。
  • 匿名管道是通过继承,继承地址,来保证唯一性的
  • mkfifo()函数创建有名管道

#include

#include

int mkfifo(constchar *filename, mode_t mode);

open(constchar *path, O_RDONLY);//1

open(constchar *path, O_RDONLY | O_NONBLOCK);//2

open(constchar *path, O_WRONLY);//3

open(constchar *path, O_WRONLY | O_NONBLOCK);//4

尽量使用阻塞方式打开

特点:

1有名管道可以使非亲缘的两个进程互相通信

2通过路径名来操作,在文件系统中可见,但内容存放在内存中

3 文件IO来操作有名管道

4 遵循先进先出规则

5 不支持leek操作

6 单工读写

注意事项:

1 程序不能以O_RDWR(读写)模式打开FIFO文件进行读写操作,而其行为也未明确定义,因为如一个管道以读/写方式打开,进程可以读回自己的输出,同时我们通常使用FIFO只是为了单向的数据传递

2 第二个参数中的选项O_NONBLOCK,选项O_NONBLOCK表示非阻塞,加上这个选项后,表示open调用是非阻塞的,如果没有这个选项,则表示open调用是阻塞的

3  对于以只读方式(O_RDONLY)打开的FIFO文件,如果open调用是阻塞的(即第二个参数为O_RDONLY),除非有一个进程以写方式打开同一个FIFO,否则它不会返回;如果open调用是非阻塞的的(即第二个参数为O_RDONLY | O_NONBLOCK),则即使没有其他进程以写方式打开同一个FIFO文件,open调用将成功并立即返回。

对于以只写方式(O_WRONLY)打开的FIFO文件,如果open调用是阻塞的(即第二个参数为O_WRONLY),open调用将被阻塞,直到有一个进程以只读方式打开同一个FIFO文件为止;如果open调用是非阻塞的(即第二个参数为O_WRONLY | O_NONBLOCK),open总会立即返回,但如果没有其他进程以只读方式打开同一个FIFO文件,open调用将返回-1,并且FIFO也不会被打开。

4.数据完整性,如果有多个进程写同一个管道,使用O_WRONLY方式打开管道,如果写入的数据长度小于等于PIPE_BUF(4K),那么或者写入全部字节,或者一个字节都不写入,系统就可以确保数据决不会交错在一起。

1.5实现命名管道的通讯

1.5.1comm.hpp

#ifndef COMM_HPP
#define COMM_HPP
#include <iostream>
#include <sys/types.h>
#include <sys/stat.h>
#include <string.h>
#include <cassert>
#include <cerrno>
#include <unistd.h>
#include <fcntl.h>#define NAMED_PIPE "/home/lin/Desktop/Linux_learn/named_pipe/mypipe.lin"bool creatFifo(const std::string &path)
{umask(0);int n = mkfifo(path.c_str(),0666);if(n == 0) return true;else{std::cout<< "errno:"<< errno << "err string:" << strerror(errno) << std::endl;return false;}
}void removeFifo(const std::string &path)
{int n = unlink(path.c_str());//assert不要乱用,意料之中用assert,意料之外用if判断assert(n == 0);  //debbug时是有效的,release的时候就没有了。//如果在release的时候,这个n就没有被使用,会walling ,加一个强制类型转换,会避免报错(void)n;  
}#endif

1.5.2client.cc

#include "comm.hpp"int main()
{std::cout << "client begin"<< std::endl;int wfd = open(NAMED_PIPE,O_WRONLY);std::cout << "client end"<< std::endl;if(wfd <0 ){exit(1); }//写char buffer[1024];while (true){std::cout << "Please Saying#";fgets(buffer,sizeof(buffer),stdin);//if(strlen(buffer)>0) buffer[strlen(buffer) - 1] = 0; ssize_t n = write(wfd,buffer,strlen(buffer) );assert(n == strlen(buffer));(void)n;}close(wfd);removeFifo(NAMED_PIPE);return 0;
}

1.5.3server.cc

#include "comm.hpp"int main()
{bool r = creatFifo(NAMED_PIPE);assert(r);(void)r;std::cout << "server begin"<< std::endl;int rfd = open(NAMED_PIPE,O_RDONLY);std::cout << "server end"<< std::endl;if(rfd <0 ){exit(1); }//读取char buffer[1024];while(true){ssize_t s = read(rfd,buffer,sizeof(buffer));if(s > 0){buffer[s] = 0;std::cout << "client->server#"<< buffer;}else if(s == 0){std::cout << "client quit,me too!" << std::endl;}else{std::cout << "err string" << strerror(errno) << std::endl; }}close(rfd);removeFifo(NAMED_PIPE);return 0;
}

相关文章:

Linux入门——08 进程间通讯——管道

1.进程间通讯 1.1什么是通讯 进程具有独立性&#xff08;每个进程都有自己的PCB,独立地址空间&#xff0c;页表&#xff09;但是要进行进程的通信&#xff0c;通信的成本一定不低&#xff0c;打破了独立性 进程间通信目的 数据传输&#xff1a;一个进程需要将它的数据发送给…...

深入探讨SD NAND的SD模式与SPI模式初始化

在嵌入式系统和存储解决方案中&#xff0c;SD NAND的广泛应用是显而易见的。CS创世推出的SD NAND支持SD模式和SPI模式&#xff0c;这两种模式在功能和实现上各有优劣。在本文中&#xff0c;我们将深入探讨这两种模式的初始化过程&#xff0c;并比较它们在不同应用场景下的优劣&…...

【jvm】栈和堆的区别

目录 1. 用途2. 线程共享性3. 内存分配和回收4. 生命周期5. 性能特点 1. 用途 1.堆&#xff1a;主要用于存储对象实例和数组。在Java中&#xff0c;所有通过new关键字创建的对象都会被分配到堆上。堆是一个大的内存池&#xff0c;用于存储所有的Java对象&#xff0c;包括实例变…...

智能的意义是降低世界的不确定性

世界充满着不确定性&#xff0c;而智能天生就追求一定的确定性&#xff0c;因为不确定性会危及智能的生存。智能本身是一种有序、相对确定的结构产生的&#xff0c;虽然也有一定的不确定性&#xff0c;而且这些不确定性有利于智能的进化&#xff0c;但是&#xff0c;相对而言&a…...

python实现指数平滑法进行时间序列预测

python实现指数平滑法进行时间序列预测 一、指数平滑法定义 1、指数平滑法是一种常用的时间序列预测算法,有一次、二次和三次平滑,通过加权系数来调整历史数据权重; 2、主要思想是:预测值是以前观测值的加权和,且对不同的数据给予不同的权数,新数据给予较大的权数,旧数…...

linux文件——用户缓冲区——概念深度探索、IO模拟实现

前言&#xff1a;本篇文章主要讲解文件缓冲区。 讲解的方式是通过抛出问题&#xff0c; 然后通过分析问题&#xff0c; 将缓冲区的概念与原理一步一步地讲解。同时&#xff0c; 本节内容在最后一部分还会带友友们模拟实现一下c语言的printf&#xff0c; fprintf接口&#xff0c…...

Hive3:常用查询语句整理

一、数据准备 建库 CREATE DATABASE itheima; USE itheima;订单表元数据 1 1000000 100058 6 -1 509.52 0.00 28155.40 499.33 0 0 lisi shanghai 157 2019-06-22 17:28:15 2019-06-22 17:28:15 1 2 5000000 100061 72 -1 503.86 0.00 38548.00 503.86 1 0 zhangsan shangha…...

Ubuntu下载安装教程|Ubuntu最新长期支持(LTS)版本24.04 LTS下载安装

安装Ubuntu Ubuntu最新长期支持(LTS)版本24.04 LTS Ubuntu 24.04 LTS | 概览 Ubuntu长期支持(LTS)版本&#xff0c;LTS意为“长期支持”&#xff0c;一般为5年。LTS版本将提供免费安全和维护更新至 2029年4月。 Ubuntu 24.04 LTS&#xff08;代号“Noble Numbat”&#xff0c;…...

通知:《自然语言及语音处理设计开发工程师》即将开课!

自然语言及语音处理设计开发工程师&#xff1a;未来职业的黄金选择 下面我们来看看证书颁发的背景&#xff1a;​ 为进一步贯彻落实中共中央印发《关于深化人才发展体制机制改革的意见》和国务院印发《关于“十四五”数字经济发展规划》等有关工作的部署要求&#xff0c;深入实…...

Vim youcompleteme Windows 安装保姆级教程

不说废话。 准备 检查 Vim 的 Python 配置 安装好 vim 和 python 后&#xff08;python 必须 ≥ \ge ≥ 3.6&#xff09;&#xff0c;在 cmd 下运行 vim --version会弹出以下窗口。 如果发现 python/dyn 和 python3/dyn 都是 - &#xff08;我不知道只有前者是 能不能运行…...

港迪技术IPO提交注册,拟募资6.56亿元

武汉港迪技术股份有限公司&#xff08;下称“港迪技术”&#xff09;拟在创业板IPO上市&#xff0c;并于近期在深交所提交招股书&#xff08;注册稿&#xff09;&#xff0c;进入提交注册阶段。 港迪技术IPO招股书&#xff08;注册稿&#xff09;显示&#xff0c;公司是一家专…...

retinaface在ubuntu20.04(wsl2)下使用tensorrt(c++)部署

1. 参考博客&#xff1a; 1. Retinaface Tensorrt Python/C部署&#xff1a;https://blog.csdn.net/weixin_45747759/article/details/124534079 2. B站视频教程&#xff1a;https://www.bilibili.com/video/BV1Nv4y1K727/ 3. Retinaface_…...

vue打包设置 自定义的NODE_ENV

默认NODE_ENV 自定义process.env.NODE_ENV的值_process.node.env的值-CSDN博客 ‌NODE_ENV开发环境下&#xff1a;NODE_ENVdevelopment(默认) 生产环境下&#xff1a;NODE_ENVproduction(默认) NODE_ENV 除了默认的 development 和 production 以外&#xff0c;确实可以自定义…...

python爬虫521

爬虫521 记录 记录 最近想学爬虫&#xff0c;尝试爬取自己账号下的文章标题做个词云 csdn有反爬机制 原理我就不说啦 大家都写了 看到大家结果是加cookie 但是我加了还是521报错 尝试再加了referer 就成功了(╹▽╹) import matplotlib import requests from wordcloud impor…...

CSS中flex:1是什么属性

flex: 1 是 CSS 中的一个简写属性&#xff0c;用于设置 Flex 项目的灵活伸缩比例&#xff08;flex-grow&#xff09;、收缩比例&#xff08;flex-shrink&#xff09;以及基础大小&#xff08;flex-basis&#xff09;。具体来说&#xff0c;flex: 1 实际上是以下三个属性的简写&…...

网络硬件升级指南:提升性能的策略与实践

随着企业对网络依赖程度的增加&#xff0c;网络性能的提升已成为信息技术部门的首要任务。本文将探讨如何通过升级网络硬件来提高网络性能&#xff0c;包括选择正确的硬件、实施升级策略和考虑未来网络的可扩展性。 一、网络性能的重要性 在数字化时代&#xff0c;网络是企业…...

XSS-过滤特殊符号的正则绕过

目录 靶场练习地址&#xff1a;https://xss.pwnfunction.com/ 题目源码&#xff1a; 代码分析&#xff1a; 方法一&#xff1a;匿名函数 方法二&#xff1a;使用eval函数绕过限制 示例&#xff1a; 方法三&#xff1a;利用hash绕过 靶场练习地址&#xff1a;https://xs…...

CocosCreator3.8 IOS 构建插屏无法去除的解决方案

CocosCreator3.8 IOS 构建插屏无法去除的解决方案 在实际项目开发过程中&#xff0c;我们通常无需CocosCreator 自带的插屏&#xff0c;一般采用自定义加载页面。 然后在构建IOS 项目时&#xff0c;启用&#xff08;禁用&#xff09;插屏无法操作&#xff0c;如下图所示&#…...

Linux软件编程---数据库

目录 一、数据库 1.1.概念 1.2.类型 1.关系型数据库 2.非关系型数据库 1.3.SQL语言 1.4.如何在Linux安装sqlite数据库 1.确保虚拟机可以上网 2.配置apt-get工具集合 3.安装sqlite数据库 1.5.sqlite3 1.创建数据库 2.查看数据表 3.退出数据库 4.SQL语句 二、数…...

Spring 源码解读专栏:从零到一深度掌握 Spring 框架

前言 Spring 是 Java 世界中无可争议的王者框架&#xff0c;它以其灵活、轻量、强大而著称&#xff0c;成为企业级开发的首选工具。然而&#xff0c;很多开发者在使用 Spring 时&#xff0c;往往只停留在会用的层面&#xff0c;对于其内部实现和设计原理知之甚少。本专栏旨在通…...

帆软-秋招提前批-笔试

单选 1. 有四个同学,每个人得到的桃子数量不同,4个到7个之间。然后,4个人都吃掉了1个或2个桃,结果每个人剩下的桃数量还是各不相同。4个人吃过桃后,说了如下的话。其中,吃了2个桃的人撒谎了,吃了1个桃的人说了实话。 安娜:"我吃过红色的桃。" …...

嵌入式AI快速入门课程-K510篇 (第七篇 系统BSP开发)

第七篇 系统BSP开发 文章目录 第七篇 系统BSP开发1. 嵌入式Linux系统介绍嵌入式Linux系统组成产品形态嵌入式芯片启动流程Linux系统Linux系统框架嵌入式编译环境 2.嵌入式Linux开发准备手册文档开发工具配套硬件工程源码 3.嵌入式Linux开发组成概述编译工具链什么是工具链什么是…...

代码随想录算法训练营day52:图03:101. 孤岛的总面积;102. 沉没孤岛;103. 水流问题

101. 孤岛的总面积 卡码网&#xff1a;101. 孤岛的总面积(opens new window) 题目描述 给定一个由 1&#xff08;陆地&#xff09;和 0&#xff08;水&#xff09;组成的矩阵&#xff0c;岛屿指的是由水平或垂直方向上相邻的陆地单元格组成的区域&#xff0c;且完全被水域单…...

开源大模型本地私有化部署

1、安装ollama ollma下载 https://ollama.com/download/windows linux 安装 curl -fsSL https://ollama.com/install.sh | sh 运行 ollama run gemma:2b ollama run gemma:7b 使用端口11434 2、下载 open-webui 代码 https://github.com/open-webui/open-webui.git 生成目录…...

站长为什么要搭建个人博客网站

搭建个人博客网站是一个值得考虑的选择&#xff0c;它不仅有助于个人成长&#xff0c;还能在多个方面带来积极的影响。以下是几个主要的理由&#xff1a; 一、记录与备忘 方便回顾与查阅&#xff1a;博客网站成为了一个个人知识库&#xff0c;记录下来的内容方便后续查阅和回顾…...

Golang | Leetcode Golang题解之第355题设计推特

题目&#xff1a; 题解&#xff1a; type Twitter struct {Tweets []intUserTweets map[int][]intFollows map[int][]intIsFollowMy map[int]bool }/** Initialize your data structure here. */ func Constructor() Twitter {// 每一次实例化的时候&#xff0c;都重新分配一次…...

Redis如何实现发布/订阅?

引言 Redis是一款高性能的内存数据存储系统&#xff0c;除了常用的键值存储功能外&#xff0c;还提供了发布/订阅&#xff08;Pub/Sub&#xff09;机制。通过发布/订阅机制&#xff0c;Redis可以实现消息的广播或者实时通知功能&#xff0c;是一种非常有用的功能。 本文将详细…...

EmguCV学习笔记 VB.Net 4.4 图像形态学

版权声明&#xff1a;本文为博主原创文章&#xff0c;转载请在显著位置标明本文出处以及作者网名&#xff0c;未经作者允许不得用于商业目的。 教程VB.net版本请访问&#xff1a;EmguCV学习笔记 VB.Net 目录-CSDN博客 教程C#版本请访问&#xff1a;EmguCV学习笔记 C# 目录-CSD…...

HarmonyOS 开发

环境 下载IDE 代码 import { hilog } from kit.PerformanceAnalysisKit; import testNapi from libentry.so; import { router } from kit.ArkUI; import { common, Want } from kit.AbilityKit;Entry Component struct Index {State message: string Hello HarmonyOS!;p…...

拒绝拖延!Kimi助你一天内速成论文初稿!

撰写学术论文是一项需要周密计划和精确执行的任务。它要求作者对文章的每个部分进行深入思考&#xff0c;以确保论文结构的合理性和论述的清晰度。利用Kimi的功能&#xff0c;我们可以更系统地进行写作&#xff0c;从构思到最终成稿&#xff0c;逐步构建出一篇高质量的学术论文…...