最近用 Python 写了几个简单的脚本来处理一些数据，因为只是简单功能所以我就直接使用 print 来打印日志。
Python subprocess 模块是一个功能强大的库，用于启动和与子流程交互。 它附带了一些高级 api，比如调用、检查输出和运行，这些都集中在的程序运行和等待完成的子进程上。
运行python的时候，我们都是在创建并运行一个进程。像Linux进程那样，一个进程可以fork一个子进程，并让这个子进程exec另外一个程序。在Python中，我们通过标准库中的subprocess包来fork一个子进程，并运行一个外部的程序。
编译：丁一 黄念 丁雪 校对：席雄芬 姚佳灵 程序验证：郭姝妤 序言 在Python中调用R或在R中调用Python，为什么是“和”而不是“或”？ 在互联网中，关于“R Python”的文章，排名前十的搜索结果中只有2篇讨论了一起使用R和Python的优点，而不是把这两种语言对立起来看。这是可以理解的：这两种语言从一开始都具有非常显著的优缺点。从历史上看，尽管把两者分割开来是因为教育背景：统计学家们倾向用R，而程序员则选择了Python语言。然而，随着数据科学家的增加，这种区别开始变得模糊
在Python中调用R或在R中调用Python，为什么是“和”而不是“或”？ 在互联网中，关于“R Python”的文章，排名前十的搜索结果中只有2篇讨论了一起使用R和Python的优点，而不是把这两种语言对立起来看。这是可以理解的：这两种语言从一开始都具有非常显著的优缺点。从历史上看，尽管把两者分割开来是因为教育背景：统计学家们倾向用R，而程序员则选择了Python语言。然而，随着数据科学家的增加，这种区别开始变得模糊起来： 数据科学家就是这样一种人：软件工程师中最懂统计学，统计学家中最会编程的人。
这里的内容以Linux进程基础和Linux文本流为基础。subprocess包主要功能是执行外部的命令和程序。比如说，我需要使用wget下载文件。我在Python中调用wget程序。从这个意义上来说，subprocess的功能与shell类似。 subprocess以及常用的封装函数 当我们运行python的时候，我们都是在创建并运行一个进程。正如我们在Linux进程基础中介绍的那样，一个进程可以fork一个子进程，并让这个子进程exec另外一个程序。在Python中，我们通过标准库中的subprocess
大家好，又见面了，我是你们的朋友全栈君。 管道（Pipe）实际是用于进程间通信的一段共享内存，创建管道的进程称为管道服务器，连接到一个管道的进程为管道客户机。一个进程在向管道写入数据后，另一进程就可以从管道的另一端将其读取出来。匿名管道（Anonymous Pipes）是在父进程和子进程间单向传输数据的一种未命名的管道，只能在本地计算机中使用，而不可用于网络间的通信。 匿名管道实施细则 匿名管道由CreatePipe（）函数创建，该函数在创建匿名管道的同时返回两个句柄：管道读句柄和管道写句柄。CreatePipe（）的函数原型为： BOOL CreatePipe(PHANDLE hReadPipe, // 指向读句柄的指针 PHANDLE hWritePipe, // 指向写句柄的指针 LPSECURITY_ATTRIBUTES lpPipeAttributes, // 指向安全属性的指针 DWORD nSize // 管道大小 ); 通过hReadPipe和hWritePipe所指向的句柄可分别以只读、只写的方式去访问管道。在使用匿名管道通信时，服务器进程必须将其中的一个句柄传送给客户机进程。句柄的传递多通过继承来完成，服务器进程也允许这些句柄为子进程所继承。除此之外，进程也可以通过诸如DDE或共享内存等形式的进程间通信将句柄发送给与其不相关联的进程。 在调用CreatePipe（）函数时，如果管道服务器将lpPipeAttributes 指向的SECURITY_ATTRIBUTES数据结构的数据成员bInheritHandle设置为TRUE，那么CreatePipe（）创建的管道读、写句柄将会被继承。管道服务器可调用DuplicateHandle（）函数改变管道句柄的继承。管道服务器可以为一个可继承的管道句柄创建一个不可继承的副本或是为一个不可继承的管道句柄创建一个可继承的副本。CreateProcess（）函数还可以使管道服务器有能力决定子进程对其可继承句柄是全部继承还是不继承。 在生成子进程之前，父进程首先调用Win32 API SetStdHandle（）使子进程、父进程可共用标准输入、标准输出和标准错误句柄。当父进程向子进程发送数据时，用SetStdHandle（）将管道的读句柄赋予标准输入句柄；在从子进程接收数据时，则用SetStdHandle（）将管道的写句柄赋予标准输出（或标准错误）句柄。然后，父进程可以调用进程创建函数CreateProcess（）生成子进程。如果父进程要发送数据到子进程，父进程可调用WriteFile（）将数据写入到管道（传递管道写句柄给函数），子进程则调用GetStdHandle（）取得管道的读句柄，将该句柄传入ReadFile（）后从管道读取数据。 如果是父进程从子进程读取数据，那么由子进程调用GetStdHandle（）取得管道的写入句柄，并调用WriteFile（）将数据写入到管道。然后，父进程调用ReadFile（）从管道读取出数据（传递管道读句柄给函数）。 在用WriteFile（）函数向管道写入数据时，只有在向管道写完指定字节的数据后或是在有错误发生时函数才会返回。如管道缓冲已满而数据还没有写完，WriteFile（）将要等到另一进程对管道中数据读取以释放出更多可用空间后才能够返回。管道服务器在调用CreatePipe（）创建管道时以参数nSize对管道的缓冲大小作了设定。 匿名管道并不支持异步读、写操作，这也就意味着不能在匿名管道中使用ReadFileEx（）和WriteFileEx（），而且ReadFile（）和WriteFile（）中的lpOverLapped参数也将被忽略。匿名管道将在读、写句柄都被关闭后退出，也可以在进程中调用CloseHandle（）函数来关闭此句柄 / 匿名管道程序示例 总的来说，匿名管道程序是比较简单的。在下面将要给出的程序示例中，将由父进程（管道服务器）创建一个子进程（管道客户机），子进程回见个其全部的标准输出发送到匿名管道中，父进程再从管道读取数据，一直到子进程关闭管道的写句柄。其中，匿名管道服务器程序的实现清单如下： STARTUPINFO si; PROCESS_INFORMATION pi; char ReadBuf[100]; DWORD ReadNum; HANDLE hRead; // 管道读句柄 HANDLE hWrite; // 管道写句柄 BOOL bRet = CreatePipe(&hRead, &hWrite, NULL, 0); // 创建匿名管道 if (bRet
subprocess模块
第一步：在Web服务器上加一条跳转命令，将所有客户端浏览器80端口的所有请求都跳转到web服务器首页，命令如下：
PyHero是用python编写的软件，可让您从命令行控制GoPro HERO，HERO2，HERO3和HERO4！
通常，我们执行服务端程序的时候都会通过终端连接到服务器，成功连接后会加载shell环境，终端盒shell都是进程，shell进程是终端进程的子进程，通过ps命令可以很容易的查看到，在这个shell环境下一开始执行的程序都是shell进程的子进程，自然会受到shell进程的影响，在程序里fork子进程后，父进程退出，对于shell进程来说，这个父进程就算执行完毕，而产生的子进程会被init进程接管，从而也就脱离了终端控制。
shell =false 意思是command 使用的不是linux shell指令,如果要用shell 指令如ls 要将false 变成true, 通过指定stderr=subprocess.STDOUT，将子程序的标准错误输出重定向到了标准输出，以使我们可以直接从标准输出中同时获取标准输出和标准错误的信息。 p.poll() 返回子进程的返回值,如果为None 表示 c++子进程还未结束. p.stdout.readline() 从 c++的标准输出里获取一行.
守护进程是指在后台运行的程序，用于执行一些特定的任务，比如我们常见的apache、nginx、mysql等等，就是启动了守护进程，接收客户端的连接并处理相应的请求
在日常使用Linux命令时候，经常使用重定向或者管道的方式处理命令的结果。以前对这两个命令的使用场景存在一些困惑，所以本文对这两个命令进行详细的总结。
subprocess最早在2.4版本引入。用来生成子进程，并可以通过管道连接他们的输入/输出/错误，以及获得他们的返回值。
利用Python调用外部系统命令的方法可以提高编码效率。调用外部系统命令完成后可以通过获取命令执行返回结果码、命令执行的输出结果进行进一步的处理。本文主要描述Python常见的调用外部系统命令的方法，包括os.system()、os.popen()、subprocess.Popen()等。
subprocess模块是Python标准库中用于创建和管理子进程的模块。它提供了一种执行外部命令、与其交互、获取输出等操作的方式。以下是subprocess模块的一些常用功能和用法：
选自sunfishcode博客 作者：sunfishcode 机器之心编译 机器之心编辑部 Hello World 可能是许多人编写的第一个程序。这么简单的程序按理说应该没有 bug 吧？一位叫「sunfishcode」的开发者给出了令人意外的结论。 C 语言中的 Hello World 用 C 语言写 Hello World 有很多种不同的方式，比如维基百科里记录的版本、K&R book 中介绍的版本，甚至还有 1974 年的原始版本。 这里展示一个 ANSI C 的版本： /* Hel
Subprocess库是Python中用于创建和管理子进程的标准库。它提供了一个强大而灵活的接口，使得你可以在Python中启动新的进程、连接它们的输入和输出，并与它们进行交互。本教程将介绍Subprocess库的基本概念、用法和一些常见的应用场景。
现在大部分人都喜欢使用Popen。Popen方法不会打印出cmd在linux上执行的信息。的确，Popen非常强大，支持多种参数和模式。使用前需要from subprocess import Popen, PIPE。但是Popen函数有一个缺陷，就是它是一个阻塞的方法。如果运行cmd时产生的内容非常多，函数非常容易阻塞住。解决办法是不使用wait()方法，但是也不能获得执行的返回值了。
commands对Python的os.popen()进行了封装，使用SHELL命令字符串作为其参数，返回命令的结果数据以及命令执行的状态；
在前文中学习了open函数，我们知道open函数的返回值就是文件描述符，本章将对文件描述符进行详细讲解。
当i=1,会继续执行for循环---P2先fork()出一个子进程P3，同时再输出一个'-'。
通常我们都是通过以上两种方式来获得一个shell，之后运行程序的，此时我需要纠正一个概念，我们通常都说获得一个shell，本质上来说，我们获取了一个session（会话，以下session都是会话）
Supervisor是用Python开发的进程管理工具，可以很方便的用来启动、重启、关闭进程(不仅仅是 Python 进程)。能将一个普通的命令行进程变为后台daemon，并监控进程状态，异常退出时能自动重启。除了对单个进程的控制，还可以同时启动、关闭多个进程，比如很不幸的服务器出问题导致所有应用程序都被杀死，此时可以用 supervisor 同时启动所有应用程序而不是一个一个地敲命令启动。
subprocess.Popen 是 Python 中用于执行外部命令或程序的模块之一。它提供了创建子进程并与之交互的灵活方式。以向 subprocess.Popen 传递一个命令字符串或命令列表，它将调用操作系统的 shell 来执行该命令。
Python 编程过程中经常会用到系统命令，本文记录实现方法。 系统命令 作为胶水语言，Python可以很方便的执行系统命令，Python3中常用的执行操作系统命令有以下方式 os.system() os.popen() subprocess 模块 os.system 执行命令但无法获取取命令输出时，可以使用 os.system os.system() 是C语言 system() 函数的封装，返回命令的退出状态码，命令执行结果输出到标准输出（stdout/窗口）。 system函数可以将
守护进程：通常被定义为一个后台进程，而且它不属于任何一个终端会话(terminal session)。许多系统服务由守护程序实施；如网络服务，打印等。 下面是转自一位网友写的编写守护进程的步骤： 1. 调用fork()以便父进程可以退出，这样就将控制权归还给运行你程序的 命令行或shell程序。需要这一步以便保证新进程不是一个进程组头领进程(process group leader)。下一步，‘setsid()’，会因为你是进程组头领进程而失败。
Unix 系统是由用户空间（userland）和内核组成。Unix 内核位于计算机硬件之上，是与硬件交互的中介。这些交互包括通过问卷系统进程读/写、在网络上发送数据、分配内存，以及通过扬声器播放音频。这些都是用户应用程序所不能涉及的，只能通过系统调用来完成。
在python 中调用系统命令，如果使用subprocess.Popen() 模块，按照命令参数的的形式，可以分两种：
4.服务器运行文件是/root/PycharmProjects/day10/example.py
1. 使用.logfile 方法 #!/usr/bin/env python import pexpect import sys host="146.11.85.xxx" user="inteuser" password="xxxx" command="ls -l" child = pexpect.spawn('ssh -l %s %s %s'%(user, host, command)) child.expect('password:') child.sendline(password) childlog
專 欄 ❈汤英康，Python程序员，负责设计和开发大数据监控平台的相关产品。 PyCon China2016 深圳 讲师。 博客：http://blog.tangyingkang.com/ ❈— Daemon场景 考虑如下场景：你编写了一个python服务程序，并且在命令行下启动，而你的命令行会话又被终端所控制，python服务成了终端程序的一个子进程。因此如果你关闭了终端，这个命令行程序也会随之关闭。 要使你的python服务不受终端影响而常驻系统，就需要将它变成守护进程。 守护
人真正的名字是：欲望。所以你得知道，消灭恐惧最有效的办法，就是消灭欲望。 – 史铁生 《我与地坛》
最近工作需求中 有遇到这个情况 在web端获取配置文件内容 及 往shell 脚本中动态传入参数
假如写一段服务端程序，如果ctrl+c退出或者关闭终端，那么服务端程序就会退出，于是就想着让这个程序成为守护进程，像httpd一样，一直在后端运行，不会受终端影响。
文件描述符 fd 是基础IO中的重要概念，一个 fd 表示一个 file 对象，如常用的标准输入、输出、错误流的 fd 分别为 0、1、2，实际进行操作时，OS 只需要使用相应的 fd 即可，不必关心具体的 file，因此我们可以对标准流实施 重定向，使用指定的文件流，在实际 读/写 时，为了确保 IO 效率，还需要借助 缓冲区 进行批量读取，最大化提高效率。关于上述各种概念，将会在本文中详细介绍，且听我娓娓道来
点击上方↑↑↑“OpenCV学堂”关注我来源：公众号 量子位 授权 一句最简单的Hello World，居然也会出Bug？ 倒不是这句代码还能写错，而是运行时找到了许多操作系统对异常处理的漏洞。 在
一般使用cout进行打印，但是cout打印是不规范的 实际上 是采用日志进行打印的
在linux下使用shell编程常常能够极大简化我们的工作。而下面这些必备的知识你是否都掌握了呢？
进程间的通信—管道 管道 进程间的通信(IPC-Inter-Process Communication)有多种方式，管道是其中最基本的方式。 管道是半双工的，即是单向的。 管道是FIFO(先进先出)的。 在实际的多进程间通信时，可以理解为有一条管道，而每个进程都有两个可以使用管道的"端口"，分别负责进行数据的读取与发送。 单进程中的管道:int fd[2] 使用文件描述符fd[1],向管道写数据。 使用文件描述符fd[0],从管道中读数据。 📷 注意: 单进程中的管道无实际用处，管道用于多进程间
当我们须要调用系统的命令的时候，最先考虑的os模块。用os.system()和os.popen()来进行操作。可是这两个命令过于简单，不能完毕一些复杂的操作，如给执行的命令提供输入或者读取命令的输出，推断该命令的执行状态，管理多个命令的并行等等。这时subprocess中的Popen命令就能有效的完毕我们须要的操作。在这里对Popen予以简介。
这个模块允许您开启进程、连接输入、输出和错误的管道，并获取他们的返回代码。这个模块计划替代一些旧代码，如：
博雯 发自 凹非寺 量子位 | 公众号 QbitAI 一句最简单的Hello World，居然也会出Bug？ 倒不是这句代码还能写错，而是运行时找到了许多操作系统对异常处理的漏洞。 在向/dev/fu
Supervisor的中文意思是监督人，主管的意思，那么在我们今天要说的这个supervisor也是同样的意思，只不过它监管的不是人，而是进程罢了。
1.空文件也要在磁盘中占据空间，因为文件属性也是数据，保存数据就需要空间。 2.文件=内容+属性 3.文件操作=对内容的操作or对属性的操作or对内容和属性的操作 4.标识一个文件必须有文件路径和文件名，因为这具有唯一性。 5.如果没有指明对应的文件路径，默认是在当前路径下进行文件访问，也就是在当前进程的工作目录下进行文件访问。如果想要改变这个目录，可以通过系统调用chdir来改变。 6.在C语言中，调用fread、fwrite、fopen、fclose、等接口对磁盘中的文件进行操作，实际上必须等到代码和数据加载到内存中，变成进程之后，cpu读取进程对应的代码，然后操作系统才会对文件进行操作，而不是只要我们一调用文件操作的接口就会对文件操作，而是必须将这些接口加载到内存之后，才可以。 所以对文件的操作，本质上就是进程对文件的操作！！！ 7.一个文件要被访问，必须先被打开。用户进程可以调用文件打开的相关函数，然后操作系统对磁盘上相应的文件进行处理。在磁盘上的文件可以分为两类，一类是被打开文件，一类是未被打开的文件。 8.所以，文件操作的本质就是进程和被打开文件的关系。
从Python 2.4开始，Python引入subprocess模块来管理子进程，以取代一些旧模块的方法：如 os.system、os.spawn*、os.popen*、popen2.*、commands.*不但可以调用外部的命令作为子进程，而且可以连接到子进程的input/output/error管道，获取相关的返回信息。 常用subprocess方法示例： #执行命令，返回执行状态，0或非0 >>> res = subprocess.call(["df","-h"]) Filesystem S
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
