Linux下Fork与Exec使用
上一篇 / 下一篇 2013-04-10 13:23:34 / 个人分类:LINUX
._%N:f Us$Ac2\.?0注明: 虽然文字性的东西很多,但是如果你认真的读完,相信你一定有收获的。Trust me !
&M1WA'Vcd051Testing软件测试网!A ]|3^1D"W)GS(J,|(G[J AgAL I0一、引言
EW o,A+{/g0 对于没有接触过Unix/Linux操作系统的人来说,fork是最难理解的概念之一:它执行一次却返回两个值。fork函数是Unix系统最杰出的成就之一,它是七十年代UNIX早期的开发者经过长期在理论和实践上的艰苦探索后取得的成果,一方面,它使操作系统在进程管理上付出了最小的代价,另一方面,又为程序员提供了一个简洁明了的多进程方法。与DOS和早期的Windows不同,Unix/Linux系统是真正实现多任务操作的系统,可以说,不使用多进程编程,就不能算是真正的Linux环境下编程。
si}O7F$uc8qs0 多线程程序设计的概念早在六十年代就被提出,但直到八十年代中期,Unix系统中才引入多线程机制,如今,由于自身的许多优点,多线程编程已经得到了广泛的应用。
}1qK9? G%YzK0下面,我们将介绍在Linux下编写多进程和多线程程序的一些初步知识。51Testing软件测试网a? b|| F
]'a\O(cgX/S,`G*W051Testing软件测试网E Go?#W+L,I.o'y
二、多进程编程
blD_!SUs0什么是一个进程?进程这个概念是针对系统而不是针对用户的,对用户来说,他面对的概念是程序。当用户敲入命令执行一个程序的时候,对系统而言,它将启动一个进程。但和程序不同的是,在这个进程中,系统可能需要再启动一个或多个进程来完成独立的多个任务。多进程编程的主要内容包括进程控制和进程间通信,在了解这些之前,我们先要简单知道进程的结构。51Testing软件测试网e`7jW L+|&[;{/f
_v,QU1h'y1_!E(T0 2.1 Linux下进程的结构51Testing软件测试网 s%i,o,P0TO7u cj7U_ ]
Linux下一个进程在内存里有三部分的数据,就是"代码段"、"堆栈段"和"数据段"。其实学过汇编语言的人一定知道,一般的CPU都有上述三种段寄存器,以方便操作系统的运行。这三个部分也是构成一个完整的执行序列的必要的部分。
5a&Y#K'q{"o0 "代码段",顾名思义,就是存放了程序代码的数据,假如机器中有数个进程运行相同的一个程序,那么它们就可以使用相同的代码段。"堆栈段"存放的就是子程序的返回地址、子程序的参数以及程序的局部变量。而数据段则存放程序的全局变量,常数以及动态数据分配的数据空间(比如用malloc之类的函数取得的空间)。这其中有许多细节问题,这里限于篇幅就不多介绍了。系统如果同时运行数个相同的程序,它们之间就不能使用同一个堆栈段和数据段。
tR {:XaAT^0
2.2 Linux下的进程控制
"lat#C3A0M0在传统的Unix环境下,有两个基本的操作用于创建和修改进程:函数fork(
)用来创建一个新的进程,该进程几乎是当前进程的一个完全拷贝;函数族exec(
)用来启动另外的进程以取代当前运行的进程。Linux的进程控制和传统的Unix进程控制基本一致,只在一些细节的地方有些区别,例如在Linux系统中调用vfork和fork完全相同,而在有些版本的Unix系统中,vfork调用有不同的功能。由于这些差别几乎不影响我们大多数的编程,在这里我们不予考虑。
/\1c8K#p+wZ0 2.2.1
fork(
)
X`D#t9pa.F}G._H0 fork在英文中是"分叉"的意思。为什么取这个名字呢?因为一个进程在运行中,如果使用了fork,就产生了另一个进程,于是进程就"分叉"了,所以这个名字取得很形象。下面就看看如何具体使用fork,这段程序演示了使用fork的基本框架:51Testing软件测试网kK$J;WG\
51Testing软件测试网fc3^ DCr
`H/g
2 {51Testing软件测试网g#~8G!M"X
3 int i;51Testing软件测试网|~,t}[a-a6rM
4 if ( fork() == 0 ) 51Testing软件测试网$@.O!HgD rLp
5 {51Testing软件测试网5K G sZTDcK
6 /* 子进程程序 */51Testing软件测试网:Mkn)Bv~ Dl z:y
7 for ( i = 1; i <1000; i ++ )
q2eKs x&U0 8 printf("This is child process\n");51Testing软件测试网 N;P$Z Z4T4zP#Vl?
9 }
"@#q.a}{ k]010 else
R]mH DhV pbC011 {
\;X([7T M,|S4\012 /* 父进程程序*/51Testing软件测试网:G\ e"B7hf.]
13 for ( i = 1; i <1000; i ++ )
S8e$S,Z,JT%|*}&}014 printf("This is process process\n");51Testing软件测试网g/L*kTLy
15 }
Sm@;|RL$a016 }51Testing软件测试网JL(bW:w
17
8i$n3ija@0
ku5?$s5E3w [0#Yx/T6n b,ms[V:G7X0 51Testing软件测试网0pQO|5^9N
51Testing软件测试网#z?(s\(u*h:\m 程序运行后,你就能看到屏幕上交替出现子进程与父进程各打印出的一千条信息了。如果程序还在运行中,你用ps命令就能看到系统中有两个它在运行了。51Testing软件测试网&twb5JkM'?'Z
那么调用这个fork函数时发生了什么呢?fork函数启动一个新的进程,前面我们说过,这个进程几乎是当前进程的一个拷贝:子进程和父进程使用相同的代码段;子进程复制父进程的堆栈段和数据段。这样,父进程的所有数据都可以留给子进程,但是,子进程一旦开始运行,虽然它继承了父进程的一切数据,但实际上数据却已经分开,相互之间不再有影响了,也就是说,它们之间不再共享任何数据了。它们再要交互信息时,只有通过进程间通信来实现,这将是我们下面的内容。既然它们如此相象,系统如何来区分它们呢?这是由函数的返回值来决定的。对于父进程,
fork函数返回了子程序的进程号,而对于子程序,fork函数则返回零。在操作系统中,我们用ps函数就可以看到不同的进程号,对父进程而言,它的进程号是由比它更低层的系统调用赋予的,而对于子进程而言,它的进程号即是fork函数对父进程的返回值。在程序设计中,父进程和子进程都要调用函数fork()下面的代码,而我们就是利用fork()函数对父子进程的不同返回值用if...else...语句来实现让父子进程完成不同的功能,正如我们上面举的例子一样。我们看到,上面例子执行时两条信息是交互无规则的打印出来的,这是父子进程独立执行的结果,虽然我们的代码似乎和串行的代码没有什么区别。
'\:_/[Mk+h!l|_Rp0 读者也许会问,如果一个大程序在运行中,它的数据段和堆栈都很大,一次fork就要复制一次,那么fork的系统开销不是很大吗?其实UNIX自有其解决的办法,大家知道,一般CPU都是以"页"为单位来分配内存空间的,每一个页都是实际物理内存的一个映像,象INTEL的CPU,其一页在通常情况下是
4086字节大小,而无论是数据段还是堆栈段都是由许多"页"构成的,fork函数复制这两个段,只是"逻辑"上的,并非"物理"上的,也就是说,实际执行fork时,物理空间上两个进程的数据段和堆栈段都还是共享着的,当有一个进程写了某个数据时,这时两个进程之间的数据才有了区别,系统就将有区别的"
页"从物理上也分开。系统在空间上的开销就可以达到最小。
)q,_*n CBW._s$Y"{0 下面演示一个足以"搞死"Linux的小程序,其源代码非常简单:
V{|a ]cG0
P"G:w't&](r/GbY02 {51Testing软件测试网,`,Dr~8]5~Fm-Y
3 for( ; ; )
-SqdM;V04 {51Testing软件测试网0A#~1_&_/G\5H js
5 fork();51Testing软件测试网)vHHBjemD
6 }
S8i/{;yF7@pC&w07 }51Testing软件测试网[+y#iQK2L+K3[
8
H"u3c M&JH |&K0
pz4quiW i6b051Testing软件测试网D9eC9xh
这个程序什么也不做,就是死循环地fork,其结果是程序不断产生进程,而这些进程又不断产生新的进程,很快,系统的进程就满了,系统就被这么多不断产生
的进程"撑死了"。当然只要系统管理员预先给每个用户设置可运行的最大进程数,这个恶意的程序就完成不了企图了。51Testing软件测试网|4bx
}"p K&H
2.2.2 exec(
)函数族
u
|'x{8}DP@0下面我们来看看一个进程如何来启动另一个程序的执行。在Linux中要使用exec函数族。系统调用execve()对当前进程进行替换,替换者为一个指定的程序,其参数包括文件名(filename)、参数列表(argv)以及环境变量(envp)。exec函数族当然不止一个,但它们大致相同,在
Linux中,它们分别是:execl,execlp,execle,execv,execve和execvp,下面我只以execlp为例,其它函数究竟与execlp有何区别,请通过manexec命令来了解它们的具体情况。51Testing软件测试网~J1pi2x
一个进程一旦调用exec类函数,它本身就"死亡"了,系统把代码段替换成新的程序的代码,废弃原有的数据段和堆栈段,并为新程序分配新的数据段与堆栈段,唯一留下的,就是进程号,也就是说,对系统而言,还是同一个进程,不过已经是另一个程序了。(不过exec类函数中有的还允许继承环境变量之类的信息。)51Testing软件测试网U#pc0tFch!qae
那么如果我的程序想启动另一程序的执行但自己仍想继续运行的话,怎么办呢?那就是结合fork与exec的使用。下面一段代码显示如何启动运行其它程序:
m8[N[w!O0
2 #include <stdio.h>51Testing软件测试网0Y"z'A(M$Oy3k'{t
3 #include <stdlib.h>51Testing软件测试网 Z u4Z Z[
4
ESU!l8aA ]0 5 char command[256];
d TGI2?5[0 6 void main()51Testing软件测试网h'j(V'Rf;^8n4U
7 {
BT0_&DS+?Z5i:d0j0 8 int rtn; /*子进程的返回数值*/
Y3T4E%T4^4x&U~3S0 9 while(1) {
m M3G1h\ ?3c010 /* 从终端读取要执行的命令 */51Testing软件测试网K7Nt QRF5BwNQb
11 printf( ">" );51Testing软件测试网 ^)|o6PH/^
12 fgets( command, 256, stdin );51Testing软件测试网1Lh(a,Aa6h8{*_Us#Bd
13 command[strlen(command)-1] = 0;
Q,n t0Z!g A014 if ( fork() == 0 ) {/* 子进程执行此命令 */51Testing软件测试网7?"G-W3Ii)`"_,Jp;g1Y2T
15 execlp( command, NULL );
xW+l U7H8UY016 /* 如果exec函数返回,表明没有正常执行命令,打印错误信息*/
}+P| b+EjZ017 perror( command );
3[7]}Sf018 exit( errno );51Testing软件测试网,Rp%fv"e{;v]
19 }
Z^-n9\-j5K020 else {/* 父进程, 等待子进程结束,并打印子进程的返回值 */51Testing软件测试网1\ C'VL1O.[X%aK O
21 wait ( &rtn );
/\m I:TW022 printf( " child process return %d\n", rtn );51Testing软件测试网!@T7BJv4k \.Bz
23 }51Testing软件测试网 O2[$xJ ]e
24 }
Z dSAH*R ZH025 }51Testing软件测试网*W\U Aa
26
J*O U;T(}Y3v0[2_0 51Testing软件测试网-s7KRFU8Zrn
51Testing软件测试网v%shP"_n 此程序从终端读入命令并执行之,执行完成后,父进程继续等待从终端读入命令。熟悉DOS和WINDOWS系统调用的朋友一定知道DOS/WINDOWS也有exec类函数,其使用方法是类似的,但DOS/WINDOWS还有spawn类函数,因为DOS是单任务的系统,它只能将"父进程"驻留在机器内再执行"子进程",这就是spawn类的函数。WIN32已经是多任务的系统了,但还保留了spawn类函数,WIN32中实现spawn函数的方法同前述
UNIX中的方法差不多,开设子进程后父进程等待子进程结束后才继续运行。UNIX在其一开始就是多任务的系统,所以从核心角度上讲不需要spawn类函数。
;FV9mukFB]D:J0 在这一节里,我们还要讲讲system()和popen()函数。system()函数先调用fork(),然后再调用exec()来执行用户的登录
shell,通过它来查找可执行文件的命令并分析参数,最后它么使用wait()函数族之一来等待子进程的结束。函数popen()和函数
system()相似,不同的是它调用pipe()函数创建一个管道,通过它来完成程序的标准输入和标准输出。这两个函数是为那些不太勤快的程序员设计的,在效率和安全方面都有相当的缺陷,在可能的情况下,应该尽量避免。
|!Jv'WB0E8b,b0
I!AHF.b0 2.3
Linux下的进程间通信51Testing软件测试网)H4em)h(FB2V
详细的讲述进程间通信在这里绝对是不可能的事情,而且笔者很难有信心说自己对这一部分内容的认识达到了什么样的地步,所以在这一节的开头首先向大家推荐著名作者Richard
Stevens的著名作品:《Advanced Programming in the UNIX
Environment》,它的中文译本《UNIX环境高级编程》已有机械工业出版社出版,原文精彩,译文同样地道,如果你的确对在Linux下编程有浓厚的兴趣,那么赶紧将这本书摆到你的书桌上或计算机旁边来。说这么多实在是难抑心中的景仰之情,言归正传,在这一节里,我们将介绍进程间通信最最初步和最最简单的一些知识和概念。
wg!aN?E:f0 首先,进程间通信至少可以通过传送打开文件来实现,不同的进程通过一个或多个文件来传递信息,事实上,在很多应用系统里,都使用了这种方法。但一般说来,进程间通信(IPC:InterProcess
Communication)不包括这种似乎比较低级的通信方法。Unix系统中实现进程间通信的方法很多,而且不幸的是,极少方法能在所有的Unix系统中进行移植(唯一一种是半双工的管道,这也是最原始的一种通信方式)。而Linux作为一种新兴的操作系统,几乎支持所有的Unix下常用的进程间通信方法:管道、消息队列、共享内存、信号量、套接口等等。下面我们将逐一介绍。
&QOEu P~HT0
osFI/AC1sOD0 2.3.1
管道
`5O@Hm"M0 管道是进程间通信中最古老的方式,它包括无名管道和有名管道两种,前者用于父进程和子进程间的通信,后者用于运行于同一台机器上的任意两个进程间的通信。51Testing软件测试网2p)F(}:z/o.MN
无名管道由pipe()函数创建:
J6l]0x:F+[0Qt}0 #include
<unistd.h>
,l
C)y4r+XF@I(y0 int pipe(int
filedis[2]);51Testing软件测试网.L1m5S%vp
参数filedis返回两个文件描述符:filedes[0]为读而打开,filedes[1]为写而打开。filedes[1]的输出是filedes[0]的输入。下面的例子示范了如何在父进程和子进程间实现通信。51Testing软件测试网h6~2}U%]
"R#FH%V2S-H!Z r0 51Testing软件测试网E-N rE0?|A7tN
51Testing软件测试网~HK5i` Y9x9z1p\%_a/~7W0
2 #define OUTPUT 1
-}:Y$[P:@,Zk^0 3
Rim[0a QF#L0 4 void main() {
,V"ksLj ~%e0 5 int file_descriptors[2];
xBMk/c$yKH0 6 /*定义子进程号 */
E$@ks]'A0 7 pid_t pid;
'xl(U P`;OO9X6r0 8 char buf[256];
e-W*t$y;D4e.e0 9 int returned_count;51Testing软件测试网@4_i8EgM
10 /*创建无名管道*/
.H7aCL\1l011 pipe(file_descriptors);51Testing软件测试网h5nO7xc0Tv^K
12 /*创建子进程*/
LJ1}'b0x!] @Cd013 if((pid = fork()) == -1) {
k7hf"k?%]tt014 printf("Error in fork\n");
2K4y jF t015 exit(1);51Testing软件测试网7H J"@)R#hN^u;R
16 }
{S0D5N&Ev017 /*执行子进程*/
&vzC~q.z XbO*O018 if(pid == 0) {
+_[*PzK019 printf("in the spawned (child) process...\n");
Fx3xj(T9{)q&YH020 /*子进程向父进程写数据,关闭管道的读端*/51Testing软件测试网8R(@9U~T.A
21 close(file_descriptors[INPUT]);51Testing软件测试网9XMFc`
22 write(file_descriptors[OUTPUT], "test data", strlen("test data"));51Testing软件测试网z%T+N'tU0Crz!q@
23 exit(0);51Testing软件测试网8y @-_:z7la"e4Z8k$a$?1D
24 } else {
tXNIAZ"K/~6a025 /*执行父进程*/
2}E _Ee1Z.H026 printf("in the spawning (parent) process...\n");
M@E;[$QU/`N027 /*父进程从管道读取子进程写的数据,关闭管道的写端*/
/aE5P v FT6m028 close(file_descriptors[OUTPUT]);51Testing软件测试网q$ti)bHf0T1E&s
29 returned_count = read(file_descriptors[INPUT], buf, sizeof(buf));
1iQWXN3t}030 printf("%d bytes of data received from spawned process: %s\n",51Testing软件测试网M.v NV _*dD
31 returned_count, buf);51Testing软件测试网~2o I8Ls0CdA5B$v*`
32 }
H(W9gh1|-A.d|!\y J*_033 }51Testing软件测试网8g:N A;U$D!Rzq)gD3\
34
v)osY x+[b-Xi0 51Testing软件测试网!};PC\N*_?v k
PXj)OM0 在Linux系统下,有名管道可由两种方式创建:命令行方式mknod系统调用和函数mkfifo。下面的两种途径都在当前目录下生成了一个名为myfifo的有名管道:
hK't!dQ2p4G9v:E0 方式一:mkfifo("myfifo","rw");
w0K%v?;~2O0 方式二:mknod
myfifo
p
t,Za&O Piwv}w0 生成了有名管道后,就可以使用一般的文件I/O函数如open、close、read、write等来对它进行操作。下面即是一个简单的例子,假设我们已经创建了一个名为myfifo的有名管道。
/Nry.wOG
Tq)K2w0
2 #include <stdio.h>51Testing软件测试网?kXv9V})tlt:F
3 #include <unistd.h>51Testing软件测试网]1{Er+pqJ"xN(O#c
4 void main() {
R(MxD(X8G"U_0 5 FILE * in_file;51Testing软件测试网'\`5B7y x?| F0Bm1Q
6 int count = 1;51Testing软件测试网] b.AOxz@'q
7 char buf[80];51Testing软件测试网I5U^4]e&JYy
8 in_file = fopen("mypipe", "r");
1q'}!j/[N0 9 if (in_file == NULL) {
IvZB8@?010 printf("Error in fdopen.\n");51Testing软件测试网@-zt+O A$rZpxPJ4}
11 exit(1);51Testing软件测试网!nC%fVG&F.Q4`
12 }
\rh'zc3u-zKH013 while ((count = fread(buf, 1, 80, in_file)) > 0)