第 25 章 C标准库 · Linux C 一站式学习

# 第 25 章 C标准库 **目录** + [1\. 字符串操作函数](ch25s01.html) + [1.1\. 初始化字符串](ch25s01.html#id2827594) + [1.2\. 取字符串的长度](ch25s01.html#id2827671) + [1.3\. 拷贝字符串](ch25s01.html#id2827741) + [1.4\. 连接字符串](ch25s01.html#id2828376) + [1.5\. 比较字符串](ch25s01.html#id2828656) + [1.6\. 搜索字符串](ch25s01.html#id2828881) + [1.7\. 分割字符串](ch25s01.html#id2829046) + [2\. 标准I/O库函数](ch25s02.html) + [2.1\. 文件的基本概念](ch25s02.html#id2829671) + [2.2\. fopen/fclose](ch25s02.html#id2829869) + [2.3\. stdin/stdout/stderr](ch25s02.html#id2830485) + [2.4\. errno与perror函数](ch25s02.html#id2830807) + [2.5\. 以字节为单位的I/O函数](ch25s02.html#id2831236) + [2.6\. 操作读写位置的函数](ch25s02.html#id2831814) + [2.7\. 以字符串为单位的I/O函数](ch25s02.html#id2832034) + [2.8\. 以记录为单位的I/O函数](ch25s02.html#id2832480) + [2.9\. 格式化I/O函数](ch25s02.html#id2832755) + [2.10\. C标准库的I/O缓冲区](ch25s02.html#id2834346) + [2.11\. 本节综合练习](ch25s02.html#id2834904) + [3\. 数值字符串转换函数](ch25s03.html) + [4\. 分配内存的函数](ch25s04.html) 在前面的各章中我们已经见过C标准库的一些用法，总结如下： * 我们最常用的是包含`stdio.h`，使用其中声明的`printf`函数，这个函数在`libc`中实现，程序在运行时要动态链接`libc`共享库。 * 在[第 1 节 “数学函数”](ch03s01.html#func.mathfunc)中用到了`math.h`中声明的`sin`和`log`函数，使用这些函数需要动态链接`libm`共享库。 * 在[第 2 节 “数组应用实例：统计随机数”](ch08s02.html#array.statistic)中用到了`stdlib.h`中声明的`rand`函数，还提到了这个头文件中定义的`RAND_MAX`常量，在[例 8.5 “剪刀石头布”](ch08s05.html#array.scissor)中用到了`stdlib.h`中声明的`srand`函数和`time.h`中声明的`time`函数。使用这些函数需要动态链接`libc`共享库。 * 在[第 2 节 “`main`函数和启动例程”](ch19s02.html#asmc.main)中用到了`stdlib.h`中声明的`exit`函数，使用这个函数需要动态链接`libc`共享库。 * 在[第 6 节 “折半查找”](ch11s06.html#sortsearch.binary)中用到了`assert.h`中定义的`assert`宏，在[第 4 节 “其它预处理特性”](ch21s04.html#prep.other)中我们看到了这个宏的一种实现，它的实现需要调用`stdio.h`和`stdlib.h`中声明的函数，所以使用这个宏也需要动态链接`libc`共享库。 * 在[第 2.4 节 “sizeof运算符与typedef类型声明”](ch16s02.html#op.sizeoftypedef)中提到了`size_t`类型在`stddef.h`中定义，在[第 1 节 “指针的基本概念”](ch23s01.html#pointer.intro)中提到了`NULL`指针也在`stddef.h`中定义。 * 在[第 1 节 “本章的预备知识”](ch24s01.html#interface.prereq)中介绍了`stdlib.h`中声明的`malloc`和`free`函数以及`string.h`中声明的`strcpy`和`strncpy`函数，使用这些函数需要动态链接`libc`共享库。 * 在[第 6 节 “可变参数”](ch24s06.html#interface.va)中介绍了`stdarg.h`中定义的`va_list`类型和`va_arg`、`va_start`、`va_end`等宏定义，并给出了一种实现，这些宏定义的实现并没有调用库函数，所以不依赖于某个共享库，这一点和`assert`不同。总结一下，Linux平台提供的C标准库包括： * 一组头文件，定义了很多类型和宏，声明了很多库函数。这些头文件放在哪些目录下取决于不同的编译器，在我的系统上，`stdarg.h`和`stddef.h`位于`/usr/lib/gcc/i486-linux-gnu/4.3.2/include`目录下，`stdio.h`、`stdlib.h`、`time.h`、`math.h`、`assert.h`位于`/usr/include`目录下。C99标准定义的头文件有24个，本书只介绍其中最基本、最常用的几个。 * 一组库文件，提供了库函数的实现。大多数库函数在`libc`共享库中，有些库函数在另外的共享库中，例如数学函数在`libm`中。在[第 4 节 “共享库”](ch20s04.html#link.shared)讲过，通常`libc`共享库是`/lib/libc.so.6`，而我的系统启用了hwcap机制，`libc`共享库是`/lib/tls/i686/cmov/libc.so.6`。本章介绍另外一些最基本和最常用的库函数（包括一些不属于C标准但在UNIX平台上很常用的函数），写这一章是为了介绍字符串操作和文件操作的基本概念，而不是为了写一本C标准库函数的参考手册，Man Page已经是一本很好的手册了，读者学完这一章之后在开发时应该查阅Man Page，而不是把我这一章当参考手册来翻，所以本章不会面面俱到介绍所有的库函数，对于本章讲到的函数有些也不会讲得很细，因为我假定读者经过上一章的学习再结合我讲过的基本概念已经能看懂相关的Man Page了。很多技术书的作者给自己的书太多定位，既想写成一本入门教程，又想写成一本参考手册，我觉得这样不好，读者过于依赖技术书就失去了看真正的手册的能力。 ## 1. 字符串操作函数程序按功能划分可分为数值运算、符号处理和I/O操作三类，符号处理程序占相当大的比例，符号处理程序无处不在，编译器、浏览器、Office套件等程序的主要功能都是符号处理。无论多复杂的符号处理都是由各种基本的字符串操作组成的，本节介绍如何用C语言的库函数做字符串初始化、取长度、拷贝、连接、比较、搜索等基本操作。 ### 1.1. 初始化字符串 ``` #include <string.h> void *memset(void *s, int c, size_t n); 返回值：s指向哪，返回的指针就指向哪 ``` `memset`函数把`s`所指的内存地址开始的`n`个字节都填充为`c`的值。通常`c`的值为0，把一块内存区清零。例如定义`char buf[10];`，如果它是全局变量或静态变量，则自动初始化为0（位于`.bss`段），如果它是函数的局部变量，则初值不确定，可以用`memset(buf, 0, 10)`清零，由`malloc`分配的内存初值也是不确定的，也可以用`memset`清零。 ### 1.2. 取字符串的长度 ``` #include <string.h> size_t strlen(const char *s); 返回值：字符串的长度 ``` `strlen`函数返回`s`所指的字符串的长度。该函数从`s`所指的第一个字符开始找`'\0'`字符，一旦找到就返回，返回的长度不包括`'\0'`字符在内。例如定义`char buf[] = "hello";`，则`strlen(buf)`的值是5，但要注意，如果定义`char buf[5] = "hello";`，则调用`strlen(buf)`是危险的，会造成数组访问越界。 ### 1.3. 拷贝字符串在[第 1 节 “本章的预备知识”](ch24s01.html#interface.prereq)中介绍了`strcpy`和`strncpy`函数，拷贝以`'\0'`结尾的字符串，`strncpy`还带一个参数指定最多拷贝多少个字节，此外，`strncpy`并不保证缓冲区以`'\0'`结尾。现在介绍`memcpy`和`memmove`函数。 ``` #include <string.h> void *memcpy(void *dest, const void *src, size_t n); void *memmove(void *dest, const void *src, size_t n); 返回值：dest指向哪，返回的指针就指向哪 ``` `memcpy`函数从`src`所指的内存地址拷贝`n`个字节到`dest`所指的内存地址，和`strncpy`不同，`memcpy`并不是遇到`'\0'`就结束，而是一定会拷贝完`n`个字节。这里的命名规律是，以`str`开头的函数处理以`'\0'`结尾的字符串，而以`mem`开头的函数则不关心`'\0'`字符，或者说这些函数并不把参数当字符串看待，因此参数的指针类型是`void *`而非`char *`。 `memmove`也是从`src`所指的内存地址拷贝`n`个字节到`dest`所指的内存地址，虽然叫move但其实也是拷贝而非移动。但是和`memcpy`有一点不同，`memcpy`的两个参数`src`和`dest`所指的内存区间如果重叠则无法保证正确拷贝，而`memmove`却可以正确拷贝。假设定义了一个数组`char buf[20] = "hello world\n";`，如果想把其中的字符串往后移动一个字节（变成`"hhello world\n"`），调用`memcpy(buf + 1, buf, 13)`是无法保证正确拷贝的： **例 25.1. 错误的memcpy调用** ``` #include <stdio.h> #include <string.h> int main(void) { char buf[20] = "hello world\n"; memcpy(buf + 1, buf, 13); printf(buf); return 0; } ``` 在我的机器上运行的结果是`hhhllooworrd`。如果把代码中的`memcpy`改成`memmove`则可以保证正确拷贝。`memmove`可以这样实现： ``` void *memmove(void *dest, const void *src, size_t n) { char temp[n]; int i; char *d = dest; const char *s = src; for (i = 0; i < n; i++) temp[i] = s[i]; for (i = 0; i < n; i++) d[i] = temp[i]; return dest; } ``` 借助于一个临时缓冲区`temp`，即使`src`和`dest`所指的内存区间有重叠也能正确拷贝。思考一下，如果不借助于临时缓冲区能不能正确处理重叠内存区间的拷贝？用`memcpy`如果得到的结果是`hhhhhhhhhhhhhh`倒不奇怪，可为什么会得到`hhhllooworrd`这个奇怪的结果呢？根据这个结果猜测的一种可能的实现是： ``` void *memcpy(void *dest, const void *src, size_t n) { char *d = dest; const char *s = src; int *di; const int *si; int r = n % 4; while (r--) *d++ = *s++; di = (int *)d; si = (const int *)s; n /= 4; while (n--) *di++ = *si++; return dest; } ``` 在32位的x86平台上，每次拷贝1个字节需要一条指令，每次拷贝4个字节也只需要一条指令，`memcpy`函数的实现尽可能4个字节4个字节地拷贝，因而得到上述结果。 ### C99的`restrict`关键字我们来看一个跟`memcpy`/`memmove`类似的问题。下面的函数将两个数组中对应的元素相加，结果保存在第三个数组中。 ``` void vector_add(const double *x, const double *y, double *result) { int i; for (i = 0; i < 64; ++i) result[i] = x[i] + y[i]; } ``` 如果这个函数要在多处理器的计算机上执行，编译器可以做这样的优化：把这一个循环拆成两个循环，一个处理器计算i值从0到31的循环，另一个处理器计算i值从32到63的循环，这样两个处理器可以同时工作，使计算时间缩短一半。但是这样的编译优化能保证得出正确结果吗？假如`result`和`x`所指的内存区间是重叠的，`result[0]`其实是`x[1]`，`result[i]`其实是`x[i+1]`，这两个处理器就不能各干各的事情了，因为第二个处理器的工作依赖于第一个处理器的最终计算结果，这种情况下编译优化的结果是错的。这样看来编译器是不敢随便做优化了，那么多处理器提供的并行性就无法利用，岂不可惜？为此，C99引入`restrict`关键字，如果程序员把上面的函数声明为`void vector_add(const double *restrict x, const double *restrict y, double *restrict result)`，就是告诉编译器可以放心地对这个函数做优化，程序员自己会保证这些指针所指的内存区间互不重叠。由于`restrict`是C99引入的新关键字，目前Linux的Man Page还没有更新，所以都没有`restrict`关键字，本书的函数原型都取自Man Page，所以也都没有`restrict`关键字。但在C99标准中库函数的原型都在必要的地方加了`restrict`关键字，在C99中`memcpy`的原型是`void *memcpy(void * restrict s1, const void * restrict s2, size_t n);`，就是告诉调用者，这个函数的实现可能会做些优化，编译器也可能会做些优化，传进来的指针不允许指向重叠的内存区间，否则结果可能是错的，而`memmove`的原型是`void *memmove(void *s1, const void *s2, size_t n);`，没有`restrict`关键字，说明传给这个函数的指针允许指向重叠的内存区间。在`restrict`关键字出现之前都是用自然语言描述哪些函数的参数不允许指向重叠的内存区间，例如在C89标准的库函数一章开头提到，本章描述的所有函数，除非特别说明，都不应该接收两个指针参数指向重叠的内存区间，例如调用`sprintf`时传进来的格式化字符串和结果字符串的首地址相同，诸如此类的调用都是非法的。本书也遵循这一惯例，除非像`memmove`这样特别说明之外，都表示“不允许”。关于`restrict`关键字更详细的解释可以参考[[BeganFORTRAN]](bi01.html#bibli.restrict "The New C: It All Began with FORTRAN（http://www.ddj.com/cpp/184401313）")。字符串的拷贝也可以用`strdup(3)`函数，这个函数不属于C标准库，是POSIX标准中定义的，POSIX标准定义了UNIX系统的各种接口，包含C标准库的所有函数和很多其它的系统函数，在[第 2 节 “C标准I/O库函数与Unbuffered I/O函数”](ch28s02.html#io.twoioflavors)将详细介绍POSIX标准。 ``` #include <string.h> char *strdup(const char *s); 返回值：指向新分配的字符串 ``` 这个函数调用`malloc`动态分配内存，把字符串`s`拷贝到新分配的内存中然后返回。用这个函数省去了事先为新字符串分配内存的麻烦，但是用完之后要记得调用`free`释放新字符串的内存。 ### 1.4. 连接字符串 ``` #include <string.h> char *strcat(char *dest, const char *src); char *strncat(char *dest, const char *src, size_t n); 返回值：dest指向哪，返回的指针就指向哪 ``` `strcat`把`src`所指的字符串连接到`dest`所指的字符串后面，例如： ``` char d[10] = "foo"; char s[10] = "bar"; strcat(d, s); printf("%s %s\n", d, s); ``` 调用`strcat`函数后，缓冲区`s`的内容没变，缓冲区`d`中保存着字符串`"foobar"`，注意原来`"foo"`后面的`'\0'`被连接上来的字符串`"bar"`覆盖掉了，`"bar"`后面的`'\0'`仍保留。 `strcat`和`strcpy`有同样的问题，调用者必须确保`dest`缓冲区足够大，否则会导致缓冲区溢出错误。`strncat`函数通过参数`n`指定一个长度，就可以避免缓冲区溢出错误。注意这个参数`n`的含义和`strncpy`的参数`n`不同，它并不是缓冲区`dest`的长度，而是表示最多从`src`缓冲区中取`n`个字符（不包括结尾的`'\0'`）连接到`dest`后面。如果`src`中前`n`个字符没有出现`'\0'`，则取前`n`个字符再加一个`'\0'`连接到`dest`后面，所以`strncat`总是保证`dest`缓冲区以`'\0'`结尾，这一点又和`strncpy`不同，`strncpy`并不保证`dest`缓冲区以`'\0'`结尾。所以，提供给`strncat`函数的`dest`缓冲区的大小至少应该是`strlen(dest)+n+1`个字节，才能保证不溢出。 ### 1.5. 比较字符串 ``` #include <string.h> int memcmp(const void *s1, const void *s2, size_t n); int strcmp(const char *s1, const char *s2); int strncmp(const char *s1, const char *s2, size_t n); 返回值：负值表示s1小于s2，0表示s1等于s2，正值表示s1大于s2 ``` `memcmp`从前到后逐个比较缓冲区`s1`和`s2`的前`n`个字节（不管里面有没有`'\0'`），如果`s1`和`s2`的前`n`个字节全都一样就返回0，如果遇到不一样的字节，`s1`的字节比`s2`小就返回负值，`s1`的字节比`s2`大就返回正值。 `strcmp`把`s1`和`s2`当字符串比较，在其中一个字符串中遇到`'\0'`时结束，按照上面的比较准则，`"ABC"`比`"abc"`小，`"ABCD"`比`"ABC"`大，`"123A9"`比`"123B2"`小。 `strncmp`的比较结束条件是：要么在其中一个字符串中遇到`'\0'`结束（类似于`strcmp`），要么比较完`n`个字符结束（类似于`memcmp`）。例如，`strncmp("ABCD", "ABC", 3)`的返回值是0，`strncmp("ABCD", "ABC", 4)`的返回值是正值。 ``` #include <strings.h> int strcasecmp(const char *s1, const char *s2); int strncasecmp(const char *s1, const char *s2, size_t n); 返回值：负值表示s1小于s2，0表示s1等于s2，正值表示s1大于s2 ``` 这两个函数和`strcmp`/`strncmp`类似，但在比较过程中忽略大小写，大写字母A和小写字母a认为是相等的。这两个函数不属于C标准库，是POSIX标准中定义的。 ### 1.6. 搜索字符串 ``` #include <string.h> char *strchr(const char *s, int c); char *strrchr(const char *s, int c); 返回值：如果找到字符c，返回字符串s中指向字符c的指针，如果找不到就返回NULL ``` `strchr`在字符串`s`中从前到后查找字符`c`，找到字符`c`第一次出现的位置时就返回，返回值指向这个位置，如果找不到字符`c`就返回`NULL`。`strrchr`和`strchr`类似，但是从右向左找字符`c`，找到字符`c`第一次出现的位置就返回，函数名中间多了一个字母r可以理解为Right-to-left。 ``` #include <string.h> char *strstr(const char *haystack, const char *needle); 返回值：如果找到子串，返回值指向子串的开头，如果找不到就返回NULL ``` `strstr`在一个长字符串中从前到后找一个子串（Substring），找到子串第一次出现的位置就返回，返回值指向子串的开头，如果找不到就返回NULL。这两个参数名很形象，在干草堆`haystack`中找一根针`needle`，按中文的说法叫大海捞针，显然`haystack`是长字符串，`needle`是要找的子串。搜索子串有一个显而易见的算法，可以用两层的循环，外层循环把`haystack`中的每一个字符的位置依次假定为子串的开头，内层循环从这个位置开始逐个比较`haystack`和`needle`的每个字符是否相同。想想这个算法最多需要做多少次比较？其实有比这个算法高效得多的算法，有兴趣的读者可以参考[[算法导论]](bi01.html#bibli.algorithm "Introduction to Algorithms")。 ### 1.7. 分割字符串很多文件格式或协议格式中会规定一些分隔符或者叫界定符（Delimiter），例如`/etc/passwd`文件中保存着系统的帐号信息： ``` $ cat /etc/passwd root:x:0:0:root:/root:/bin/bash daemon:x:1:1:daemon:/usr/sbin:/bin/sh bin:x:2:2:bin:/bin:/bin/sh ... ``` 每条记录占一行，也就是说记录之间的分隔符是换行符，每条记录又由若干个字段组成，这些字段包括用户名、密码、用户id、组id、个人信息、主目录、登录Shell，字段之间的分隔符是:号。解析这样的字符串需要根据分隔符把字符串分割成几段，C标准库提供的`strtok`函数可以很方便地完成分割字符串的操作。tok是Token的缩写，分割出来的每一段字符串称为一个Token。 ``` #include <string.h> char *strtok(char *str, const char *delim); char *strtok_r(char *str, const char *delim, char **saveptr); 返回值：返回指向下一个Token的指针，如果没有下一个Token了就返回NULL ``` 参数`str`是待分割的字符串，`delim`是分隔符，可以指定一个或多个分隔符，`strtok`遇到其中任何一个分隔符就会分割字符串。看下面的例子。 **例 25.2. strtok** ``` #include <stdio.h> #include <string.h> int main(void) { char str[] = "root:x::0:root:/root:/bin/bash:"; char *token; token = strtok(str, ":"); printf("%s\n", token); while ( (token = strtok(NULL, ":")) != NULL) printf("%s\n", token); return 0; } ``` ``` $ ./a.out root x 0 root /root /bin/bash ``` 结合这个例子，`strtok`的行为可以这样理解：冒号是分隔符，把`"root:x::0:root:/root:/bin/bash:"`这个字符串分隔成`"root"`、`"x"`、`""`、`"0"`、`"root"`、`"/root"`、`"/bin/bash"`、`""`等几个Token，但空字符串的Token被忽略。第一次调用要把字符串首地址传给`strtok`的第一个参数，以后每次调用第一个参数只要传`NULL`就可以了，`strtok`函数自己会记住上次处理到字符串的什么位置（显然这是通过`strtok`函数中的一个静态指针变量记住的）。用`gdb`跟踪这个程序，会发现`str`字符串被`strtok`不断修改，每次调用`strtok`把`str`中的一个分隔符改成`'\0'`，分割出一个小字符串，并返回这个小字符串的首地址。 ``` (gdb) start Breakpoint 1 at 0x8048415: file main.c, line 5. Starting program: /home/akaedu/a.out main () at main.c:5 5 { (gdb) n 6 char str[] = "root:x::0:root:/root:/bin/bash:"; (gdb) 9 token = strtok(str, ":"); (gdb) display str 1: str = "root:x::0:root:/root:/bin/bash:" (gdb) n 10 printf("%s\n", token); 1: str = "root\000x::0:root:/root:/bin/bash:" (gdb) root 11 while ( (token = strtok(NULL, ":")) != NULL) 1: str = "root\000x::0:root:/root:/bin/bash:" (gdb) 12 printf("%s\n", token); 1: str = "root\000x\000:0:root:/root:/bin/bash:" (gdb) x 11 while ( (token = strtok(NULL, ":")) != NULL) 1: str = "root\000x\000:0:root:/root:/bin/bash:" ``` 刚才提到在`strtok`函数中应该有一个静态指针变量记住上次处理到字符串中的什么位置，所以不需要每次调用时都把字符串中的当前处理位置传给`strtok`，但是在函数中使用静态变量是不好的，以后会讲到这样的函数是不可重入的。`strtok_r`函数则不存在这个问题，它的内部没有静态变量，调用者需要自己分配一个指针变量来维护字符串中的当前处理位置，每次调用时把这个指针变量的地址传给`strtok_r`的第三个参数，告诉`strtok_r`从哪里开始处理，`strtok_r`返回时再把新的处理位置写回到这个指针变量中（这是一个Value-result参数）。`strtok_r`末尾的r就表示可重入（Reentrant），这个函数不属于C标准库，是在POSIX标准中定义的。关于`strtok_r`的用法Man Page上有一个很好的例子： **例 25.3. strtok_r** ``` #include <stdio.h> #include <stdlib.h> #include <string.h> int main(int argc, char *argv[]) { char *str1, *str2, *token, *subtoken; char *saveptr1, *saveptr2; int j; if (argc != 4) { fprintf(stderr, "Usage: %s string delim subdelim\n", argv[0]); exit(EXIT_FAILURE); } for (j = 1, str1 = argv[1]; ; j++, str1 = NULL) { token = strtok_r(str1, argv[2], &saveptr1); if (token == NULL) break; printf("%d: %s\n", j, token); for (str2 = token; ; str2 = NULL) { subtoken = strtok_r(str2, argv[3], &saveptr2); if (subtoken == NULL) break; printf(" --> %s\n", subtoken); } } exit(EXIT_SUCCESS); } ``` ``` $ ./a.out 'a/bbb///cc;xxx:yyy:' ':;' '/' 1: a/bbb///cc --> a --> bbb --> cc 2: xxx --> xxx 3: yyy --> yyy ``` `a/bbb///cc;xxx:yyy:`这个字符串有两级分隔符，一级分隔符是:号或;号，把这个字符串分割成`a/bbb///cc`、`xxx`、`yyy`三个子串，二级分隔符是/，只有第一个子串中有二级分隔符，它被进一步分割成`a`、`bbb`、`cc`三个子串。由于`strtok_r`不使用静态变量，而是要求调用者自己保存字符串的当前处理位置，所以这个例子可以在按一级分隔符分割整个字符串的过程中穿插着用二级分隔符分割其中的每个子串。建议读者用`gdb`的`display`命令跟踪`argv[1]`、`saveptr1`和`saveptr2`，以理解`strtok_r`函数的工作方式。 Man Page的_BUGS_部分指出了用`strtok`和`strtok_r`函数需要注意的问题： * 这两个函数要改写字符串以达到分割的效果 * 这两个函数不能用于常量字符串，因为试图改写`.rodata`段会产生段错误 * 在做了分割之后，字符串中的分隔符就被`'\0'`覆盖了 * `strtok`函数使用了静态变量，它不是线程安全的，必要时应该用可重入的`strtok_r`函数，以后再详细介绍“可重入”和“线程安全”这两个概念 #### 习题 1、出于练习的目的，`strtok`和`strtok_r`函数非常值得自己动手实现一遍，在这个过程中不仅可以更深刻地理解这两个函数的工作原理，也为以后理解“可重入”和“线程安全”这两个重要概念打下基础。 2、解析URL中的路径和查询字符串。动态网页的URL末尾通常带有查询，例如： http://www.google.cn/search?complete=1&hl=zh-CN&ie=GB2312&q=linux&meta= http://www.baidu.com/s?wd=linux&cl=3 比如上面第一个例子，`http://www.google.cn/search`是路径部分，?号后面的`complete=1&hl=zh-CN&ie=GB2312&q=linux&meta=`是查询字符串，由五个“key=value”形式的键值对（Key-value Pair）组成，以&隔开，有些键对应的值可能是空字符串，比如这个例子中的键`meta`。现在要求实现一个函数，传入一个带查询字符串的URL，首先检查输入格式的合法性，然后对URL进行切分，将路径部分和各键值对分别传出，请仔细设计函数接口以便传出这些字符串。如果函数中有动态分配内存的操作，还要另外实现一个释放内存的函数。完成之后，为自己设计的函数写一个Man Page。 ## 2. 标准I/O库函数 ### 2.1. 文件的基本概念我们已经多次用到了文件，例如源文件、目标文件、可执行文件、库文件等，现在学习如何用C标准库对文件进行读写操作，对文件的读写也属于I/O操作的一种，本节介绍的大部分函数在头文件`stdio.h`中声明，称为标准I/O库函数。文件可分为文本文件（Text File）和二进制文件（Binary File）两种，源文件是文本文件，而目标文件、可执行文件和库文件是二进制文件。文本文件是用来保存字符的，文件中的字节都是字符的某种编码（例如ASCII或UTF-8），用`cat`命令可以查看其中的字符，用`vi`可以编辑其中的字符，而二进制文件不是用来保存字符的，文件中的字节表示其它含义，例如可执行文件中有些字节表示指令，有些字节表示各Section和Segment在文件中的位置，有些字节表示各Segment的加载地址。在[第 5.1 节 “目标文件”](ch18s05.html#asm.relocatable)中我们用`hexdump`命令查看过一个二进制文件。我们再做一个小实验，用`vi`编辑一个文件`textfile`，在其中输入`5678`然后保存退出，用`ls -l`命令可以看到它的长度是5： ``` $ ls -l textfile -rw-r--r-- 1 akaedu akaedu 5 2009-03-20 10:58 textfile ``` `5678`四个字符各占一个字节，`vi`会自动在文件末尾加一个换行符，所以文件长度是5。用`od`命令查看该文件的内容： ``` $ od -tx1 -tc -Ax textfile 000000 35 36 37 38 0a 5 6 7 8 \n 000005 ``` `-tx1`选项表示将文件中的字节以十六进制的形式列出来，每组一个字节，`-tc`选项表示将文件中的ASCII码以字符形式列出来。和`hexdump`类似，输出结果最左边的一列是文件中的地址，默认以八进制显示，`-Ax`选项要求以十六进制显示文件中的地址。这样我们看到，这个文件中保存了5个字符，以ASCII码保存。ASCII码的范围是0~127，所以ASCII码文本文件中每个字节只用到低7位，最高位都是0。以后我们会经常用到`od`命令。文本文件是一个模糊的概念。有些时候说文本文件是指用`vi`可以编辑出来的文件，例如`/etc`目录下的各种配置文件，这些文件中只包含ASCII码中的可见字符，而不包含像`'\0'`这种不可见字符，也不包含最高位是1的非ASCII码字节。从广义上来说，只要是专门保存字符的文件都算文本文件，包含不可见字符的也算，采用其它字符编码（例如UTF-8编码）的也算。 ### 2.2. fopen/fclose 在操作文件之前要用`fopen`打开文件，操作完毕要用`fclose`关闭文件。打开文件就是在操作系统中分配一些资源用于保存该文件的状态信息，并得到该文件的标识，以后用户程序就可以用这个标识对文件做各种操作，关闭文件则释放文件在操作系统中占用的资源，使文件的标识失效，用户程序就无法再操作这个文件了。 ``` #include <stdio.h> FILE *fopen(const char *path, const char *mode); 返回值：成功返回文件指针，出错返回NULL并设置errno ``` `path`是文件的路径名，`mode`表示打开方式。如果文件打开成功，就返回一个`FILE *`文件指针来标识这个文件。以后调用其它函数对文件做读写操作都要提供这个指针，以指明对哪个文件进行操作。`FILE`是C标准库中定义的结构体类型，其中包含该文件在内核中标识（在[第 2 节 “C标准I/O库函数与Unbuffered I/O函数”](ch28s02.html#io.twoioflavors)将会讲到这个标识叫做文件描述符）、I/O缓冲区和当前读写位置等信息，但调用者不必知道`FILE`结构体都有哪些成员，我们很快就会看到，调用者只是把文件指针在库函数接口之间传来传去，而文件指针所指的`FILE`结构体的成员在库函数内部维护，调用者不应该直接访问这些成员，这种编程思想在面向对象方法论中称为封装（Encapsulation）。像`FILE *`这样的指针称为不透明指针（Opaque Pointer）或者叫句柄（Handle），`FILE *`指针就像一个把手（Handle），抓住这个把手就可以打开门或抽屉，但用户只能抓这个把手，而不能直接抓门或抽屉。下面说说参数`path`和`mode`，`path`可以是相对路径也可以是绝对路径，`mode`表示打开方式是读还是写。比如`fp = fopen("/tmp/file2", "w");`表示打开绝对路径`/tmp/file2`，只做写操作，`path`也可以是相对路径，比如`fp = fopen("file.a", "r");`表示在当前工作目录下打开文件`file.a`，只做读操作，再比如`fp = fopen("../a.out", "r");`只读打开当前工作目录上一层目录下的`a.out`，`fp = fopen("Desktop/file3", "w");`只写打开当前工作目录下子目录`Desktop`下的`file3`。相对路径是相对于当前工作目录（Current Working Directory）的路径，每个进程都有自己的当前工作目录，Shell进程的当前工作目录可以用`pwd`命令查看： ``` $ pwd /home/akaedu ``` 通常Linux发行版都把Shell配置成在提示符前面显示当前工作目录，例如`~$`表示当前工作目录是主目录，`/etc$`表示当前工作目录是`/etc`。用`cd`命令可以改变Shell进程的当前工作目录。在Shell下敲命令启动新的进程，则该进程的当前工作目录继承自Shell进程的当前工作目录，该进程也可以调用`chdir(2)`函数改变自己的当前工作目录。 `mode`参数是一个字符串，由`rwatb+`六个字符组合而成，`r`表示读，`w`表示写，`a`表示追加（Append），在文件末尾追加数据使文件的尺寸增大。`t`表示文本文件，`b`表示二进制文件，有些操作系统的文本文件和二进制文件格式不同，而在UNIX系统中，无论文本文件还是二进制文件都是由一串字节组成，`t`和`b`没有区分，用哪个都一样，也可以省略不写。如果省略`t`和`b`，`rwa+`四个字符有以下6种合法的组合： `"r"` 只读，文件必须已存在 "w" 只写，如果文件不存在则创建，如果文件已存在则把文件长度截断（Truncate）为0字节再重新写，也就是替换掉原来的文件内容 "a" 只能在文件末尾追加数据，如果文件不存在则创建 "r+" 允许读和写，文件必须已存在 "w+" 允许读和写，如果文件不存在则创建，如果文件已存在则把文件长度截断为0字节再重新写 "a+" 允许读和追加数据，如果文件不存在则创建在打开一个文件时如果出错，`fopen`将返回`NULL`并设置`errno`，`errno`稍后介绍。在程序中应该做出错处理，通常这样写： ``` if ( (fp = fopen("/tmp/file1", "r")) == NULL) { printf("error open file /tmp/file1!\n"); exit(1); } ``` 比如`/tmp/file1`这个文件不存在，而`r`打开方式又不会创建这个文件，`fopen`就会出错返回。再说说`fclose`函数。 ``` #include <stdio.h> int fclose(FILE *fp); 返回值：成功返回0，出错返回EOF并设置errno ``` 把文件指针传给`fclose`可以关闭它所标识的文件，关闭之后该文件指针就无效了，不能再使用了。如果`fclose`调用出错（比如传给它一个无效的文件指针）则返回`EOF`并设置`errno`，`errno`稍后介绍，`EOF`在`stdio.h`中定义： ``` /* End of file character. Some things throughout the library rely on this being -1\. */ #ifndef EOF # define EOF (-1) #endif ``` 它的值是-1。`fopen`调用应该和`fclose`调用配对，打开文件操作完之后一定要记得关闭。如果不调用`fclose`，在进程退出时系统会自动关闭文件，但是不能因此就忽略`fclose`调用，如果写一个长年累月运行的程序（比如网络服务器程序），打开的文件都不关闭，堆积得越来越多，就会占用越来越多的系统资源。 ### 2.3. stdin/stdout/stderr 我们经常用`printf`打印到屏幕，也用过`scanf`读键盘输入，这些也属于I/O操作，但不是对文件做I/O操作而是对终端设备做I/O操作。所谓终端（Terminal）是指人机交互的设备，也就是可以接受用户输入并输出信息给用户的设备。在计算机刚诞生的年代，终端是电传打字机和打印机，现在的终端通常是键盘和显示器。终端设备和文件一样也需要先打开后操作，终端设备也有对应的路径名，`/dev/tty`就表示和当前进程相关联的终端设备（在[第 1.1 节 “终端的基本概念”](ch34s01.html#jobs.intro)会讲到这叫进程的控制终端）。也就是说，`/dev/tty`不是一个普通的文件，它不表示磁盘上的一组数据，而是表示一个设备。用`ls`命令查看这个文件： ``` $ ls -l /dev/tty crw-rw-rw- 1 root dialout 5, 0 2009-03-20 19:31 /dev/tty ``` 开头的`c`表示文件类型是字符设备。中间的`5, 0`是它的设备号，主设备号5，次设备号0，主设备号标识内核中的一个设备驱动程序，次设备号标识该设备驱动程序管理的一个设备。内核通过设备号找到相应的驱动程序，完成对该设备的操作。我们知道常规文件的这一列应该显示文件尺寸，而设备文件的这一列显示设备号，这表明设备文件是没有文件尺寸这个属性的，因为设备文件在磁盘上不保存数据，对设备文件做读写操作并不是读写磁盘上的数据，而是在读写设备。UNIX的传统是Everything is a file，键盘、显示器、串口、磁盘等设备在`/dev`目录下都有一个特殊的设备文件与之对应，这些设备文件也可以像普通文件一样打开、读、写和关闭，使用的函数接口是相同的。本书中不严格区分“文件”和“设备”这两个概念，遇到“文件”这个词，读者可以根据上下文理解它是指普通文件还是设备，如果需要强调是保存在磁盘上的普通文件，本书会用“常规文件”（Regular File）这个词。那为什么`printf`和`scanf`不用打开就能对终端设备进行操作呢？因为在程序启动时（在`main`函数还没开始执行之前）会自动把终端设备打开三次，分别赋给三个`FILE *`指针`stdin`、`stdout`和`stderr`，这三个文件指针是`libc`中定义的全局变量，在`stdio.h`中声明，`printf`向`stdout`写，而`scanf`从`stdin`读，后面我们会看到，用户程序也可以直接使用这三个文件指针。这三个文件指针的打开方式都是可读可写的，但通常`stdin`只用于读操作，称为标准输入（Standard Input），`stdout`只用于写操作，称为标准输出（Standard Output），`stderr`也只用于写操作，称为标准错误输出（Standard Error），通常程序的运行结果打印到标准输出，而错误提示（例如`gcc`报的警告和错误）打印到标准错误输出，所以`fopen`的错误处理写成这样更符合惯例： ``` if ( (fp = fopen("/tmp/file1", "r")) == NULL) { fputs("Error open file /tmp/file1\n", stderr); exit(1); } ``` `fputs`函数将在稍后详细介绍。不管是打印到标准输出还是打印到标准错误输出效果是一样的，都是打印到终端设备（也就是屏幕）了，那为什么还要分成标准输出和标准错误输出呢？以后我们会讲到重定向操作，可以把标准输出重定向到一个常规文件，而标准错误输出仍然对应终端设备，这样就可以把正常的运行结果和错误提示分开，而不是混在一起打印到屏幕了。 ### 2.4. errno与perror函数很多系统函数在错误返回时将错误原因记录在`libc`定义的全局变量`errno`中，每种错误原因对应一个错误码，请查阅`errno(3)`的Man Page了解各种错误码，`errno`在头文件`errno.h`中声明，是一个整型变量，所有错误码都是正整数。如果在程序中打印错误信息时直接打印`errno`变量，打印出来的只是一个整数值，仍然看不出是什么错误。比较好的办法是用`perror`或`strerror`函数将`errno`解释成字符串再打印。 ``` #include <stdio.h> void perror(const char *s); ``` `perror`函数将错误信息打印到标准错误输出，首先打印参数`s`所指的字符串，然后打印:号，然后根据当前`errno`的值打印错误原因。例如： **例 25.4. perror** ``` #include <stdio.h> #include <stdlib.h> int main(void) { FILE *fp = fopen("abcde", "r"); if (fp == NULL) { perror("Open file abcde"); exit(1); } return 0; } ``` 如果文件`abcde`不存在，`fopen`返回-1并设置`errno`为`ENOENT`，紧接着`perror`函数读取`errno`的值，将`ENOENT`解释成字符串`No such file or directory`并打印，最后打印的结果是`Open file abcde: No such file or directory`。虽然`perror`可以打印出错误原因，传给`perror`的字符串参数仍然应该提供一些额外的信息，以便在看到错误信息时能够很快定位是程序中哪里出了错，如果在程序中有很多个`fopen`调用，每个`fopen`打开不同的文件，那么在每个`fopen`的错误处理中打印文件名就很有帮助。如果把上面的程序改成这样： ``` #include <stdio.h> #include <stdlib.h> #include <errno.h> int main(void) { FILE *fp = fopen("abcde", "r"); if (fp == NULL) { perror("Open file abcde"); printf("errno: %d\n", errno); exit(1); } return 0; } ``` 则`printf`打印的错误号并不是`fopen`产生的错误号，而是`perror`产生的错误号。`errno`是一个全局变量，很多系统函数都会改变它，`fopen`函数Man Page中的_ERRORS_部分描述了它可能产生的错误码，`perror`函数的Man Page中没有`ERRORS`部分，说明它本身不产生错误码，但它调用的其它函数也有可能改变`errno`变量。大多数系统函数都有一个Side Effect，就是有可能改变`errno`变量（当然也有少数例外，比如`strcpy`），所以一个系统函数错误返回后应该马上检查`errno`，在检查`errno`之前不能再调用其它系统函数。 `strerror`函数可以根据错误号返回错误原因字符串。 ``` #include <string.h> char *strerror(int errnum); 返回值：错误码errnum所对应的字符串 ``` 这个函数返回指向静态内存的指针。以后学线程库时我们会看到，有些函数的错误码并不保存在`errno`中，而是通过返回值返回，就不能调用`perror`打印错误原因了，这时`strerror`就派上了用场： ``` fputs(strerror(n), stderr); ``` #### 习题 1、在系统头文件中找到各种错误码的宏定义。 2、做几个小练习，看看`fopen`出错有哪些常见的原因。打开一个没有访问权限的文件。 ``` fp = fopen("/etc/shadow", "r"); if (fp == NULL) { perror("Open /etc/shadow"); exit(1); } ``` `fopen`也可以打开一个目录，传给`fopen`的第一个参数目录名末尾可以加`/`也可以不加`/`，但只允许以只读方式打开。试试如果以可写的方式打开一个存在的目录会怎么样呢？ ``` fp = fopen("/home/akaedu/", "r+"); if (fp == NULL) { perror("Open /home/akaedu"); exit(1); } ``` 请读者自己设计几个实验，看看你还能测试出哪些错误原因？ ### 2.5. 以字节为单位的I/O函数 `fgetc`函数从指定的文件中读一个字节，`getchar`从标准输入读一个字节，调用`getchar()`相当于调用`fgetc(stdin)`。 ``` #include <stdio.h> int fgetc(FILE *stream); int getchar(void); 返回值：成功返回读到的字节，出错或者读到文件末尾时返回EOF ``` 注意在Man Page的函数原型中`FILE *`指针参数有时会起名叫`stream`，这是因为标准I/O库操作的文件有时也叫做流（Stream），文件由一串字节组成，每次可以读或写其中任意数量的字节，以后介绍TCP协议时会对流这个概念做更详细的解释。对于fgetc函数的使用有以下几点说明： * 要用`fgetc`函数读一个文件，该文件的打开方式必须是可读的。 * 系统对于每个打开的文件都记录着当前读写位置在文件中的地址（或者说距离文件开头的字节数），也叫偏移量（Offset）。当文件打开时，读写位置是0，每调用一次`fgetc`，读写位置向后移动一个字节，因此可以连续多次调用`fgetc`函数依次读取多个字节。 * `fgetc`成功时返回读到一个字节，本来应该是`unsigned char`型的，但由于函数原型中返回值是`int`型，所以这个字节要转换成`int`型再返回，那为什么要规定返回值是`int`型呢？因为出错或读到文件末尾时`fgetc`将返回`EOF`，即-1，保存在`int`型的返回值中是0xffffffff，如果读到字节0xff，由`unsigned char`型转换为`int`型是0x000000ff，只有规定返回值是`int`型才能把这两种情况区分开，如果规定返回值是`unsigned char`型，那么当返回值是0xff时无法区分到底是`EOF`还是字节0xff。如果需要保存`fgetc`的返回值，一定要保存在`int`型变量中，如果写成`unsigned char c = fgetc(fp);`，那么根据`c`的值又无法区分`EOF`和0xff字节了。注意，`fgetc`读到文件末尾时返回`EOF`，只是用这个返回值表示已读到文件末尾，并不是说每个文件末尾都有一个字节是`EOF`（根据上面的分析，EOF并不是一个字节）。 `fputc`函数向指定的文件写一个字节，`putchar`向标准输出写一个字节，调用`putchar(c)`相当于调用`fputc(c, stdout)`。 ``` #include <stdio.h> int fputc(int c, FILE *stream); int putchar(int c); 返回值：成功返回写入的字节，出错返回EOF ``` 对于`fputc`函数的使用也要说明几点： * 要用`fputc`函数写一个文件，该文件的打开方式必须是可写的（包括追加）。 * 每调用一次`fputc`，读写位置向后移动一个字节，因此可以连续多次调用`fputc`函数依次写入多个字节。但如果文件是以追加方式打开的，每次调用`fputc`时总是将读写位置移到文件末尾然后把要写入的字节追加到后面。下面的例子演示了这四个函数的用法，从键盘读入一串字符写到一个文件中，再从这个文件中读出这些字符打印到屏幕上。 **例 25.5. 用fputc/fget读写文件和终端** ``` #include <stdio.h> #include <stdlib.h> int main(void) { FILE *fp; int ch; if ( (fp = fopen("file2", "w+")) == NULL) { perror("Open file file2\n"); exit(1); } while ( (ch = getchar()) != EOF) fputc(ch, fp); rewind(fp); while ( (ch = fgetc(fp)) != EOF) putchar(ch); fclose(fp); return 0; } ``` 从终端设备读有点特殊。当调用`getchar()`或`fgetc(stdin)`时，如果用户没有输入字符，`getchar`函数就阻塞等待，所谓阻塞是指这个函数调用不返回，也就不能执行后面的代码，这个进程阻塞了，操作系统可以调度别的进程执行。从终端设备读还有一个特点，用户输入一般字符并不会使`getchar`函数返回，仍然阻塞着，只有当用户输入回车或者到达文件末尾时`getchar`才返回[[34](#ftn.id2831641)]。这个程序的执行过程分析如下： ``` $ ./a.out hello（输入hello并回车，这时第一次调用getchar返回，读取字符h存到文件中，然后连续调用getchar五次，读取ello和换行符存到文件中，第七次调用getchar又阻塞了） hey（输入hey并回车，第七次调用getchar返回，读取字符h存到文件中，然后连续调用getchar三次，读取ey和换行符存到文件中，第11次调用getchar又阻塞了）（这时输入Ctrl-D，第11次调用getchar返回EOF，跳出循环，进入下一个循环，回到文件开头，把文件内容一个字节一个字节读出来打印，直到文件结束） hello hey ``` 从终端设备输入时有两种方法表示文件结束，一种方法是在一行的开头输入Ctrl-D（如果不在一行的开头则需要连续输入两次Ctrl-D），另一种方法是利用Shell的Heredoc语法： ``` $ ./a.out <<END > hello > hey > END hello hey ``` `<<END`表示从下一行开始是标准输入，直到某一行开头出现`END`时结束。`<<`后面的结束符可以任意指定，不一定得是`END`，只要和输入的内容能区分开就行。在上面的程序中，第一个`while`循环结束时`fp`所指文件的读写位置在文件末尾，然后调用`rewind`函数把读写位置移到文件开头，再进入第二个`while`循环从头读取文件内容。 #### 习题 1、编写一个简单的文件复制程序。 ``` $ ./mycp dir1/fileA dir2/fileB ``` 运行这个程序可以把`dir1/fileA`文件拷贝到`dir2/fileB`文件。注意各种出错处理。 2、虽然我说`getchar`要读到换行符才返回，但上面的程序并没有提供证据支持我的说法，如果看成每敲一个键`getchar`就返回一次，也能解释程序的运行结果。请写一个小程序证明`getchar`确实是读到换行符才返回的。 ### 2.6. 操作读写位置的函数我们在上一节的例子中看到`rewind`函数把读写位置移到文件开头，本节介绍另外两个操作读写位置的函数，`fseek`可以任意移动读写位置，`ftell`可以返回当前的读写位置。 ``` #include <stdio.h> int fseek(FILE *stream, long offset, int whence); 返回值：成功返回0，出错返回-1并设置errno long ftell(FILE *stream); 返回值：成功返回当前读写位置，出错返回-1并设置errno void rewind(FILE *stream); ``` `fseek`的`whence`和`offset`参数共同决定了读写位置移动到何处，`whence`参数的含义如下： `SEEK_SET` 从文件开头移动`offset`个字节 `SEEK_CUR` 从当前位置移动`offset`个字节 `SEEK_END` 从文件末尾移动`offset`个字节 `offset`可正可负，负值表示向前（向文件开头的方向）移动，正值表示向后（向文件末尾的方向）移动，如果向前移动的字节数超过了文件开头则出错返回，如果向后移动的字节数超过了文件末尾，再次写入时将增大文件尺寸，从原来的文件末尾到`fseek`移动之后的读写位置之间的字节都是0。先前我们创建过一个文件`textfile`，其中有五个字节，`5678`加一个换行符，现在我们拿这个文件做实验。 **例 25.6. fseek** ``` #include <stdio.h> #include <stdlib.h> int main(void) { FILE* fp; if ( (fp = fopen("textfile","r+")) == NULL) { perror("Open file textfile"); exit(1); } if (fseek(fp, 10, SEEK_SET) != 0) { perror("Seek file textfile"); exit(1); } fputc('K', fp); fclose(fp); return 0; } ``` 运行这个程序，然后查看文件`textfile`的内容： ``` $ ./a.out $ od -tx1 -tc -Ax textfile 000000 35 36 37 38 0a 00 00 00 00 00 4b 5 6 7 8 \n \0 \0 \0 \0 \0 K 00000b ``` `fseek(fp, 10, SEEK_SET)`将读写位置移到第10个字节处（其实是第11个字节，从0开始数），然后在该位置写入一个字符K，这样`textfile`文件就变长了，从第5到第9个字节自动被填充为0。 ### 2.7. 以字符串为单位的I/O函数 `fgets`从指定的文件中读一行字符到调用者提供的缓冲区中，`gets`从标准输入读一行字符到调用者提供的缓冲区中。 ``` #include <stdio.h> char *fgets(char *s, int size, FILE *stream); char *gets(char *s); 返回值：成功时s指向哪返回的指针就指向哪，出错或者读到文件末尾时返回NULL ``` `gets`函数无需解释，Man Page的_BUGS_部分已经说得很清楚了：Never use gets()。`gets`函数的存在只是为了兼容以前的程序，我们写的代码都不应该调用这个函数。`gets`函数的接口设计得很有问题，就像`strcpy`一样，用户提供一个缓冲区，却不能指定缓冲区的大小，很可能导致缓冲区溢出错误，这个函数比`strcpy`更加危险，`strcpy`的输入和输出都来自程序内部，只要程序员小心一点就可以避免出问题，而`gets`读取的输入直接来自程序外部，用户可能通过标准输入提供任意长的字符串，程序员无法避免`gets`函数导致的缓冲区溢出错误，所以唯一的办法就是不要用它。现在说说`fgets`函数，参数`s`是缓冲区的首地址，`size`是缓冲区的长度，该函数从`stream`所指的文件中读取以`'\n'`结尾的一行（包括`'\n'`在内）存到缓冲区`s`中，并且在该行末尾添加一个`'\0'`组成完整的字符串。如果文件中的一行太长，`fgets`从文件中读了`size-1`个字符还没有读到`'\n'`，就把已经读到的`size-1`个字符和一个`'\0'`字符存入缓冲区，文件中剩下的半行可以在下次调用`fgets`时继续读。如果一次`fgets`调用在读入若干个字符后到达文件末尾，则将已读到的字符串加上`'\0'`存入缓冲区并返回，如果再次调用`fgets`则返回`NULL`，可以据此判断是否读到文件末尾。注意，对于`fgets`来说，`'\n'`是一个特别的字符，而`'\0'`并无任何特别之处，如果读到`'\0'`就当作普通字符读入。如果文件中存在`'\0'`字符（或者说0x00字节），调用`fgets`之后就无法判断缓冲区中的`'\0'`究竟是从文件读上来的字符还是由`fgets`自动添加的结束符，所以`fgets`只适合读文本文件而不适合读二进制文件，并且文本文件中的所有字符都应该是可见字符，不能有`'\0'`。 `fputs`向指定的文件写入一个字符串，`puts`向标准输出写入一个字符串。 ``` #include <stdio.h> int fputs(const char *s, FILE *stream); int puts(const char *s); 返回值：成功返回一个非负整数，出错返回EOF ``` 缓冲区`s`中保存的是以`'\0'`结尾的字符串，`fputs`将该字符串写入文件`stream`，但并不写入结尾的`'\0'`。与`fgets`不同的是，`fputs`并不关心的字符串中的`'\n'`字符，字符串中可以有`'\n'`也可以没有`'\n'`。`puts`将字符串`s`写到标准输出（不包括结尾的`'\0'`），然后自动写一个`'\n'`到标准输出。 #### 习题 1、用`fgets`/`fputs`写一个拷贝文件的程序，根据本节对`fgets`函数的分析，应该只能拷贝文本文件，试试用它拷贝二进制文件会出什么问题。 ### 2.8. 以记录为单位的I/O函数 ``` #include <stdio.h> size_t fread(void *ptr, size_t size, size_t nmemb, FILE *stream); size_t fwrite(const void *ptr, size_t size, size_t nmemb, FILE *stream); 返回值：读或写的记录数，成功时返回的记录数等于nmemb，出错或读到文件末尾时返回的记录数小于nmemb，也可能返回0 ``` `fread`和`fwrite`用于读写记录，这里的记录是指一串固定长度的字节，比如一个`int`、一个结构体或者一个定长数组。参数`size`指出一条记录的长度，而`nmemb`指出要读或写多少条记录，这些记录在`ptr`所指的内存空间中连续存放，共占`size * nmemb`个字节，`fread`从文件`stream`中读出`size * nmemb`个字节保存到`ptr`中，而`fwrite`把`ptr`中的`size * nmemb`个字节写到文件`stream`中。 `nmemb`是请求读或写的记录数，`fread`和`fwrite`返回的记录数有可能小于`nmemb`指定的记录数。例如当前读写位置距文件末尾只有一条记录的长度，调用`fread`时指定`nmemb`为2，则返回值为1。如果当前读写位置已经在文件末尾了，或者读文件时出错了，则`fread`返回0。如果写文件时出错了，则`fwrite`的返回值小于`nmemb`指定的值。下面的例子由两个程序组成，一个程序把结构体保存到文件中，另一个程序和从文件中读出结构体。 **例 25.7. fread/fwrite** ``` /* writerec.c */ #include <stdio.h> #include <stdlib.h> struct record { char name[10]; int age; }; int main(void) { struct record array[2] = {{"Ken", 24}, {"Knuth", 28}}; FILE *fp = fopen("recfile", "w"); if (fp == NULL) { perror("Open file recfile"); exit(1); } fwrite(array, sizeof(struct record), 2, fp); fclose(fp); return 0; } ``` ``` /* readrec.c */ #include <stdio.h> #include <stdlib.h> struct record { char name[10]; int age; }; int main(void) { struct record array[2]; FILE *fp = fopen("recfile", "r"); if (fp == NULL) { perror("Open file recfile"); exit(1); } fread(array, sizeof(struct record), 2, fp); printf("Name1: %s\tAge1: %d\n", array[0].name, array[0].age); printf("Name2: %s\tAge2: %d\n", array[1].name, array[1].age); fclose(fp); return 0; } ``` ``` $ gcc writerec.c -o writerec $ gcc readrec.c -o readrec $ ./writerec $ od -tx1 -tc -Ax recfile 000000 4b 65 6e 00 00 00 00 00 00 00 00 00 18 00 00 00 K e n \0 \0 \0 \0 \0 \0 \0 \0 \0 030 \0 \0 \0 000010 4b 6e 75 74 68 00 00 00 00 00 00 00 1c 00 00 00 K n u t h \0 \0 \0 \0 \0 \0 \0 034 \0 \0 \0 000020 $ ./readrec Name1: Ken Age1: 24 Name2: Knuth Age2: 28 ``` 我们把一个`struct record`结构体看作一条记录，由于结构体中有填充字节，每条记录占16字节，把两条记录写到文件中共占32字节。该程序生成的`recfile`文件是二进制文件而非文本文件，因为其中不仅保存着字符型数据，还保存着整型数据24和28（在`od`命令的输出中以八进制显示为030和034）。注意，直接在文件中读写结构体的程序是不可移植的，如果在一种平台上编译运行`writebin.c`程序，把生成的`recfile`文件拷到另一种平台并在该平台上编译运行`readbin.c`程序，则不能保证正确读出文件的内容，因为不同平台的大小端可能不同（因而对整型数据的存储方式不同），结构体的填充方式也可能不同（因而同一个结构体所占的字节数可能不同，`age`成员在`name`成员之后的什么位置也可能不同）。 ### 2.9. 格式化I/O函数现在该正式讲一下`printf`和`scanf`函数了，这两个函数都有很多种形式。 ``` #include <stdio.h> int printf(const char *format, ...); int fprintf(FILE *stream, const char *format, ...); int sprintf(char *str, const char *format, ...); int snprintf(char *str, size_t size, const char *format, ...); #include <stdarg.h> int vprintf(const char *format, va_list ap); int vfprintf(FILE *stream, const char *format, va_list ap); int vsprintf(char *str, const char *format, va_list ap); int vsnprintf(char *str, size_t size, const char *format, va_list ap); 返回值：成功返回格式化输出的字节数（不包括字符串的结尾'\0'），出错返回一个负值 ``` `printf`格式化打印到标准输出，而`fprintf`打印到指定的文件`stream`中。`sprintf`并不打印到文件，而是打印到用户提供的缓冲区`str`中并在末尾加`'\0'`，由于格式化后的字符串长度很难预计，所以很可能造成缓冲区溢出，用`snprintf`更好一些，参数`size`指定了缓冲区长度，如果格式化后的字符串长度超过缓冲区长度，`snprintf`就把字符串截断到`size-1`字节，再加上一个`'\0'`写入缓冲区，也就是说`snprintf`保证字符串以`'\0'`结尾。`snprintf`的返回值是格式化后的字符串长度（不包括结尾的`'\0'`），如果字符串被截断，返回的是截断之前的长度，把它和实际缓冲区中的字符串长度相比较就可以知道是否发生了截断。上面列出的后四个函数在前四个函数名的前面多了个`v`，表示可变参数不是以`...`的形式传进来，而是以`va_list`类型传进来。下面我们用`vsnprintf`包装出一个类似`printf`的带格式化字符串和可变参数的函数。 **例 25.8. 实现格式化打印错误的err_sys函数** ``` #include <stdio.h> #include <stdlib.h> #include <errno.h> #include <stdarg.h> #include <string.h> #define MAXLINE 80 void err_sys(const char *fmt, ...) { int err = errno; char buf[MAXLINE+1]; va_list ap; va_start(ap, fmt); vsnprintf(buf, MAXLINE, fmt, ap); snprintf(buf+strlen(buf), MAXLINE-strlen(buf), ": %s", strerror(err)); strcat(buf, "\n"); fputs(buf, stderr); va_end(ap); exit(1); } int main(int argc, char *argv[]) { FILE *fp; if (argc != 2) { fputs("Usage: ./a.out pathname\n", stderr); exit(1); } fp = fopen(argv[1], "r"); if (fp == NULL) err_sys("Line %d - Open file %s", __LINE__, argv[1]); printf("Open %s OK\n", argv[1]); fclose(fp); return 0; } ``` 有了`err_sys`函数，不仅简化了`main`函数的代码，而且可以把`fopen`的错误提示打印得非常清楚，有源代码行号，有打开文件的路径名，一看就知道哪里出错了。现在总结一下`printf`格式化字符串中的转换说明的有哪些写法。在这里只列举几种常用的格式，其它格式请参考Man Page。每个转换说明以`%`号开头，以转换字符结尾，我们以前用过的转换说明仅包含`%`号和转换字符，例如`%d`、`%s`，其实在这两个字符中间还可以插入一些可选项。 **表 25.1. printf转换说明的可选项** | 选项 | 描述 | 举例 | | --- | --- | --- | | # | 八进制前面加0（转换字符为`o`），十六进制前面加0x（转换字符为`x`）或0X（转换字符为`X`）。 | `printf("%#x", 0xff)`打印`0xff`，`printf("%x", 0xff)`打印`ff`。 | | - | 格式化后的内容居左，右边可以留空格。 | 见下面的例子 | | 宽度 | 用一个整数指定格式化后的最小长度，如果格式化后的内容没有这么长，可以在左边留空格，如果前面指定了`-`号就在右边留空格。宽度有一种特别的形式，不指定整数值而是写成一个`*`号，表示取一个`int`型参数作为宽度。 | `printf("-%10s-", "hello")`打印`-␣␣␣␣␣hello-`，`printf("-%-*s-", 10, "hello")`打印`-hello␣␣␣␣␣-`。 | | . | 用于分隔上一条提到的最小长度和下一条要讲的精度。 | 见下面的例子 | | 精度 | 用一个整数表示精度，对于字符串来说指定了格式化后保留的最大长度，对于浮点数来说指定了格式化后小数点右边的位数，对于整数来说指定了格式化后的最小位数。精度也可以不指定整数值而是写成一个`*`号，表示取下一个`int`型参数作为精度。 | `printf("%.4s", "hello")`打印`hell`，`printf("-%6.4d-", 100)`打印`-␣␣0100-`，`printf("-%*.*f-", 8, 4, 3.14)`打印`-␣␣3.1400-`。 | | 字长 | 对于整型参数，`hh`、`h`、`l`、`ll`分别表示是`char`、`short`、`long`、`long long`型的字长，至于是有符号数还是无符号数则取决于转换字符；对于浮点型参数，`L`表示`long double`型的字长。 | `printf("%hhd", 255)`打印`-1`。 | 常用的转换字符有： **表 25.2. printf的转换字符** | 转换字符 | 描述 | 举例 | | --- | --- | --- | | d i | 取`int`型参数格式化成有符号十进制表示，如果格式化后的位数小于指定的精度，就在左边补0。 | `printf("%.4d", 100)`打印`0100`。 | | o u x X | 取`unsigned int`型参数格式化成无符号八进制（o）、十进制（u）、十六进制（x或X）表示，x表示十六进制数字用小写abcdef，X表示十六进制数字用大写ABCDEF，如果格式化后的位数小于指定的精度，就在左边补0。 | `printf("%#X", 0xdeadbeef)`打印`0XDEADBEEF`，`printf("%hhu", -1)`打印`255`。 | | c | 取`int`型参数转换成`unsigned char`型，格式化成对应的ASCII码字符。 | `printf("%c", 256+'A')`打印`A`。 | | s | 取`const char *`型参数所指向的字符串格式化输出，遇到`'\0'`结束，或者达到指定的最大长度（精度）结束。 | `printf("%.4s", "hello")`打印`hell`。 | | p | 取`void *`型参数格式化成十六进制表示。相当于`%#x`。 | `printf("%p", main)`打印`main`函数的首地址`0x80483c4`。 | | f | 取`double`型参数格式化成`[-]ddd.ddd`这样的格式，小数点后的默认精度是6位。 | `printf("%f", 3.14)`打印`3.140000`，`printf("%f", 0.00000314)`打印`0.000003`。 | | e E | 取`double`型参数格式化成`[-]d.ddde±dd`（转换字符是e）或`[-]d.dddE±dd`（转换字符是E）这样的格式，小数点后的默认精度是6位，指数至少是两位。 | `printf("%e", 3.14)`打印`3.140000e+00`。 | | g G | 取`double`型参数格式化，精度是指有效数字而非小数点后的数字，默认精度是6。如果指数小于-4或大于等于精度就按`%e`（转换字符是g）或`%E`（转换字符是G）格式化，否则按`%f`格式化。小数部分的末尾0去掉，如果没有小数部分，小数点也去掉。 | `printf("%g", 3.00)`打印`3`，`printf("%g", 0.00001234567)`打印`1.23457e-05`。 | | % | 格式化成一个`%`。 | `printf("%%")`打印一个`%`。 | 我们在[第 6 节 “可变参数”](ch24s06.html#interface.va)讲过可变参数的原理，`printf`并不知道实际参数的类型，只能按转换说明指出的参数类型从栈帧上取参数，所以如果实际参数和转换说明的类型不符，结果可能会有些意外，上面也举过几个这样的例子。另外，如果`s`指向一个字符串，用`printf(s)`打印这个字符串可能得到错误的结果，因为字符串中可能包含`%`号而被`printf`当成转换说明，`printf`并不知道后面没有传其它参数，照样会从栈帧上取参数。所以比较保险的办法是`printf("%s", s)`。下面看`scanf`函数的各种形式。 ``` #include <stdio.h> int scanf(const char *format, ...); int fscanf(FILE *stream, const char *format, ...); int sscanf(const char *str, const char *format, ...); #include <stdarg.h> int vscanf(const char *format, va_list ap); int vsscanf(const char *str, const char *format, va_list ap); int vfscanf(FILE *stream, const char *format, va_list ap); 返回值：返回成功匹配和赋值的参数个数，成功匹配的参数可能少于所提供的赋值参数，返回0表示一个都不匹配，出错或者读到文件或字符串末尾时返回EOF并设置errno ``` `scanf`从标准输入读字符，按格式化字符串`format`中的转换说明解释这些字符，转换后赋给后面的参数，后面的参数都是传出参数，因此必须传地址而不能传值。`fscanf`从指定的文件`stream`中读字符，而`sscanf`从指定的字符串`str`中读字符。后面三个以`v`开头的函数的可变参数不是以`...`的形式传进来，而是以`va_list`类型传进来。现在总结一下`scanf`的格式化字符串和转换说明，这里也只列举几种常用的格式，其它格式请参考Man Page。`scanf`用输入的字符去匹配格式化字符串中的字符和转换说明，如果成功匹配一个转换说明，就给一个参数赋值，如果读到文件或字符串末尾就停止，或者如果遇到和格式化字符串不匹配的地方（比如转换说明是`%d`却读到字符`A`）就停止。如果遇到不匹配的地方而停止，`scanf`的返回值可能小于赋值参数的个数，文件的读写位置指向输入中不匹配的地方，下次调用库函数读文件时可以从这个位置继续。格式化字符串中包括： * 空格或Tab，在处理过程中被忽略。 * 普通字符（不包括`%`），和输入字符中的非空白字符相匹配。输入字符中的空白字符是指空格、Tab、`\r`、`\n`、`\v`、`\f`。 * 转换说明，以`%`开头，以转换字符结尾，中间也有若干个可选项。转换说明中的可选项有： * `*`号，表示这个转换说明只是用来匹配一段输入字符，但匹配结果并不赋给后面的参数。 * 用一个整数指定的宽度N。表示这个转换说明最多匹配N个输入字符，或者匹配到输入字符中的下一个空白字符结束。 * 对于整型参数可以指定字长，有`hh`、`h`、`l`、`ll`（也可以写成一个`L`），含义和`printf`相同。但`l`和`L`还有一层含义，当转换字符是`e`、`f`、`g`时，表示赋值参数的类型是`float *`而非`double *`，这一点跟`printf`不同（结合以前讲的类型转换规则思考一下为什么不同），这时前面加上`l`或`L`分别表示`double *`或`long double *`型。常用的转换字符有： **表 25.3. scanf的转换字符** | 转换字符 | 描述 | | --- | --- | | d | 匹配十进制整数（开头可以有负号），赋值参数的类型是`int *`。 | | i | 匹配整数（开头可以有负号），赋值参数的类型是`int *`，如果输入字符以0x或0X开头则匹配十六进制整数，如果输入字符以0开头则匹配八进制整数。 | | o u x | 匹配八进制、十进制、十六进制整数（开头可以有负号），赋值参数的类型是`unsigned int *`。 | | c | 匹配一串字符，字符的个数由宽度指定，缺省宽度是1，赋值参数的类型是`char *`，末尾不会添加`'\0'`。如果输入字符的开头有空白字符，这些空白字符并不被忽略，而是保存到参数中，要想跳过开头的空白字符，可以在格式化字符串中用一个空格去匹配。 | | s | 匹配一串非空白字符，从输入字符中的第一个非空白字符开始匹配到下一个空白字符之前，或者匹配到指定的宽度，赋值参数的类型是`char *`，末尾自动添加`'\0'`。 | | e f g | 匹配符点数（开头可以有负号），赋值参数的类型是`float *`，也可以指定`double *`或`long double *`的字长。 | | % | 转换说明`%%`匹配一个字符`%`，不做赋值。 | 下面几个例子出自[[K&R]](bi01.html#bibli.kr "The C Programming Language")。第一个例子，读取用户输入的浮点数累加起来。 **例 25.9. 用scanf实现简单的计算器** ``` #include <stdio.h> int main(void) /* rudimentary calculator */ { double sum, v; sum = 0; while (scanf("%lf", &v) == 1) printf("\t%.2f\n", sum += v); return 0; } ``` 如果我们要读取`25 Dec 1988`这样的日期格式，可以这样写： ``` char *str = "25 Dec 1988"; int day, year; char monthname[20]; sscanf(str, "%d %s %d", &day, monthname, &year); ``` 如果`str`中的空白字符再多一些，比如`" 25 Dec 1998"`，仍然可以正确读取。如果格式化字符串中的空格和Tab再多一些，比如`"%d %s %d "`，也可以正确读取。`scanf`函数是很强大的，但是要用对了不容易，需要多练习，通过练习体会空白字符的作用。如果要读取`12/25/1998`这样的日期格式，就需要在格式化字符串中用`/`匹配输入字符中的`/`： ``` int day, month, year; scanf("%d/%d/%d", &month, &day, &year); ``` `scanf`把换行符也看作空白字符，仅仅当作字段之间的分隔符，如果输入中的字段个数不确定，最好是先用`fgets`按行读取，然后再交给`sscanf`处理。如果我们的程序需要同时识别以上两种日期格式，可以这样写： ``` while (fgets(line, sizeof(line), stdin) > 0) { if (sscanf(line, "%d %s %d", &day, monthname, &year) == 3) printf("valid: %s\n", line); /* 25 Dec 1988 form */ else if (sscanf(line, "%d/%d/%d", &month, &day, &year) == 3) printf("valid: %s\n", line); /* mm/dd/yy form */ else printf("invalid: %s\n", line); /* invalid form */ } ``` ### 2.10. C标准库的I/O缓冲区用户程序调用C标准I/O库函数读写文件或设备，而这些库函数要通过系统调用把读写请求传给内核（以后我们会看到与I/O相关的系统调用），最终由内核驱动磁盘或设备完成I/O操作。C标准库为每个打开的文件分配一个I/O缓冲区以加速读写操作，通过文件的`FILE`结构体可以找到这个缓冲区，用户调用读写函数大多数时候都在I/O缓冲区中读写，只有少数时候需要把读写请求传给内核。以`fgetc`/`fputc`为例，当用户程序第一次调用`fgetc`读一个字节时，`fgetc`函数可能通过系统调用进入内核读1K字节到I/O缓冲区中，然后返回I/O缓冲区中的第一个字节给用户，把读写位置指向I/O缓冲区中的第二个字符，以后用户再调`fgetc`，就直接从I/O缓冲区中读取，而不需要进内核了，当用户把这1K字节都读完之后，再次调用`fgetc`时，`fgetc`函数会再次进入内核读1K字节到I/O缓冲区中。在这个场景中用户程序、C标准库和内核之间的关系就像在[第 5 节 “Memory Hierarchy”](ch17s05.html#arch.memh)中CPU、Cache和内存之间的关系一样，C标准库之所以会从内核预读一些数据放在I/O缓冲区中，是希望用户程序随后要用到这些数据，C标准库的I/O缓冲区也在用户空间，直接从用户空间读取数据比进内核读数据要快得多。另一方面，用户程序调用`fputc`通常只是写到I/O缓冲区中，这样`fputc`函数可以很快地返回，如果I/O缓冲区写满了，`fputc`就通过系统调用把I/O缓冲区中的数据传给内核，内核最终把数据写回磁盘。有时候用户程序希望把I/O缓冲区中的数据立刻传给内核，让内核写回设备，这称为Flush操作，对应的库函数是`fflush`，`fclose`函数在关闭文件之前也会做Flush操作。下图以`fgets`/`fputs`示意了I/O缓冲区的作用，使用`fgets`/`fputs`函数时在用户程序中也需要分配缓冲区（图中的`buf1`和`buf2`），注意区分用户程序的缓冲区和C标准库的I/O缓冲区。 **图 25.1. C标准库的I/O缓冲区** ![C标准库的I/O缓冲区](https://box.kancloud.cn/2016-04-02_56ff80d6aab3e.png) C标准库的I/O缓冲区有三种类型：全缓冲、行缓冲和无缓冲。当用户程序调用库函数做写操作时，不同类型的缓冲区具有不同的特性。全缓冲如果缓冲区写满了就写回内核。常规文件通常是全缓冲的。行缓冲如果用户程序写的数据中有换行符就把这一行写回内核，或者如果缓冲区写满了就写回内核。标准输入和标准输出对应终端设备时通常是行缓冲的。无缓冲用户程序每次调库函数做写操作都要通过系统调用写回内核。标准错误输出通常是无缓冲的，这样用户程序产生的错误信息可以尽快输出到设备。下面通过一个简单的例子证明标准输出对应终端设备时是行缓冲的。 ``` #include <stdio.h> int main() { printf("hello world"); while(1); return 0; } ``` 运行这个程序，会发现`hello world`并没有打印到屏幕上。用Ctrl-C终止它，去掉程序中的`while(1);`语句再试一次： ``` $ ./a.out hello world$ ``` `hello world`被打印到屏幕上，后面直接跟Shell提示符，中间没有换行。我们知道`main`函数被启动代码这样调用：`exit(main(argc, argv));`。`main`函数`return`时启动代码会调用`exit`，`exit`函数首先关闭所有尚未关闭的`FILE *`指针（关闭之前要做Flush操作），然后通过`_exit`系统调用进入内核退出当前进程[[35](#ftn.id2834688)]。在上面的例子中，由于标准输出是行缓冲的，`printf("hello world");`打印的字符串中没有换行符，所以只把字符串写到标准输出的I/O缓冲区中而没有写回内核（写到终端设备），如果敲Ctrl-C，进程是异常终止的，并没有调用`exit`，也就没有机会Flush I/O缓冲区，因此字符串最终没有打印到屏幕上。如果把打印语句改成`printf("hello world\n");`，有换行符，就会立刻写到终端设备，或者如果把`while(1);`去掉也可以写到终端设备，因为程序退出时会调用`exit`Flush所有I/O缓冲区。在本书的其它例子中，`printf`打印的字符串末尾都有换行符，以保证字符串在`printf`调用结束时就写到终端设备。我们再做个实验，在程序中直接调用`_exit`退出。 ``` #include <stdio.h> #include <unistd.h> int main() { printf("hello world"); _exit(0); } ``` 结果也不会把字符串打印到屏幕上，如果把`_exit`调用改成`exit`就可以打印到屏幕上。除了写满缓冲区、写入换行符之外，行缓冲还有一种情况会自动做Flush操作。如果： * 用户程序调用库函数从无缓冲的文件中读取 * 或者从行缓冲的文件中读取，并且这次读操作会引发系统调用从内核读取数据那么在读取之前会自动Flush所有行缓冲。例如： ``` #include <stdio.h> #include <unistd.h> int main() { char buf[20]; printf("Please input a line: "); fgets(buf, 20, stdin); return 0; } ``` 虽然调用`printf`并不会把字符串写到设备，但紧接着调用`fgets`读一个行缓冲的文件（标准输入），在读取之前会自动Flush所有行缓冲，包括标准输出。如果用户程序不想完全依赖于自动的Flush操作，可以调`fflush`函数手动做Flush操作。 ``` #include <stdio.h> int fflush(FILE *stream); 返回值：成功返回0，出错返回EOF并设置errno ``` 对前面的例子再稍加改动： ``` #include <stdio.h> int main() { printf("hello world"); fflush(stdout); while(1); } ``` 虽然字符串中没有换行，但用户程序调用`fflush`强制写回内核，因此也能在屏幕上打印出字符串。`fflush`函数用于确保数据写回了内核，以免进程异常终止时丢失数据。作为一个特例，调用`fflush(NULL)`可以对所有打开文件的I/O缓冲区做Flush操作。 ### 2.11. 本节综合练习 1、编程读写一个文件`test.txt`，每隔1秒向文件中写入一行记录，类似于这样： ``` 1 2009-7-30 15:16:42 2 2009-7-30 15:16:43 ``` 该程序应该无限循环，直到按Ctrl-C终止。下次再启动程序时在`test.txt`文件末尾追加记录，并且序号能够接续上次的序号，比如： ``` 1 2009-7-30 15:16:42 2 2009-7-30 15:16:43 3 2009-7-30 15:19:02 4 2009-7-30 15:19:03 5 2009-7-30 15:19:04 ``` 这类似于很多系统服务维护的日志文件，例如在我的机器上系统服务进程`acpid`维护一个日志文件`/var/log/acpid`，就像这样： ``` $ cat /var/log/acpid [Sun Oct 26 08:44:46 2008] logfile reopened [Sun Oct 26 10:11:53 2008] exiting [Sun Oct 26 18:54:39 2008] starting up ... ``` 每次系统启动时`acpid`进程就以追加方式打开这个文件，当有事件发生时就追加一条记录，包括事件发生的时刻以及事件描述信息。获取当前的系统时间需要调用`time(2)`函数，返回的结果是一个`time_t`类型，其实就是一个大整数，其值表示从UTC（Coordinated Universal Time）时间1970年1月1日00:00:00（称为UNIX系统的Epoch时间）到当前时刻的秒数。然后调用`localtime(3)`将`time_t`所表示的UTC时间转换为本地时间（我们是+8区，比UTC多8个小时）并转成`struct tm`类型，该类型的各数据成员分别表示年月日时分秒，具体用法请查阅Man Page。调用`sleep(3)`函数可以指定程序睡眠多少秒。 2、INI文件是一种很常见的配置文件，很多Windows程序都采用这种格式的配置文件，在Linux系统中Qt程序通常也采用这种格式的配置文件。比如： ``` ;Configuration of http [http] domain=www.mysite.com port=8080 cgihome=/cgi-bin ;Configuration of db [database] server = mysql user = myname password = toopendatabase ``` 一个配置文件由若干个Section组成，由[]括号括起来的是Section名。每个Section下面有若干个`key = value`形式的键值对（Key-value Pair），等号两边可以有零个或多个空白字符（空格或Tab），每个键值对占一行。以;号开头的行是注释。每个Section结束时有一个或多个空行，空行是仅包含零个或多个空白字符（空格或Tab）的行。INI文件的最后一行后面可能有换行符也可能没有。现在XML兴起了，INI文件显得有点土。现在要求编程把INI文件转换成XML文件。上面的例子经转换后应该变成这样： ```  <http> <domain>www.mysite.com</domain> <port>8080</port> <cgihome>/cgi-bin</cgihome> </http>  <database> <server>mysql</server> <user>myname</user> <password>toopendatabase</password> </database> ``` 3、实现类似`gcc`的`-M`选项的功能，给定一个`.c`文件，列出它直接和间接包含的所有头文件，例如有一个`main.c`文件： ``` #include <errno.h> #include "stack.h" int main() { return 0; } ``` 你的程序读取这个文件，打印出其中包含的所有头文件的绝对路径： ``` $ ./a.out main.c /usr/include/errno.h /usr/include/features.h /usr/include/bits/errno.h /usr/include/linux/errno.h ... /home/akaedu/stack.h: cannot find ``` 如果有的头文件找不到，就像上面例子那样打印`/home/akaedu/stack.h: cannot find`。首先复习一下[第 2.2 节 “头文件”](ch20s02.html#link.header)讲过的头文件查找顺序，本题目不必考虑`-I`选项指定的目录，只在`.c`文件所在的目录以及系统目录`/usr/include`中查找。 * * * [[34](#id2831641)] 这些特性取决于终端的工作模式，终端可以配置成一次一行的模式，也可以配置成一次一个字符的模式，默认是一次一行的模式（本书的实验都是在这种模式下做的），关于终端的配置可参考[[APUE2e]](bi01.html#bibli.apue "Advanced Programming in the UNIX Environment")。 [[35](#id2834688)] 其实在调`_exit`进内核之前还要调用户程序中通过`atexit(3)`注册的退出处理函数，本书不做详细介绍，读者可参考[[APUE2e]](bi01.html#bibli.apue "Advanced Programming in the UNIX Environment")。 ## 3. 数值字符串转换函数 ``` #include <stdlib.h> int atoi(const char *nptr); double atof(const char *nptr); 返回值：转换结果 ``` `atoi`把一个字符串开头可以识别成十进制整数的部分转换成`int`型，相当于下面要讲的`strtol(nptr, (char **) NULL, 10);`。例如`atoi("123abc")`的返回值是123，字符串开头可以有若干空格，例如`atoi(" -90.6-")`的返回值是-90。如果字符串开头没有可识别的整数，例如`atoi("asdf")`，则返回0，而`atoi("0***")`也返回0，根据返回值并不能区分这两种情况，所以使用`atoi`函数不能检查出错的情况。下面要讲的`strtol`函数可以设置`errno`，因此可以检查出错的情况，在严格的场合下应该用`strtol`，而`atoi`用起来更简便，所以也很常用。 `atof`把一个字符串开头可以识别成浮点数的部分转换成`double`型，相当于下面要讲的`strtod(nptr, (char **) NULL);`。字符串开头可以识别的浮点数格式和C语言的浮点数常量相同，例如`atof("31.4 ")`的返回值是31.4，`atof("3.14e+1AB")`的返回值也是31.4。`atof`也不能检查出错的情况，而`strtod`可以。 ``` #include <stdlib.h> long int strtol(const char *nptr, char **endptr, int base); double strtod(const char *nptr, char **endptr); 返回值：转换结果，出错时设置errno ``` `strtol`是`atoi`的增强版，主要体现在这几方面： * 不仅可以识别十进制整数，还可以识别其它进制的整数，取决于`base`参数，比如`strtol("0XDEADbeE~~", NULL, 16)`返回0xdeadbee的值，`strtol("0777~~", NULL, 8)`返回0777的值。 * `endptr`是一个传出参数，函数返回时指向后面未被识别的第一个字符。例如`char *pos; strtol("123abc", &pos, 10);`，`strtol`返回123，`pos`指向字符串中的字母a。如果字符串开头没有可识别的整数，例如`char *pos; strtol("ABCabc", &pos, 10);`，则`strtol`返回0，`pos`指向字符串开头，可以据此判断这种出错的情况，而这是`atoi`处理不了的。 * 如果字符串中的整数值超出`long int`的表示范围（上溢或下溢），则`strtol`返回它所能表示的最大（或最小）整数，并设置`errno`为`ERANGE`，例如`strtol("0XDEADbeef~~", NULL, 16)`返回0x7fffffff并设置`errno`为`ERANGE`。回想一下使用`fopen`的套路`if ( (fp = fopen(...)) == NULL) { 读取errno }`，`fopen`在出错时会返回`NULL`，因此我们知道需要读`errno`，但`strtol`在成功调用时也可能返回0x7fffffff，我们如何知道需要读`errno`呢？最严谨的做法是首先把`errno`置0，再调用`strtol`，再查看`errno`是否变成了错误码。Man Page上有一个很好的例子： **例 25.10. strtol的出错处理** ``` #include <stdlib.h> #include <limits.h> #include <stdio.h> #include <errno.h> int main(int argc, char *argv[]) { int base; char *endptr, *str; long val; if (argc < 2) { fprintf(stderr, "Usage: %s str [base]\n", argv[0]); exit(EXIT_FAILURE); } str = argv[1]; base = (argc > 2) ? atoi(argv[2]) : 10; errno = 0; /* To distinguish success/failure after call */ val = strtol(str, &endptr, base); /* Check for various possible errors */ if ((errno == ERANGE && (val == LONG_MAX || val == LONG_MIN)) || (errno != 0 && val == 0)) { perror("strtol"); exit(EXIT_FAILURE); } if (endptr == str) { fprintf(stderr, "No digits were found\n"); exit(EXIT_FAILURE); } /* If we got here, strtol() successfully parsed a number */ printf("strtol() returned %ld\n", val); if (*endptr != '\0') /* Not necessarily an error... */ printf("Further characters after number: %s\n", endptr); exit(EXIT_SUCCESS); } ``` `strtod`是`atof`的增强版，增强的功能和`strtol`类似。 ## 4. 分配内存的函数除了`malloc`之外，C标准库还提供了另外两个在堆空间分配内存的函数，它们分配的内存同样由`free`释放。 ``` #include <stdlib.h> void *calloc(size_t nmemb, size_t size); void *realloc(void *ptr, size_t size); 返回值：成功返回所分配内存空间的首地址，出错返回NULL ``` `calloc`的参数很像`fread`/`fwrite`的参数，分配`nmemb`个元素的内存空间，每个元素占`size`字节，并且`calloc`负责把这块内存空间用字节0填充，而`malloc`并不负责把分配的内存空间清零。有时候用`malloc`或`calloc`分配的内存空间使用了一段时间之后需要改变它的大小，一种办法是调用`malloc`分配一块新的内存空间，把原内存空间中的数据拷到新的内存空间，然后调用`free`释放原内存空间。使用`realloc`函数简化了这些步骤，把原内存空间的指针`ptr`传给`realloc`，通过参数`size`指定新的大小（字节数），`realloc`返回新内存空间的首地址，并释放原内存空间。新内存空间中的数据尽量和原来保持一致，如果`size`比原来小，则前`size`个字节不变，后面的数据被截断，如果`size`比原来大，则原来的数据全部保留，后面长出来的一块内存空间未初始化（`realloc`不负责清零）。注意，参数`ptr`要么是`NULL`，要么必须是先前调用`malloc`、`calloc`或`realloc`返回的指针，不能把任意指针传给`realloc`要求重新分配内存空间。作为两个特例，如果调用`realloc(NULL, size)`，则相当于调用`malloc(size)`，如果调用`realloc(ptr, 0)`，`ptr`不是`NULL`，则相当于调用`free(ptr)`。 ``` #include <alloca.h> void *alloca(size_t size); 返回值：返回所分配内存空间的首地址，如果size太大导致栈空间耗尽，结果是未定义的 ``` 参数`size`是请求分配的字节数，`alloca`函数不是在堆上分配空间，而是在调用者函数的栈帧上分配空间，类似于C99的变长数组，当调用者函数返回时自动释放栈帧，所以不需要`free`。这个函数不属于C标准库，而是在POSIX标准中定义的。