首页>参考读物>计算机科学与技术>软件与程序设计

Linux环境编程:从应用到内核
作者 : 高峰 李彬 著
出版日期 : 2016-06-12
ISBN : 978-7-111-53610-9
定价 : 99.00元
扩展资源下载
扩展信息
语种 : 简体中文
页数 : 607
开本 : 16
原书名 :
原出版社:
属性分类: 店面
包含CD :
绝版 : 未绝版
图书简介

本书将按照APUE的脉络,以笔者多年的Linux开发经验为基础,从以下四个方面深入讲解Linux环境编程:接口的功能使用介绍、接口缺陷分析、接口的内部实现机制、接口的错误码分析。
Linux大约有三百多个系统调用,再加上部分C库接口,涉及的内容更多,本书主要分析其中最常用的接口,参照APUE,将其分为如下几大部分:
? 文件部分:包括文件管理和I/O;
? 进程部分:包括进程、线程管理和控制;
? 信号管理和控制;
? 高级I/O操作;
? 进程间通信;
? 网络通信。
在每一部分中,笔者会根据自己的开发经验,选择最常用的接口进行介绍和分析。将内核实现该功能的原理介绍清楚,从而让应用开发人员真正地明白当他使用该接口时,究竟内核或者库做了什么工作。另一方面,当应用开发人员在使用接口时,需要注意哪些“陷阱”,以及常见错误的返回值。有些情况下,仅凭手册中的错误值说明,是搞不清楚为什么会有这样的错误。所以,本书会对每个错误值,找到对应的内核源码,明确其产生的原因。
本书既包括应用编程,又囊括了内核即C库的源码分析,可以说是写给面向应用的开发人员的内核书籍,是介绍应用编程及内核源码的一个新角度。

图书特色

李彬是一个内敛且内秀的人,平日不多的话语并不影响他隽秀的文笔和缜密的思路。他通过各种隐喻的方式,将很多复杂甚至庞杂的问题,抽丝剥茧,层层分解,将其最内在的部分展现在你的面前。文中有大道至简的锦章佳句,也不乏诙谐幽默的流行俗语,雅俗并济但完全不显突兀和生硬,所有的一切都是为了让读者更好地理解书中的内容。区别于其他编程图书中大量代码示例的堆叠和罗列、各种长篇大论的代码走读分析,本书从环境入手,对环境进行剖析,一切娓娓道来,由浅入深;通过精致的小工具或者小程序,让读者快速探索环境,了解环境,熟悉环境,从而进一步利用环境,改造环境。
——李铜舒(Bruce Lee) Bigtera研发副总裁
高峰根据自己多年的编程经验, 深入浅出地介绍了Linux下C编程常用的方方面面。这是一本很棒的学习用书,特别是他还总结了自己编程中遇到的有趣问题,了解这些问题对提高程序员的编程技能是很有帮助的。最后一章值得精读。
——李海涛 A10 Networks Senior Manager
本书可以说是继承了W. Richard Stevens的《UNIX环境高级编程》的优秀传统并有所超越,它重点介绍并剖析了Linux内核所提供的API以及API在内核中的实现,同时描述了glibc对Linux API的封装,以及使用某些glibc函数时遇到的问题。不管是内容的广度还是深度,本书都达到了《UNIX环境高级编程》的高度。而且由于Linux的开源特性,让我们有机会更深入地了解API实现的细节,这对我们写出更高效、更健壮的程序很有帮助。“知其然,知其所以然”应该是每个程序员的追求,如果你对Linux环境下的编程感兴趣,并希望了解更多的话,本书不容错过。
——朱小平 阿里巴巴高级技术专家
本书非常全面地介绍了Linux环境下编程所需的技术和知识,分析深入浅出,理论与实践相结合,且都是作者经验之谈,即使如我这般在Linux下使用C编程超过10年的程序员也是受益良多。因此,无论你是初学还是提升,本书都值得一读。
——夏舰波 华为资深研发工程师

图书前言

为什么要写这本书
我从事Linux环境的开发工作已有近十年的时间,但我一直认为工作时间并不等于经验,更不等于能力。如何才能把工作时间转换为自己的经验和能力呢?我认为无非是多阅读、多思考、多实践、多分享。这也是我在ChinaUnix上的博客座右铭,目前我的博客一共有247篇博文,记录的大都是Linux内核网络部分的源码分析,以及相关的应用编程。机械工业出版社华章分社的Lisa正是通过我的博客找到我的,而这也促成了本书的出版。
其实在Lisa之前,就有另外一位编辑与我聊过,但当时我没有下好决心,认为自己无论是在技术水平,还是时间安排上,都不足以完成一本技术图书的创作。等到与Lisa洽谈的时候,我感觉自己的技术已经有了一些沉淀,同时时间也相对比较充裕,因此决定开始撰写自己技术生涯的第一本书。
对于Linux环境的开发人员,《Unix环境高级编程》(后文均简称为APUE)无疑是最为经典的入门书籍。其作者Stevens是我从业以来最崇拜的技术专家。他的Advanced Programming in the Unix Environment、Unix Network Programming系列及TCP/IP Illustrated系列著作,字字珠玑,本本经典。在我从业的最初几年,这几本书每本都阅读了好几遍,而这也为我进行Linux用户空间的开发奠定了坚实的基础。在掌握了这些知识以后,如何继续提高自己的技能呢?经过一番思考,我选择了阅读Linux内核源码,并尝试将内核与应用融会贯通。在阅读了一定量的内核源码之后,我才真正理解了Linux专家的这句话“Read the fucking codes”。只有阅读了内核源码,才能真正理解Linux内核的原理和运行机制,而此时,我也发现了Stevens著作的一个局限—APUE和UNP毕竟是针对Unix环境而写的,Linux虽然大部分与Unix兼容,但是在很多行为上与Unix还是完全不同的。这就导致了书中的一些内容与Linux环境中的实际效果是相互矛盾的。
现在有机会来写一本技术图书,我就想在向Stevens致敬的同时,写一本类似于APUE风格的技术图书,同时还要在Linux环境下,对APUE进行突破。大言不惭地说,我期待这本书可以作为APUE的补充,还可以作为Linux开发人员的进阶读物。事实上,本书的写作布局正是以APUE的章节作为参考,针对Linux环境,不仅对用户空间的接口进行阐述,同时还引导读者分析该接口在内核的源码实现,使得读者不仅可以知道接口怎么用,同时还可以理解接口是怎么工作的。对于Linux的系统调用,做到知其然,知其所以然。
读者对象
根据本书的内容,我觉得适合以下几类读者:
在Linux应用层方面有一定开发经验的程序员。
对Linux内核有兴趣的程序员。
热爱Linux内核和开源项目的技术人员。
如何阅读本书
本书定位为APUE的补充或进阶读物,所以假设读者已具备了一定的编程基础,对Linux环境也有所了解,因此在涉及一些基本概念和知识时,只是蜻蜓点水,简单略过。因为笔者希望把更多的笔墨放在更为重要的部分,而不是各种相关图书均有讲解的基本概念上。所以如果你是初学者,建议还是先学习APUE、C语言编程,并且在具有一定的操作系统知识后再来阅读本书。
Linux环境编程涉及的领域太多,很难有某个人可以在Linux的各个领域均有比较深刻的认识,尤其是已有APUE这本经典图书在前,所以本书是由高峰、李彬两个人共同完成的。
高峰负责第0、1、2、3、4、12、13、14、15章,李彬负责第5~11章。两位不同的作者,在写作风格上很难保证一致,如果给各位读者带来了不便,在此给各位先道个歉。尽管是由两个人共同写作,并且负责的还是我们各自相对擅长的领域,可是在写作的过程中我们仍然感觉到很吃力,用了将近三年的时间才算完成本书。对比APUE,本书一方面在深度上还是有所不及,另一方面在广度上还是没有涵盖APUE涉及的所有领域,这也让我们对Stevens大师更加敬佩。
本书使用的Linux内核源代码版本为3.2.44,glibc的源码版本为2.17。
勘误和支持
由于作者的水平有限,主题又过于宏大,书中难免会出现一些错误或不准确的地方,如有不妥之处,恳请读者批评指正。如果你发现有什么问题,或者有什么疑问,都可以发邮件至我的邮箱gfree.wind@gmail.com,期待您的指导!
致谢
首先要感谢伟大的Linux内核创始人Linus,他开创了一个影响世界的操作系统。
其次要感谢机械工业出版社华章分社的编辑杨绣国老师(Lisa),感谢你的魄力,敢于找新人来写作,并敢于信任新人,让其完成这么大的一个项目。感谢你的耐心,正常的一年半的写作时间,被我们生生地延长到了将近三年的时间,感谢你在写作过程中对我们的鼓励和帮助。
然后要感谢我的搭档李彬,在我加入当前的创业公司后,只有很少的空闲时间和精力来投入写作。这时,是李彬在更紧张的时间内,承担了本书的一半内容。并且其写作态度极其认真,对质量精益求精。没有李彬的加入,本书很可能就半途而废了。再次感谢李彬,我的好搭档。
最后我要感谢我的亲人。感谢我的父母,没有你们的培养,绝没有我的今天;感谢我的妻子,没有你的支持,就没有我事业上的进步;感谢我的岳父岳母对我女儿的照顾,使我没有后顾之忧;最后要感谢的是我可爱的女儿高一涵小天使,你的诞生为我带来了无尽的欢乐和动力!
谨以此书,献给我最亲爱的家人,以及众多热爱Linux的朋友们。

高 峰
中国北京
2016年3月

上架指导

计算机\程序设计

封底文字

书是作者的思想体现。读完样章,我从书中或多或少地看到了作者本人的特质。李彬是一个内敛且内秀的人,平日不多的话语并不影响他隽秀的文笔和缜密的思路。他通过各种隐喻的方式,将很多复杂甚至庞杂的问题,抽丝剥茧,层层分解,将其最内在的部分展现在你的面前。文中有大道至简的锦章佳句,也不乏诙谐幽默的流行俗语。雅俗并济但完全不嫌突兀和生硬,所有的一切都是为了让读者更好地理解书中的内容。
通读书稿后,我也会跟李彬调侃,这本书如果叫《Linux环境“和”编程》会不会更好?环境是编程的环境,编程是基于环境的编程。其实就像我们生活的世界一样,如果想要更好地改造世界,首先就要更多地了解世界。本书的精髓也在于此。区别于其他编程图书中大量代码示例的堆叠和罗列,各种长篇大论的代码走读分析,本书从环境入手,对环境进行剖析,一切娓娓道来,由浅入深;通过精致的小工具或者小程序,让读者快速探索环境,了解环境,熟悉环境,从而进一步利用环境,改造环境。
——李铜舒(Bruce Lee) Bigtera研发副总裁(Vice President of R & D)


高峰根据自己多年的编程经验, 深入浅出地介绍了Linux下C编程常用的方方面面。这是一本很棒的学习用书,特别是他还总结了自己编程中遇到的有趣问题,了解这些问题对提高程序员的编程技能都是很有帮助的, 最后一章值得精读。
——李海涛 A10 Networks Senior Manager

本书可以说是继承了W.Richard Stevens的《UNIX环境高级编程》的优秀传统并有所超越。所谓编程环境,顾名思义,就是一个工具和API的集合。本书重点介绍并剖析了Linux内核所提供的API以及API在内核中的实现;同时也描述了glibc对Linux API的封装,以及使用某些glibc函数时遇到的问题。不管从内容的广度还是深度,本书都达到了《UNIX环境高级编程》的高度。而且由于Linux的开源特性,让我们有机会更深入地了解API实现的细节,这对我们写出更高效、更健壮的程序都很有帮助。“知其然,知其所以然”应该是每个程序员的追求。当系统的规模和复杂度不断增加时,对程序员的要求也越来越高。如果你对Linux环境下编程感兴趣,并希望了解更多的话,本书就不容错过。

——朱小平 阿里巴巴高级技术专家


本书非常全面地介绍了Linux环境下编程所需的技术和知识,分析深入浅出,理论与实践相结合,都是作者经验之谈。即使如我这般在Linux下使用C编程超过10年的程序员也是受益良多。因此,无论初学还是提升,本书都值得一读。
                                                                                                                             ——华为资深研发工程师 夏舰波

作者简介

高峰 李彬 著:暂无简介

图书目录

前 言
第0章 基础知识1
0.1 一个Linux程序的诞生记1
0.2 程序的构成2
0.3 程序是如何“跑”的4
0.4 背景概念介绍5
0.4.1 系统调用5
0.4.2 C库函数6
0.4.3 线程安全7
0.4.4 原子性9
0.4.5 可重入函数9
0.4.6 阻塞与非阻塞11
0.4.7 同步与非同步11
第1章 文件I/O12
1.1 Linux中的文件12
1.1.1 文件、文件描述符和文件表12
1.1.2 内核文件表的实现13
1.2 打开文件14
1.2.1 open介绍14
1.2.2 更多选项15
1.2.3 open源码跟踪16
1.2.4 如何选择文件描述符17
1.2.5 文件描述符fd与文件管理结构file18
1.3 creat简介19
1.4 关闭文件19
1.4.1 close介绍19
1.4.2 close源码跟踪19
1.4.3 自定义files_operations21
1.4.4 遗忘close造成的问题22
1.4.5 如何查找文件资源泄漏25
1.5 文件偏移26
1.5.1 lseek简介26
1.5.2 小心lseek的返回值26
1.5.3 lseek源码分析27
1.6 读取文件29
1.6.1 read源码跟踪29
1.6.2 部分读取30
1.7 写入文件31
1.7.1 write源码跟踪31
1.7.2 追加写的实现33
1.8 文件的原子读写33
1.9 文件描述符的复制34
1.10 文件数据的同步38
1.11 文件的元数据41
1.11.1 获取文件的元数据41
1.11.2 内核如何维护文件的元数据42
1.11.3 权限位解析43
1.12 文件截断45
1.12.1 truncate与ftruncate的简单介绍45
1.12.2 文件截断的内核实现45
1.12.3 为什么需要文件截断48
第2章 标准I/O库50
2.1 stdin、stdout和stderr50
2.2 I/O缓存引出的趣题51
2.3 fopen和open标志位对比52
2.4 fdopen与fileno55
2.5 同时读写的痛苦56
2.6 ferror的返回值57
2.7 clearerr的用途57
2.8 小心fgetc和getc60
2.9 注意fread和fwrite的返回值60
2.10 创建临时文件61
第3章 进程环境66
3.1 main是C程序的开始吗66
3.2 “活雷锋”exit70
3.3 atexit介绍75
3.3.1 使用atexit75
3.3.2 atexit的局限性76
3.3.3 atexit的实现机制77
3.4 小心使用环境变量78
3.5 使用动态库80
3.5.1 动态库与静态库80
3.5.2 编译生成和使用动态库80
3.5.3 程序的“平滑无缝”升级82
3.6 避免内存问题84
3.6.1 尴尬的realloc84
3.6.2 如何防止内存越界85
3.6.3 如何定位内存问题86
3.7 “长跳转”longjmp90
3.7.1 setjmp与longjmp的使用90
3.7.2 “长跳转”的实现机制91
3.7.3 “长跳转”的陷阱93
第4章 进程控制:进程的一生96
4.1 进程ID96
4.2 进程的层次98
4.2.1 进程组99
4.2.2 会话102
4.3 进程的创建之fork()103
4.3.1 fork之后父子进程的内存关系104
4.3.2 fork之后父子进程与文件的关系107
4.3.3 文件描述符复制的内核实现110
4.4 进程的创建之vfork()115
4.5 daemon进程的创建117
4.6 进程的终止119
4.6.1 _exit函数119
4.6.2 exit函数120
4.6.3 return退出122
4.7 等待子进程122
4.7.1 僵尸进程122
4.7.2 等待子进程之wait()124
4.7.3 等待子进程之waitpid()126
4.7.4 等待子进程之等待状态值129
4.7.5 等待子进程之waitid()131
4.7.6 进程退出和等待的内核实现133
4.8 exec家族141
4.8.1 execve函数141
4.8.2 exec家族142
4.8.3 execve系统调用的内核实现144
4.8.4 exec与信号151
4.8.5 执行exec之后进程继承的属性152
4.9 system函数152
4.9.1 system函数接口153
4.9.2 system函数与信号156
4.10 总结157
第5章 进程控制:状态、调度和优先级158
5.1 进程的状态158
5.1.1 进程状态概述159
5.1.2 观察进程状态171
5.2 进程调度概述173
5.3 普通进程的优先级181
5.4 完全公平调度的实现186
5.4.1 时间片和虚拟运行时间186
5.4.2 周期性调度任务190
5.4.3 新进程的加入192
5.4.4 睡眠进程醒来198
5.4.5 唤醒抢占202
5.5 普通进程的组调度204
5.6 实时进程207
5.6.1 实时调度策略和优先级207
5.6.2 实时调度相关API211
5.6.3 限制实时进程运行时间213
5.7 CPU的亲和力214
第6章 信号219
6.1 信号的完整生命周期219
6.2 信号的产生220
6.2.1 硬件异常220
6.2.2 终端相关的信号221
6.2.3 软件事件相关的信号223
6.3 信号的默认处理函数224
6.4 信号的分类227
6.5 传统信号的特点228
6.5.1 信号的ONESHOT特性230
6.5.2 信号执行时屏蔽自身的特性232
6.5.3 信号中断系统调用的重启特性233
6.6 信号的可靠性236
6.6.1 信号的可靠性实验236
6.6.2 信号可靠性差异的根源240
6.7 信号的安装243
6.8 信号的发送246
6.8.1 kill、tkill和tgkill246
6.8.2 raise函数247
6.8.3 sigqueue函数247
6.9 信号与线程的关系253
6.9.1 线程之间共享信号处理函数254
6.9.2 线程有独立的阻塞信号掩码255
6.9.3 私有挂起信号和共享挂起信号257
6.9.4 致命信号下,进程组全体退出260
6.10 等待信号260
6.10.1 pause函数261
6.10.2 sigsuspend函数262
6.10.3 sigwait函数和sigwaitinfo函数263
6.11 通过文件描述符来获取信号265
6.12 信号递送的顺序267
6.13 异步信号安全272
6.14 总结275
第7章 理解Linux线程(1)276
7.1 线程与进程276
7.2 进程ID和线程ID281
7.3 pthread库接口介绍284
7.4 线程的创建和标识285
7.4.1 pthread_create函数285
7.4.2 线程ID及进程地址空间布局286
7.4.3 线程创建的默认属性291
7.5 线程的退出292
7.6 线程的连接与分离293
7.6.1 线程的连接293
7.6.2 为什么要连接退出的线程295
7.6.3 线程的分离299
7.7 互斥量300
7.7.1 为什么需要互斥量300
7.7.2 互斥量的接口304
7.7.3 临界区的大小305
7.7.4 互斥量的性能306
7.7.5 互斥锁的公平性310
7.7.6 互斥锁的类型311
7.7.7 死锁和活锁314
7.8 读写锁316
7.8.1 读写锁的接口317
7.8.2 读写锁的竞争策略318
7.8.3 读写锁总结323
7.9 性能杀手:伪共享323
7.10 条件等待328
7.10.1 条件变量的创建和销毁328
7.10.2 条件变量的使用329
第8章 理解Linux线程(2)333
8.1 线程取消333
8.1.1 函数取消接口333
8.1.2 线程清理函数335
8.2 线程局部存储339
8.2.1 使用NPTL库函数实现线程局部存储340
8.2.2 使用__thread关键字实现线程局部存储342
8.3 线程与信号343
8.3.1 设置线程的信号掩码344
8.3.2 向线程发送信号344
8.3.3 多线程程序对信号的处理345
8.4 多线程与fork()345
第9章 进程间通信:管道349
9.1 管道351
9.1.1 管道概述351
9.1.2 管道接口352
9.1.3 关闭未使用的管道文件描述符356
9.1.4 管道对应的内存区大小361
9.1.5 shell管道的实现361
9.1.6 与shell命令进行通信(popen)362
9.2 命名管道FIFO365
9.2.1 创建FIFO文件365
9.2.2 打开FIFO文件366
9.3 读写管道文件367
9.4 使用管道通信的示例372
第10章 进程间通信:System V IPC375
10.1 System V IPC概述375
10.1.1 标识符与IPC Key376
10.1.2 IPC的公共数据结构379
10.2 System V消息队列383
10.2.1 创建或打开一个消息队列383
10.2.2 发送消息385
10.2.3 接收消息388
10.2.4 控制消息队列390
10.3 System V信号量391
10.3.1 信号量概述391
10.3.2 创建或打开信号量393
10.3.3 操作信号量395
10.3.4 信号量撤销值399
10.3.5 控制信号量400
10.4 System V共享内存402
10.4.1 共享内存概述402
10.4.2 创建或打开共享内存403
10.4.3 使用共享内存405
10.4.4 分离共享内存407
10.4.5 控制共享内存408
第11章 进程间通信:POSIX IPC410
11.1 POSIX IPC概述411
11.1.1 IPC对象的名字411
11.1.2 创建或打开IPC对象413
11.1.3 关闭和删除IPC对象414
11.1.4 其他414
11.2 POSIX消息队列415
11.2.1 消息队列的创建、打开、关闭及删除415
11.2.2 消息队列的属性418
11.2.3 消息的发送和接收422
11.2.4 消息的通知423
11.2.5 I/O多路复用监控消息队列427
11.3 POSIX信号量428
11.3.1 创建、打开、关闭和删除有名信号量430
11.3.2 信号量的使用431
11.3.3 无名信号量的创建和销毁432
11.3.4 信号量与futex433
11.4 内存映射mmap436
11.4.1 内存映射概述436
11.4.2 内存映射的相关接口438
11.4.3 共享文件映射439
11.4.4 私有文件映射455
11.4.5 共享匿名映射455
11.4.6 私有匿名映射456
11.5 POSIX共享内存456
11.5.1 共享内存的创建、使用和删除457
11.5.2 共享内存与tmpfs458
第12章 网络通信:连接的建立462
12.1 socket文件描述符462
12.2 绑定IP地址463
12.2.1 bind的使用464
12.2.2 bind的源码分析465
12.3 客户端连接过程468
12.3.1 connect的使用468
12.3.2 connect的源码分析469
12.4 服务器端连接过程477
12.4.1 listen的使用477
12.4.2 listen的源码分析478
12.4.3 accept的使用480
12.4.4 accept的源码分析480
12.5 TCP三次握手的实现分析483
12.5.1 SYN包的发送483
12.5.2 接收SYN包,发送SYN+ACK包485
12.5.3 接收SYN+ACK数据包494
12.5.4 接收ACK数据包,完成三次握手499
第13章 网络通信:数据报文的发送505
13.1 发送相关接口505
13.2 数据包从用户空间到内核空间的流程506
13.3 UDP数据包的发送流程510
13.4 TCP数据包的发送流程517
13.5 IP数据包的发送流程527
13.5.1 ip_send_skb源码分析528
13.5.2 ip_queue_xmit源码分析531
13.6 底层模块数据包的发送流程532
第14章 网络通信:数据报文的接收536
14.1 系统调用接口536
14.2 数据包从内核空间到用户空间的流程537
14.3 UDP数据包的接收流程540
14.4 TCP数据包的接收流程544
14.5 TCP套接字的三个接收队列553
14.6 从网卡到套接字556
14.6.1 从硬中断到软中断556
14.6.2 软中断处理557
14.6.3 传递给协议栈流程559
14.6.4 IP协议处理流程564
14.6.5 大师的错误?原始套接字的接收568
14.6.6 注册传输层协议571
14.6.7 确定UDP套接字571
14.6.8 确定TCP套接字576
第15章 编写安全无错代码582
15.1 不要用memcmp比较结构体582
15.2 有符号数和无符号数的移位区别583
15.3 数组和指针584
15.4 再论数组首地址587
15.5 “神奇”的整数类型转换588
15.6 小心volatile的原子性误解589
15.7 有趣的问题:“x == x”何时为假?591
15.8 小心浮点陷阱593
15.8.1 浮点数的精度限制593
15.8.2 两个特殊的浮点值593
15.9 Intel移位指令陷阱595

教学资源推荐
作者: [美]基普·R. 欧文(Kip R. Irvine) 著
作者: 主编 牛力 韩小汀 参编 闫石 杨凯 刘楠楠
作者: 顾治华 陈天煌 贺国平
参考读物推荐
作者: 包若宁,卜文远,傅鼎荃 等编著 张国强 审
作者: [印] R.纳热瓦拉·拉奥(R. Nageswara Rao)著
作者: 康莉 李宽 等编著