Shell脚本学习指南(09年度畅销榜TOP50)(国内唯一本Shell脚本图书，让UNIX充分发挥其真实的潜能)

.3.4 小结
第4章 文本处理工具
4.1 排序文本
4.2 删除重复
4.3 重新格式化段落
4.4 计算行数、字数以及字符数
4.5 打印
4.6 提取开头或结尾数行
4.7 小结
第5章 管道的神奇魔力
5.1 从结构化文本文件中提取数据
5.2 针对web的结构型数据
5.3 文字解谜好帮手
5.4 单词列表
5.5 标签列表
5.6 小结
第6章 变量、判断、重复动作
6.1 变量与算术
6.2 退出状态
6.3 case 语句
6.4 循环
6.5 函数
6.6 小结
第7章 输入/输出、文件与命令执行
7.1 标准输入、标准输出与标准错误输出
7.2 使用read读取行
7.3 关于重定向
7.4 printf的完整介绍
7.5 波浪号展开与通配符
7.6 命令替换
7.7 引用
7.8 执行顺序与eval
7.9 内建命令
7.10 小结
第8章 产生脚本
8.1 路径查找
8.2 软件构建自动化
8.3 小结
第9章 awk的惊人表现
9.1 awk命令行
9.2 awk程序模型
9.3 程序元素..
9.4 记录与字段
9.5 模式与操作
9.6 在awk里的单行程序
9.7 语句
9.8 用户定义函数
9.9 字符串函数
9.10 数值函数
9.11 小结
第10章 文件处理
10.1 列出文件
10.2 使用touch更新修改时间
10.3 临时性文件的建立与使用
10.4 寻找文件
10.5 执行命令：xargs
10.6 文件系统的空间信息
10.7 比较文件
10.8 小结
第11章 扩展实例：合并用户数据库
11.1 问题描述
11.2 密码文件
11.3 合并密码文件
11.4 改变文件所有权
11.5 其他真实世界的议题
11.6 小结
第12章 拼写检查
12.1 spell程序
12.2 最初的unix拼写检查原型
12.3 改良的ispell与aspell
12.4 在awk内的拼写检查程序
12.5 小结
第13章 进程
13.1 进程建立
13.2 进程列表
13.3 进程控制与删除
13.4 进程系统调用的追踪
13.5 进程账
13.6 延迟的进程调度
13.7 /proc文件系统
13.8 小结
第14章 shell可移植性议题与扩展
14.1 迷思
14.2 bash的shopt命令
14.3 共通的扩展
14.4 下载信息
14.5 其他扩展的bourne式shell
14.6 shell版本
14.7 shell初始化与终止
14.8 小结
第15章 安全的shell脚本：起点
15.1 安全性shell脚本提示
15.2 限制性shell
15.3 特洛伊木马
15.4 为shell脚本设置setuid：坏主意
15.5 ksh93与特权模式
15.6 小结
附录a 编写手册页
附录b 文件与文件系统
附录c 重要的unix命令
参考书目...

.　　该标准的官方名称为IEEE Std．1003．1-2001(注3)，它包括数个可选用的部分，最重要的一个就是X／Open System Interface(XSI)规格。这些功能文件详细描述了UNIX系统长久以来的行为模式。我们会介绍现行标准与早期1992标准间的差异，也会提供与XSI相关的特点。要了解UNIX相关标准，http：／／www．UNIX．org／(注4)是一个很好的起点。
　　Single UNIX Specification的官方网站为http：／／www．UNIX．org／version3／。该标准可在线访问，不过得先到http：／／www．UNIX．org／version3／online．html注册。
　　有时，该标准会将特殊行为模式保留为未定义(unspecified)。这是为了能让厂商以扩展的方式支持该行为，例如：额外的功能与标准本身未做成文件的部分。
　　除了告诉你如何执行特定程序外，我们还会强调这些程序存在的原因，及它们能解决什么问题。了解为什么会有这样的程序，有助于你进一步了解它的使用时机与方式。
　　大部分的程序都提供了相当多的选项组合。但通常只有一小部分是日常工作用得上的。这类程序，我们会让你知道它的哪些选项较方便好用。事实上，我们无法遍及每个程序的所有选项，未提及的部分，你可以通过程序的使用手册或其他参考书籍，例如《UNIX in a Nutshell》(O’Reilly)与《Linux in a NutShell》(O’Reilly)，来了解它。
　　在你看完这本书之后，你不仅能了解UNIX工具集，还能吸收到UNIX的中心思想与软件工具设计的原则。
　　你应该先有什么基础
　　我们认为读者应该了解以下背景知识：
　　如何登录UNIX系统
　　如何在命令行上执行程序
　　如何做一个简单的命令管道，与使用简单的输出／入重定向，例如[与]
　　如何以&将程序放到后台执行
　　如何建立与编辑文件
　　如何使用chmod，将脚本设为可执行权限
　　再者，如果你想试着操作本书范例，在你的终端机(或终端机模拟器)下达命令时，我们建议你使用POSIX兼容的Shell，例如ksh93的最新版本，或bash的近期版本。请特别注意：商用UNIX系统上的／bin／sh可能并菲完全兼容于POSIX。
　　ksh93、bash与zsh的下载网址请见第14章。
　　各章介绍
　　我们建议你依序阅读本书，因为每个章节都与前面章节息息相关。我们在此逐章介绍如下。
　　第1章，背景知识
　　此处提供简短的UNIX历史沿革。特别是贝尔实验室的运算环境，也就是UNIX开发的地方，激发了许多软件工具设计上的哲学。该章还会介绍这些原则，并在本书中贯彻执行。
　　第2章，入门
　　该章从编译语言与脚本语言间的取舍开始讨论。之后再介绍两个相当简单但很实用的Shell脚本程序。涵盖范围包括了命令、选项、参数、Shell变量、echo与printf的输出、基本输入／输出重定向、命令查找、从脚本里访问参数以及执行跟踪。最后则以国际化与本地化结束；这是在今日“地球村”环境下渐受重视的议题。
　　第3章，查找与替换
　　这里会介绍以正则表达式进行文字查找(或比对)。我们还会说明修改与提取文字的操作。这些都是最基本的Shell脚本编写的操作。
　　第4章，文本处理工具
　　该章介绍的是一些文字处理的软件工具，这些在Shell脚本编写时，都会一再地使用。其中最重要的两个就是sort与uniq，在重组与降低数据量上，它们扮演很重要的角色。本章还会带你看看如何重新编排段落、计算文字单位、显示文件以及取出文件的前几行、后几行数据。
　　第5章，管道的神奇魔力
　　该章以几个小型脚本为例，展示结合简单的UNIX工具程序能够产生更强大、更灵活的工具。本章的内容采取cookbook(问题描述与解决方案)的形式，它们共同的部分在于所有的解决方案都组合自线性的管道(pipelines)。
　　第6章，变量、判断、重复动作
　　这章介绍Shell语言里不可或缺的部分。包含了Shell变量与算法、退出状态的重要概念、如何判断，以及Shell循环的处理。最后以Shell的函数作结束。
　　第7章，输入／输出、文件与命令执行
　　该章为Shell描述的另一章，也是结尾，重点放在输入／输出、Shell所执行的各种替换、加引号、命令行执行顺序，以及Shell内置命令上。
　　第8章，产生脚本
　　我们在这里会示范如何结合UNIX的工具以处理更复杂的文本处理工作。本章的程序比第5章的还大，但仍是几分钟便能消化掉。甚至它们所完成的工作，如果使用传统的程序语言，例如C、C++或JavaTM来做，会很困难。
　　第9章，awk的惊人表现
　　该章介绍的是awk语言必备的组成部分。awk是一套功能强大且自给自足的语言。而awk程序更可用来与其他软件工具箱里的其他程序相结合，以执行简单的数据提取、处理与格式编排工作。
　　第10章，文件处理
　　该章介绍了处理文件的几个主要工具。包括列出文件、产生临时文件，以及利用指定标准寻找文件的find命令。另外还有两个与磁盘空间有关的重要命令，以及比较文件间异同的几个程序。
　　第11章，扩展实例：合并用户数据库
　　将所有东西串起来，解决既有趣又难易适中的挑战性工作。
　　第12章，拼写检查
　　该章利用拼写检查的问题，展现如何以数种方式解决它。这里展现了原始的UNIX Shell脚本管道以及两个小型的脚本：ispell与aspell命令，可自由下载，它们更适用于批处理的拼写检查工作。我们以awk写了一个大小适当的拼写检查程序，充分展现使用该语言的简单利落。
　　第13章，进程
　　该章将重点从文本处理的领域转到工作(job)与系统管理上。我们介绍了几个用于管理进程的必备工具，还有sleep命令，这在脚本需要等待某些事发生时很有用，另外则是其他一些用于延迟的标准工具，或修正日期时间命令的处理。最重要的是，该章也包括了trap命令，它可以让Shell脚本控制UNIX的信号。
　　第14章，Shell可移植性议题与扩展
　　这里介绍的是一些更有用的扩展，可使用于ksh与bash之下，而非POSIX。一般情况下，你都能安心地将这些扩展套用在你的脚本里。该章还会带你看几个“gotchas”，这是等待粗心大意的Shell脚本编写者跳入的陷阱。内容包括了在编写脚本时该注意的事项，还有在执行时可能出现的矛盾。除此之外，还包括有ksh与bash的下载与安装。该章最后会探讨各种不同的Shell实现间，Shell初始化与终结的差异。
　　第15章，安全的Shell脚本：起点
　　该章会粗略介绍编写Shell脚本时的安全性议题。
　　附录A，编写手册页
　　该附录讲的是如何编写手册页。这个必备的技术，在传统的UNIX的书籍里常被忽略。
　　附录B，文件与文件系统
　　这个附录会介绍UNIX的字节数据流文件系统模型，并与较复杂的文件系统对照，然后解释其简洁的好处。
　　附录C，重要的UNIX命令
　　该附录提供了许多UNIX命令的列表。建议你了解这些命令，它们可以增强你的能力。
　　参考书目
　　这是UNIX的Shell脚本编写的其他资料来源。
　　本书惯例
　　我们假设你已经知道，输入Shell命令时，最后会按下Enter。Enter在某些键盘上被表示为Return。
　　提到Ctrl-X时，X指的是任意字母，是在你按住Ctrl(或Ctl，或Control)之后，接着按下的键。虽然我们这里用的是大写，不过你在按这个字母的时候无须按住Shift键。..
　　其他特殊字符有换行符号(同于Ctrl-J)、Backspace(同于Ctrl-H)、Esc、Tab，与Del(有时被标示为Delete或Rubout)。
　　本书使用下列字体惯例：
　　斜体
　　用在电子邮件地址、Internet URL、使用手册的引用。还用以表示参数，表示你在使用时，可以将它置换为你要的实际值，以及为范例提供说明性文字。
　　等宽字体
　　提及UNIX文件名、扩展与内置命令、命令选项时，我们就会用到这个字体。除此之外，变量名称、Shell关键字、选项、函数、文件名结尾、范例中显示文件内容或命令的输出，以及当命令行或输入范例存在于正规文字中时，我们也会以等宽字体表示。简而言之，任何与计算机使用相关的，我们都用这个字体。
　　粗体等宽字体
　　这种字体用以区分比对文字中的正则表达式与Shell通配字符样式。在范例中，显示用户与Shell间的互动，我们也会使用这个字体，所有用户应键入的，我们都以粗体等宽字体显示。
　　斜体等宽字体
　　这个字体是用在范例与内文中，需置换为正确值的命令行参数上。
　　注意：表示诀窍、建议或一般注意事项。
　　警告：表示警告与提醒。
　　参照UNIX User’s Manual时，我们会使用标准形式：name(N)，name为命令名称，而N为section编号(通常是1)，也就是寻找信息的地方。例如grep(1)即grep的Section 1的手册页。参考文件我们使用man page，或直接简写为manpage。
　　UNIX系统调用与C程序库，我们都这么写：open()、printf()。你可以使用man命令，查看这两者的manpage：
　　$man open查看open(2)的manpage
　　$man printf查看printf(3)的manpage
　　当我们要介绍一个程序时，就使用下面的方式，显示在正文附近，说明该工具程序与它的重要选项、语法与用途。
　　程序码范例
　　本书并非只是解释命令与程序的功能，还提供了完整的Shell命令与程序的设计范例，便于用户或程序员直接应用于日常工作上。我们非常鼓励你修改与强化这些范例。
　　本书所提供的程序代码，都公开在GNU General Public License(GPL)条款下，允许程序复制、再利用与编修。请参阅范例包括的COPYING文件，了解许可权的实际条款。
　　代码可从原书网站获得：http：／／www．oreilly．com／catalog／shellsrptg／index．html。
　　我们会感谢你在使用程序码范例时注明出处，但这并非必要。这通常包括标题、作者、出版商与ISBN。例如：《Classic Shell Scripting》，作者Arnold Robbins与Nelson H．F．Beebe。版权所有2005 O’Reilly Media，Inc．，ISBN为0-596-00595-4。
　　Windows系统下的UNIX工具程序
　　很多的程序员初次接触UNIX系统后，再回到个人计算机的世界，常会希望也有一个像UNIX那样好用的环境(特别是在面对难以处理的MS-DOS命令行时)，所以会有UNIXShell式的界面出现在一些小型计算机的操作系统上，也不是什么奇怪的事。
　　近几年，我们不只看过Shell仿制品，还看过整个完整的UNIX环境的仿制品。其中两个就是使用bash与ksh93，其他则是提供自有的Shell重新实现(reimplementation)。本节将依次(以字母顺序)予以介绍，并附上联络方式与Internet下载信息。
　　Cygwin
　　Cygnus Consulting(现为Red Hat)建立了cygwin环境。首先出现的是提供UNIX系统调用模拟器的共享程序库cgywin．dll，该公司释出了许多GNU工具程序，供各种不同的Microsoft Windows版本使用。模拟器还包括了Berkeley socket API的TCP／IP网络。在Windows／NT、Windows 2000与Windows XP下，功能性最佳，不过在Windows 95／98／ME下也是可以运行的。
　　cygwin环境使用自己的Shell、自己的C编译器GCC，以及搭配其UNIX工具集里的GNU工具程序。设计精良的mount命令提供了将Windows c：＼path的标记方式对应到UNIX文件名。
　　http：／／www．cygwin．com／是你了解cygwin项目的起点。第一步就是下载它的安装程序，执行时，你可以选择要安装哪些额外包。整个安装过程都是在Internet上进行，没有官方的cygwinCD，至少项目的维护人员并没有提供。
　　DJGPP
　　DJGPP程序组提供了MS-DOS环境下所使用的32位GNU工具程序。以下内容摘自其网页：
　　DJGPP为执行MS-DOS的Intel 80386(及更高级的)个人计算机提供了完整的32位C／C++开发系统。其中包含许多GNU开发工具程序。这些开发的工具必须在80386或更高级的计算机上执行产生程序。大部分情况下，其所产生的程序可做商业用途而无须授权或版税。
　　其名称一开始是来自D．J．Delorie，D．J．Delorie将GNU C++编译器g++移植到MS-DOS，而g++一开始的名称为GPP。之后逐渐茁壮成长，成为MS-DOS下完整的UNIX环境不可或缺的要素，并带有GNU工具，以bash作为其Shell。不同于cygwzn或UWIN的是：不需要使用任何的Windows版本，只要有完整的32位处理器与MS-DOS即可(当然，你也可以在Windows的MS-DOS窗口下使用DJGPP)。官方网站为http：／／www．delorie．com／djgpp／。
　　MKS Toolkit
　　个人计算机世界里的UNIX环境有许多都是以Mortice Kern Systems的MKS Toolkit建立的：
　　MKS Canada-Corporate Headquarters
　　410 Albert Street
　　Waterloo，ON
　　Canada N2L 3V3
　　1-519-884-2251
　　1-519-884-8861(FAX)
　　1-800-265-2797(Sales)
　　http：／／www．mks．com／
　　MKS Toolkit版本非常多，根据你的开发环境和开发人员的数量来决定要用哪一个版本。其中包含了与POSIX兼容的Shell，拥有1988 Korn Shell里的所有功能，超过300种的工具组，例如awk、perl、vi、make等。MKS程序库支持超过1500个UNIX API，使它更为完整，更易于应用在Windows环境下。
　　AT&T UWIN
　　UWIN包是David Korn与同事为了在Microsoft Windows下使用UNIX环境而产生的项目。其架构类似先前讨论的cygwzn。共享程序库poslx．dll提供了UNIX系统调用API的模拟器。其系统调用模拟器相当完整。其中一个有趣的创新就是将Windows的登录改为可在／reg文件系统下访问的方式。UWIN环境依赖原始的Microsoft Visual C／C++编译器，不过仍可自行下载GNU开发工具用于UWIN下。
　　http：／／www．research．att．com／sw／tools／uwin／是此项目的网页，说明可供下载的有哪些，并附上二进制文件的下载链接，还有与UWIN的使用许可权相关的信息。除此之外，另有UWIN的各类报告、额外的好用软件及其他类似包的链接。
　　UWIN包最大的优势为：它的Shell是一个真正的ksh93，因此在与UNIX的ksh93版本的兼容性上不会有问题。
　　联系我们
　　请将关于本书的意见和问题通过以下地址提供给出版商：
　　美国：
　　O’Reilly Media，Inc．
　　1005 Gravenstein Highway North
　　Sebastopol，CA 95472
　　中国：
　　100035北京市西城区西直门南大街2号成铭大厦C座807室
　　奥莱利技术咨询(北京)有限公司
　　O’Reily公司是世界性的计算机信息出版公司。我们永远乐意听到读者对出版物的意见，包括如何让本书可以更好的建议，指正本书的错误或是读者建议本书往后改版时应该再加入的其他主题。以下是英文原书的联络数据：
　　http：／／oreilly．com／catalog／9780596005955／index．html
　　如果想要发表关于本书的评论和技术问题，请发邮件至：
　　bookquestions@oreilly．com
　　info@mail．oreilly．com．cn
　　关于图书、会议、资源中心和O’Reilly网络的更多信息，请查看我们的站点：
　　http：／／www．oreilly．com
　　http：／／www．oreilly．com．cn
　　致谢
　　我们俩要感谢对方的付出。虽然我们未曾见面，但协同作业的工作一直进行得很好。除了对彼此献上最热忱的感激，还要谢谢我们挚爱的妻子，谢谢她们在这段期间的贡献、耐心、爱，以及在此书编写期间的支持。
　　bash的维护人员Chet Ramey回答了许许多多与POSIX Shell相关的细微问题。AT&TResearch的Glenn Fowler与David Korn，与GNU Project的Jim Meyering，也提供不少解答。我们以字母顺序排列下面要致谢的人：Keith Bostic、George Coulouris、Mary Ann Horton、Bill Joy、Rob Pike、Hugh Redelmeier、Dennis Ritchie，他们为UNIX的历史问题解惑。由于O’Reilly Media的Nat Torkington、Allison Randall、Tatiana Diaz的指导，让本书由概念逐渐成型。感激O’Reilly的Robert Romano将我们原始的ASCII草图与pic略图作成图片。也谢谢Angela Howard为本书制作全面性索引，造福读者。
　　以下仍以字母顺序：谢谢Geoff Collyer、Robert Day、Leroy Eide、John Halleck、Mark Lucking与Henry Spencer为本书初稿再作技术上的检阅，及Sean Burke审阅第2版草稿。谢谢他们提供无价且非常有帮助的回馈。
　　UNIX Guru的UNIX Guru(精神导师)Henry Spencer，谢谢你为本书作的序。
　　感谢University of Utah的Electrical and Computer Engineering、Mathematics，与Physics等系所，以及Center for High-Performance Computing，提供UNIX系统供访问；还有IBM与Hewlett-Packard提供访客访问，让我们取得编写本书所需的软件以供检测，谢谢，谢谢他们。...
　　——Arnold Robbins
　　——Nelson H．F．Beebe