0 前言

在大数据时代，我们要面对大量数据，有时需要对数据进行替换、删除、新增、选取等特定工作。

在Linux中提供很多数据处理命令，如果我们要以行为单位进行数据处理，可以使用sed。

1 sed 的帮助信息，功能，格式，选项和参数说明，退出状态

1.1 sed 的帮助信息

我们可以使用命令sed--help来获取帮助信息。

1.1.1 CSDN程序员研究院bash中的sed 的帮助信息

<code>[purpleendurer @ bash ~] sed --help

Usage: sed [OPTION]... {script-only-if-no-other-script} [input-file]...

-n, --quiet, --silent

suppress automatic printing of pattern space

-e script, --expression=script

add the script to the commands to be executed

-f script-file, --file=script-file

add the contents of script-file to the commands to be executed

--follow-symlinks

follow symlinks when processing in place

-i[SUFFIX], --in-place[=SUFFIX]

edit files in place (makes backup if SUFFIX supplied)

-c, --copy

use copy instead of rename when shuffling files in -i mode

-b, --binary

does nothing; for compatibility with WIN32/CYGWIN/MSDOS/EMX (

open files in binary mode (CR+LFs are not treated specially))

-l N, --line-length=N

specify the desired line-wrap length for the `l' command

--posix

disable all GNU extensions.

-r, --regexp-extended

use extended regular expressions in the script.

-s, --separate

consider files as separate rather than as a single continuous

long stream.

-u, --unbuffered

load minimal amounts of data from the input files and flush

the output buffers more often

-z, --null-data

separate lines by NUL characters

--help

display this help and exit

--version

output version information and exit

If no -e, --expression, -f, or --file option is given, then the first

non-option argument is taken as the sed script to interpret. All

remaining arguments are names of input files; if no input files are

specified, then the standard input is read.

GNU sed home page: <http://www.gnu.org/software/sed/>.

General help using GNU software: <http://www.gnu.org/gethelp/>.

E-mail bug reports to: <bug-sed@gnu.org>.

Be sure to include the word ``sed'' somewhere in the ``Subject:'' field.

[purpleendurer @ bash ~]

1.1.2 银河麒麟（kylin）系统中的sed帮助信息

<code>[purpleendurer @kylin-bash ~] sed --help

用法: sed [选项]... {脚本(如果没有其他脚本)} [输入文件]...

-n, --quiet, --silent

取消自动打印模式空间

-e 脚本, --expression=脚本

添加“脚本”到程序的运行列表

-f 脚本文件, --file=脚本文件

添加“脚本文件”到程序的运行列表

--follow-symlinks

直接修改文件时跟随软链接

-i[SUFFIX], --in-place[=SUFFIX]

edit files in place (makes backup if SUFFIX supplied)

-l N, --line-length=N

指定“l”命令的换行期望长度

--posix

关闭所有 GNU 扩展

-r, --regexp-extended

在脚本中使用扩展正则表达式

-s, --separate

将输入文件视为各个独立的文件而不是一个长的连续输入

-u, --unbuffered

从输入文件读取最少的数据，更频繁的刷新输出

-z, --null-data

separate lines by NUL characters

--help 打印帮助并退出

--version 输出版本信息并退出

如果没有 -e, --expression, -f 或 --file 选项，那么第一个非选项参数被视为

sed脚本。其他非选项参数被视为输入文件，如果没有输入文件，那么程序将从标准

输入读取数据。

GNU版sed主页： <http://www.gnu.org/software/sed/>。

使用GNU软件所需帮助文档： <http://www.gnu.org/gethelp/>。

将错误报告通过电子邮件发送到：<bug-sed@gnu.org>.

请务必将单词“sed”放在标题的某处。

[purpleendurer @kylin-bash ~]

1.2 sed的功能

sed命令源于stream editor（流编辑器），是一个非交互式命令行文本编辑器。

sed命令的功能主要是对文本进行过滤，例如，接受文本输入，对文本执行一些操作（或一组操作），并输出修改后的文本。

sed命令在处理文本时，会先把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾

sed命令的强大之处在于能够处理大文件，并使用正则表达式进行模式匹配和替换，这使其成为脚本编写和数据整理的必备工具。

sed命令通常用于使用模式匹配提取文件的一部分，或替换文件中多次出现的字符串。

当您需要在文件或流上高效地执行文本转换时，可以使用 sed。

1.3 sed的格式

sed [选项]... {脚本(如果没有其他脚本)} [输入文件]...

1.4 sed的选项说明 

1.5 sed的参数

如果没有给出 -e、--expression、-f 或 --file 选项，则第一个非选项 参数作为要解释的 sed 脚本。 

如果在处理上述操作后仍有任何命令行参数，则这些参数将被解释为要处理的输入文件的名称。

文件名“-”是指标准输入流。如果未指定文件名，则将处理标准输入。

1.6 sed的退出状态

退出状态为零表示成功，非零值表示失败。

GNU sed 返回以下退出状态值：

此外，命令 q 和 Q 可用于使用自定义退出代码值终止 sed（这是一个 GNU sed 扩展），详见2.1。

2 sed的脚本

sed 脚本程序由一个或多个 sed 命令组成，这些命令由 -e、-f、--expression 和 --file 选项中的一个或多个传入，如果不存在以上这些选项，则由第一个非选项参数传入。

sed命令的脚本命令格式如下：

[地址]X[选项]

其中：

1.X ：是一个单字母的 sed 文本处理命令。

2.[地址] ：是可选的行地址。如果指定了 [地址]，则命令 X 将仅在匹配的行上执行。[地址] 可以是单行号、正则表达式或一系列行。

3. [选项]： 用于某些 sed 命令。

3 sed命令

3.1 sed命令说明

3.2 替换标记

3.3 元字符 

4 sed命令中的地址

sed命令中的地址用于决定对流入模式空间的哪些行进行编辑。

如果没有指定地址，sed将处理流入模式空间的所有行。

地址可以使用以下方式指定。

4.1 数字

sed 脚本中的地址可以采用以下任何形式：

4.2 文本匹配（正则表达式）

sed 支持以下正则表达式地址。默认正则表达式为基本正则表达式 （BRE）。

如果使用 -E 或 -r 选项，则正则表达式应采用扩展正则表达式 （ERE） 语法。

正则表达式地址对当前模式空间的内容进行操作。如果模式空间发生变化（例如，使用 s/// 命令），则正则表达式匹配将对更改的文本进行操作。      

4.3 范围地址

可以通过指定两个用逗号 （，） 分隔的地址来指定地址范围。

5 参考资料

sed, a stream editorsed, a stream editor

https://www.gnu.org/software/sed/manual/sed.html