Shell文本处理三剑客之sed的使用

sed 是 stream editor 的缩写，流编辑器，主要用于对标准输出或文件进行处理。

语法：

stdout | sed [option] "pattern command"
sed [option] "pattern command" file1

常用选项（option）

# -n 只打印静默模式匹配行，而不输出原行
# p 是打印命令
➜ sed '/hello/p' helloWorld.sh
#!/bin/bash

HELLO bash
echo "hello world"
echo "hello world"
➜ sed -n '/hello/p' helloWorld.sh
echo "hello world"

# -e 追加一组编辑命令
➜ sed -n -e '/hello/p' -e '/HELLO/p' helloWorld.sh
HELLO bash
echo "hello world"

# -f 把所有编辑命令保存在文件中，适用于复杂编辑操作
➜ cat edit.sed
/hello/p
➜ sed -n -f edit.sed hello.md

# -E （或 -r）支持扩展正则表达式
➜ sed -n -E '/hello|HELLO/p' helloWorld.sh
HELLO bash
echo "hello world"

# -i 直接修改源文件内容
# s 是替换命令
# 这里是吧 helloWorld.sh 文件中所有的 hello 改为 hello123
sed -n -i 's/hello/hello123/g' helloWorld.sh

匹配模式（pattern）

匹配模式 说明
10command 第 10 行
10,20command 第 10 到 20 行
10,+5command 第 10 到 16 行
/pattern1/command 匹配 pattern1 对应的行
/pattern1/,/pattern2/command 从 pattern1 对应的行开始，到 pattern2 的行
10,/pattern1/command 从第 10 行开始，到 pattern1 的行
/pattern1/,10command 从 pattern1 对应的行开始，到第 10 行

常用编辑命令（command）

查询

  • p 打印匹配的内容

增加

  • a string 行后追加
  • i string 行前追加
  • r file 从外部文件读入，在匹配的行后追加
  • w newfile 将匹配的行写入外部文件

删除

  • d 删除

修改

  • s/old/new 替换行内第一个 old 为 new
  • s/old/new/g 行内所有 old 替换为 new
  • s/old/new/2g 从第 2 行开始到文件末尾的所有 old 替换为 new
  • s/old/new/ig 行内所有 old 替换为 new，忽略大小写

示例：

# 删除以 sys 开头、并且以/sbin/nologin 结尾的行
➜ sed -i '/^sys.*\/sbin\/nologin$/d' passwd_bak

# 删除注释行、空行
sed -i '/[:blank:]*#/d;/^$/d' passwd_bak

# 查找在以 vagrant 开头的行，下一行追加内容
➜ sed -i '/^vagrant/a 这是追加的一行内容' passwd_bak

# 把所有的 root 替换为 root123
➜ sed -i 's/root/root123/ig' passwd_bak

# 在所有以 sys 开头、以 nologin 结尾的行，尾部追加 _666
# 其中 & 表示前面正则匹配到的内容
➜ sed -i 's/^sys.*nologin$/&_666/g' passwd_bak

# 把所有以 sys 开头、以 nologin_666 结尾的行 改为
# 以 SYS_ 开头、以 _777 结尾，其中 \1 表示前面括号中匹配的中间部分内容
➜ sed -i 's/^sys\(.*\)nologin_666$/SYS_\1_777/g' passwd_bak

# 把 1 ～ 10 行所有的 sys 改为 SYS
➜ sed -i '1,10s/sys/SYS/ig' passwd_bak

# 统计 my.cnf 文件中 mysqld 的子配置项数量
# sed 查找从 [mysqld] 到 下一个[.*] 之间的行
# grep -v 过滤注释、空行和 [.*] 行
# wc -l 统计最后的行数
sed -n "/^\[mysqld\]$/,/^\[.*\]$/p" /etc/my.cnf | grep -Ev '^$|[#;]|^\[.*' | wc -l

注意：如果匹配模式中存在变量，则建议使用双引号，如 sed -i "s/$OLD_STR/$NEW_STR/g" passwd_bak

到此这篇关于Shell文本处理三剑客之sed的使用的文章就介绍到这了,更多相关Shell文本处理sed内容请搜索我们以前的文章或继续浏览下面的相关文章希望大家以后多多支持我们！

赞 (0)

相关推荐

  • Shell正则表达式之grep、sed、awk实操笔记

    最近一直在研究shell脚本这块,刚好闲下来整了下自己手头上比较好的资料中的一些范例,以下是我整理的鸟哥私房菜里面正则表达式里面比较基础的一些语法详解,适合新手查阅. 首先先复制一段范例: 复制代码 代码如下: # vi regular_express.txt ------------------------------- "Open Source" is a good mechanism to develop programs. apple is my favorite food.

  • 一天一个shell命令 linux文本内容操作系列-sed命令详解

    说明: sed是stream editor(流编辑器)的缩写.它能够完美匹配正则表达式.sed和awk是文件编辑最重要的两个命令了.尤其涉及到了很多正则表达式的问题,笔者不敢也有点犯怵,试着写写. 实例: 1.替换文件中的字符串 $sed -i 's/text/replace/g' file #如果不加g结尾,则替换每一行的第一个 #如果只是打印,去掉-i 2.忽略前N处匹配,从N+1出开始替换 $sed -i 's/text/replace/2g' file #在g前面加入数字N 3.移除空白

  • 利用perl、python、php、shell、sed、awk、c 实现字符串的翻转

    原题: Q:有a.txt文件,里面内容如下 1234569 abcABCabc 要求使用awk打印出以下结果 987654321 cbaCBAcba A: shell  :[root@vps tmp]# rev a.txt 9654321 cbaCBAcbaperl : [root@vps tmp]# perl -nle 'print scalar reverse $_;' a.txt 9654321 cbaCBAcbaawk: [root@vps tmp]# awk '{num=split($

  • Python 实现简单的shell sed替换功能(实例讲解)

    code: f = open('yesterday','r',encoding='utf-8') f2 = open('yesterday.bak','w',encoding='utf-8') old_str = input('请输入要修改的字符:') replace_str = input('请输入替换成的字符:') for line in f.readlines(): line = line.replace(old_str,replace_str) print(line) f2.write(

  • 详解linux下批量替换文件内容的三种方法(perl,sed,shell)

    在建设本网站的时候,发现新建了很多的网页,突然发现,每个文件都需要进行修改一样的内容,一个一个打开很是麻烦,所以,总结了一下如何快速修改一个目录下多个文件进行内容替换.第三种方法用的不多 方法一 使用perl ,命令如下: 复制代码 代码如下: find -name '要查找的文件名' | xargs perl -pi -e 's|被替换的字符串|替换后的字符串|g' 方法二 使用sed命令如下: 复制代码 代码如下: sed -i "s/原字符串/新字符串/g" `grep 原字符串

  • shell脚本之正则表达式、grep、sed、awk

    --正则-- 基础正则 ^word     ##搜索以word开头的 vi/vim中 ^ 一行的开头 word$     ##搜索以word结尾的 vi/vim中 $ 一行的结尾 ^$        ##表示空行 .         ##代表且只能代表任意一个字符 \         ##例:\. 只代表点本身,转义符号,让有特殊身份意义的字符,脱掉马甲,还原 \n        ##换行符 \r        ##匹配回车 \w         ##匹配任意一个字符和数字 *        

  • Linux shell利用sed如何批量更改文件名详解

    前言 本文主要给大家介绍了关于Linux shell用sed批量更改文件名的相关内容,分享出来供大家参考学习,下面话不多说了,来一起看看详细的介绍吧. 示例 去除特定字符 目标:将 2017-01-01.jpg.2018-01-01.jpg 改为 20170101.jpg.20180101.jpg 方法:将所有 - 替换为空 for file in `ls | grep .jpg` do newfile=`echo $file | sed 's/-//g'` mv $file $newfile

  • Shell文本处理三剑客之sed的使用

    sed 是 stream editor 的缩写,流编辑器,主要用于对标准输出或文件进行处理. 语法: stdout | sed [option] "pattern command" sed [option] "pattern command" file1 常用选项(option) # -n 只打印静默模式匹配行,而不输出原行 # p 是打印命令 ➜ sed '/hello/p' helloWorld.sh #!/bin/bash HELLO bash echo &q

  • Shell中使用grep、sed正则提取和替换字符串

    Linux中使用grep正则提取字符串 echo office365 | grep -P '\d+' -o find . -name "*.txt" | xargs grep -P 'regex' -o xargs会将find结果作为grep的输入,防止find结果过多无法处理 -P参数表明要应用正则表达式 -o表示只输出匹配的字符串,这样我们就可以把正则匹配到的结果拿到了. Linux.Mac OS中使用sed正则提取字符串 Mac OS上用正则的话要用e参数取代P参数,也可以用se

  • shell脚本--sed的用法详解

    shell脚本--sed的用法详解

    sed在处理文本时是逐行读取文件内容,读到匹配的行就根据指令做操作,不匹配就跳过. sed是Linux下一款功能强大的非交互流式文本编辑器,可以对文本文件进行增.删.改.查等操作,支持按行.按字段.按正则匹配文本内容,灵活方便,特别适合于大文件的编辑.本文主要介绍sed的一些基本用法,并通过shell脚本演示sed的使用实例. 1.sed的使用方法,调用sed 命令的语法有两种: 一.在命令行指定sed指令对文本进行处理:sed +选项  '指令' 文件 二.先将sed指令保存到文件中,将该文件

  • Shell中正则表达式及sed和awk常见问题

    目录 1 正则表达式中的+.?.*分别表示什么含义? 2 如何编写正则表达式匹配11位的手机号? 3 简述sed定址符的作用及表示方式. 4 如何使用sed提取文本中的偶数行? 5 如何使用sed删除文本中每行的第4个字符? 6 提取/etc/passwd文件的第6-10行,另存为pass5.txt文件. 7 简述awk工具的基本语法格式. 8 简述awk工具常用的内置变量.各自的作用. 9 awk处理文本时,读文件前.读取文件内容中.读文件后后这三个环节是如何表示的? 10 提取当前eth0网

  • Centos7 Shell编程之正则表达式、文本处理工具详解

    目录 1. 正则表达式 1.1 常规匹配 1.2 常用特殊字符 2. 文本处理工具 2.1 cut 2.2 awk 1. 正则表达式 正则表达式可以很灵活的提供各种模糊匹配的筛选规则.常被用来检索.替换那些符合某个模式的文本.grep.sed.awk等文本处理工具都支持通过正则表达式进行模式匹配 1.1 常规匹配 一串不包含特殊字符的正则表达式,匹配包含它自己的字符,例如: [root@bigdata001 ~]# cat /etc/passwd | grep root root:x:0:0:r

  • 简述Linux文本处理命令“sed”

    文本处理编辑命令sed sed是一种流编辑器,它是文本处理中非常中的工具,能够完美的配合正则表达式使用,功能不同凡响.处理时,把当前处理的行存储在临时缓冲区中,称为"模式空间"(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕.接着处理下一行,这样不断重复,直到文件末尾.文件内容并没有 改变,除非你使用重定向存储输出.Sed主要用来自动编辑一个或多个文件:简化对文件的反复操作:编写转换程序等. 命令格式: sed [选项] '(截取的

  • SED单行脚本快速参考中文版(Unix 流编辑器)

    英文标题:USEFUL ONE-LINE SCRIPTS FOR SED (Unix stream editor) 原标题:HANDY ONE-LINERS FOR SED (Unix stream editor) 整理:Eric Pement - 电邮:pemente[at]northpark[dot]edu 版本5.5 译者:Joe Hong - 电邮:hq00e[at]126[dot]com 在以下地址可找到本文档的最新(英文)版本: http://sed.sourceforge.net/

  • SED单行脚本快速参考(流编辑器)第1/2页

    SED单行脚本快速参考(流编辑器)第1/2页

    sed (stream editor) 功能说明:利用script来处理文本文件.语法:sed [-hnV][-e<script>][-f<script文件>][文本文件]补充说明:sed可依照script的指令,来处理.编辑文本文件.参数:-e<script>或--expression=<script> 以选项中指定的script来处理输入的文本文件.-f<script文件>或--file=<script文件> 以选项中指定的scr

随机推荐