linux日志命令sed linux secure日志

Linux sed 命令详解

sed命令行格式：sed [options] 'command' file(s)

创新互联公司网站建设提供从项目策划、软件开发，软件安全维护、网站优化(SEO)、网站分析、效果评估等整套的建站服务，主营业务为成都做网站、网站建设、外贸营销网站建设，成都App制作以传统方式定制建设网站，并提供域名空间备案等一条龙服务，秉承以专业、用心的态度为用户提供真诚的服务。创新互联公司深信只要达到每一位用户的要求，就会得到认可，从而选择与我们长期合作。这样，我们也可以走得更远！

options常用选项：

-n或--quiet或——silent：仅显示script处理后的结果;

-e：以选项中的指定的script来处理输入的文本文件;

-f：以选项中指定的script文件来处理输入的文本文件;

-r∶sed 的动作支援的是延伸型正规表示法的语法;

-i∶直接修改读取的档案内容，而不是由萤幕输出;

-h或--help：显示帮助;

-V或--version：显示版本信息。

Command常用命令：

a：新增，a 的后面可以接字符串，而这些字符串会在新的一行出现(目前的下一行);

c：取代，c 的后面可以接字符串，这些字符串可以取代 n1,n2 之间的行;

d：删除，d 后面通常不接任何字符串;

i：插入，i 的后面可以接字符串，而这些字符串会在新的一行出现(目前的上一行);

p：列印，亦即将某个选择的资料印出。通常 p 会与参数 sed -n 一起运作;

s：取代，可以直接进行取代的工作，通常与正规表达式搭配使用。

实例说明：

新增操作：a命令

sed '/^bird/a\test' file将test追加到 以bird开头的行后面

删除操作：d命令

sed '/^$/d' file #删除空白行;

sed '2d' file #删除第二行;

sed '2,$d' file #删除第2行到最后一行;

sed '$d' file #删除最后一行;

sed '/^bird/'d file #删除所有开头是bird的行;

插入操作：i命令

sed -i '3i\bird ' bird.conf #在bird.conf文件第3行之前插入bird

替换文本中的字符串：s命令

sed 's/bird/birds/' file #将文本中的bird替换成birds;

sed -i 's/ bird / birds /g' file #将file文件中每一行的第一个bird替换为birds;

Linux日志截取利器——sed命令（亲测可用）

在生产环境中，往往没有条件给我们去debug排查，更多时候我们是通过日志来看具体的报错日期。

但是日志往往是一直在实时更新，而且记录条数庞大，很难直接定位到错误信息。这个时候，就可以利用sed命令来截取指定时间段内的日志（也是网上大多数博主的做法）。

具体命令如下：

这条命令可以查询2020.10.13号当天9点到9点十分中间的所有的日志信息。

但是这条命令的使用有两个前提（很多网上的博主都没有提到）

第一，日志输出的日期格式是要满足命令中的格式 ，如果不是的话就跟着实际的格式改

第二，输入的日期必须要真实存在！！！ ，比如说9点整刚好没有日志输出，那么这条命令就会失效

更加通配的命令可以是这样， 使用 号*

这样无论九点整的时候是否有日志产生，就都可以获取到9点整到现在的所有日志了

使用 ，将截取到的内容输出到指定的文件中，方便进一步查看

ps：在实际操作中，我们一般会在后面加grep命令做进一步的关键字过滤

Linux 命令统计日志某个字段的信息

如上图，某个服务器的日志文件，通过命令

grep "Send kafka Success" 2021-08-01-info.log | grep "result_size:100"

可以得到相关日志。现在要求统计所有result_size累加的结果。

grep "Send kafka Success" 2021-08-01-info.log | grep -o -E "result_size:[0-9]+" | awk -F ':' 'BEGIN{print "开始统计result_size累加和"} {sumSize+=$2 } END{print "sumSize="sumSize}'

sed 命令可以很好的进行行匹配，但从某一行中精确匹配某些内容，则使用 grep 命令并辅以 -o 和 -E 选项可达到此目的。其中 -o 表示“only-matching”，即“仅匹配”之意。光用它不够，配合 -E 选项使用扩展正则表达式则威力巨大。

比如下面有一条文本 tmp.txt ，其中内容为：

{"aid":45,"path":"attachment/Mon_1112/2_1_5728040df3ab346.jpg"}

我们想从中过略出 aid 的值即 45 ，那么可以先如下这么做：

grep -o -E 'aid":[1-9]*' tmp.txt

得到的结果为：

aid":45

这时就好办了，我们可以使用 awk 的 -F 选项指示出冒号分隔符，这样就容易过滤出 45 这个值来，整个命令综合如下：

grep -o -E 'aid":[1-9]*' tmp.txt |awk-F: '{print $2}'

参考文档：

linux sed 之 查看指定时间段的日志

命令格式： sed -n '/起始时间/','/结束时间/p' [日志文件]

eg1 :

注：

日期时间格式要和日志文件中的保持一致；

eg2 :

nginx中的日期时间格式和eg1中的格式不一致，这时使用的命令是：

注：

使用“\”是为了转义“/”，不然命令行会报错

也可以将输出的命令行内容输出到一个文本文件中，这样方便用编辑器查看，命令是：

eg3 :

这样输出的内容就会保存在gfc.log文本文件中。

eg: