日志分析工具

这里记录下日志分析的工具。

grep查找, sed 编辑, awk 根据内容分析并处理.

  • grep(关键字: 截取)
    文本搜集工具, 结合正则表达式非常强大
  • awk(关键字:分析&处理)
    一行一行的分析处理
  • sed(关键字: 编辑)
    以行为单位的文本编辑工具 sed可以直接修改档案
    sed 是一种新型的,非交互式的编辑器。它能执行与编辑器 vi 和 ex 相同的编辑任务。sed 编辑器没有提供交互式使用方式,使用者只能在命令行输入编辑命令、指定文件名,然后在屏幕上查看输出。 sed 编辑器没有破坏性,它不会修改文件,除非使用 shell 重定向来保存输出结果。默认情况下,所有的输出行都被打印到屏幕上。
  • sort命令
    sort将文件/文本的每一行作为一个单位,相互比较,比较原则是从首字符向后,依次按ASCII码值进行比较,最后将他们按升序输出。’

根据日志查看一个服务的qps

1
tail -f XXX.log

命令:tail -f XXX.log | grep recommend.components.KeywordService | cut -d’ ‘ -f2 | cut -d’:’ -f3 | uniq -c
说明:取增量 | 一个请求取一行 | 把时间截取出来 | 把秒数截取出来 | 去重取计数


La inteligencia me persigue, pero yo soy más rápido.