这里记录下日志分析的工具。
grep查找, sed 编辑, awk 根据内容分析并处理.
- grep(关键字: 截取)
文本搜集工具, 结合正则表达式非常强大 - awk(关键字:分析&处理)
一行一行的分析处理 - sed(关键字: 编辑)
以行为单位的文本编辑工具 sed可以直接修改档案
sed 是一种新型的,非交互式的编辑器。它能执行与编辑器 vi 和 ex 相同的编辑任务。sed 编辑器没有提供交互式使用方式,使用者只能在命令行输入编辑命令、指定文件名,然后在屏幕上查看输出。 sed 编辑器没有破坏性,它不会修改文件,除非使用 shell 重定向来保存输出结果。默认情况下,所有的输出行都被打印到屏幕上。 - sort命令
sort将文件/文本的每一行作为一个单位,相互比较,比较原则是从首字符向后,依次按ASCII码值进行比较,最后将他们按升序输出。’
根据日志查看一个服务的qps
1 | tail -f XXX.log |
命令:tail -f XXX.log | grep recommend.components.KeywordService | cut -d’ ‘ -f2 | cut -d’:’ -f3 | uniq -c
说明:取增量 | 一个请求取一行 | 把时间截取出来 | 把秒数截取出来 | 去重取计数