几个常用的文本处理shell 命令:find、grep、sort、uniq、sed、awk

find 文件查找

查找txt和pdf文件

find . \( -name "*.txt" -o -name "*.pdf" \) -print

查找所有字母开头的文件

find . -name "[a-a]*"

否定参数->查找所有非txt文本

find . ! -name "*.txt" -print

指定搜索深度->打印出当前目录的文件(深度为1)

find . -maxdepth 1 -type f

正则方式查找.txt和pdf

find . -regex  ".*\(\.txt|\.pdf\)$"
-iregex: 忽略大小写的正则

查找目录下属性为755的文件

find . -prem 755

查找所属主为root的文件

find -user root

寻找大于2k的文件

find . -type f -size +2k

找到文件后续动作

删除当前目录下所有的avi文件

find . -type f -name "*.avi" -delete

执行动作(强大的exec)

find . -type f -user root -exec chown root {} \; //将当前目录下的所有权变更为root

grep 文本搜索

在file文件中过滤掉字符串‘str‘所在的行

grep -v "str" file

在file文件中查找时间在2017:22:50~2017:22:59所在的行

grep -E "2017:22:5[0-9]" file

在file文件中查找不包括360的行

grep -E "^[^360]" file

在file文件中查找包括w和t的行

grep -E "w*t" file

在file文件中查找大于560小于893的行

grep -E "[5-8][6-9][0-3]"

在file文件中查找包含两个9的行

grep -E "9{2}" file

查找大于两个9的行

grep -E "9{2,}" file

查找file文件中的空行

grep -E "^$" file

查找包括?的行

grep "?" file

查找文件中以w开头的行

grep -E "^w" file

查找文件中不是以w开头的行

grep -E "^[^w]" file

awk 数据流处理工具

查找出日志文件中的每一列

awk ‘{print $0}‘ log.log

查找出文件中的第一列和第七列

awk ‘{print %$1 "\t"$7}‘ log.log

~匹配192.168.10.2的ip地址统计。!~为不匹配

cat file | awk ‘$0 !~ /192.168.10.2/‘ | grep ‘php‘ |wc -|

sed 行定位

只打印第二行,不打印其它行的数据

sed -n ‘2‘p file

从第一行到第九行的记录

sed -n ‘1,9‘p file

打印匹配php的行

sed -n ‘/php/p file

打印从第九行到匹配php的之间所有行

sed -n ‘9,/php/‘p file

把第一行和第二行全部删除(非文件删除)

sed ‘1,2‘d file

Uniq行定位的使用

打印紧挨的重复行出现的次数

uniq -c file

只打印重复的行

uniq -d file

把apache网站的所有访问ip统计出来,并打印统计次数

awk ‘{print $1}‘ /var/log/httpd/access_log | sort | uniq -c

sort排序的使用

把文件喊字母的圣墟进行排序

sort file

把文件按照字母的降序进行排序

sort -r file

为进行分割后的第一列来排序

cat file | sort -t: -k1 -r
时间: 05-14

几个常用的文本处理shell 命令:find、grep、sort、uniq、sed、awk的相关文章

Linux管线命令 - cut,grep,sort,uniq,wc,tee,tr,col,join,paste,expand,split,xargs

在每个管线后面接的第一个数据必定是『命令』喔!而且这个命令必须要能够接受 standard input 的数据才行,这样的命令才可以是为『管线命令』,例如 less, more, head, tail 等都是可以接受 standard input 的管线命令啦.至于例如 ls, cp, mv 等就不是管线命令了!因为 ls, cp, mv 并不会接受来自 stdin 的数据. 也就是说,管线命令主要有两个比较需要注意的地方: 管线命令仅会处理 standard output,对于 standar

文本查找查找命令的grep 、egrep、fgrep用法的详解

一.学习目标 了解并能熟悉运用grep.egrep.fgrep命令. 二.学习内容 1.grep.egrep.fgrep命令的意思和用法格式 : grep:是使用基本正则表达式定义的模式来过滤文本的命令. # grep [options] PATTERN  [FILE,...] egrep  :是使用扩展正则表达式的模式来过滤文本的命令. # egrep [options] PATTERN  [FILE,...] fgrep:不支持正则表达式,是使用文字本身的意义的模式来过滤文本的命令. # f

adb shell 命令返回'grep' 不是内部或外部命令,也不是可运行的程序

C:\Users\Vicky>adb shell dumpsys window windows | grep mCurrent'grep' 不是内部或外部命令,也不是可运行的程序或批处理文件. 解决方法:在adb shell 后面的内容加上双引号就不会报错啦 C:\Users\Vicky>adb shell "dumpsys window windows|grep mCurrent" mCurrentFocus=Window{cd554b4 u0 com.alibaba.a

linux基础篇07,linux文本处理cat more less head tail sort uniq grep cut jion sed awk

文本处理cat more less head tail sort uniq grep cut jion sed awk ################################################ cat:concatenate files and print on the standard output 显示文件内容到标准输出(显示器) -e:显示最后一个结尾的字符 -n:显示行编号 [[email protected] ~]# cat -n /etc/shells 1  

05,文本处理cat more less head tail sort uniq wc tr grep cut jion sed awk ok

文本处理cat more less head tail sort uniq grep cut jion sed awk ################################################ cat:concatenate files and print on the standard output 显示文件内容到标准输出(显示器) -e:显示最后一个结尾的字符 -n:显示行编号 [[email protected] ~]# cat -n /etc/shells 1  

【android】android 常用adb 和 adb shell 命令

db是SDK自带的工具,可实现桥接功能:adb shell 可以与手机系统建立交互,是基于andoid Linux系统下的操作 ADB常用命令: 1. 查看设备         adb  devices 这个命令是查看当前连接的设备, 连接到计算机的android设备或者模拟器将会列出显示 2. 安装软件 adb  install <apk文件路径> 这个命令将指定的apk文件安装到设备上       参数“-r”,它是更新安装的意思,       参数 -s ,安装到sdcard.     

0219自学Linux_bash特性+命令学习(cut,sort,uniq,wc,tr,histroy,alias)+通配符glob

09 GPL,BSD,Apache三个开源协定的大体联系及其区别 1.自由软件,版权描述:但是照样是有版权的 2.开源协定,版权描述 www.kernel.org内核版本的版本号查看网址,也是官网 查看最新kernel的最新版本,www.kernel.org习惯了解 列出linux发行版和linux内核的关系 Lniux发行版,GUN:GUN/Linux. 源代码:必须要编译才可以运行,所以发行版是已经将源代码已经编译完成的东西,组合在一起,就形成了发行版,主流的三大发行版:Fedora:它为r

Mac服务器服务更新常用的几个shell命令

Mac服务器需要先开启远程登录.开启方式:系统偏好设置->共享 勾选远程登录 常用命令有: 拷贝(把本机文件拷贝到远程服务器上) scp -r 本地路径/file userName@192.168.xxx.xx:/tmp #userName为远程服务器用户名称,后面为服务器地址,/tmp为远程服务器的某个目录,有些时候会遇到权限问题,可以考虑先拷贝到/tmp下,登录上远程服务后再进行cp或mv.回车后输入远程服务器当前用户登录密码即可登录. 登录远程服务器: ssh userName@192.1

9 shell命令之grep

当我们需要在成千上万个文件中找到一个指定的文件,可能我们可以用ls filename . 结果会列出这个文件的一些信息.但这不是最好的方式.或者指定规则的文件的时候,ls显然无法满足我们的需求了.无论上述哪种情况,我们需要一个强大的助手-grep. grep还有几个变体,分别是egrep, fgrep, rgrep. 在这几个变体里面,我只知道egrep是grep -E .也就是grep的正则变体. grep [option] "pattern" [filename] 此处之所以把文件