Linux常用命令

刘浩的BigDataPath

发布于 2021-04-13 11:59:25

1.8K0

文章被收录于专栏：大数据那些年大数据那些年

head -2 1.txt | cut -c 5 截取1.txt文件的前两行的第五个字符
head -2 1.txt | cut -d ‘：’ -f 1,2 截取1.txt文件的前两行以：分割显示 1 2段内容
cut 从指定文件截取内容
-c 按字符选取内容
-d ‘分隔符’ 指定分隔符
-f n1，n2 分割以后显示第几段内容，使用，分割
n 只显示n项
n- 显示从第n项一直到行尾
n-m 显示从第n项到第m项（包括m）
Sort 排序
-u 去掉重复的
-n 升序
-n -r 倒序
-nr 合并式
-t 指定字段分隔符
-k 根据那一列排序
根据第二段成绩进行倒序显示所有内容 sort -t ‘,’ -k2nr score.txt
WC 命令
wc 文件名显示指定文件字节数，单词数，行数信息
-c 字节数
-w 单词数
-l 行数
-m 字符数
echo “itheima” |tr ‘[a-z]’ ‘[A-Z]’ 将小写字母转换成大写字母
echo “HELLO” |tr ‘[A-Z]’ ‘[a-z]’ 将大写字母转换成小写字母
ls /etc | wc -w 查看/etc目录下有多少个子内容
cat 5.txt | sort | uniq -c 查看文件并且去掉重复的进行排序 -c 显示每行内容出现的次数
cat words.txt | tr ‘,’ ‘\n’ | sort | uniq -c 统计每个单词出现的次数
cat -n /etc/*.conf 查看 /etc目录下以.conf以结尾的文件的内容
cat -n /etc/*.conf >> /export/v.txt 将命令结果追加到 /export/v.txt 文件中
Split 命令
split -b 10k 文件将大文件切分成若干10KB的小文件
split -l 1000 文件将大文件切分成若干1000行的小文件
Awk 命令
awk ‘/zhangsan|lisi/’ score.txt 模糊查询
awk -F ‘,’ ‘{print 1, 2,
-F ',' 使用指定字符分割 $ + 数字 获取第几段内容
$0 获取当前行内容 NF 表示当前行共有多少个字段
$NF 代表最后一个字段
$(NF-1) 代表倒数第二个字段
NR 代表处理的是第几行
awk -F ’ ’ ‘{OFS="==="}{print
OFS="字符" 向外输出时的段分割字符串
awk -F ‘,’ ‘{print toupper($2)}’ 1.txt 操作1.txt文件, 根据逗号分割, 打印第一段第二段第三段内容
toupper() 字符转成大写
tolower() 字符转成小写
length() 返回字符长度
if(0 ~ “aa”) print 0 如果这一行包含 “aa”, 就打印这一行内容
if(1 ~ “aa”) print 0 如果第一段包含 “aa”, 就打印这一行内容
if(1 == “lisi”) print 0 如果第一段等于 “lisi”, 就打印这一行内容
sed 可选项目标文件对目标文件进行过滤查询或替换
p 打印
$ 代表最后一行
-n 仅显示处理后的结果
-e 根据表达式进行处理
sed -n -e ‘1,5p’ 1.txt 列出 1.txt的 1~5行的数据
sed -n -e ‘1,$p’ 1.txt 列出01.txt的所有数据
sed -n -e ‘1, = ′ − e ′ 1 , =' -e '1, =′−e′1,p’ 1.txt 列出01.txt的所有数据且显示行号
sed -nr -e ‘/r+t/p’ -e ‘/r+t/=’ 01.txt 查找出1.txt中字母r后面是多个t的行，并显示行号
-r 识别正则
删除01.txt中前3行数据，并显示行号 nl 01.txt | sed -e '1,3d’
保留1.txt中前4行数据，并显示行号 nl 01.txt | sed -e '5,$d’
在01.txt的第二行后添加aaaaa,并显示行号 nl 01.txt | sed -e '2a aaaaa’
在1.txt的第1行前添加bbbbb，并显示行号 nl 01.txt | sed -e '1i bbbbb’
把1.txt中的nologin替换成为huawei,并显示行号 nl 1.txt | sed -e 's/nologin/huawei/'
s/oldString/newString/ 替换
把01.txt中的1,2行替换为aaa,并显示行号 nl passwd | sed -e '1,2c aaa’
在01.txt中把nologin替换为 huawei sed -i -e ‘s/nologin/huawei/’ 01.txt
-i 替换原有文件内容
在01.txt文件中第2、3行替换为aaaaaa sed -i -e ‘2,3c aaa’ 01.txt
删除01.txt中前2行数据，并且删除原文件中的数据 sed -i -e ‘1,2d’ 01.txt nl passwd 查看数据
从1.txt中提出数据，匹配出包含root的内容，再把nologin替换为itheima nl 01.txt | grep ‘root’ | sed -e 's/nologin/itheima/'
从1.txt中提出数据，删除前2行，并把nologin替换为itheima,并显示行号 nl 01.txt | sed -e ‘1,2d’ | sed -e 's/nologin/itheima/'