linux簡單命令

1.查找並刪除/data這個目錄7天前建立的文件

   # find /data -ctime +7 -exec rm -rf {} \;

   # find /data -ctime +7 | xargs rm -rf

2. tar命令壓縮排除某個目錄

# tar zcvf data.tar.gz /data --exclude=tmp    #--exclude參數爲不包含某個目錄或文件，後面也能夠跟多個

四、查看tar包存檔文件，不解壓

# tar tf data.tar.gz  #t是列出存檔文件目錄，f是指定存檔文件

五、使用stat命令查看一個文件的訪問時間（Access）、修改時間（modify）、狀態改變時間（Change）

stat index.php

Access: 2013-11-10 02:37:44.169014602 -0500

Modify: 2013-06-18 10:53:14.395999032 -0400

Change: 2013-06-18 10:53:38.855999002 -0400

六、批量解壓.tar.gz

方法1：# find . -name "*.tar.gz" -exec tar zxf {} \;

方法2：# for tar in *.tar.gz; do tar zxvf $tar; done

方法3：# ls *.tar.gz | xargs -i tar zxvf {}  

七、篩除出文件中的註釋和空格

方法1：grep -v "^#" httpd.conf |grep -v "^$"

方法2：# sed -e ‘/^$/d’ -e ‘/^#/d’ httpd.conf > http.conf 

或者 # sed -e '/^#/d;/^$/d'     #-e 執行多條sed命令

方法3：# awk '/^[^#]/|/"^$"' httpd.conf 

或者 # awk '!/^#|^$/' httpd.conf

八、篩選/etc/passwd文件中全部的用戶

方法1：# cat /etc/passwd |cut -d: -f1

方法2：# awk -F ":" '{print $1}' /etc/passwd

九、iptables網站跳轉

# iptables -A INPUT -p tcp -m multiport --dport 22,80 -j ACCEPT

# echo 1 >/proc/sys/net/ipv4/ip_forward

# iptables -t nat -A PREROUTING -d 10.0.0.10 -p tcp --dport 80 -j DNAT --to-destination 192.168.0.10:80

#未來自10.0.0.10的網站訪問請求轉發到目標服務器192.168.0.10。另外，內網服務器要配置防火牆內網IP爲網關，不然數據包回不來。另外，這裏不用配置SNAT，由於系統服務會根據數據包來源再返回去。

十、iptables將本機80端口轉發到本地8080端口

# iptables -t nat -A PREROUTING -p tcp --dport 80 -j REDIRECT --to-ports 8080

十一、find命令查找文件並複製到/opt目錄

方法1：# find /etc -name httpd.conf -exec cp -rf {} /opt/ \;:   #-exec執行後面命令，{}表明前面輸出的結果，\;結束命令

方法2：# find /etc -name httpd.conf |xargs -i cp {} /opt  #-i表示輸出的結果由{}代替

十二、查看根目錄下大於1G的文件

# find / -size +1024M  

默認單位是b，能夠使用其餘單位如，C、K、M

1三、查看服務器IP鏈接數

# netstat -tun | awk '{print $5}' | cut -d: -f1 |sort | uniq -c | sort -n  

-tun：-tu是顯示tcp和udp鏈接，n是以IP地址顯示

cut -d：-f1：cut是一個選擇性顯示一行的內容命令，-d指定：爲分隔符，-f1顯示分隔符後的第一個字段。

uniq -c：報告或刪除文中的重複行，-c在輸出行前面加上出現的次數

sort -n：根據不一樣類型進行排序，默認排序是升序，-r參數改成降序，-n是根據數值的大小進行排序

1四、插入一行到391行，包括特殊符號"/"

# sed -i "391 s/^/AddType application\/x-httpd-php .php .html/" httpd.conf

1五、列出nginx日誌訪問最多的IP

awk '{print $1}' access.log | sort | uniq -c | sort -nr | head -n 10

1六、顯示訪問量最多的前10位IP

# awk '{print $1}' access.log |sort |uniq -c|sort -nr |head -n 10

sort 排序

uniq -c 合併重複行，並記錄重複次數

sort -nr 按照數字進行降序排序   

1七、顯示nginx日誌一天訪問量最多的前10位IP

# awk '$4>="[16/May/2015:00:00:01" && $4<="[16/May/2015:23:59:59"' access_test.log |sort |uniq -c |sort-nr |head -n 10

# awk '$4>="[16/Oct/2015:00:00:01" && $4<="[16/Oct/2015:23:59:59"{a[$1]++}END{for(i in a){print a[i],i|"sort -k1 -nr |head -n 10"}}' access.log

1八、獲取當前時間前一分鐘日誌訪問量

# date=`date +%d/%b/%Y:%H:%M --date="-1 minute"` ; awk -vd=$date '$0~d{c++}END{print c}' access.log

# date=`date +%d/%b/%Y:%H:%M --date="-1 minute"`; awk -vd=$date '$4>="["d":00" && $4<="["d":59"{c++}END{print c}' access.log 

# grep `date +%d/%b/%Y:%H:%M --date="-1 minute"` access.log |awk 'END{print NR}'

# start_time=`date +%d/%b/%Y:%H:%M:%S --date="-5 minute"`;end_time=`date +%d/%b/%Y:%H:%M:%S`;awk -vstart_time="[$start_time" -vend_time="[$end_time" '$4>=start_time && $4<=end_time{count++}END{print count}' access.log  

1九、找出1-255之間的整數

方法1：# ifconfig |grep -o '[0-9]\+'  #+號匹配前一個字符一次或屢次

方法2：# ifconfig |egrep -o '\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>'

20、找出IP地址

# ifconfig |grep -o '[0-9]\{1,3\}\.[0-9]\{1,3\}\.[0-9]\{1,3\}\.[0-9]\{1,3\}'  #-o只顯示匹配字符

2一、給文檔增長開頭和結尾說明信息

# awk ‘BEGIN{print "開頭顯示信息"}{print $1,$NF} END{print "結尾顯示信息"}’/etc/passwd

# awk 'BEGIN{printf "  date      ip\n------------------\n"} {print $3,$4} END{printf "------------------\nend...\n"}' /var/log/messages         

  date      ip

------------------

03:13:01 localhost

10:51:45 localhost

------------------

end...

2二、查看網絡狀態命令

# netstat -antp #查看全部網絡鏈接

# netstat -lntp #只查看監聽的端口信息

# lsof -p pid #查看進程打開的文件句柄

# lsof -i:80  #查看端口被哪一個進程佔用

2三、生成8位隨機字符串

方法1：# echo $RANDOM |md5sum |cut -c 1-8

方法2：# openssl rand -base64 4

方法3：# cat /proc/sys/kernel/random/uuid | cut -c 1-8

2四、while死循環

while true; do  #條件精確等於真，也能夠直接用條件[ "1" == "1" ]，條件一直爲真

   ping -c 2 www.baidu.com

done

25.awk格式化輸出

將文本列進行左對齊或右對齊。

左對齊：

# awk '{printf "%-15s %-10s %-20s\n",$1,$2,$3}' test.txt

右對齊：

# awk '{printf "%15s %10s %20s\n",$1,$2,$3}' test.txt

26.整數運算保留小數點

方法1：# echo 'scale=2; 10/3;'|bc  #scale參數表明取小數點位數

方法2：# awk BEGIN'{printf "%.2f\n",10/3}' 

27.數字求和

# cat a.txt

10

23

53

56

方法1：

#!/bin/bash

while read num;

        do

        sum=`expr $sum + $num`

done < a.txt

        echo $sum

方法2：# cat a.txt |awk '{sum+=$1}END{print sum}'

2八、判斷是否爲數字（字符串判斷也如此）

# [[ $num =~ ^[0-9]+$ ]] && echo yes || echo no    #[[]]比[]更加通用，支持模式匹配=~和字符串比較使用通配符

^ $：從開始到結束是數字才知足條件

=~：一個操做符，表示左邊是否知足右邊（做爲一個模式）正則表達式

2九、刪除換行符並將空格替換別的字符

# cat a.txt |xargs echo -n |sed 's/[ ]/|/g'  #-n 不換行

# cat a.txt |tr -d '\n'  #刪除換行符

30、查看文本中20至30行內容（總共100行）

方法1：# awk '{if(NR > 20 && NR < 31) print $0}' test.txt

方法2：# sed -n '20,30p' test.txt 

方法3：# head -30 test.txt |tail

3一、文本中兩列位置替換

# cat a.txt

60.35.1.15      www.baidu.com

45.46.26.85     www.sina.com.cn

# cat a |awk '{print $2"\t"$1}' 

3二、監控目錄，新建立的文件名追加到日誌中

#要安裝inotify-tools軟件包

#!/bin/bash
MON_DIR=/opt
inotifywait -mq --format %f -e create $MON_DIR |\
while read files; do
  echo $files >> test.log
done
3三、find一次查找多個指定文件類型

# find ./ -name '*.jpg' -o -name '*.png'

# find ./ -regex ".*\.jpg\|.*\.png"

3四、字符串拆分

# echo "hello" |awk -F '' '{for(i=1;i<=NF;i++)print $i}'

# echo "hello" |sed 's/./&\n/g'

# echo "hello" |sed -r 's/(.)/\1\n/g'

3五、實時監控命令運行結果

# watch -d -n 1 'ifconfig'

3六、解決郵件亂碼問題

# echo `echo "content" | iconv -f utf8 -t gbk` | mail -s "`echo "title" | iconv -f utf8 -t gbk`" baojingtongzhi@163.com

注：經過iconv工具將內容字符集轉換

3七、在文本中每隔三行添加一個換行或內容

# sed '4~3s/^/\n/' file

# awk '$0;NR%3==0{print "\n"}' file

# awk '{print NR%3?$0:$0 "\n"}' file

3八、刪除匹配行及後一行或前一行

# sed '/abc/,+1d' file  #刪除匹配行及後一行

# sed '/abc/{n;d}' file #刪除後一行

# tac file |sed '/abc/,+1d' |tac  #刪除前一行

3九、統計總行數

效率1 # wc -l file  

效率2 # grep -c . file

效率3 # awk 'END{print NR}' file

效率4 # sed -n '$=' file

40、去除文本開頭和結尾空格

sed -i 's/^[ \t]*//;s/[ \t]*$//' file

4一、給單個IP加單引號

# echo '10.10.10.1 10.10.10.2 10.10.10.3' |sed -r 's/[^ ]+/"&"/g'

# echo '10.10.10.1 10.10.10.2 10.10.10.3' |awk '{for(i=1;i<=NF;i++)printf "\047"$i"\047"}' 

4二、腳本中打印等待時間

wait(){

echo -n "wait 3s"

for ((i=1;i<=3;i++)); do

    echo -n "."

    sleep 1

done

echo 

}

wait

4三、刪除指定行

# awk 'NR==1{next}{print $0}' file #$0可省略

# awk 'NR!=1{print}' file

# awk 'NR!=1{print $0}' 或刪除匹配行：awk '!/test/{print $0}'

# sed '1d' file

# sed -n '1!p' file

4四、在指定行先後加一行

在第二行前一行加txt：

# awk 'NR==2{sub('/.*/',"txt\n&")}{print}' a.txt 

# sed'2s/.*/txt\n&/' a.txt

在第二行後一行加txt：

# awk 'NR==2{sub('/.*/',"&\ntxt")}{print}' a.txt

# sed'2s/.*/&\ntxt/' a.txt

4五、經過IP獲取網卡名

# ifconfig |awk -F'[: ]' '/^eth/{nic=$1}/192.168.18.15/{print nic}'

4六、浮點數運算（數字46保留小數點）

# awk 'BEGIN{print 46/100}'  

0.46

# echo 46|awk '{print $0/100}'

0.46

# awk 'BEGIN{printf "%.2f\n",46/100}'

0.46

# echo 'scale=2;46/100' |bc|sed 's/^/0/'

0.46

# printf "%.2f\n" $(echo "scale=2;46/100" |bc)

0.46

4七、浮點數比較

if [ $(echo "4>3"|bc) -eq 1 ]; then

    echo yes

else

    echo no

fi

if [ $(awk 'BEGIN{if(4>3)print 1;else print 0}') -eq 1 ]; then

    echo yes

else

    echo no

fi

4八、替換換行符爲逗號

$ cat a.txt

1

2

3

替換後：1,2,3

$ tr '\n' ',' < a.txt

$ sed ':a;N;s/\n/,/;$!b a' a.txt

$ sed ':a;$!N;s/\n/,/;t a' a.txt  

while read line; do

    a+=($line)

done < a.txt

echo ${a[*]} |sed 's/ /,/g'

awk '{s=(s?s","$0:$0)}END{print s}' a.txt

#三目運算符(a?b:c)，第一個s是變量，s?s","$0:$0,第一次處理1時，s變量沒有賦值爲假，結果打印1，第二次處理2時，s值是1，爲真，結果1,2。以此類推，小括號能夠不寫。

awk '{if($0!=3)printf "%s,",$0;else print $0}' a.txt

4九、windows下文本到linux下隱藏格式去除

:set fileformat=unix

:%s/\r*$//  #^M可用\r代替

sed -i 's/^M//g' a.txt  #^M的輸入方式是ctrl+v,而後ctrl+m

dos2unix a.txt

50、xargs巧用

xargs -n1  #將單個字段做爲一行

# cat a.txt

1 2 

3 4

# xargs -n1 < a.txt

1

2

3

4

xargs -n2 #將兩個字段做爲一行

$ cat b.txt

string

number

a

1

b

2

$ xargs -n2 < a.txt 

string number

a 1

b 2

$ awk 'ORS=NR%2?"\t":"\n"' b.txt  #把奇數行換行符去掉

本文出自 「李振良的技術博客」 博客，請務必保留此出處http://lizhenliang.blog.51cto.com/7876557/1322728