Linux運維基礎技能： 腳本編程與Linux命令

Linux運維基礎技能： 腳本編程與Linux命令

$1 入參，空值時默認賦值技巧

variable=${1:-"default value"} # 當未傳參時，賦默認值。
echo $variable

$ 和 $@ 區別
$ 和 $@ 都表示傳遞給函數或腳本的全部參數，不被雙引號(" ")包含
時，都以"$1" "$2" … "$n" 的形式輸出全部參數。
可是當它們被雙引號(" ")包含時，"$*" 會將全部的參數做爲一個總體，
以"$1 $2 … $n"的形式輸出全部參數；"
$@" 會將各個參數分開，以"$1" "$2" … "$n" 的形式輸出全部參數。

for var in "$*";do
    echo "$var"
done
for var in "$@";do
    echo "$var"
done

區別在於，分別輸出 1 2 3 和

1

2

3

幾個 Shell 裏的內置變量

$# 入參個數
$$ PID
$0 文件名
$? 上個命令執行結果

Tips：

awk 教程 https://coolshell.cn/articles/9070.html

sed 教程 https://coolshell.cn/articles/9104.html

Shell script 基礎問答 https://linux.cn/article-5607-1.html
Shell 四則運算方法

let C=A+B
let A++ #let 時 變量前不須要再加$
echo $(($A+$B))
echo $[$A+$B]
expr $A + $B
echo $A+$B | bc #使用 bc 能夠作比較複雜的運算

函數定義與調用

# 定義
function myfun(){ #function 可省略
    echo $1 echo "-----"
    echo $2 echo "-----"
    echo $3
}
# 調用
myfun "tom" "lucy" "jack"

條件判斷

if [[ biaodashi ]]
判斷文件是否存在 -f 存在真
判斷目錄是否存在 -d 存在真
判斷字符串是否空 -z 字符串長度爲 0 真
判斷文件大小 -s 文件大小非 0 真
if [[ 條件 1 -a 條件 2 ]] # -a 表示與， -o 表示或

字符串與序列、隨機數
name=John && echo 'My name is $name' 輸出'My name is $name ，由於單引號裏面的$只會看成字面值

字符串截取 a=123456789 ; echo ${a:0:3} 輸出 123

echo 替換字符

var=tom_tom_lucy_jack_tomomttom
echo ${var/tom/mary} mary_tom_lucy_jack_tomomttom
echo ${var//tom/mary} mary_mary_lucy_jack_maryomtmary

序列

for i in {1..100} #1,2,3,4...100 這種方法好些，還能夠輸出間
隔系列
for i in {1..100..7} #1,8,15....99
for i in `seq 100 ` #1,2,3,4...100
for i in `seq 3 5 ` #3,4,5

隨機數

echo $RANDOM
head /dev/urandom |md5sum|cksum|cut -c 1-9

使用 cksum 從管道灌進去一些隨機文本可生成一些隨機數字，須要使用 cut 切 割

字符串截取

a=123A123B456456C
echo ${a##*3} 從最左邊找到 3 刪除，貪婪 B456456C
echo ${a%%6*} 從最右邊找到 6 刪除，貪婪 123A123B45
echo ${a%?} 刪除最右邊一個字符 123A123B456456

提取最後一位

str="12345678"
i=$((${#str}-1)) #字符串長度減去 1，故 i=7
echo ${b:$i:1} #輸出 8

日期
date +%F" "%R # 2018-10-14 00:09

刪除空行

cat 1.txt|tr -s "\n"
sed -i '/^$/d' 1.txt
grep -v "^$" 1.txt

Shell script 語法在線檢查與建議：https://www.shellcheck.net

考察 if 、head 、tail、sed：https://leetcode.com/problems/tenth-line
考察 ls 按時間、體積大小排序

ls -lt 最新在前
ls -ltr 最舊在前
ls -lS 最大在前
ls -lSr 最小在前

考察 comm 的使用：http://man.linuxde.net/comm
前提是，文件要排序過。結果的第一列是僅僅在文件 1 出現的，第二列是僅僅在文件 2 出現
的，第三列是共同出現的。-1 表示不顯示第一列，-2 表示不顯示第二列，-3 表示不顯示第三列。

考察 grep 與正則、子模式
https://leetcode.com/problems/valid-phone-numbers

https://www.interviewbit.com/problems/valid-phone-number/

答案 ：

grep -P "(\d{3}-|(\d{3})\s{1})\d{3}-\d{4}" input

另外, grep -c 表示匹配次數，-P 表示使用正則 -E 實際上是擴展模式不是正則

考察容錯處理、if、大於小於、正則、排序、去重統計、awk
https://leetcode.com/problems/word-frequency

#grep 使用 -o 輸出、使用-P 表示正則、使用 awk 交換列

答案：

grep -o -P "\w{1,}" words.txt |sort |uniq -c|sort -nr|awk '{print $2,$1}'

考察 awk 編程
給定一個文本文件，內有 M 行 N 列數字，求數字求和

題：給定 id 姓名 工資文本，計算工資和

1 tom 2500
2 mary 3200
3 jack 4700
4 who 6900
5 lee 2600

答案：

awk 'BEGIN{sum=0}{sum+=$3}END{print sum}' 1.txt

Ps：注意 BEGIN、END 的位置；注意 awk 裏定義的變量不用$號

考察 awk 編程、單引號裏如何傳遞變量
https://www.interviewbit.com/problems/lines-in-a-given-range/

awk 'NR>='$L' && NR<='$R' {print $0}' input

Ps：在單引號字句裏，使用'$A' 以傳遞變量 A

使用 awk 一行檢測磁盤分區> 90%

df -Ph | awk ' NR != 1 && $5 >= 90 ' # 爲何單引號里加{}不行呢

考察 tr 替換、刪除的使用、去除空格
https://www.interviewbit.com/problems/remove-punctuations/

cat input|tr -d -c "a-zA-Z0-9[:space:]" #注意 tr 裏什麼表明字母、什麼表明數字集

檢測主機是否存活的腳本（三次 ping 都失敗）
Ps：有個陷阱，ubuntu 16 裏使用 sh 執行時，function xxx() 會報錯。所以命令行用 bash 執行腳本

#!/bin/bash
function check_ip() { # 定義ping探測函數，function 可省略
fail_count=0
ip=$1
for (( i=0;i<3;i++ ));do # 使用 (( 表達式 )) 來作 for 循環 ping 3 次
if ping -W 1 -c 1 "$ip" > /dev/null 2>&1;then # 使用-W 1 避免好久超時，單位只能整數秒有效
break # 若是ping成功了，則直接結束探測，節省時間
fi
(( fail_count=fail_count+1 )) #若ping失敗，則失敗數累加，這裏使用(( 表達式 )) 比 let 更加高效
done
if [[ $fail_count -eq 3 ]];then
echo "$ip is failed"
else
echo "$ip is ok"
fi
}
iplist="192.168.1.100 192.168.1.101" # 給出IP列表，固然也能夠自行改形成文本方案
for ip in $iplist;do
check_ip $ip
done

批量併發檢測存活主機

!/bin/bash
for ip in 119.29.192.{1..255}; #批量 IP 的技巧 ；僅僅在 bash 生效，sh 不行
do
(
ping -c3 -W1 $ip >/dev/null ;
if [ $? -eq 0 ];then
echo "$ip alive"
fi
) & #使用( )& 掛在後臺 併發，更快
done
wait #等待全部子進程結束

檢測站點 URL 是否存活：考察 curl 的使用、文件入參、待優化屢次檢測

#!/bin/bash
##this script read urls from url.txt,#then check whether the site isavailable#
INPUT_FILE="url.txt"
while read u;do
curl -s --connect-timeout 3 -o /dev/null $u #注意幾個參數的使用 --silent 能夠用-s
if [ $? -ne 0 ];then
echo "$u"" failed."
else
echo "$u"" success"
fi
done < $INPUT_FILE

讓進程在後臺可靠運行的方法（意思是不會隨着子 shell 的退出而掛）
nohup command > /dev/null 2>&1 &

screen -S <label>  # 用快捷鍵 CTRL -a d 來暫時斷開當前會話

command & #注意，這樣標準輸出可能會在屏幕裏翻滾
原文地址：https://zhangge.net/5140.html