linux數據處理命令的一些整理

1. 合併文件cat a.dat b.dat > c.dat

2. 文件截取數據並重定向  cut  -c  11-20 a.txt>>b.txt

3. 文件排序並去重  

   sort file |uniq

   注意：重複的多行記爲一行，也就是說這些重複的行還在，只是所有省略爲一行！
   sort file |uniq -u
   上面的命令能夠把重複的行所有去掉，也就是文件中的非重複行！
   

4. 比較兩個數據文件差別

       存在1.txt，不存在2.txt的內容
   

   　　comm -23 <(sort 1.txt) <(sort 2.txt)

   　　存在2.txt，不存在1.txt的內容

   　　comm -13 <(sort 1.txt) <(sort 2.txt)

   　　存在1.txt，也存在2.txt的內容

   　　comm -12 <(sort 1.txt) <(sort 2.txt)

   　　什麼也不顯示

   　　comm -123 <(sort 1.txt) <(sort 2.txt)