歡迎來到Linux教程網
Linux教程網
Linux教程網
Linux教程網
Linux教程網 >> Linux基礎 >> 關於Linux >> Linux用戶應知的高效率的技巧

Linux用戶應知的高效率的技巧

日期:2017/3/1 13:36:57   编辑:關於Linux

Unix/Linux下,最有效率技巧的不是操作圖形界面,而是命令行操作,因為命令行意味著自動化。

日常

  • 在 bash 裡,使用 Ctrl-R 而不是上下光標鍵來查找歷史命令。
    • 在 bash裡,使用 Ctrl-W 來刪除最後一個單詞,使用 Ctrl-U 來刪除一行。請man bash後查找Readline Key Bindings一節來看看bash的默認熱鍵,比如:Alt-. 把上一次命令的最後一個參數打出來,而Alt-* 則列出你可以輸入的命令。
      • 回到上一次的工作目錄: cd – (回到home是 cd ~)
        • 使用 xargs。這是一個很強大的命令。你可以使用-L來限定有多少個命令,也可以用-P來指定並行的進程數。如果你不知道你的命令會變成什麼樣,你可以使用xargs echo來看看會是什麼樣。當然, -I{} 也很好用。示例:
          find. -name \*.py | xargsgrep some_function
           
          cathosts | xargs-I{} sshroot@{} hostname

          pstree -p 可以幫你顯示進程樹。
          • 使用 pgrep 和 pkill 來找到或是kill 某個名字的進程。 (-f 選項很有用).
            • 了解可以發給進程的信號。例如:要掛起一個進程,使用 kill -STOP [pid]. 使用 man 7 signal 來查看各種信號,使用kill -l 來查看數字和信號的對應表
              • 使用 nohup 或 disown 如果你要讓某個進程運行在後台。
                • 使用netstat -lntp來看看有偵聽在網絡某端口的進程。當然,也可以使用 lsof。
                  • 在bash的腳本中,你可以使用 set -x 來debug輸出。使用 set -e 來當有錯誤發生的時候abort執行。考慮使用 set -o pipefail 來限制錯誤。還可以使用trap來截獲信號(如截獲ctrl+c)。
                    • 在bash 腳本中,subshells (寫在圓括號裡的) 是一個很方便的方式來組合一些命令。一個常用的例子是臨時地到另一個目錄中,例如:
                      (cd/some/other/dir; other-command)
                      # continue in original dir
                      • 在 bash 中,注意那裡有很多的變量展開。如:檢查一個變量是否存在: ${name:?error message}。如果一個bash的腳本需要一個參數,也許就是這樣一個表達式 input_file=${1:?usage: $0 input_file}。一個計算表達式: i=$(( (i + 1) % 5 ))。一個序列: {1..10}。 截斷一個字符串: ${var%suffix} 和 ${var#prefix}。 示例: if var=foo.pdf, then echo ${var%.pdf}.txt prints “foo.txt”.
                        • 通過 <(some command) 可以把某命令當成一個文件。示例:比較一個本地文件和遠程文件 /etc/hosts: diff /etc/hosts <(ssh somehost cat /etc/hosts)
                          • 了解什麼叫 “here documents” ,就是諸如 cat <<EOF 這樣的東西。
                            • 在 bash中,使用重定向到標准輸出和標准錯誤。如: some-command >logfile 2>&1。另外,要確認某命令沒有把某個打開了的文件句柄重定向給標准輸入,最佳實踐是加上 “</dev/null”,把/dev/null重定向到標准輸入。
                              • 使用 man ascii 來查看 ASCII 表。
                                • 在遠端的 ssh 會話裡,使用 screen 或 dtach 來保存你的會話。
                                  • 要來debug Web,試試curl 和 curl -I 或是 wget 。我覺得debug Web的利器是firebug,curl和wget是用來抓網頁的,呵呵。
                                    • 把 HTML 轉成文本: lynx -dump -stdin
                                      • 如果你要處理XML,使用 xmlstarlet
                                        • 對於 Amazon S3, s3cmd 是一個很方便的命令(還有點不成熟)
                                          • 在 ssh中,知道怎麼來使用ssh隧道。通過 -L or -D (還有-R) ,翻牆神器。
                                            • 你還可以對你的ssh 做點優化。比如,.ssh/config 包含著一些配置:避免鏈接被丟棄,鏈接新的host時不需要確認,轉發認證,以前使用壓縮(如果你要使用scp傳文件):
                                              TCPKeepAlive=yes
                                              ServerAliveInterval=15
                                              ServerAliveCountMax=6
                                              StrictHostKeyChecking=no
                                              Compression=yes
                                              ForwardAgent=yes
                                              • 如果你有輸了個命令行,但是你改變注意了,但你又不想刪除它,因為你要在歷史命令中找到它,但你也不想執行它。那麼,你可以按下 Alt-# ,於是這個命令關就被加了一個#字符,於是就被注釋掉了。

                                                數據處理

                                                • 了解 sort 和 uniq 命令 (包括 uniq 的 -u 和 -d 選項).
                                                  • 了解用 cut, paste, 和 join 命令來操作文本文件。很多人忘了在cut前使用join。
                                                    • 如果你知道怎麼用sort/uniq來做集合交集、並集、差集能很大地促進你的工作效率。假設有兩個文本文件a和b已解被 uniq了,那麼,用sort/uniq會是最快的方式,無論這兩個文件有多大(sort不會被內存所限,你甚至可以使用-T選項,如果你的/tmp目錄很小)
                                                      cata b | sort| uniq> c   # c is a union b 並集
                                                       
                                                      cata b | sort| uniq-d > c   # c is a intersect b 交集
                                                       
                                                      cata b b | sort| uniq-u > c   # c is set difference a - b 差集
                                                      

                                                      • 了解和字符集相關的命令行工具,包括排序和性能。很多的Linux安裝程序都會設置LANG 或是其它和字符集相關的環境變量。這些東西可能會讓一些命令(如:sort)的執行性能慢N多倍(注:就算是你用UTF-8編碼文本文件,你也可以很安全地使用ASCII來對其排序)。如果你想Disable那個i18n 並使用傳統的基於byte的排序方法,那就設置export LC_ALL=C (實際上,你可以把其放在 .bashrc)。如果這設置這個變量,你的sort命令很有可能會是錯的。
                                                        • 了解 awk 和 sed,並用他們來做一些簡單的數據修改操作。例如:求第三列的數字之和: awk ‘{ x += $3 } END { print x }’。這可能會比Python快3倍,並比Python的代碼少三倍。
                                                          • 使用 shuf 來打亂一個文件中的行或是選擇文件中一個隨機的行。
                                                            • 了解sort命令的選項。了解key是什麼(-t和-k)。具體說來,你可以使用-k1,1來對第一列排序,-k1來對全行排序。
                                                              • Stable sort (sort -s) 會很有用。例如:如果你要想對兩例排序,先是以第二列,然後再以第一列,那麼你可以這樣: sort -k1,1 | sort -s -k2,2
                                                                • 我們知道,在bash命令行下,Tab鍵是用來做目錄文件自動完成的事的。但是如果你想輸入一個Tab字符(比如:你想在sort -t選項後輸入<tab>字符),你可以先按Ctrl-V,然後再按Tab鍵,就可以輸入<tab>字符了。當然,你也可以使用$’\t’。
                                                                  • 如果你想查看二進制文件,你可以使用hd命令(在CentOS下是hexdump命令),如果你想編譯二進制文件,你可以使用bvi命令
                                                                    • 另外,對於二進制文件,你可以使用strings(配合grep等)來查看二進制中的文本。
                                                                      • 對於文本文件轉碼,你可以試一下 iconv。或是試試更強的 uconv 命令(這個命令支持更高級的Unicode編碼)
                                                                        • 如果你要分隔一個大文件,你可以使用split命令(split by size)和csplit命令(split by a pattern)。

                                                                          系統調試

                                                                          • 如果你想知道磁盤、CPU、或網絡狀態,你可以使用 iostat, netstat, top (或更好的 htop), 還有 dstat 命令。你可以很快地知道你的系統發生了什麼事。關於這方面的命令,還有iftop, iotop等
                                                                            • 要了解內存的狀態,你可以使用free和vmstat命令。具體來說,你需要注意 “cached” 的值,這個值是Linux內核占用的內存。還有free的值。
                                                                              • Java 系統監控有一個小的技巧是,你可以使用kill -3 <pid> 發一個SIGQUIT的信號給JVM,可以把堆棧信息(包括垃圾回收的信息)dump到stderr/logs。
                                                                                • 使用 mtr 會比使用 traceroute 要更容易定位一個網絡問題。
                                                                                  • 如果你要找到哪個socket或進程在使用網絡帶寬,你可以使用 iftop 或 nethogs。
                                                                                    • Apache的一個叫 ab 的工具是一個很有用的,用quick-and-dirty的方式來測試網站服務器的性能負載的工作。如果你需要更為復雜的測試,你可以試試 siege。
                                                                                      • 如果你要抓網絡包的話,試試 wireshark 或 tshark。
                                                                                        • 了解 strace 和 ltrace。這兩個命令可以讓你查看進程的系統調用,這有助於你分析進程的hang在哪了,怎麼crash和failed的。你還可以用其來做性能profile,使用 -c 選項,你可以使用-p選項來attach上任意一個進程。
                                                                                          • 了解用ldd命令來檢查相關的動態鏈接庫。
                                                                                            • 使用gdb來調試一個正在運行的進程或分析core dump文件。
                                                                                              • 學會到 /proc 目錄中查看信息。這是一個Linux內核運行時記錄的整個操作系統的運行統計和信息,比如: /proc/cpuinfo, /proc/xxx/cwd, /proc/xxx/exe, /proc/xxx/fd/, /proc/xxx/smaps.
                                                                                                • 如果你調試某個東西為什麼出錯時,sar命令會有用。它可以讓你看看 CPU, 內存, 網絡, 等的統計信息。
                                                                                                  • 使用 dmesg 來查看一些硬件或驅動程序的信息或問題。

                                                                                                  • 高效命令

                                                                                                    • ‘ALT+.’ or ‘<ESC> .’
                                                                                                      熱建alt+. 或 esc+. 可以把上次命令行的參數給重復出來。
                                                                                                      • ^old^new
                                                                                                        替換前一條命令裡的部分字符串。
                                                                                                        場景:echo "wanderful",其實是想輸出echo "wonderful"。只需要^a^o就行了,對很長的命令的錯誤拼寫有很大的幫助。(陳皓注:也可以使用 !!:gs/old/new)
                                                                                                        • du -s * | sort -n | tail
                                                                                                          列出當前目錄裡最大的10個文件。
                                                                                                          • :w !sudo tee %
                                                                                                            在vi中保存一個只有root可以寫的文件
                                                                                                            • date -d@1234567890
                                                                                                              時間截轉時間
                                                                                                              • > file.txt
                                                                                                                創建一個空文件,比touch短。
                                                                                                                • mtr coolshell.cn
                                                                                                                  mtr命令比traceroute要好。
                                                                                                                  • 在命令行前加空格,該命令不會進入history裡。
                                                                                                                    • echo “ls -l” | at midnight
                                                                                                                      在某個時間運行某個命令。
                                                                                                                      • curl -u user:pass -d status=”Tweeting from the shell” http://twitter.com/statuses/update.xml
                                                                                                                        命令行的方式更新twitter。
                                                                                                                        • curl -u username –silent “https://mail.google.com/mail/feed/atom” | perl -ne ‘print “\t” if /<name>/; print “$2\n” if /<(title|name)>(.*)<\/\1>/;’
                                                                                                                          檢查你的gmail未讀郵件
                                                                                                                          • ps aux | sort -nk +4 | tail
                                                                                                                            列出頭十個最耗內存的進程
                                                                                                                            • man ascii
                                                                                                                              顯示ascii碼表。
                                                                                                                              場景:忘記ascii碼表的時候還需要google麼?尤其在天朝網絡如此“順暢”的情況下,就更麻煩在GWF多應用一次規則了,直接用本地的man ascii吧。
                                                                                                                              • ctrl-x e
                                                                                                                                快速啟動你的默認編輯器(由變量$EDITOR設置)。
                                                                                                                                • netstat –tlnp
                                                                                                                                  列出本機進程監聽的端口號。(陳皓注:netstat -anop 可以顯示偵聽在這個端口號的進程)
                                                                                                                                  • tail -f /path/to/file.log | sed '/^Finished: SUCCESS$/ q'
                                                                                                                                    當file.log裡出現Finished: SUCCESS時候就退出tail,這個命令用於實時監控並過濾log是否出現了某條記錄。
                                                                                                                                    • ssh user@server bash < /path/to/local/script.sh
                                                                                                                                      在遠程機器上運行一段腳本。這條命令最大的好處就是不用把腳本拷到遠程機器上。
                                                                                                                                      • ssh user@host cat /path/to/remotefile | diff /path/to/localfile -
                                                                                                                                        比較一個遠程文件和一個本地文件
                                                                                                                                        • net rpc shutdown -I ipAddressOfWindowsPC -U username%password
                                                                                                                                          遠程關閉一台Windows的機器
                                                                                                                                          • screen -d -m -S some_name ping my_router
                                                                                                                                            後台運行一段不終止的程序,並可以隨時查看它的狀態。-d -m參數啟動“分離”模式,-S指定了一個session的標識。可以通過-R命令來重新“掛載”一個標識的session。更多細節請參考screen用法 man screen。
                                                                                                                                            • wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com
                                                                                                                                              下載整個www.example.com網站。(注:別太過分,大部分網站都有防爬功能了:))
                                                                                                                                              • curl ifconfig.me
                                                                                                                                                當你的機器在內網的時候,可以通過這個命令查看外網的IP。
                                                                                                                                                • convert input.png -gravity NorthWest -background transparent -extent 720×200 output.png
                                                                                                                                                  改一下圖片的大小尺寸
                                                                                                                                                  • lsof –i
                                                                                                                                                    實時查看本機網絡服務的活動狀態。
                                                                                                                                                    • vim scp://username@host//path/to/somefile
                                                                                                                                                      vim一個遠程文件
                                                                                                                                                      • python -m SimpleHTTPServer
                                                                                                                                                        一句話實現一個HTTP服務,把當前目錄設為HTTP服務目錄,可以通過http://localhost:8000訪問 這也許是這個星球上最簡單的HTTP服務器的實現了。
                                                                                                                                                        • history | awk '{CMD[$2]++;count++;} END { for (a in CMD )print CMD[a] " " CMD[a]/count*100 "% " a }' | grep -v "./" | column -c3 -s " " -t | sort -nr | nl | head -n10
                                                                                                                                                          (陳皓注:有點復雜了,history|awk ‘{print $2}’|awk ‘BEGIN {FS=”|”} {print $1}’|sort|uniq -c|sort -rn|head -10)
                                                                                                                                                          這行腳本能輸出你最常用的十條命令,由此甚至可以洞察你是一個什麼類型的程序員。
                                                                                                                                                          • tr -c “[:digit:]” ” ” < /dev/urandom | dd cbs=$COLUMNS conv=unblock | GREP_COLOR=”1;32″ grep –color “[^ ]“
                                                                                                                                                            想看看Marix的屏幕效果嗎?

Copyright © Linux教程網 All Rights Reserved