歡迎光臨
每天分享高質量文章

這些你必須知道的 Linux 技能

來自:酷 殼 – CoolShel,作者:陳皓

https://coolshell.cn/articles/8883.html

這篇文章來源於Quroa的一個問答《What are some time-saving tips that every Linux user should know?》—— Linux用戶有哪些應該知道的提高效率的技巧。我覺得挺好的,總結得比較好,把其轉過來,並加了一些自己的理解。


 首先,我想告訴大家,在Unix/Linux下,最有效率技巧的不是操作圖形界面,而是命令列操作,因為命令列意味著自動化。如果你看過《你可能不知道的Shell》以及《28個Unix/Linux的命令列神器》你就會知道Linux有多強大,這個強大完全來自於命令列,於是,就算你不知道怎麼去做一個環保主義的程式員,至少他們可以讓你少熬點夜,從而有利於你的身體健康生活。下麵是一個有點長的串列,正如作者所說,你並不需要知道所有的這些東西,但是如果你還在很沉重地在使用Linux的話,這些東西都值得你看一看。 (註:如果你想知道下麵涉及到的命令的更多的用法,你一定要man一點。對於一些命令,你可以需要先yum或apt-get來安裝一下,如果有什麼問題,別忘了Google。如果你要Baidu的話,我僅代表這個地球上所有的生物包括微生物甚至細菌病毒和小強BS你到宇宙毀滅)

基礎

學習 Bash 。你可以man bash來看看bash的東西,並不複雜也並不長。你用別的shell也行,但是bash是很強大的並且也是系統預設的。(學習zsh或tsch只會讓你在很多情況下受到限制)

學習 vim 。在Linux下,基本沒有什麼可與之競爭的編譯輯器(就算你是一個Emacs或Eclipse的重度用戶)。你可以看看《簡明vim攻略》和 《Vim的冒險游戲》以及《給程式員的Vim速查卡》還有《把Vim變成一個編程的IDE》等等。

瞭解 ssh。明白不需要口令的用戶認證(通過ssh-agent, ssh-add),學會用ssh翻牆,用scp而不是ftp傳檔案,等等。你知道嗎?scp 遠端的時候,你可以按tab鍵來查看遠端的目錄和檔案(當然,需要無口令的用戶認證),這都是bash的功勞。

熟悉bash的作業管理,如: &, Ctrl-Z, Ctrl-C, jobs, fg, bg, kill, 等等。當然,你也要知道Ctrl+(SIGQUIT)和Ctrl+C (SIGINT)的區別。

簡單的檔案管理 : ls 和 ls -l (你最好知道 “ls -l” 的每一列的意思), less, head, tail 和 tail -f, ln 和 ln -s (你知道明白hard link和soft link的不同和優缺點), chown, chmod, du (如果你想看看磁盤的大小 du -sk *), df, mount。當然,原作者忘了find命令。

基礎的網絡管理: ip 或 ifconfig, dig。當然,原作者還忘瞭如netstat, ping, traceroute, 等

理解正則運算式,還有grep/egrep的各種選項。比如: -o, -A, 和 -B 這些選項是很值得瞭解的。

學習使用 apt-get 和 yum 來查找和安裝軟體(前者的經典分發包是Ubuntu,後者的經典分發包是Redhat),我還建議你試著從原始碼編譯安裝軟體。

日常

  • 在 bash 里,使用 Ctrl-R 而不是上下光標鍵來查找歷史命令。

  • 在 bash里,使用 Ctrl-W 來刪除最後一個單詞,使用 Ctrl-U 來刪除一行。請man bash後查找Readline Key Bindings一節來看看bash的預設熱鍵,比如:Alt-. 把上一次命令的最後一個引數打出來,而Alt-* 則列出你可以輸入的命令。

  • 回到上一次的工作目錄: cd –  (回到home是 cd ~)

  • 使用 xargs。這是一個很強大的命令。你可以使用-L來限定有多少個命令,也可以用-P來指定並行的行程數。如果你不知道你的命令會變成什麼樣,你可以使用xargs echo來看看會是什麼樣。當然, -I{} 也很好用。示例:

find . -name *.py | xargs grep some_function

cat hosts | xargs -I{} ssh [email protected]{} hostname

  • pstree -p 可以幫你顯示行程樹。

  • 使用 pgrep 和 pkill 來找到或是kill 某個名字的行程。 (-f 選項很有用).

  • 瞭解可以發給行程的信號。例如:要掛起一個行程,使用 kill -STOP [pid]. 使用 man 7 signal 來查看各種信號,使用kill -l 來查看數字和信號的對應表

  • 使用 nohup 或  disown 如果你要讓某個行程運行在後臺。

  • 使用netstat -lntp來看看有偵聽在網絡某端口的行程。當然,也可以使用 lsof。

  • 在bash的腳本中,你可以使用 set -x 來debug輸出。使用 set -e 來當有錯誤發生的時候abort執行。考慮使用 set -o pipefail 來限制錯誤。還可以使用trap來截獲信號(如截獲ctrl+c)。

  • 在bash 腳本中,subshells (寫在圓括號里的) 是一個很方便的方式來組合一些命令。一個常用的例子是臨時地到另一個目錄中,例如:

# do something in current dir
(cd /some/other/dir; other-command)
# continue in original dir

  • 在 bash 中,註意那裡有很多的變數展開。如:檢查一個變數是否存在: ${name:?error message}。如果一個bash的腳本需要一個引數,也許就是這樣一個運算式 input_file=${1:?usage: $0 input_file}。一個計算運算式: i=$(( (i + 1) % 5 ))。一個序列: {1..10}。 截斷一個字串: ${var%suffix} 和 ${var#prefix}。 示例: if var=foo.pdf, then echo ${var%.pdf}.txt prints “foo.txt”.

  • 通過

  • 瞭解什麼叫 “here documents” ,就是諸如 cat <

  • 在 bash中,使用重定向到標準輸出和標準錯誤。如: some-command >logfile 2>&1。另外,要確認某命令沒有把某個打開了的檔案句柄重定向給標準輸入,最佳實踐是加上 “

  • 使用 man ascii 來查看 ASCII 表。

  • 在遠端的 ssh 會話里,使用 screen 或 dtach 來儲存你的會話。(參看《28個Unix/Linux的命令列神器》)

  • 要來debug Web,試試curl 和 curl -I 或是 wget 。我覺得debug Web的利器是firebug,curl和wget是用來抓網頁的,呵呵。

  • 把 HTML 轉成文本: lynx -dump -stdin

  • 如果你要處理XML,使用 xmlstarlet

  • 對於 Amazon S3, s3cmd 是一個很方便的命令(還有點不成熟)

  • 在 ssh中,知道怎麼來使用ssh隧道。通過 -L or -D (還有-R) ,翻牆神器。

  • 你還可以對你的ssh 做點優化。比如,.ssh/config 包含著一些配置:避免鏈接被丟棄,鏈接新的host時不需要確認,轉發認證,以前使用壓縮(如果你要使用scp傳檔案):

  • TCPKeepAlive=yes
    ServerAliveInterval=15
    ServerAliveCountMax=6
    StrictHostKeyChecking=no
    Compression=yes
    ForwardAgent=yes

    • 如果你有輸了個命令列,但是你改變註意了,但你又不想刪除它,因為你要在歷史命令中找到它,但你也不想執行它。那麼,你可以按下 Alt-# ,於是這個命令關就被加了一個#字符,於是就被註釋掉了。

    資料處理 

    • 瞭解 sort 和 uniq 命令 (包括 uniq 的 -u 和 -d 選項).

    • 瞭解用 cut, paste, 和 join 命令來操作文本檔案。很多人忘了在cut前使用join。

    • 如果你知道怎麼用sort/uniq來做集合交集、並集、差集能很大地促進你的工作效率。假設有兩個文本檔案a和b已解被 uniq了,那麼,用sort/uniq會是最快的方式,無論這兩個檔案有多大(sort不會被記憶體所限,你甚至可以使用-T選項,如果你的/tmp目錄很小)

    cat a b | sort | uniq > c   # c is a union b 並集

    cat a b | sort | uniq -d > c   # c is a intersect b 交集

    cat a b b | sort | uniq -u > c   # c is set difference a - b 差集

    • 瞭解和字符集相關的命令列工具,包括排序和性能。很多的Linux安裝程式都會設置LANG 或是其它和字符集相關的環境變數。這些東西可能會讓一些命令(如:sort)的執行性能慢N多倍(註:就算是你用UTF-8編碼文本檔案,你也可以很安全地使用ASCII來對其排序)。如果你想Disable那個i18n 並使用傳統的基於byte的排序方法,那就設置export LC_ALL=C (實際上,你可以把其放在 .bashrc)。如果這設置這個變數,你的sort命令很有可能會是錯的。

    • 瞭解 awk 和 sed,並用他們來做一些簡單的資料修改操作。例如:求第三列的數字之和: awk ‘{ x += $3 } END { print x }’。這可能會比Python快3倍,並比Python的代碼少三倍。

    • 使用 shuf 來打亂一個檔案中的行或是選擇檔案中一個隨機的行。

    • 瞭解sort命令的選項。瞭解key是什麼(-t和-k)。具體說來,你可以使用-k1,1來對第一列排序,-k1來對全行排序。

    • Stable sort (sort -s) 會很有用。例如:如果你要想對兩例排序,先是以第二列,然後再以第一列,那麼你可以這樣: sort -k1,1 | sort -s -k2,2

    • 我們知道,在bash命令列下,Tab鍵是用來做目錄檔案自動完成的事的。但是如果你想輸入一個Tab字符(比如:你想在sort -t選項後輸入字符),你可以先按Ctrl-V,然後再按Tab鍵,就可以輸入字符了。當然,你也可以使用$’ ’。

    • 如果你想查看二進制檔案,你可以使用hd命令(在CentOS下是hexdump命令),如果你想編譯二進制檔案,你可以使用bvi命令(http://bvi.sourceforge.net/ 牆)

    • 另外,對於二進制檔案,你可以使用strings(配合grep等)來查看二進制中的文本。

    • 對於文本檔案轉碼,你可以試一下 iconv。或是試試更強的 uconv 命令(這個命令支持更高級的Unicode編碼)

    • 如果你要分隔一個大檔案,你可以使用split命令(split by size)和csplit命令(split by a pattern)。

    系統除錯

    • 如果你想知道磁盤、CPU、或網絡狀態,你可以使用 iostat, netstat, top (或更好的 htop), 還有 dstat 命令。你可以很快地知道你的系統發生了什麼事。關於這方面的命令,還有iftop, iotop等(參看《28個Unix/Linux的命令列神器》)

    • 要瞭解記憶體的狀態,你可以使用free和vmstat命令。具體來說,你需要註意 “cached” 的值,這個值是Linux內核占用的記憶體。還有free的值。

    • Java 系統監控有一個小的技巧是,你可以使用kill -3 發一個SIGQUIT的信號給JVM,可以把堆棧信息(包括垃圾回收的信息)dump到stderr/logs。

    • 使用 mtr 會比使用 traceroute 要更容易定位一個網絡問題。

    • 如果你要找到哪個socket或行程在使用網絡帶寬,你可以使用 iftop 或 nethogs。

    • Apache的一個叫 ab 的工具是一個很有用的,用quick-and-dirty的方式來測試網站服務器的性能負載的工作。如果你需要更為複雜的測試,你可以試試 siege。

    • 如果你要抓網絡包的話,試試 wireshark 或 tshark。

    • 瞭解 strace 和 ltrace。這兩個命令可以讓你查看行程的系統呼叫,這有助於你分析行程的hang在哪了,怎麼crash和failed的。你還可以用其來做性能profile,使用 -c 選項,你可以使用-p選項來attach上任意一個行程。

    • 瞭解用ldd命令來檢查相關的動態鏈接庫。註意:ldd的安全問題

    • 使用gdb來除錯一個正在運行的行程或分析core dump檔案。參看我寫的《GDB中應該知道的幾個除錯方法》

    • 學會到 /proc 目錄中查看信息。這是一個Linux內核運行時記錄的整個操作系統的運行統計和信息,比如: /proc/cpuinfo, /proc/xxx/cwd, /proc/xxx/exe, /proc/xxx/fd/, /proc/xxx/smaps.

    • 如果你除錯某個東西為什麼出錯時,sar命令會有用。它可以讓你看看 CPU, 記憶體, 網絡, 等的統計信息。

    • 使用 dmesg 來查看一些硬體或驅動程式的信息或問題。


    ●本文編號444,以後想閱讀這篇文章直接輸入444即可

    ●輸入m獲取到文章目錄

    推薦↓↓↓

    黑客技術與網絡安全

    更多推薦18個技術類公眾微信

    涵蓋:程式人生、演算法與資料結構、黑客技術與網絡安全、大資料技術、前端開發、Java、Python、Web開發、安卓開發、iOS開發、C/C++、.NET、Linux、資料庫、運維等。

    赞(0)

    分享創造快樂