UNIX/主要コマンド †

authconfig †

authconfig [オプション] { --update | --test }

パスワードのポリシーを定義する。/etc/security/pwquality.confを更新する。

awk †

awk [-F"区切り文字"]　'[条件式] {print $フィールド番号}'　ファイル名

区切り文字は省略するとスペースになる。区切り文字にタブを使用する場合は、-F"\t" と記述する。

末尾の値が0.4より大きい行を表示する †

awk '{if($NF>=0.4){print $0}}'

第1フィールドが"Date"の場合は、18byte目から19byte分の値を変数Aに代入し、それ以外の場合は、変数Aの値と、egrepで一致した行を表示 †

egrep "^System:|^Memory:" | awk '{ if($1=="System:"){ A=substr($0,18,19); } else { print A,$0 } }'

コマンド実行結果の全ての行頭に タイムスタンプを付与する †

コマンド | awk '{"date '+%H:%M:%S'" | getline t; print t,$0; close("date '+%H:%M:%S'")}'

• date '+%H:%M:%S' の 結果を 変数 t に代入し、tの内容と、コマンド結果1行分を連結し、getlineで開いたコマンドを閉じる

Oracleのアラートログの整形（タイムスタンプをログの前に付与） †

awk 'BEGIN { A="Sun Mon Tue Wed Thu Fri Sat";} {if ( index(A,$1) != 0 ){timestamp = $0;} else {print timestamp,$0;} }'

• BEGIN
  処理の返し前に1度だけ実行される
  
• index(string, search)
  引数1 の 文字列から、引数2 の文字列が見つかった位置を返す。見つからない場合は、0 を返す。

top からCPU使用率1%以上のプロセスのみ抜粋して表示する †

top -b | awk '{ if(match($1, "[0-9]") != 0) { if($9 > 1){ "date '+%H:%M:%S'" | getline t; print t,$0; close("date '+%H:%M:%S'"); } } }' | sed -e 's/ *$//g'

• 末尾に何故か空白行が大量に埋め込まれている為、sedで空白行を削除している

Jrockitの jstat -gc で取得した結果から、ヒープサイズの使用率を求め、95%以上が連続3回以上発生した場合は、末尾に * を付与する †

awk '{if($2!="HeapSize"){AT=$1;AV=$4/$2*100;printf("%14s %5.2f ",AT,AV);if(AV>=95&&BV>=95&&CV>=95){printf("*\n")}else{printf("\n")}};CV=BV;BV=AV}'

bc †

計算を行う。単独指定すると対話式になる。

羅列された数値の合計を求める †

-- RSSの合計値を求める
ps aux | awk '{print $6}' | grep -v RSS | paste -s -d "+" | bc

xx進数の計算 †

echo "obase=<出力の進数>; ibase=<入力の進数>; <計算式>" | bc
echo "obase=10; ibase=16; FF+FF | bc
510

dd †

dd if=入力ファイル of=出力ファイル bs=サイズ count=回数 [seek=書き込み位置]

NULLで埋め尽くされた50GBのファイルを/tmp/testに作成する †

dd if=/dev/zero of=/tmp/test bs=1M count=0 seek=$((1024*50))

dig †

dig [@DNSサーバ]  ドメイン名  [タイプ]  [オプション]

DNSサーバーを省略した場合、/etc/resolv.conf に記載しているDNSサーバーを使用する。

※1 DNS Name Server IdentifierはIPエニーキャストやロードバランシングなどにより
　　1つのIPアドレスを複数台のNSで共有している際に該当の問い合わせがどのNSによって返答されたのかを
　　問い合わせ側で知るためのDNSプロトコルの拡張
※2 DNSの情報が512オクテット(byte)を越えた場合、切り捨てられたという応答が返ってきた後、TCPフォールバックにより、
　　TCPでの名前解決を試みる。TCPフォールバックが実行されると「Truncated, retrying in TCP mode」のメッセージが出力される
※3 権威サーバーからの応答であればゾーンファイル全ての情報を表示するが、
　　AレコードのみキャッシュしているキャッシュDNSを指定した場合、ANYを指定してもAレコードしか結果が返ってこない。

問い合わせ（Q）と応答（A）でそれぞれのフラグを使用するか。

• コンテンツサーバ　　：ドメインの権威情報を持ってるDNSサーバ（権威サーバ）
• フルサービスリゾルバ：権威サーバの情報を再帰的に問い合わせるDNSサーバ
  

dumpe2fs †

ext2/ext3/ext4ファイルシステムのスーパーブロックの情報とブロックグループディスクリプタの内容を出力する

dumpe2fs [オプション] デバイス

ファイルシステムには i-node総数や、ブロック数などファイルシステムに関する情報が格納されている
ブロックグループ（複数のブロックの固まり）の先頭にスーパーブロックが格納されておりファイルシステムで一番最初に作成されたブロックグループにあるスーパーブロックを使用
2番目以降のブロックグループにあるスーパーブロックはコピー

find †

find 検索ディレクトリ [オプション]

カレントディレクトリから、tmpの名前がつくフォルダ以外のファイルを ls -l で参照する †

find . -type d -name "tmp" -prune -o -type f -print | xargs ls -l

free †

メモリの使用量を確認する。

             total       used       free     shared    buffers     cached
Mem:       1028856     151660     877196          0      35132      43456
-/+ buffers/cache:      73072     955784
Swap:       795176          0     795176

/proc/meminfo よりメモリ総容量を見積もる †

MemTotal = MemFree + Inactive + Active + Stab + VmallocUsed + PageTables
　　　　　 -----------------(1) -----(2) ------------------------------(3)

(1) 利用可能なメモリ容量。
(2) 解放できないメモリ容量。
(3) 解放できないメモリ容量。（カーネルが使用）
※詳細はこちら

強制的にディスクキャッシュを解放する †

echo 3 > /proc/sys/vm/drop_caches

grep †

パターンに一致した行を抽出する。タブを検索する場合は、パターン入力時に「Ctrl+V押下後、TABキー」

grep [オプション] パターン 対象ファイまたは|ディレクトリ

pat又はtest1〜5にマッチした行を出力。 †

egrep "pat|test[1-5]" file

or条件の | は拡張正規表現でないと使用できない。

iconv †

iconv -f 入力文字コード -t 出力文字コード ファイル名

文字コードの一覧は、iconv -l　で確認できる
よく使うのは、EUC-JP、UTF-8、Shift-JIS

iostat †

iostat [オプション]　[間隔]　[回数]

ファイルキャッシュといったOSのファイルレベルの動作は記録されない。（ファイルキャッシュした場合 iostatには記録されない）

Linuxでの出力例 †

Device:         rrqm/s   wrqm/s   r/s   w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util
hda               2.63     2.11  3.14  1.34   186.29    27.63    47.72     0.09   19.15   3.05   1.37
hda1              0.57     0.00  0.04  0.00     1.23     0.00    27.01     0.00    5.15   3.95   0.02
hda2              2.05     2.11  3.08  1.34   184.84    27.63    47.99     0.09   19.34   3.06   1.35
dm-0              0.00     0.00  4.86  3.45   184.07    27.63    25.46     0.17   20.14   1.62   1.35
dm-1              0.00     0.00  0.07  0.00     0.53     0.00     8.00     0.00    7.83   0.55   0.0

awaitとsvctmの値が離れている（IO待ちが多い）場合はIO待ちがボトルネックになっている

logrotate †

ログをローテーションさせる。ローテーション方法の定義が記載されたファイルを引数で指定する。

logrotate [オプション] ファイル

lsof †

開いてるファイルのプロセス情報を表示する。

lsof [オプション] [ ファイル名 or ファイルシステム ]

netstat †

後半のオプションは、ほぼLinux専用。

ルーティングテーブル表示 †

$ netstat -r
Kernel IP routing table
Destination     Gateway         Genmask         Flags   MSS Window  irtt Iface
192.168.11.0    *               255.255.255.240 U        40 0          0 eth0
127.0.0.0       *               255.0.0.0       U        40 0          0 lo
default         buffalo.setup   0.0.0.0         UG       40 0          0 eth0

Flags：U(経路は有効)　G(ゲートウェイ)　H(宛先はホスト)
　　　 C(キャッシュのエントリー)　!( 拒否 (reject) する経路である)

mpstat †

mpstat -P ALL [間隔] [回数]

Linuxでの出力例 †

10時08分51秒  CPU   %user   %nice    %sys %iowait    %irq   %soft  %steal   %idle    intr/s
10時08分51秒  all    0.13    0.00    0.17    0.53    0.02    0.05    0.00   99.09    862.42
10時08分51秒    0    0.21    0.01    0.22    0.72    0.04    0.04    0.00   98.76    861.64
10時08分51秒    1    0.06    0.00    0.13    0.33    0.00    0.05    0.00   99.42      0.78

perl †

perl [オプション] 'スクリプト' [ファイル]

ls で表示されたファイルを .old とつけてコピーする †

ls | perl -ne 'chomp; print "cp -ip $_ $_.old\n"'
ls | perl -nle 'print "cp -ip $_ $_.old"'

,区切り2番目の文字を表示 †

perl -F, -alne 'print $F[1]'

pidstat †

pidstat [オプション] [ 間隔  回数 ]

pmap †

pmap [オプション] PID

ps †

UNIXには、/usr/ucb/ps にもpsコマンドがあり使えるオプションが異なる。

ps [オプション] [PID]

プロセスの状態を確認する †

# ps aux
USER       PID %CPU %MEM    VSZ   RSS TTY      STAT START   TIME COMMAND
root         1  0.0  0.0  19340  1504 ?        Ss   19:04   0:00 /sbin/init
root         2  0.0  0.0      0     0 ?        S    19:04   0:00 [kthreadd]
root         3  0.0  0.0      0     0 ?        S    19:04   0:00 [migration/0]

# ps axwwo sgi_p,psr,ni,uname,pid,%cpu,%mem,vsz,rss,stat,start,wchan:30,cputime,args
P PSR  NI USER       PID %CPU %MEM    VSZ   RSS STAT  STARTED WIDE-WCHAN-COLUM_____     TIME COMMAND
*   0   0 root         1  0.0  0.0  19340  1504 Ss   19:04:05 poll_schedule_timeout 00:00:00 /sbin/init
*   1   0 root         2  0.0  0.0      0     0 S    19:04:05 kthreadd              00:00:00 [kthreadd]
*   0   - root         3  0.0  0.0      0     0 S    19:04:05 migration_thread      00:00:00 [migration/0]

-- 特定プロセスで実行されてるスレッドも表示
# ps wwo sgi_p,psr,ni,uname,pid,%cpu,%mem,vsz,rss,stat,start,wchan:30,cputime,args -L <PID>

rpm †

rpm [オプション] [パッケージ名]

rpmbuild †

RPMをビルドするコマンド（RPMパッケージを作成する）

rpmbuild -b<STAGE> | -t<STAGE> [オプション] ファイル名

sar †

Linuxはデフォルトで、/var/log/sa に収集されている。

sar [オプション] [実行間隔] [実行回数]

# sar -r 1 5
11時55分50秒 kbmemfree kbmemused  %memused kbbuffers  kbcached kbswpfree kbswpused  %swpused  kbswpcad
11時55分51秒     16228    215692     93.00     59176     54668    491508         4      0.00         4
11時55分52秒     16228    215692     93.00     59176     54668    491508         4      0.00         4
11時55分53秒     16228    215692     93.00     59176     54668    491508         4      0.00         4

sed †

sed [オプション] '条件式' [対象ファイル]

-- 5〜10行目を削除
sed -e '5,10d' test.txt

-- 先頭にHeadの文字列を追加
sed -i '1s/^/Head/' test.txt
sed '1iHead' test.txt

-- 末尾にEOFの文字列を追加
sed -i '$ a EOF' ファイル名

-- Comment の文字列先頭に # を追加
sed -i '/Comment/s/^/# /g' ファイル名

-- 正規表現とグループ置換を利用した例。「05/22 11:22:33 INFO abcde 1234567890.log ABCDE」といった文字列が「05/22 123456789.log」となる
sed -e 's/^([0-9]\{2\}\/[0-9]\{2\}).*\([0-9]\{10\}.log\).*/\1 \2/g'

snoop †

snoop [オプション] [フィルタ]

sort †

sort [オプション] [ファイル名]

先頭から文字列を比較し並び替える。オプションを指定しなければ先頭から行末までの文字列で比較する。

VSZ(仮想メモリサイズ)でソートする †

ps aux | sort -bn -k5.1

stat †

stat [オプション] ファイル名

ファイルの atime、ctime、mtimeをマイクロ秒単位で表示する

strace †

strace [オプション] [コマンド]

# strace -ttTvf -p [PID]

プログラムのシステムコールを表示する

systemctl †

systemctl [コマンド] サービス名 [オプション]

-- 稼働中サービス一覧
systemctl list-units --type=service

-- 定義してるサービス一覧
systemctl list-unit-files --type=service

swap †

swap オプション

# /usr/sbin/swap -l
swap ファイル   デバイス  swaplo ブロック 空き容量
/dev/dsk/c0d0s1     102,1       8 1048568 1048568

# /usr/sbin/swap -s
合計: 148472k バイト割り当て済み + 23132k 予約済み = 171604k 使用済み, 1075460k 使用可

1. プロセスが追加メモリを要求すると、そのプロセスに物理メモリのメモリページを割り当てる
2. 物理メモリの個々のページがスワップスペースによりバックアップされる（スワップスペースの予約）
3. 物理メモリが不足した場合は物理メモリからスワップスペースへスワップされる
4. プロセスが予約済みページに実際に書き込みを始めるとシステムは
   物理スワップスペースの特定の場所をそのページに割り当てる
   

tcpdump †

tcpdump [オプション] [条件式]

• i で IFの指定を省略した場合、最初のIFが指定される。条件式はandで複数繋げることが可能。

使用例 †

NIC名がeth1で、ネットワークが172.28.0.0/16 且つ、ポート番号21のパケットをtest.capに出力

tcpdump -i eth1 -n -c 1000 net 172.28 and port 21 -w test.cap

SYN または FIN フラグのパケットを対象とする（以下、何れも同じ）

tcpdump 'tcp[tcpflags] & (tcp-syn|tcp-fin) != 0'
tcpdump '(tcp[tcpflags] & tcp-syn == 2) or (tcp[tcpflags] & tcp-fin == 1)'
tcpdump 'tcp[tcpflags] == 2 or tcp[tcpflags] == 1'

SYN ACK フラグが両方セットされたパケットを対象とする（SYNフラグのビット位置1(2^1=2) + ACKフラグのビット位置4(2^4=16) が 両方成立＝両方の値を合算）

tcpdump 'tcp[tcpflags] == 18'

taskset †

taskset [オプション]

特定プロセスの親和性の確認や、設定を行う。

CPU番号0を指定してコマンド実行 †

taskset -c 0 ls -l

top †

top [オプション]

vmstat †

vmstat [間隔] [回数]

# vmstat 1 5
procs -----------memory---------- ---swap-- -----io---- --system-- ----cpu----
r  b   swpd   free   buff  cache   si   so    bi    bo   in    cs us sy id wa
0  0      4  15968  59436  54692    0    0    52    15 1007    71  9  3 85  3
0  0      4  15968  59436  54692    0    0     0     0 1006     8  0  0 100  0
0  0      4  15968  59444  54692    0    0     0    52 1007    13  0  0 100  0
0  0      4  15968  59444  54692    0    0     0     0 1005     9  0  0 100  0

Solaris独自項目 †

参考->vmstat コマンドの読み方

watch †

watch [オプション] "実行コマンド"

xargs †

標準入力から引数を読み込み、指定のコマンドを実行する
引数で渡される文字列が長い場合、引数の長さを分割してxargs で指定したコマンドを実行する（xargs tar cvf などは複数回実行されると最後の引数分割分のファイルで上書きされてしまう）

例えば、findで、*.logの結果を標準入力として、rm のコマンドを実行する。

find / -name "*.log" | xargs rm

下記でも同じ結果を得られるが、下記の場合、*.logがヒットした回数分rmコマンドが実行される。
xargsを使用すると、1回だけしかrmを実行しない為、処理が高速。

find / -name "*.log" -exec rm {} \;

10個標準入力を読み込む度にgrepコマンドを実行する †

find / -name \*.c -print | xargs -n 10 grep "検索対象文字列"

lsの結果をtarで固める †

touch arc.tar
ls -1 *.log | xargs tar rvf arc.tar　または　tar cvf `ls -1 *.log`
※ いきなり cvf でやると引数が長い場合、分割されて最後に実行された tarファイルのみになってしまうので、追記で行ってる

yum †

yum <オプション> <パッケージ名|グループ名>

インストールを行わずパッケージのDLのみ実施 †

プラグインのインストール

yum -y install yum-downloadonly        ‥‥CentOS5の場合
yum -y install yum-plugin-downloadonly ‥‥CentOS6以降

パッケージのダウンロード（DL先を指定しない場合は /var/cache/yum/）

yum install --downloadonly --downloaddir=<DIR>