シェルスクリプト総合 その28
シェルスクリプトの総合スレです。 □お約束 ・特記なき場合はBourne Shell(/bin/sh)もしくはPOSIX準拠の互換シェルがデフォルトです。 bash/zsh/ksh/ash/dash/yash/poshなどの専用機能に依存する場合は明示しましょう。 Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。 FreeBSDユーザは/bin/shの正体がashなので注意。 ・POSIXについてのリンクは https://en.wikipedia.org/wiki/POSIX にまとめられています 最新の仕様はこちらへ http://pubs.opengroup.org/onlinepubs/9699919799/ (左上の「Shell & Utilities」 から参照することができます。) ・v7 shに一番近くて、現役(?)のshは、OpenSolaris由来のheirloom sh。 http://src.illumos.org/source/xref/illumos-gate/usr/src/cmd/sh/ http://heirloom.sourceforge.net/sh.html ・csh/tcshのシェルスクリプトは推奨されません。 (理由は「csh-whynot」でググれ) ・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。 manや参考リンクを見ましょう。 aproposないしはman -kでそれらしい単語による簡単な検索もできます。 ・シェルで使えるワイルドカード等は正規表現ではありません。 正規表現の話題はスレ違い(正規表現スレへ) ・シェルスクリプトのことをシェルってゆうな □初心者へのアドバイス: ・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも awkまたはperlの方が適した処理にはそちらを使いましょう。 ・知らないコマンドが出てきたらmanを引きましょう。 ・思い通りに動かないときは、まずは sh -x でトレースしましょう。 □回答者への注意事項: ・シェルスクリプトでの処理方法を質問しているのに、よくわからずに 「そういうのはperl使いましょう」と回答するのはやめましょう。 安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。 質問に対して問題が間違ってるといちゃもんをつけるのもやめましょう シェルスクリプト総合 その27 https://mevius.5ch.net/test/read.cgi/unix/1525337663/ test $(date +%w) -eq 5 今日が金曜日なら5が出るんですが、-eq というのはコマンドなのかtestコマンドのオプションなのか、これは何ですか? 自己レス -eq はtestコマンドのオプションで、==の事みたいですね test コマンドのオプションです。 ところで今日は金曜日ですが5は出ませんよね。 戻り値は0となりますが……何か勘違いしている気がします。 すみません test $(date +%w) -eq 5 && echo "今日は金曜日!" これだと、金曜日だとechoが実行されました >>82 自己レス 金曜日かどうか調べて金曜日なら戻り値は0、 で、戻り値が0の場合echoが実行されるって事ですね 毎月第2月曜日と毎月第2週の月曜日とでは、指す日にちってもしかして異なります? 0 17 8-14 * test $(date +%w) -eq 5 && command こんな風にcronで毎月第2金曜日とか指定したいんですが、 例えば今月の5日で言うと、5日は1回目の月曜日だけど、月の2週目にあるので疑問に思いました。 0 17 8-14 * test $(date +%w) -eq 1 && command これだと今週の月曜日には実行するされないですよね? 読みづらい。testなんて使うな [ $(date +%w) -eq 5 ] && echo "今日は金曜日!" >>85 [ ]ってなんですか? ググろうにも記号なのでググれないです bash(バージョン 4.4.12(1)-release)でスクリプト書いててちょっと謎が $ a=1; b=2; [[ ${a}<=${b} ]]; echo $? こうするとちゃんと終了コードの0が返ってきますが $ a=1; b=2; [[ ${a} <= ${b} ]]; echo $? 比較演算子の前後にスペースを入れると「条件式に構文エラーがあります」「`${b}' 周辺に構文エラーがあります」と怒られます $ a=1; b=2; [[ ${a} < ${b} ]]; echo $? 比較演算子をleでなくltにするとまた0が返ります これって何故なんでしょう? >>88 [[ ... ]] で使える演算子に <= は存在しない それは数の比較ではなく [[ "1" < "=2" ]] という文字列の比較になっている なので <= の右に空白を置くと [[ "1" < "=" "2" ]] となりエラー 条件式 https://linuxjm.osdn.jp/html/GNU_bash/man1/bash.1.html#lbBW >>89 さっそくありがとうございます そうか、イコールをつけない不等号で上手く動いてるように見えるのは、文字列として辞書順で比較してるからなんですね どうやら私の頭の中では、二重丸括弧での算術式展開とゴッチャになってたみたいです 何時間も唸ってたのが一撃でスッキリしました。ありがとうございました >>87 もしかしてtestと[]はだいたい同じですか? testを使わない方がいいのはなぜなんでしょうか? >>87 それで出てくるのは /usr/bin[ の方のmanじゃないだろうか bash の場合。 $ type [ [ is a shell builtin $ help [ [: [ arg... ] Evaluate conditional expression. This is a synonym for the "test" builtin, but the last argument must be a literal `]', to match the opening `['. sedで\1を変数名としていっぺんに異なる部分を異なる変数の内容で変換できませんか? sed -e "s/<\(.*\)>/${\1}/g" こんなかんじの #!/bin/bash # 変数URL, ETAGには既に適切な値が入ってるとする OPT=('--header' "'If-None-Match: ${ETAG}'") curl "${OPT[@]}" "${URL}" こんなスクリプトを書いたけど、curlと鯖のやりとりを覗くと、リクエストヘッダのIf-None-Matchの行にシングルクォーテーションが付いて 'If-None-Match: (ETAGの値)' と送られてしまう。で、試しにcurlの行を echo "curl ${OPT[@]} ${URL}" > /tmp/tempfile . /tmp/tempfile と書き換えて実行すると、ちゃんと正常に動く。man bashを読んだりbashの引用符の扱われ方をググってみたりしても、何が何だかさっぱり分からない。 どなたか助けてくれませんか。 自己レス curlだからとか関係ないな。変数にシングルクォートで囲ったものが入ってて、それをダブルクォートで囲った配列展開してるんだから、そのパラメーターはそのままシングルクォートつきになって当然。 しかし、ETAGはダブルクオートを含むしhttpリクエストヘッダはスペースを含むから、全体をシングルクォートで囲まなきゃならんのだよな。 やっぱどのタイミングでどのクォートがどう展開されるのか、一段階ずつ追いかけてみるしかないのかな なんか混乱しとるなw まあ、ダブルクォートは、他言語を使っている人からすれば 直感に反する機能だってことに、俺も最近気づいたんだけどな ただどこがどう違うかを言葉で説明したことがわけじゃない。やってるみるか? ・シェルスクリプトは文字列として展開されて実行されているようでそうではない ・ダブルクォートは文字列を囲う機能ではなく、変数展開の挙動を変えるエスケープの一種 この二つに集約されるかなぁ > しかし、ETAGはダブルクオートを含むし これ関係ないんだわ OPT=('--header' "If-None-Match: ${ETAG}") だと OPT=('--header' "If-None-Match: "686897696a7c876b7e"") こうなってしまい OPT=('--header' "If-None-Match: " 686897696a7c876b7e "") のように解釈されると思ってしまうが違う。 別に文字列展開されてから、動くわけじゃない ダブルクォートは「 If-None-Match: ${ETAG} 」の部分を一つの引数として 扱いますよー(ただし中の変数は展開されますよ)という意味。 変数の中にダブルクォートが入っていようが改行が入っていようが関係ない またダブルクォートはそれだけの機能ではなく $@ が入っている場合に異なる挙動をする "$@" が入っている場合、一つの引数ではなく複数の引数として扱われる 例えば引数$1〜$5が存在する場合、"$@" は "$1" "$2" "$3" "$4" "$5" と等価 また"foo$@bar" となっていた場合、 "foo$1" "$2" "$3" "$4" "$5bar" と等価 引数が一つなら "foo$1bar" だし、引数がゼロの場合は、書かなかったのと同じとなる("" 空文字にはならない) このように文字列として囲う機能じゃなくて、中に入ってる文字や変数の解釈の仕方に影響を与える機能 ちなみに "$@" を複数の引数に展開されたくなければ "$*" を使う >>100-101 ありがとう。おかげで、サクッと片付きました。素直に OPT=('--header' "If-None-Match: ${ETAG}") curl "${OPT[@]}" "${URL}" で何の問題もなく動作しました。最初にcurlについて調べてたときにETAGを使う例でシングルクォートが使われてたのに、ずっと脳味噌が引っ張られてたようです。 上の行で変数に入れる時点で、スペースを含む一つの文字列として扱われてるんだから、あとはその中身がなんであるかに関係なく、"$[@]"で展開すればいいわけですね。 ありがとうございました。 bashでログ出力処理を一括でやるにはどうすれば良いですか? powesshellだと、Start-Transcript に対応するコマンドを教えてください >>103 何がしたいのかよくわからないが シェルスクリプト内の標準出力と標準エラー出力をファイルに出力するなら #!/bin/bash exec >script.log 2>&1 ... >>104 何したいかよくわからんって、 パワーシェルでいうStart-Transcriptをやりたいの bashで一行ずつリダイレクトつけないとダメとかダサすぎる PowerShellなんぞ興味が無いから知らんという人が多かろう 標準出力と標準エラー出力をファイルとコンソールの両方に出したいと言えばいい 知ってるがお前の態度が気に入らない(AA略) やっつけ $ { > echo foo > ECHO bar > } 2>&1 | tee result.txt foo ECHO: コマンドが見つかりません FreeBSD の /usr/bin/man で、 if { sizes=$($STTY size 0>&3 2>/dev/null); } 3>&1; then という記述があるんですが、これって何をしているんでしょう。 ・標準エラー出力を捨てている ・3 を 標準入力の指す先 (tty) に設定? ・0 を ↑の3に設定? 3>&1 して 1>&3 なら退避目的かなと思うんですが、これは違うので、 意図がわからないです。 ソースはここです。 https://github.com/freebsd/freebsd/blob/master/usr.bin/man/man.sh#L646 ・MANWIDTH=ttyのときはmanの標準出力1の横幅を取得したい。 ・sttyの操作対象端末は標準入力0で、出力先は標準出力1。 ・a>&b は dup2(b,a) のことで、左を使うと実体は右になる。 ・標準エラー出力2は捨てる。 という前提で、 sizes=$($STTY size 0>&1 2>/dev/null) と書くと、 sttyの標準出力1は$()に取られてるから、manの標準出力1とは別物になって、 正しい端末をsttyできない。 { sizes=$($STTY size 0>&3 2>/dev/null); } 3>&1 は、1が取られ てるなら3を中継すれば安全じゃねと書いたものと推測される。 { sizes=$($STTY size 2>/dev/null); } 0>&1 と書けば十分なはず。 findした結果を1行づつ配列に代入したい場合にはどうすればよいでしょうか? 当方が書いたshellだと、検索したい文字列に空白があるケースだと そこで要素が別れてしまいます。 array=$(find ${HOME}/animal -type d -iname "*検索したい文字列*") >>113 ありがとうございます! リダイレクトにstdin/stdoutの差し替え的な使い方があるとか、sttyはstdinを見るとか、sttyがstdinを見てもstdoutを見てもそれが端末を指しているなら同じこととか、数枚目からうろこが落ちました。 しかしそもそもsttyはデフォルトのstdin見ておけばいいんじゃね、とも思ったり。command |man 的な使い方ってあったっけなぁ。 少々スレ違いですがお許しください OS 組み込みの tcsh をバージョンアップしたいのですが、 シェルスクリプトの挙動が変わってしまうのが怖くて、なるべく コンパイル時オプション(configure オプション)を揃えたいのですが バイナリしかない場合に、コンパイル時オプションを調べる方法ってないですかね? ## 例えば ISC BIND の -V オプションみたいな ログインシェルでfishを使う時、 https://gist.github.com/mitukiii/4954559 できたらやり方教えてください $ myCommand タブキー押すと $ myCommand foo -- do foo bar -- do bar unk -- do toilet って候補と1行説明表示されて $ myCommand f でタブーキー押すと $ myCommand foo と補完される 方法を知りたいです これできたら重いzshから魚に乗り換えられる ここはシェルスクリプトのスレです。 シェルの使い方のスレではありません。 スクリプトの話をしてください シェルスクリプトだけで実装した一番高速なFizzBuzzはどんなものかとか 「使てる(つこてる)?」は「使っていますか?」という意味の質問であって、使用可能かどうかを聞いてる訳では無いのでは ほにゃらら ほんじゃらら かきく 0 あいう かきく 1 あいう かきく 2 あいう かきく 3 あいう かきく 4 あいう かきく 5 あいう さしすせそ と書かれたテキストファイルを作りたいです echo -e ほにゃらら"\n"ほんじゃらら > index.txt seq -f "%g あいう" 0 5 > index.txt ここまではわかったんですが、seqで連番を書き出す時に番号と番号の間の行に「かきく」を入れて最後の行に「さしすせそ」を加えるやり方教えてほしいです >>129 ありがとうございます 調べてみました cat > index.txt << "EOF" ほにゃらら ほんじゃらら あいう EOF seq 0 5 | awk -v 'ORS= あいう\nかきく\n' '{print $1}' >> index.txt echo さしす >> index.txt こうやると ほにゃらら ほんじゃらら あいう 0 あいう かきく 1 あいう かきく 2 あいう かきく 3 あいう かきく 4 あいう かきく 5 あいう かきく さしす と出力されました 最後から2行目の「かきく」を出さないやり方が分からないです 一応これでうまくいきました cat > index.txt << "EOF" ほにゃらら ほんじゃらら かきく EOF seq 0 5 | awk -v 'ORS= あいう\nかきく\n' '{print $1}' >> index.txt sed -i -e '$d' index.txt echo さしす >> index.txt >>132 自分のやり方はなだったらしそうなのでそのキーワード調べてみます えー、難しい... 俺>>129 はこんなもんしか考えてなかったけど awk 'BEGIN{print"ほにゃらら\nほんじゃらら";for(i=0;i<6;i++){printf"かきく\n%d あいう\n",i};print"さしすせそ"}' >>128 cat <<END >index.txt ほにゃらら ほんじゃらら $(printf 'かきく\n%s あいう\n' $(seq 0 5)) さしすせそ END あ、バックスラッシュが円記号になってしまった... cat > index.txt << "EOF" ほにゃらら ほんじゃらら EOF printf "かきく\n%s\n" {0..5}あいう >> index.txt これだと大分短くて出来たけど、数字と「あいう」の間にスペースが入れられない 被ってしまった みなさんありがとうございます 質問ぬしの自分は>>138 です 135と136のやり方調べてみます >>136 catで書き出すファイルの中でprintfをやって、そのrintfの中でseqで連番作るんでね これだとファイルへの書き込みは1回ですみますね >>135 これも> index.txtで終えれば1回ですみますね だけどawk難しいです がんばって135のやり方理解できるようにします >>140 > これだとファイルへの書き込みは1回ですみますね どんな方法で作るにせよ { } で括れば一回にまとめられるよ { printf '%s\n' 'ほにゃらら' printf '%s\n' 'ほんじゃらら' printf 'かきく\n%s あいう\n' $(seq 0 5) printf '%s\n' 'さしすせそ' } >index.txt >>141 こんな方法もあるんですね ありがとうございます curlの標準出力の6行目を変数に入れて他の文字列と組み合わせて標準出力に出力したいです。 URL="hoge" ROKU="curl -sS $URL | sed -n '6p'" echo "あいうえお"$ROKU"さしすせそ" しかし結果はこうなりました あいうえおcurl -sS hoge | sed -n '6p'さしすせそ >>142 続き >>141 さんで教わった{}を使えばよさそうな気がするですがエラーになりました printf "あいうえお" $ROKU #chomp のように\nを消すパイプ必要だと思う printf "さしすせそ" >>144 echoじゃなくてprintfなら改行されないからあいうえおに続けて書けますね だけど、このままだとROKUのところで改行されてしまうからさしすせそは2行目に来ちゃいますね >>128 > と書かれたテキストファイルを作りたいです こうすれば良いのでは? cat<<HERE > index.txt ほにゃらら ほんじゃらら かきく 0 あいう かきく 1 あいう かきく 2 あいう かきく 3 あいう かきく 4 あいう かきく 5 あいう さしすせそ HERE >>142 コマンドの標準出力を変数に設定したりコマンドの引数にしたりするには 「コマンド置換」 $(…) を使います あと、「6行目」以外の部分も取り出したくなったときに curl を何度も実行したくはないので curl と sed は分けておきたいところ するとこんな感じ PAGE=$(curl -sS "$URL") ROKU=$(printf '%s\n' "$PAGE" | sed -n '6p') NANA=$(printf '%s\n' "$PAGE" | sed -n '7p') printf 'あいうえお%sさしすせそ\n' "$ROKU" printf 'かきくけこ%sたちつてと\n' "$NANA" >>146 複数行書く方法ありがとうございます >>147 うまくいきました ありがとうございます $ bash -c 'unset a b;echo 10|read a;let b=a+10;echo $b' 10 この動作ってPOSIX的にはどうなの? 読みづれーなw bash -c ' unset a b echo 10 | read a # echo $a = 空 let b=a+10 echo $b ' letはPOSIXにない readはサブシェルなんだからaは空に決まってる ごく普通の正しい動作 正しいコード bash -c ' unset a b echo 10 | { read a let b=a+10 echo $b } ' letまで考えて無かったすまん まあ説明の為なのでそこは目をつぶってくれたまい opensuzeなんだけども $ ksh -c 'unset a b;echo 10|read a;let b=a+10;echo $b' 20 $ この動作ってPOSIX的にはどうなの? curlのやり方教えてください ブラウザのフォームにjsonを書いてポストボタンを押すとokが出るけどターミナルからcurlでやろうとすると、ボディが空だとなり送信出来ません 書き方間違えていますか? https://i.imgur.com/Nvm7CMj.jpg ブラウザの開発ツールからcURLでコピーした方が早そうだぞ >>155 どうもありがとうございます -H 'Content-Type: application/json' を付けたら動きました アプリの起動判定をしたいんですが ps -alxw | grep アプリ名 2行より多ければアプリが起動してるんだと思いますけど確実な方法ありますか? >>158 どうもありがとうございます そのコマンドで何も変えらなかったら起動中という事であってますか? 起動してないとわかっても、その直後に起動することも有るから ロックを掛けないと確実にはならないけどな >>160 どの環境でも使えるロックの機構ってなにかある? 怒らないで教えて欲しいんだけど何でお前らPowerShell使わないの? 今やPowerShellの方が勉強会でドヤれるしちょまどなんかもPowerShellだってよ >>164 Dockerのalpine、debianなど、ほぼすべてのイメージでことごとく動かないから。 shで十分なのに、PowerShellなんて使いませんよw >>164 linux のコマンド群が使えないから ソースコードをダウンロードしてビルドしようとしたら… ERROR: You must either be root or be able to use sudo ビルドするのに root になれって? この時点で話にならないよ。 >>168 エラーメッセージには「sudo を使え」と書いてあるが とりあえず適当なことを言ってPowerShellを 貶めたかったんだろ?バレて逆効果になってるがw grep 等の外部コマンド?を使わずに任意の文字列の最初に見つかる3桁の数字を得る方法があれば教えて下さい (例えば、abc_4_de_99_fgh_ijklm_no_567_2_123_pqrst_uvwx_yz だと567) bashなら=~と、$BASH_REMATCH使えばできるんじゃね >>173 おまえは俺かw 似たようなことをやったよ。grepで(笑) 外部コマンドを使わないなら、こうなるから面倒くさいんだよな。 できるけど面倒くさい。だから遅いけどgrepにした。 v=abc_4_de_99_fgh_ijklm_no_567_2_123_pqrst_uvwx_yz v=${v#"${v%%[0-9][0-9][0-9]*}"} v=${v%"${v#[0-9][0-9][0-9]}"} シェルスクリプトだと(bash依存は知らん) マッチした部分を含めて削除はできるけど マッチした部分を残したその他を削除が簡単にできないんだよね。 だから「マッチした部分を含めて削除」したら残りが 「マッチしなかった部分」になるのを利用して、 改めて全体から「マッチしなかった部分」を取り除くというのを前後でやればできる。 ありがとうございます 面倒でも前後から不要部分を取り除くしかないのですね read.cgi ver 07.4.7 2024/03/31 Walang Kapalit ★ | Donguri System Team 5ちゃんねる