シェルスクリプト総合 その28
■ このスレッドは過去ログ倉庫に格納されています
シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)もしくはPOSIX準拠の互換シェルがデフォルトです。
bash/zsh/ksh/ash/dash/yash/poshなどの専用機能に依存する場合は明示しましょう。
Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
FreeBSDユーザは/bin/shの正体がashなので注意。
・POSIXについてのリンクは https://en.wikipedia.org/wiki/POSIX にまとめられています
最新の仕様はこちらへ http://pubs.opengroup.org/onlinepubs/9699919799/
(左上の「Shell & Utilities」 から参照することができます。)
・v7 shに一番近くて、現役(?)のshは、OpenSolaris由来のheirloom sh。
http://src.illumos.org/source/xref/illumos-gate/usr/src/cmd/sh/
http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
manや参考リンクを見ましょう。
aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆうな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
「そういうのはperl使いましょう」と回答するのはやめましょう。
安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
質問に対して問題が間違ってるといちゃもんをつけるのもやめましょう
シェルスクリプト総合 その27
https://mevius.5ch.net/test/read.cgi/unix/1525337663/ ちなみに "$@" を複数の引数に展開されたくなければ "$*" を使う >>100-101
ありがとう。おかげで、サクッと片付きました。素直に
OPT=('--header' "If-None-Match: ${ETAG}")
curl "${OPT[@]}" "${URL}"
で何の問題もなく動作しました。最初にcurlについて調べてたときにETAGを使う例でシングルクォートが使われてたのに、ずっと脳味噌が引っ張られてたようです。
上の行で変数に入れる時点で、スペースを含む一つの文字列として扱われてるんだから、あとはその中身がなんであるかに関係なく、"$[@]"で展開すればいいわけですね。
ありがとうございました。 bashでログ出力処理を一括でやるにはどうすれば良いですか?
powesshellだと、Start-Transcript に対応するコマンドを教えてください >>103
何がしたいのかよくわからないが
シェルスクリプト内の標準出力と標準エラー出力をファイルに出力するなら
#!/bin/bash
exec >script.log 2>&1
... >>104
何したいかよくわからんって、
パワーシェルでいうStart-Transcriptをやりたいの
bashで一行ずつリダイレクトつけないとダメとかダサすぎる PowerShellなんぞ興味が無いから知らんという人が多かろう
標準出力と標準エラー出力をファイルとコンソールの両方に出したいと言えばいい
知ってるがお前の態度が気に入らない(AA略) やっつけ
$ {
> echo foo
> ECHO bar
> } 2>&1 | tee result.txt
foo
ECHO: コマンドが見つかりません FreeBSD の /usr/bin/man で、
if { sizes=$($STTY size 0>&3 2>/dev/null); } 3>&1; then
という記述があるんですが、これって何をしているんでしょう。
・標準エラー出力を捨てている
・3 を 標準入力の指す先 (tty) に設定?
・0 を ↑の3に設定?
3>&1 して 1>&3 なら退避目的かなと思うんですが、これは違うので、
意図がわからないです。
ソースはここです。
https://github.com/freebsd/freebsd/blob/master/usr.bin/man/man.sh#L646 ・MANWIDTH=ttyのときはmanの標準出力1の横幅を取得したい。
・sttyの操作対象端末は標準入力0で、出力先は標準出力1。
・a>&b は dup2(b,a) のことで、左を使うと実体は右になる。
・標準エラー出力2は捨てる。
という前提で、
sizes=$($STTY size 0>&1 2>/dev/null) と書くと、
sttyの標準出力1は$()に取られてるから、manの標準出力1とは別物になって、
正しい端末をsttyできない。
{ sizes=$($STTY size 0>&3 2>/dev/null); } 3>&1 は、1が取られ
てるなら3を中継すれば安全じゃねと書いたものと推測される。
{ sizes=$($STTY size 2>/dev/null); } 0>&1 と書けば十分なはず。 findした結果を1行づつ配列に代入したい場合にはどうすればよいでしょうか?
当方が書いたshellだと、検索したい文字列に空白があるケースだと
そこで要素が別れてしまいます。
array=$(find ${HOME}/animal -type d -iname "*検索したい文字列*") >>113
ありがとうございます!
リダイレクトにstdin/stdoutの差し替え的な使い方があるとか、sttyはstdinを見るとか、sttyがstdinを見てもstdoutを見てもそれが端末を指しているなら同じこととか、数枚目からうろこが落ちました。
しかしそもそもsttyはデフォルトのstdin見ておけばいいんじゃね、とも思ったり。command |man 的な使い方ってあったっけなぁ。 少々スレ違いですがお許しください
OS 組み込みの tcsh をバージョンアップしたいのですが、
シェルスクリプトの挙動が変わってしまうのが怖くて、なるべく
コンパイル時オプション(configure オプション)を揃えたいのですが
バイナリしかない場合に、コンパイル時オプションを調べる方法ってないですかね?
## 例えば ISC BIND の -V オプションみたいな ログインシェルでfishを使う時、
https://gist.github.com/mitukiii/4954559
できたらやり方教えてください
$ myCommand
タブキー押すと
$ myCommand
foo -- do foo
bar -- do bar
unk -- do toilet
って候補と1行説明表示されて
$ myCommand f
でタブーキー押すと
$ myCommand foo
と補完される
方法を知りたいです
これできたら重いzshから魚に乗り換えられる ここはシェルスクリプトのスレです。
シェルの使い方のスレではありません。
スクリプトの話をしてください シェルスクリプトだけで実装した一番高速なFizzBuzzはどんなものかとか 「使てる(つこてる)?」は「使っていますか?」という意味の質問であって、使用可能かどうかを聞いてる訳では無いのでは ほにゃらら
ほんじゃらら
かきく
0 あいう
かきく
1 あいう
かきく
2 あいう
かきく
3 あいう
かきく
4 あいう
かきく
5 あいう
さしすせそ
と書かれたテキストファイルを作りたいです
echo -e ほにゃらら"\n"ほんじゃらら > index.txt
seq -f "%g あいう" 0 5 > index.txt
ここまではわかったんですが、seqで連番を書き出す時に番号と番号の間の行に「かきく」を入れて最後の行に「さしすせそ」を加えるやり方教えてほしいです >>129
ありがとうございます
調べてみました
cat > index.txt << "EOF"
ほにゃらら
ほんじゃらら
あいう
EOF
seq 0 5 | awk -v 'ORS= あいう\nかきく\n' '{print $1}' >> index.txt
echo さしす >> index.txt こうやると
ほにゃらら
ほんじゃらら
あいう
0 あいう
かきく
1 あいう
かきく
2 あいう
かきく
3 あいう
かきく
4 あいう
かきく
5 あいう
かきく
さしす
と出力されました
最後から2行目の「かきく」を出さないやり方が分からないです 一応これでうまくいきました
cat > index.txt << "EOF"
ほにゃらら
ほんじゃらら
かきく
EOF
seq 0 5 | awk -v 'ORS= あいう\nかきく\n' '{print $1}' >> index.txt
sed -i -e '$d' index.txt
echo さしす >> index.txt >>132
自分のやり方はなだったらしそうなのでそのキーワード調べてみます えー、難しい...
俺>>129はこんなもんしか考えてなかったけど
awk 'BEGIN{print"ほにゃらら\nほんじゃらら";for(i=0;i<6;i++){printf"かきく\n%d あいう\n",i};print"さしすせそ"}' >>128
cat <<END >index.txt
ほにゃらら
ほんじゃらら
$(printf 'かきく\n%s あいう\n' $(seq 0 5))
さしすせそ
END あ、バックスラッシュが円記号になってしまった... cat > index.txt << "EOF"
ほにゃらら
ほんじゃらら
EOF
printf "かきく\n%s\n" {0..5}あいう >> index.txt
これだと大分短くて出来たけど、数字と「あいう」の間にスペースが入れられない 被ってしまった
みなさんありがとうございます
質問ぬしの自分は>>138です
135と136のやり方調べてみます >>136
catで書き出すファイルの中でprintfをやって、そのrintfの中でseqで連番作るんでね
これだとファイルへの書き込みは1回ですみますね
>>135
これも> index.txtで終えれば1回ですみますね
だけどawk難しいです
がんばって135のやり方理解できるようにします >>140
> これだとファイルへの書き込みは1回ですみますね
どんな方法で作るにせよ { } で括れば一回にまとめられるよ
{
printf '%s\n' 'ほにゃらら'
printf '%s\n' 'ほんじゃらら'
printf 'かきく\n%s あいう\n' $(seq 0 5)
printf '%s\n' 'さしすせそ'
} >index.txt >>141
こんな方法もあるんですね
ありがとうございます
curlの標準出力の6行目を変数に入れて他の文字列と組み合わせて標準出力に出力したいです。
URL="hoge"
ROKU="curl -sS $URL | sed -n '6p'"
echo "あいうえお"$ROKU"さしすせそ"
しかし結果はこうなりました
あいうえおcurl -sS hoge | sed -n '6p'さしすせそ >>142
続き
>>141
さんで教わった{}を使えばよさそうな気がするですがエラーになりました printf "あいうえお"
$ROKU #chomp のように\nを消すパイプ必要だと思う
printf "さしすせそ" >>144
echoじゃなくてprintfなら改行されないからあいうえおに続けて書けますね
だけど、このままだとROKUのところで改行されてしまうからさしすせそは2行目に来ちゃいますね >>128
> と書かれたテキストファイルを作りたいです
こうすれば良いのでは?
cat<<HERE > index.txt
ほにゃらら
ほんじゃらら
かきく
0 あいう
かきく
1 あいう
かきく
2 あいう
かきく
3 あいう
かきく
4 あいう
かきく
5 あいう
さしすせそ
HERE >>142
コマンドの標準出力を変数に設定したりコマンドの引数にしたりするには
「コマンド置換」 $(…) を使います
あと、「6行目」以外の部分も取り出したくなったときに curl を何度も実行したくはないので
curl と sed は分けておきたいところ
するとこんな感じ
PAGE=$(curl -sS "$URL")
ROKU=$(printf '%s\n' "$PAGE" | sed -n '6p')
NANA=$(printf '%s\n' "$PAGE" | sed -n '7p')
printf 'あいうえお%sさしすせそ\n' "$ROKU"
printf 'かきくけこ%sたちつてと\n' "$NANA" >>146
複数行書く方法ありがとうございます
>>147
うまくいきました
ありがとうございます $ bash -c 'unset a b;echo 10|read a;let b=a+10;echo $b'
10
この動作ってPOSIX的にはどうなの? 読みづれーなw
bash -c '
unset a b
echo 10 | read a
# echo $a = 空
let b=a+10
echo $b
'
letはPOSIXにない
readはサブシェルなんだからaは空に決まってる
ごく普通の正しい動作 正しいコード
bash -c '
unset a b
echo 10 | {
read a
let b=a+10
echo $b
}
' letまで考えて無かったすまん
まあ説明の為なのでそこは目をつぶってくれたまい
opensuzeなんだけども
$ ksh -c 'unset a b;echo 10|read a;let b=a+10;echo $b'
20
$
この動作ってPOSIX的にはどうなの? curlのやり方教えてください
ブラウザのフォームにjsonを書いてポストボタンを押すとokが出るけどターミナルからcurlでやろうとすると、ボディが空だとなり送信出来ません
書き方間違えていますか?
https://i.imgur.com/Nvm7CMj.jpg ブラウザの開発ツールからcURLでコピーした方が早そうだぞ >>155
どうもありがとうございます
-H 'Content-Type: application/json'
を付けたら動きました アプリの起動判定をしたいんですが
ps -alxw | grep アプリ名
2行より多ければアプリが起動してるんだと思いますけど確実な方法ありますか? >>158
どうもありがとうございます
そのコマンドで何も変えらなかったら起動中という事であってますか? 起動してないとわかっても、その直後に起動することも有るから
ロックを掛けないと確実にはならないけどな >>160
どの環境でも使えるロックの機構ってなにかある? 怒らないで教えて欲しいんだけど何でお前らPowerShell使わないの?
今やPowerShellの方が勉強会でドヤれるしちょまどなんかもPowerShellだってよ >>164
Dockerのalpine、debianなど、ほぼすべてのイメージでことごとく動かないから。
shで十分なのに、PowerShellなんて使いませんよw >>164
linux のコマンド群が使えないから ソースコードをダウンロードしてビルドしようとしたら…
ERROR: You must either be root or be able to use sudo
ビルドするのに root になれって? この時点で話にならないよ。 >>168
エラーメッセージには「sudo を使え」と書いてあるが とりあえず適当なことを言ってPowerShellを
貶めたかったんだろ?バレて逆効果になってるがw grep 等の外部コマンド?を使わずに任意の文字列の最初に見つかる3桁の数字を得る方法があれば教えて下さい
(例えば、abc_4_de_99_fgh_ijklm_no_567_2_123_pqrst_uvwx_yz だと567) bashなら=~と、$BASH_REMATCH使えばできるんじゃね >>173
おまえは俺かw
似たようなことをやったよ。grepで(笑)
外部コマンドを使わないなら、こうなるから面倒くさいんだよな。
できるけど面倒くさい。だから遅いけどgrepにした。
v=abc_4_de_99_fgh_ijklm_no_567_2_123_pqrst_uvwx_yz
v=${v#"${v%%[0-9][0-9][0-9]*}"}
v=${v%"${v#[0-9][0-9][0-9]}"} シェルスクリプトだと(bash依存は知らん)
マッチした部分を含めて削除はできるけど
マッチした部分を残したその他を削除が簡単にできないんだよね。
だから「マッチした部分を含めて削除」したら残りが
「マッチしなかった部分」になるのを利用して、
改めて全体から「マッチしなかった部分」を取り除くというのを前後でやればできる。 ありがとうございます
面倒でも前後から不要部分を取り除くしかないのですね >>178
${v%%[0-9][0-9][0-9]*} ってかいてあるやん
abc_4_de_99_fgh_ijklm_no_567_2_123_pqrst_uvwx_yz ・・・(1)
↓ ${v%%[0-9][0-9][0-9]*}
abc_4_de_99_fgh_ijklm_no_ ・・・(2)
↓ (1)ー(2)
567_2_123_pqrst_uvwx_yz ・・・(A)
↓ ${v%"${v#[0-9][0-9][0-9]}"}
_2_123_pqrst_uvwx_yz ・・・(B)
↓ (A)ー(B)
567 今更だが>>179は
× ${v%"${v#[0-9][0-9][0-9]}"}
○ ${v#[0-9][0-9][0-9]}"
だな それらをPowerShellで書くとどうなるか?
一度でも考えてみたことはありますか? PowerShellで書くとLinuxで動かすのが大変になります。 5年くらいするとセキュリティパッチが出なくなって使用禁止になるから
また作り直しになるんだろうどうせ。 例えば中身が
3,soba,inarizusi,hishimoti,ushioziru ...
のcsvファイルなら最初の数字が3なので以下の文字列の3番目をつないで soBa inArizusi hiShimoti usHioziru ... でbash ... というように
csvファイルの最初の値で以降の処理が変わる場合はどうすればいいでしょうか?
一度ファイルを最後まで空読みすれば簡単なのですが、読み込みは1度で終わらせたいです。 >>185
なんでそんな分かりづらい説明するんだ? >>185
引数で単語と数字nを受け取ってn文字目の単語を返す関数を書けばいいだけ >>189
日本語ではなくてbashでお願いします!! >>188
結果だけ見たら
入力テキストをカンマで区切って
最初の数値を取得 ⇒ nとする
残りの文字列のn番目の文字をアッパーケースに変換して空白区切りで連結する
かな
俺ならテキストが小さいならBashで一気に読んで処理すればいいと思うしでかいならPythonとかで処理する > 俺ならテキストが小さいならBashで一気に読んで処理すればいいと思うしでかいならPythonとかで処理する
これはなんで? 小さいとかの境目はどれくらい? そんなこと聞いてくるようではセンスがないよ
センスがない奴にいくら説明しても無駄 pythonだと単語のn文字目を取り出すなんて朝飯前だしな
関数書く手間が一つ省ける 疑問になった点は「テキストが小さいなら」です。
その他の話は聞いてません。 > pythonだと単語のn文字目を取り出すなんて朝飯前だしな
単語の3文字目(オフセット2から1文字)を取り出す
echo "${str:2:1}"
Pythonだとどう朝飯前なんですか? 早く答えのスクリプトを書いてください!!
遅いですよ!! >>195
個人的には今どきなら1MB以下なら小さい1GB以上ならでかい
その間ならケースバイケース
PCの性能やメモリ容量とかと相談 >>185
> 一度ファイルを最後まで空読みすれば
これはどういうスクリプトなの? >>198
1MBってことは、1行256バイトとして4096行以下なら小さいってことですね。
10MBで約4万行、100MBで約40万行、1GBで400万行
昔のExcelの制限が1シート65000行だったことを考えると
エクセルで扱えるデータなら問題なさそうですね ■ このスレッドは過去ログ倉庫に格納されています