シェルスクリプト総合 その26 [無断転載禁止]©2ch.net
■ このスレッドは過去ログ倉庫に格納されています
シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
FreeBSDユーザは/bin/shの正体がashなので注意。
v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
http://src.illumos.org/source/xref/illumos-gate/usr/src/cmd/sh/
http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
manや参考リンクを見ましょう。
aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆーな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
「そういうのはperl使いましょう」と回答するのはやめましょう。
安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
前スレ
シェルスクリプト総合 その25
http://echo.2ch.net/test/read.cgi/unix/1439563321/ $ :> "$(yes a | head -n 255 | tr -d '\n')"
$ :> "$(yes a | head -n 256 | tr -d '\n')"
sh: 1: cannot create aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa
aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa
aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa
aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa: File name too long ファイル名の文字数上限はファイルシステムに依存する シェルスクリプトで有るコマンドを実行した時、
標準出力の内容を緑に、標準エラー出力の内容を
赤にしたいんだけどどうすればいい？
本当に聞きたいことはエスケープシーケンスではなく、
標準出力と標準エラーをそれぞれ別々に加工する方法ね それがないんだよね。標準エラー出力を標準出力に
変えてしまうのは有るけど、それじゃ別々にやるのは不可能だし 条件が厳しいからどうしてもシェルスクリプトでやりたいなら
先ずシェルを作るところから始めないといけない 出力を切り離してパイプで別々のコマンドでフィルタする程度じゃ全然駄目だから
こういうのを簡単にできると言い切る人はきっとものすごく優秀な頭脳の持ち主だと思う これは書いていなかった俺が悪いんだが、
bashやzshを使わずにposixの範囲でやりたいんだよね。
少なくともdashやashで動くものがほしい
でその方法が実際にあることは知ってるんだけど、
もっとシンプルな方法はないのだろうかと言うのと
俺がその方法をここに書いちゃうと
身バレしちゃうので書かなかった >>548
> 出力を切り離してパイプで別々のコマンドでフィルタする
だけやぞ POSIXに準拠したい気持は分かるけど，一次ファイルを作らないっていう謎の拘りが理解できない。
両立させるのは厳しいと思う。もうさ，
tempf="$(printf '%s%s%s%s' '/tmp/' "$(date +"%y%m%d%H%M%S")" '.' "$$")"; somecmd 2> "${tempf}" | \
printf '\e[1;32m%s\e[0m\n\e[1;31m%s\e[0m\n' "$(cat)" "$(cat "${tempf}")"; rm -rf "${tempf}"
でいいでしょ。もちろんPOSIX準拠。
あと偉そうなこと言うが，「身バレが怖いから持ってる (有益かもしれない) 情報を明かしません」って，
こっちからするとかなり不快だから，黙って何も知らないふりをしておいたほうがまだマシだよ。 落ち着け
最初の質問の時点で性格の幼稚さは見え透いてるだろ >>551
> 一次ファイルを作らないっていう謎の拘りが理解できない。
書いてなかったのが悪いんだろうけど、一時ファイルを使うと
ストリーミングで処理できなくなるんだよ
つまり前のプログラムの出力が完了しないと次のプログラムが動かない
POSIX準拠はbusyboxで動かす必要があるからこれも必須
この二点は今回の質問には直接関係ないから理由じゃなくて制約として書いた そしてこっちの方で回答きたよ
くだらねえ質問はここに書き込め！Part 230
https://mao.5ch.net/test/read.cgi/linux/1515383155/315
同じ文章なのになんでこう反応が違うんだろうね
同じ文章なんだからレスする側の問題があるだろうね
質問する側と回答する側、立場は対等だって言ったら怒りそう >>551
あとmktemp使ったほうが良いよ。
なんでぜったいにかぶらない方法があるのに
自分でなるべくかぶらないように努力するんだろう
結構多いよね。mktemp使ったほうがコード短くなるのに 自分自身は何もしてないのになぜこうも態度をでかくできるのか 別にでかくないでしょｗ ほかの人と一緒。
質問したからといってへりくだる必要はないと思ってるだけ
無知でもないしね マルチカスか
教えたがりを徹底的にこき使っとけ
ここには二度とくるなよ 聞く側はこういう態度を取らないといけないって
体育会系とか年功序列とか年上は敬え的な考え方だよ
今時はやらない >>555 のそれ「解答」じゃないじゃん。
無理って言われてるんだぞ？ 理解できてる？ どういう態度取るべきとは思わないけど、
相手を不快にさせたら得られるはずの回答も得られなくなる可能性が上がるよ。
それでよければご自由に。 出力が色制御してきたら取り除いたりとか、マルチプロセスとかで変なところでブッタ斬り／ミックスされないように同期取ったりとか考えてたけど俺には無理だからもういいや >>563
やりたいこと
> 標準出力の内容を緑に、標準エラー出力の内容を
> 赤にしたいんだけどどうすればいい？
標準出力の内容を緑にする・・・簡単
標準エラー出力の内容を赤にする・・・？
>>555で明らかになったこと ・・・ 標準出力と標準エラー出力を入れ替える方法
ここから標準エラー出力の内容を赤にするには
標準出力と標準エラー出力を入れ替えれて
処理すればいいって気づくよね？ >>567
ん？
それだと今度は標準出力が (標準エラー出力に複製されたので) パイプを通らなくなるから、
標準出力の内容 (今は標準エラー出力に出力されている) を緑にできないんじゃ？
もしかして同時じゃなくていいってこと？ もうほっとけ
標準出力、標準エラー出力に関する便利な小ネタでも教えてやろうかと思ったけどやめとくわ >>568
片方ずつしか処理できないなら、
2回やれば両方できるだろ？
っていうかそれぐらいわかるだろｗ >>569
> 標準出力、標準エラー出力に関する便利な小ネタでも教えてやろうかと思ったけどやめとくわ
おせーておせーて |& ←このパイプは標準出力標準エラー出力ともに通すよ。
ただ質問者さんが望んでいるのは「標準出力か標準出力かが区別できる状態でのパイプ通過」だろうから、
それはちょっと無理なんじゃないかな。
あと態度がデカすぎる。一度死んだほうがいいと思う。 >>570 まさかコマンド二回回すの？ 標準出力と標準エラー出力分ける為だけに？
それ一時ファイル作るより余程冗長だぞw
もう一度シェルっていうかコンピュータの仕組みを勉強しなおしてきな だから一時ファイルを作るとストリーミングに
できなくなるからだめなんだって
さっきも書いたろ >>572
やっぱり>>555が今のところ一番シンプルな解みたいだね。
てか、標準出力と標準エラー出力を別々にファイルに吐き出せるんだから、
別々のプログラムにパイプでつなげられる機能があっても良いと思うんだけどね 君たぶんだけど意思疎通に係わる障害持ってるから病院で診てもらったほうがいいよ。
知り合いにそういう調子の会話する人がいて、ある日会社で大きな事件を起こして辞めさせられたあと
病院で検査したらそういう系統の精神病だったからさ。
煽りとかじゃなくて、君はどうも社会で孤立してそうだから、助けになりたい。 いや、おちょくってるだけだろ
まともに相手するだけ無駄やぞ ここに限らず、質問系のスレにたまに沸くアレでしょ
5chが過疎って最近あんま見てなかったから
なんか懐かしい感じするわw あっちで粘着してるみたいだな
久々にアレな奴を見たわ 入力リダイレクトで複数ファイルを一度で流し込むのはどうしたら良いのですか？ よろしくお願いします。
mac で bashです。 mdfindからパイプつないだ先でcpしたら
検索が間に合わなかったのかコピーし損ねがでてきます。
再度コピーしそこねたファイル名リストを同じようにこれに掛けると、
幾つか成功していくつかはコピーし損ねます。
function readMdfind() {
while read LINE;
do
mdfind "kMDItemFSName == "${LINE}" || kMDItemDisplayName == "${LINE%.*}"" | awk 'NR==1' | xargs -J % cp -p "%" "$1" 2>/dev/null
done <${2}
引数の1はファイル名のリストが入ったテキストで、2はコピー先のフォルダになります。
ファイル名は殆どが一意にしてあるので、とりあえずヒットしたら良い感じです。
一度で取りこぼしのない良い方法はありませんでしょうか。 引数の件1と2逆でした 惑わせてしまい申し訳ありません。
正しくは1がコピー先フォルダで2がファイル名のリストです。 >>582
回答ありがとうございます。
ということはそのまま
cat hoge huga | command
で、いいってことですか。なるほど。
レスつくまで色々ググって調べてみたのですが
command <( cat hoge huga )
でも全く同じ動作ですか？ >>585
二番目の方法，たぶんコマンドラインで試して成功したから書き込んでるんだろうけど，
それはプロセス置換と言って Bash筆頭に幾つかのシェルの独自拡張だからシェルスクリプトにするときは
シェバンを #! /usr/bin/env bash か #! /bin/bash とかにする必要がある。
cat hoge huga | somecommand で代替できることに可搬性を犠牲にするのは避けたいだろうから
(つまり #! /bin/sh というシェバンを捨てるのは勿体無いということ)
<(cat hoge huga) は避けれる時は (特にシェルスクリプトで使う時) 避けといたほうがいいんじゃないかな。 5行目あたりの日本語がおかしい。けど国語力ないので自然に直すの無理。
察してくれ。 >>586
なるほど！
#!/bin/sh が必ずbashにリンクされてるとは限らないから、
拡張表現で書かなくて済む場合は確かに可搬性を優先した方がいいですね。
ありがとうございました。 >>583
mdfindを知らんので問題解決に直接ならないけれど`done < ${2}`ではなく`done < "$2"`のほうがいいよ〜
もっと言うなら`cat "$2" | while read LINE;`のほうがいいかもね〜
* POSIX sh互換シェルは変数名に数字が来たらそこで読み取りを中断するので波括弧で変数名の範囲を明示しなくていい
* 変数$LINEに^Dとかが渡された時catコマンドと<リダイレクトで違いがある
短いんだけど参考: http://pubs.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#tag_18_07_01 あー！
さらに調べたら、よくわかりました。
#!/bin/sh でbashを起動したらbashの拡張とか使えなくなっちゃうんですね。
だからシェバンを書き換える必要があると…
そういう意味だったんですね。
（ちゃんとmanにかいてありました）
ためになりました。 >>589
ん？どゆこと？
$ cat file | cmd
$ cmd < file
で違いがあるってこと？そうは思えないんだけど… >>583
まずはエラーをnullに落とさずに表示させろ >>589さん
ありがとうございます。ちょっと英語で読解が難しいので時間を作って該当の箇所を読ませていただこうかと思います。
｛2｝の箇所を"2"に変更しました。
<の箇所をcatに変更しました。
非常に目に優しいくなりました。
読み込む箇所なので、怪しいと感じます。結果としては変わりませんでしたが、参照の箇所は興味がありますので読ませていただこうと思っています。英語で弱気になりますが＾＾；
ありがとうございます。 >>593さん
すみません。確かにそうですよね。
初心者過ぎで逃げを当然にしてたバチがあたったようです。
吐き出したエラーは、
cp: /Volumes/Macintosh: No such file or directory
cp: HD: No such file or directory
などのファイルパスが、スペース区切りになってcp出来ませんでしたよというエラーでした。
ただ、検索に漏れた該当のファイルは何度めかにはヒットしますので上記のエラーとはならなかったということに。
spotlight特有のものだからと諦めるしかないのか・・・
これがひょっとしたら手がかりになるかもしれませんが、わたしの力では全く・・・ すみません、mdfindの検索結果のファイルパスが
スペースで割れてしまってcpに渡されたということでした。たぶん＾＾； 解けました！ありがとうございます！
ダブルコーテーションを％の箇所で囲うのではなく、
1行取り出した先でパイプして囲えば良いと思い以下を試したところ出来ました。
mdfind "kMDItemFSName == "${LINE}" || kMDItemDisplayName == "${LINE%.*}"" | awk 'NR==1' | sed -e 's/^\(.*\)$/\"\1\"/' | xargs -J % cp -p % "$1" 2>/Users/mac10/Desktop/out
エラー出力素晴らしいです！
ありがとうございました！ mdfindとxargsに-0つけるのが定石だと思うけど、もう見てないかな。 >>575
今更だけど、あるんだよね。誰も教えたくなかったんだね。 ヒントくらい出すか……。でもあいつに教えたくないんだよなぁ。
卑屈だけど、気持は分かるだろ？
パイプに名前(ry それ使うと出力側はこんな感じかな
while :;do sed -e 's/\(.*\)/^[[32m\1^[[m/' np1 & sed -e 's/\(.*\)/^[[33m\1^[[m/' np2 >&2; done >>604
野暮な指摘だが、sedを使わない
printf '\e[32m%s\[0m' "$(cat)"
の方が分かりやすくね？ つーか printf ってそういう「整形した出力」の為のコマンドだろうし。 >>695
ミスった… printf '\e[32m%s\e[0m' "$(cat)" だ。
こうすると "$(cat)" の部分で np1 を受けt[以下略] >>603
名前付きパイプ（mkfifo）はプロセスが2個あって
片方が出力側プロセス、片方側が入力側プロセスに
別れない限りストリーミングにすることができない
（同一プロセスでは出力しながら入力ができないため）
今回の場合、標準出力と標準エラー出力の２つがあるから
出力側プロセス1個と入力側プロセス2個の合計3プロセスが必要になる
つまり別プロセスとして起動しなければいけない
もちろん出力の完了待ちのwaitも必要だし、作成したパイプの削除も必要。
特にCTRL+Cで中断された場合とか
また万全を期してパイプ名が被ることも考慮してランダムな名前にしたい
ここまで言えば名前付きパイプを使った方法は実装するのに行数がかかり
面倒な方法だと言うことがわかるだろう？
また>>554で書いたとおりbusyboxで動かす必要があるのだが、
そもそもbusyboxでmkfifoが存在しない場合もある
↑俺にとってはこっちのほうが重要 うわ。まだ居たのかこのキチガイ…
まあ放置が一番いいな。俺のこのレスも彼を発狂させる原因になるやもしれんし。 まあ反論なく放置される（＝俺の勝ち逃げ）という状況ってのが
俺にとっては一番であることには間違いないが
で俺がレスしたのは、放置してないからだよ？ｗ >>606
あ、しまった printf '\e' は GNU/Linux じゃないと動かないみたい。
Debian使ってんのがバレてしまったw
FreeBSDとかでも動作させる為には printf '\033' とやる必要がある。 >>606
出力 A 正常 出力 B 異常 出力 C 正常 の時
それだとACBまたはBACと表示されないか?
まぁそれで良ければ良いんだけど ガチでアレな奴が粘着してるな
ここまで気持ち悪い奴は滅多に見ない >>553
exec > >(sed -e 's/\(.*\)/^[[32m\1^[[m/')
exec 2> >(sed -e 's/\(.*\)/^[[33m\1^[[m/')
後は普通に処理を書けばおｋ どんだけ答え知りたいんだ
あっちのスレいけよこっちはこっちで楽しんでんだから おいおい勘違いするな
>>553はbashやzshでのやり方を聞いてる。
POSIXの範囲でやりたいと言ってる俺ではない そういや>>616で思い出したけど、
busyboxのsedってなんか動きがおかしいんだよね。
(echo 1; sleep 5; echo 2; sleep 5) | sed 's/a/a/'
例えばこれを実行すると、1が表示されるのは5秒後になる
debianだとすぐに表示されるのに。一行遅れて表示される
だからsedは今回の俺の用途には使えなくてreadを使ってる >>619
Ubuntu ではおかしいみたいですね。
Debian と openSUSE の busybox では記述通りの動きでした。 >>620
WSL上のUbuntuは問題なかった。
busyboxはビルドによって色々変わるだろうけど
よく分からんね > openSUSE の busybox では記述通りの動きでした。
もしかして、sedはbusyboxじゃない方のsedになってない？
WSL上のUbuntuに入れたbusyboxのsed
↓つまりこれを実行するとやっぱり5秒後に1と表示される
(echo 1; sleep 5; echo 2; sleep 5) | busybox sed 's/a/a/'
やっぱりbusyboxが実装してる簡易版sedの問題な気がする まあもともとbusyboxってそういうものだし
とりわけ騒いだりはしないけどさ >>622
>>620 は busybox ash でシェルを起動して確認しています。
busybox sed 's/a/a/' にすると Debian も openSUSE も Ubuntu と同じ動作になりました。 おーほんとだ。Busybox v1.22.1 on Debianでも同じような動きになる。
ここまでハッキリしたバグに遭遇したの久し振りだわ
単に離れてただけかもしれんが なにやら興味がある人がいるようでｗ
なんで俺の用途で使えないかというと、例えばこんな感じに
ユーザーのインタラクティブな入力を変換して出力したいから
↓ >（実際には画面に表示されない） の行がユーザーの入力
$ sh | sed 's/a/a/'
> echo 1
> echo 2
1
> echo 3
2
見ての通りユーザーが入力したコマンドの結果が一つ遅れて表示される
sedのよくあるユースケースでは問題ないんだろうけどね >>626
挙動が変わるツールは珍しいなと思いました。
busybox ash の中で sh | sed 's/a/a/' とすると、
Debian (v1.22.1) まとも
Ubuntu (v1.22.1) 遅れる
openSUSE (v1.21.1) まとも（sh プロンプトが表示される）
CentOS (v1.15.1) まとも（sh プロンプトが表示される）
Windows (v1.29.0) 遅れる
でした。
ビルド時に引いているライブラリの差異なのでしょうか... バッファリングが影響してそうなのかもしれないけど
正規表現の実装の都合な気もする。
はたまたカーネルが関係してるのかシェルの設定でなんかあるのか
正直、そういう違いが有るんだね。気をつけておくよと
事実を受け止めるぐらいでで深追いする気力はないｗ
話変わるけど、何もしない関数の定義、
foo() :
もしくは、echoするだけの関数の定義
foo(): echo foo
この書き方ってPOSIX準拠だよね？
bashやzshではエラーになった >>628
foo() echo foo ならzshは理解するぞ
Bourne shell系はfoo() any-compound-commandだけ理解して
foo() any-commandは理解しない >>628
POSIX準拠なのかはよくわかりませんが、sh ならば
foo()
foo1() echo "$1"
で、sh でも bash でも動かすなら
foo() { :; }
foo1() { echo "$1"; }
でいけると思います。 訂正
× foo(): echo foo
○ foo() echo foo
>>629
ごめん、zshでは試していなかった。
今zsh入れてたマシン壊れてるんだったｗ
別の環境にzsh入れたらたしかに動いたね
dash、ash、zsh では動いた
bashだけ動かなかった func() :
↑これ確かにシェバンを #! /bin/sh にすると通るけど
#! /usr/bin/env bash にすると撥ねられるな。
http://pubs.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#tag_18_09_05
一応現行POSIXのシェル関数の定義はここに書いてあるけど、func() : は恐らく適合してるな。
多分bashの文法チェックが少しばかりおせっかいすぎるんだろう。
でもPOSIXに準拠した記法なのにエラーになるって嫌だなぁ あれ。yashでも「syntax error: a function body must be a compound command」って撥ねられるわ。
yashはかなり厳密にPOSIXに従ってる筈なんだけど… またちょうどよくシバンの話がｗ
シェルスクリプトのファイルを直接実行するのではなく
ライブラリとして他のスクリプトから読み込むだけの場合
シバンいらないよね？ またその場合の拡張子ってどうしてる？
シンタックスハイライトとか自動で適用させたいんだけど
余計なものはできるだけ排除したい >>632
そうなんだよね。あと
> fname ( ) compound-command [io-redirect ...]
ここにio-redirectが書けたのがびっくり
どういう時に使えば良いんだろうか？ >>635
俺は未インストールコマンドの処理に使ってる
check_command()
{
type "$1" > /dev/null 2>&1 || {
printf '%s%s\n' \
"$1" 'をインストールして下さい。'
exit 1
} >&2
return $?
}
check_command "curl"
こうするとエラーメッセージが標準出力に出ないからパイプ繋いでてもおかしなことになりにくい。
もっとも |& ←みたいなパイプなら無理だけど、そもそも標準エラー出力ごとパイプに使うなんて稀だろうという推測。 >>636
いや、そうではなくて関数定義の最後に書けるんだなーって話
その例で言えば、こういう書き方ってこと
（関数全体を別の所に出力したいときには便利か、うーん使うかな？）
check_command()
{
type "$1" > /dev/null 2>&1 || {
printf '%sをインストールして下さい。\n' "$1"
exit 1
}
} >&2
# ついでにどうでもいい所を俺の趣味で変更したｗ
# exitもreturnに変えたい。もしくはexit_if_command_not_foundみたいな関数名にしたい
> もっとも |& ←みたいなパイプなら無理だけど、そもそも標準エラー出力ごとパイプに使うなんて稀だろうという推測。
/dev/ttyに出力するって手もあるよ
$ (echo stdout-a; echo stderr-a >&2; echo tty-a >/dev/tty) |& sed 's/a/b/'
tty-a
stdout-b
stderr-b >>633
yash覚えた
最低限機能しかももってないと思われるashで動けば
Bourne Shell 系全部でうごくだろうと思っていたから
そういうこともあるんだなーって思った ■ このスレッドは過去ログ倉庫に格納されています
