シェルスクリプト総合 その26 [無断転載禁止]©2ch.net

■ このスレッドは過去ログ倉庫に格納されています
2017/03/20(月) 12:07:26.41
シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
 bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
 Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
 FreeBSDユーザは/bin/shの正体がashなので注意。
 v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
  http://src.illumos.org/source/xref/illumos-gate/usr/src/cmd/sh/
  http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
 (理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
 manや参考リンクを見ましょう。
 aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
 正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆーな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
 awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
 「そういうのはperl使いましょう」と回答するのはやめましょう。
 安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
前スレ
シェルスクリプト総合 その25
http://echo.2ch.net/test/read.cgi/unix/1439563321/
2018/03/26(月) 11:04:26.16
再確認してきました
実際にはリンク先の48,49行目のログ整形のための処理で問題が起こっているようです
timeout自体の問題ではないので一旦取り下げます、ご協力ありがとうございました

https://pastebin.com/F5QC2Yu5
2018/03/26(月) 11:13:47.05
ワロタw

fail() {
case "$1" in
0)
echo "Info :$2"
;;
1)
echo "Warn :$2"
;;
2)
echo "Error:$2"
;;
3)
echo "Success :$2"
exit 0
;;
4)
echo "Fatal:$2"
exit 1
;;

esac
}
2018/03/26(月) 11:16:57.86
failwww ひどいなw

fail 0 " **** test start ****"

WAIT_SEC=5
time timeout -sKILL ${WAIT_SEC} unzip -t /home/xxxx/crypto.zip
if [ $? -ne 0 ]; then
fail 2 "hage"
else
fail 0 "hoge"
fi

fail 3 "**** test end ****"
2018/03/26(月) 11:20:23.93
おお、是非原因と対処法も書いてってください
2018/03/26(月) 11:22:56.42
failなのにsuccessなのか…
2018/03/26(月) 11:47:56.48
>>744
原因・・・他人のコードを理解せずにパクって、行き当たりばったりにコード書き加えて、終わらすこと
対処法・・・ちゃんとコード読んで理解して無駄なものをなくせ
2018/03/26(月) 12:55:45.54
>>746
全く耳が痛い、実際そういうレベルだけど頑張るよ(´・ω・`)
> >は実際わけわからずに使ってるし
2018/03/27(火) 02:35:57.99
あー、ちくしょ、
ローカルでもリモートでも使うスクリプトを
置くディレクトリ名が決まらない

ローカルだけで使うスクリプト
リモートだけで使うスクリプト
両方で使うスクリプト

どういうディレクトリ構成にしよう
Windowsも考慮したいから
シンボリックリンクは使いたくない
2018/03/27(火) 02:56:48.81
またお前か
2018/03/27(火) 19:30:16.58
>>748
~/share/public/
に置いてる。
2018/03/27(火) 20:19:33.81
なんか冗長な感じ
2018/03/27(火) 21:50:15.67
うちは~/share/public/sbin/
2018/03/27(火) 22:20:21.84
あんまり良くないのかもしれんが……
/srvを特定の一般ユーザに対して書込可にして、
/srv/git/github.com/<account name>/dotfiles (GitHubで管理するなら)
にしてる。
754名無しさん@お腹いっぱい。
垢版 |
2018/03/27(火) 23:56:34.98
>>753そんなことしてまで/srvに置く意味あんの
2018/03/28(水) 14:37:11.36
>>748
なぜ/usr/remote/binじゃダメなのか 理由を知りたい
2018/03/29(木) 01:01:26.37
>>755
逆になぜ/usr/remote/binなのかの理由が知りたい。
なにかのアプリケーションが使うの?
2018/03/29(木) 02:51:11.17
findのprint0やった、NULL文字区切りのファイル名一覧って
POSIXのreadじゃ読み取れないんだな-dオプションがないから

つーことはファイル名に改行、そのた制御文字が入るかもしれないことを
考慮するとPOSIXの範囲じゃ対応不可能ってことなのか
2018/03/29(木) 03:44:39.70
>>757
なんで対応不可能だと思うんだよw
じゃあどうして「POSIXが」ファイル名に改行含め制御文字を許可してるんだよって話。
C99どころかシェルコマンド(awk)レベルで余裕で扱えますが
2018/03/29(木) 09:47:58.90
>>758
ひねくれた回答はいらないよ
ここはシェルスクリプト
POSIX shが対応してないって言ってんの
2018/03/29(木) 09:57:03.22
\0区切りもshそのものの機能じゃなくね?
2018/03/29(木) 10:03:19.16
空白制御文字入りファイル名は
for i in *
で扱えるので、工夫次第だな。
findと組み合わせるには-print0は役に立たんから-execで頑張るしかないけど。
2018/03/29(木) 10:30:24.37
\0区切りがなんのコマンドによる出力かどうかは
今は関係ないんだよ。
いろんなコマンドでよく使われる\0区切りのデータに
shが対応していないって話をしているんだから

で調べてみたらawkもポータブルな方法では
\0区切りには対応してないようだな
2018/03/29(木) 11:35:38.17
>>762
> いろんなコマンドでよく使われる\0区切りのデータ
って何がある?
2018/03/29(木) 11:37:07.53
>>762
shはポータブルな方法で対応してるぞ。
xargsは確かに対応してないが。
findについては>>761が書いてるように、遅くはなるもののポータブルな解はある。

xargs と sh の区別はつけようぜ。
2018/03/29(木) 11:39:23.23
MacOSのsed (bsd)も\0扱えないっぽい
まあもともと\0はC言語の終端文字だしな
そんなのが扱えるほうがおかしいか
2018/03/29(木) 11:44:03.16
>>764
xargsの話は誰もしてない
shは\0を変数に入れられない
shがポータブルな方法で\0文字に対応してるってのは嘘
(forは\0を使わない)
2018/03/29(木) 11:51:22.35
>>766
改行じゃなくて \0 の話をしてるのか。
POSIXではシステムコールの仕様上、 \0 をファイル名に入れることは決してできない。
だから、ファイル名に \0 を使う話をすること自体が、POSIX的にナンセンス。
2018/03/29(木) 11:55:53.07
>>767
> ファイル名に \0 を使う話
はお前しかしていないよ。
2018/03/29(木) 11:59:26.26
>>768
発端の>>758はファイル名に改行を入れる話だろう。
ファイル名中の改行をポータブルに扱う方法はshにある。
みんなちゃんとそう指摘してるのに君だけ勘違いしてる。
2018/03/29(木) 12:20:16.06
は?バカなのかこいつ?
2018/03/29(木) 12:38:36.81
なんで改行の入ったファイル名を扱うために、シェルが \0 を文字列の一部として
扱う必要があるなんていうアサッテの発想にいたるのか…
(まあプログラミングができないせいで分かってないんだろうけど)

もうちょっと態度がまともなら、ポータブルなやり方を具体的に教えてやっても
いいが、 >>770 みたいな煽りは嫌いなので教えてやらないw
2018/03/29(木) 12:40:47.01
findのprint0で出てくる/0区切りのファイル名一覧がreadで読み取れないンゴ…
2018/03/29(木) 12:50:37.16
そもそも -print0 の出力をそのままの形でポータブルに
read で読めるんじゃないかと考えること自体が間違い。
POSIXで規定されている read のオプションは -r だけで
-d はないので、改行を含む文字列をそのままで read だけを
使って単一の文字列変数に取り込むことは、ポータブルには
できない。

もちろん、だからといって sh で改行を含む文字列を扱えない
なんてことにはならないのは言うまでもない。
2018/03/29(木) 12:54:44.85
>>771
無知ごくろうさんw
2018/03/29(木) 12:56:17.18
やっと>>757が言ったことに追いついたのか?
2018/03/29(木) 13:05:43.31
773って757が言ったことを冗長に言い換えただけだなw
2018/03/29(木) 13:11:26.76
>>771
>なんで改行の入ったファイル名を扱うために、シェルが \0 を文字列の一部として
>扱う必要があるなんていうアサッテの発想にいたるのか…
find作ったやつに言えw
2018/03/29(木) 13:21:49.15
> findのprint0やった、NULL文字区切りのファイル名一覧って
> POSIXのreadじゃ読み取れないんだな-dオプションがないから

ここまでは正しい。しかし、

> つーことはファイル名に改行、そのた制御文字が入るかもしれないことを
> 考慮するとPOSIXの範囲じゃ対応不可能ってことなのか

これが xargs の文章であれば、その通り。
しかしこれが sh についての文章であれば、完璧に間違い。

これだけ繰り返し指摘されてもいまだに理解できないような奴でも
Bourne shell でスクリプトを書くようになったんだなという変な感慨があるな。
2018/03/29(木) 13:24:21.25
>>778
>これが xargs の文章であれば、その通り。
だれもxargsの話なんかしてない。(2回目)
2018/03/29(木) 13:26:26.64
>>778はxargsが\0扱えることも知らなそうw
2018/03/29(木) 13:30:47.80
これだけヒント書いてるのに、いまだに
「そのままの形だと read で扱えない」

「sh だとできない」
が等価だと主張しているのは、アホの子なのか、
煽れば答を教えてもらえると期待しているのか、
どっちなんだろうね。
2018/03/29(木) 13:36:00.29
>>780

POSIX の xargs に -0 オプションは規定されてないので、
「ポータブル」という条件下ではできない。

まあ POSIX の find に -print0 オプションが入ったのもわりと最近なので、
そのうち xargs でも待ってればそのうち -0 が追加されるとは思うが。
2018/03/29(木) 13:39:13.18
答えはfor in * を使うこと
俺が代わりに答えておいてやるよ
なおshで\0を使うと言う答えではない
2018/03/29(木) 13:41:04.45
POSIXはprint0に対応する前に
ファイル名に制御文字を使用できないようにしろ
2018/03/29(木) 13:53:52.47
賛成
2018/03/29(木) 14:01:21.67
for使ってfindっぽいものを自作したとして
それをパイプで別コマンドに流そうとした時に
またファイル名に改行が含まれていた時問題が発生するんだよな
2018/03/29(木) 15:15:24.81
for で書くのなら、その結果のファイル名をわざわざ
他のプロセスにパイプで渡すなんてことはせずに、
そのシェル自身で処理するか、
あるいは他のプロセスに渡すなら引数を使え
ってだけの話だな。

>>761 が既に書いてる話なのに、なんでそこから
35コメも無駄に費やされてるんだか。
2018/03/29(木) 15:18:45.25
ちなみに for で書く以外のやりかたもあるけど、
これも >>761 が既に最後の文で書いてる。
2018/03/29(木) 15:30:33.97
posixの範囲じゃ改行が含まれたファイル名を
パイプでつなげられないってことかな
2018/03/29(木) 15:56:18.36
>>789
「POSIXの範囲内じゃ」は誤解を招く表現で、正確には
「POSIX Shell & Utilities の範囲内じゃ」だな。
「POSIX System Interfaces」を使えば問題なくできるからな。
まあシェルのスレなわけで「POSIXの範囲内じゃ」でも間違いとまでは言えないが。

あと、find -print0 が POSIX で規定されたってのは間違いだった。
そういう拡張もあることも言及はされてるが、規定には追加されていない。
でもって POSIX 的には「find -print0 | xargs -0」じゃなくて、
「find -exec コマンド {} +」を使えってことになってる。
2018/03/29(木) 16:20:44.05
でも、find -exec じゃシェル関数に渡せないからなぁ
findは諦めろってことかな
2018/03/29(木) 16:44:16.87
find を諦めるんじゃくて、シェル関数の方をあきらめて、独立したシェルスクリプトにしろってことだよ。
find -exec コマンド {} \;
だとコマンドの起動回数が多いからシェルスクリプトにすると遅いのが問題になるけど、
find -exec コマンド {} +
ならコマンド起動回数は相当に減るから、独立したシェルスクリプトにしても特に問題はない。
793名無しさん@お腹いっぱい。
垢版 |
2018/03/29(木) 21:07:16.05
AWKの区切り記号をヌル文字にすればいいんでは。
2018/03/29(木) 23:50:16.88
ぬるぽ?
2018/03/30(金) 00:19:50.52
>>793
試してみたけどね。RSに\0入れられなくてね
もう全滅w
2018/03/30(金) 02:47:00.90
>>795
俺の所では通ったけど、もしかしてOS依存なのかな。
@Debian GNU/Linux
2018/03/30(金) 03:18:23.09
OSっていうかGNU系かどうかだね
GNU系はだいたい\0に対応している
BSD系とかは対応してない。だからMacとかつらい

私的なスクリプトならMacのコマンドをGNU化するやつ
入れて済ませても良いんだが
2018/03/30(金) 12:29:37.47
>>792
バカwww
2018/03/30(金) 12:30:43.62
このスレでこんなに草を見るとは思わなかった
2018/03/30(金) 13:42:54.12
シェル関数にこだわる理由が思いつかん。
2018/03/30(金) 15:22:07.88
そこにシェルスクリプトがあるから、的な何かかな?
2018/03/30(金) 15:47:33.25
コンパイルせずに実行できる(実質)唯一の共通規格言語だからじゃないの?
PythonとかはPOSIXの範囲外だからどこでも動くとは限らないし。
え? UNIX™なのにPOSIXと齟齬ありまくりの実装のAIXちゃん? 知らない子ですねぇ……。
2018/03/30(金) 16:25:04.06
localみたいにPOSIXじゃないけどだいたい
使えるってもの他にあったら教えて&#128225;
2018/03/30(金) 16:38:24.19
AIXはマジでどうにかして欲しい
seqすらないの本当に面倒臭い
2018/03/30(金) 17:03:19.85
AIX案件なんてあるの?
2018/03/30(金) 17:23:17.72
俺が行ってる現場だと1年くらい前までは現役でPowerでAIXを使ってたよ。
今はRedHatにリプレースされちゃったけど……そんなに嫌いではなかった。

>>804
jotも無かったっけ?
2018/03/30(金) 17:29:23.50
うちは親会社モニョモニョだから結構AIXが多くて嫌になる

>>806
手元のやつだとないな。AIX7.1だけど
2018/03/30(金) 20:26:28.33
>>801 >>802
それならシェル関数ではなく普通のシェルスクリプトでもいいだろう。
>>791 は単なるシェルスクリプトではなくシェル関数の利用にこだわってて謎。
2018/03/30(金) 20:31:30.33
シェル函数って
somefunc() {
echo "This is somefunc."
}
っていうやつでしょ?
>>791はそういう意味で使ったんじゃない可能性が出てきたな。
単に「パイプに渡せない」というような趣旨の要望を言いたかったのかもしれん。
2018/03/30(金) 20:47:44.46
>>809
たぶん find の -exec のとこに書けないって意味で書いてるだろうから、
シェルスクリプトじゃなくてシェル関数だと思う。
2018/03/30(金) 20:54:31.32
たとえパイプ経由でファイル名を渡せないって意味だったとしても、
find -exec でそれと同一機能が実現できるならそ別にいいじゃん。
>>791が find -exec の何を気に入らないのかやっぱり分からんな。
2018/03/30(金) 21:02:32.72
まぁでも「気に入らない」ってのは十分不採用の理由にはなるよな
2018/03/30(金) 21:09:13.58
趣味なら理由になるかもなあ。

でも仕事じゃ理由にならん。
要件を満たしてるってのは仕事じゃ最低限度の基準だからな。

POSIXに適合するシェルスクリプトにしたいっていう要件が最初に出てるのに、
趣味に合わないから採用しない、仕方ないから実装を諦めるなんて奴がいたら、
仕事なら無能扱いだよ。
2018/03/30(金) 21:13:23.18
そりゃ仕事と趣味は別だろ
何を当たり前の話をしてるんだ
2018/03/30(金) 21:31:21.92
いや、あの謎のこだわりに合理的な理由があるのか、
それともホントに完全に趣味だけの話なのかが気になってたんだよ。
合理的理由ナシ、完全に個人の趣味ってことでFAなら、それでいいんだスマン。
2018/03/31(土) 00:46:42.95
合理的じゃないけど合理主義だよね
2018/03/31(土) 01:12:03.45
aliasって面白いなー。これでなんか面白いことできそう

#!/bin/sh

alias foo="foo() { echo before; foo_; echo after; }; foo_"
foo() {
echo foo
}
unalias foo

foo
# ↓
# before
# foo
# after
818817
垢版 |
2018/03/31(土) 01:41:51.42
やべぇ、このaliasの使い方、
めちゃくちゃ強力じゃないか?
文法の拡張が可能かもしれない
こんな所でネタにするレベルじゃないわ
819817
垢版 |
2018/03/31(土) 02:06:02.61
黒魔術置いときますね

#!/bin/sh

def() {
alias begin="$1() { echo before; $1_ "\$@"; echo after; }; $1_() { $3=\$1"
alias end="}; unalias begin end"
}

def foo [ i ]
begin
echo foo $i
end

def bar [ j ]
begin
echo bar $j
end

foo 123
bar 456
2018/03/31(土) 02:30:40.57
そもそもaliasってシェルスクリプトの中で使えたっけ。
俺の環境では使えたけども
2018/03/31(土) 02:48:01.26
>>820
bashとかだとデフォルトでは無効
expand_aliasesを使えば有効にできる

ただ>>817の挙動が全てのシェルで同じなのかは調べてない
aliasの挙動をちゃんと把握してはないけど
どうやら行単位で実行前に、単純な文字列置換が行われてる感じだね

だからevalでもできないスクリプトの自己書き換えみたいなことができちゃう

参考(ちゃんと読んではいないw)
http://magicant.txt-nifty.com/main/2017/10/yash-2-285-b4d8.html
2018/03/31(土) 02:57:08.73
AIXの人はseqってどうやって代用してる?
2018/03/31(土) 09:20:43.88
awkでチョチョイでは?
2018/03/31(土) 22:32:30.06
みんな、変わった(?)の使ってるな。
Linux、BSD、Solarisなどのメジャーなもの以外で何がよく使われてるの?
2018/03/31(土) 22:52:09.24
Mac
2018/04/01(日) 01:13:29.58
MacはBSD系ってことでまとめましょうw
2018/04/02(月) 07:41:52.65
$ man basename > man_basenam
でできるファイルを
emacsとテキストエディットで開いたものが次のものです。
https://imgur.com/a/8ggUs?
これはそういう仕様なのでしょうか?文字化けというか不思議な
コードになっています。できれば教えていただけないでしょうか
2018/04/02(月) 08:19:02.96
http://surf.ml.seikei.ac.jp/~nakano/JMwww/html/man/man1/man.1.html

バックスペースとアンダースコアがない プレーンテキスト版の man ページを得るには、コマンド


# man foo | col -b > foo.mantxt

を実行すること。
2018/04/02(月) 08:25:59.92
>>827
man エスケープシークエンス
で検索。
2018/04/02(月) 10:28:43.52
man manすればいい
TIPSに載ってる
2018/04/02(月) 14:17:49.92
あと、emacs に限って言うと
M-x man
(ESC x man リターン)
と叩いて、man のエントリー名を入れれば、
きっちり整形した結果を表示してくれるから、
col -b を使う必要はあまりない。
2018/04/02(月) 18:03:58.27
>>822
ググってみたらこんな方法があったよ。

yes '' | cat -n | head -100 | sed 's/ //g'
2018/04/02(月) 18:24:12.37
yesはなんか処理間違えると止まらなくなりそうで怖いんだよな
2018/04/02(月) 21:00:30.14
>>832
POSIX catには-nオプションがない[*1]のでnlコマンドを使う方法を提案する。
 $ yes '' | nl -b a -n ln | head -n 10 | sed -e 's/[ \t]*//g' | tr '\n' ' '

*1: http://pubs.opengroup.org/onlinepubs/9699919799/utilities/cat.html
2018/04/02(月) 21:07:04.97
 $ yes '' | nl -b a | head -n 10 | tr -d ' \t' | tr '\n' ' '
修正。もっと簡単にできるわww
836834
垢版 |
2018/04/02(月) 21:28:17.87
これもしかしたらheadコマンドとnlコマンドの順番入れ替えると速度違う?
んなことないと思ってたけどビミョーに差があるかもしれん。
詳しい人検証してくれ……。
$ time for a in $(seq 10000); do seq 10000 > /dev/null; done
real 0m14.601s
user 0m0.452s
sys 0m3.736s
$ time for a in $(seq 10000); do yes '' | nl -b a | head -n 10000 | tr -d ' \t' | tr '\n' ' ' > /dev/null; done
real 1m2.693s
user 0m5.672s
sys 0m21.032s
$ time for a in $(seq 10000); do yes '' | head -n 10000 | nl -b a | tr -d ' \t' | tr '\n' ' ' > /dev/null; done
real 0m47.944s
user 0m1.472s
sys 0m17.820s
2018/04/02(月) 21:41:13.89
並行して動くか、出力の完了を待ってから動くかの違いだろ
2018/04/02(月) 23:47:22.15
パイプで繋いでプロセス4つも5つも上げるくらいなら、
素直にawk 1プロセスですませた方が軽くないか?
839836
垢版 |
2018/04/02(月) 23:56:24.81
>>838
俺awkできないんだわ。恥かしいことにw
そのうち勉強しようしようと思っていて今にいたる。

awkでやるとどんな感じになる?
840836
垢版 |
2018/04/03(火) 00:14:31.67
ていうかseqの既定の出力を勘違いしてた
 $ yes '' | head -n 10 | nl -b a | tr -c -d '\n[:digit:]'
こんなもんかな?
$ time for a in $(seq 10000); do yes '' | head -n 10000 | nl -b a | tr -c -d '\n[:digit:]' > /dev/null ; done

real 0m42.358s
user 0m0.544s
sys 0m14.452s
2018/04/03(火) 00:40:30.08
awk 'BEGIN {for(i=10;i<=20;i++) printf "%d\n",i}'
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。

ニューススポーツなんでも実況