シェルスクリプト総合 その26 [無断転載禁止]©2ch.net
レス数が950を超えています。1000を超えると書き込みができなくなります。
シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
FreeBSDユーザは/bin/shの正体がashなので注意。
v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
http://src.illumos.org/source/xref/illumos-gate/usr/src/cmd/sh/
http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
manや参考リンクを見ましょう。
aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆーな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
「そういうのはperl使いましょう」と回答するのはやめましょう。
安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
前スレ
シェルスクリプト総合 その25
http://echo.2ch.net/test/read.cgi/unix/1439563321/ デバッグログ以外になにかあんの?
だからこそデバッグログとして使えない
$LINENOを何のために作ったのか理解できない $ ${(%):-%I}
-bash: ${(%):-%I}: 誤った代入です 自己解凍するファイルって便利だな
シェルスクリプトで解凍とインストール手順を記述して
それをバイナリと結合するだけでmsiみたいなことができる >>872
それはちなみに sh アーカイブ形式って呼び名がついてる。
sharっていう自己解凍シェルスクリプト作成専用コマンドも昔はあった。
なお、ウイルスやマルウェアの温床だということで廃れた模様。 sharはそれでインストールまでするというより、tar.gz などのバイナリファイルを
テキストにしてメールやニュースで送るために使うことが多かった >>874
へー、uuencodeしか知らんかった あーわりと昔からある手法なのね……
VMware Horizon Clientのインストールイメージがその形で,俺は正直そういうシェルスクリプトとバイナリが結合されてるファイルを始めて触ったんで
画期的なアイデアに思えたんだわ…… echo "1 + 2" | bc > /tmp/a
とすると/tmp/aには2バイト、16進数で
33 0a のデータが入っています。
a=$(echo "1 + 2" | bc)
printf "$a" > /tmp/a
しかしこうすると$aには1バイトしか入ってないようです。
また [ "$(printf '1')" = "$(printf "1\n\n\n\n\n")" ]
これは一致した文字とみなされるようです
こういった挙動はどこを見れば理解できるでしょうか? a="$(printf '1\n\n\n')"
とやってもaには1しか入っていない
a="$(printf '1\n\n\n2')"
しかしこうすると5バイト入ってる
その状態から a=${a%?} を末尾の2を削除すると
a には4バイト、1\n\n\n が入っている
うーん? >>877
コマンド置換 $(...) の仕様
http://pubs.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#tag_18_06_03
> removing sequences of one or more <newline> characters at the end of
> the substitution. Embedded <newline> characters before the end of
> the output shall not be removed; however, they may be treated as
> field delimiters and eliminated during field splitting, depending on
> the value of IFS and quoting that is in effect. If the output
> contains any null bytes, the behavior is unspecified.
bashのマニュアルにも同様の記述がある
http://linuxjm.osdn.jp/html/GNU_bash/man1/bash.1.html#lbBC
> bash は command を実行し、 command の標準出力でコマンド置換の部分を
> 置き換えます。この際、末尾の改行文字は削除されます。 文字列の途中に
> ある改行文字は削除されませんが、 単語分割の際に削除されることがあり
> ます。 かといってこうやると4バイトでてるんだよなー
printf '1\n\n\n' | hexdump.exe -C コマンド置換の仕様かぁ
普通のやり方ではコマンドの出力結果を変数に入れるときは
末尾の改行は絶対消えるってことかなー
read使えばって思ったけど、あっちは改行区切りだしなー
ちなみに $aに1\n\n\nを無理やり入れて、
$bに1を入れて [ "$a" = "$b" ] で比較したら不一致になったよ よくこんな単純なルールで辻褄取れてるよなー
思いつきで考えたとしか思えないルールなのにw 単純なルールのほうが整合性は取りやすいんでは? 寧ろ複雑な規則だと実装に矛盾が生じたりしそう。 ちょっと質問
偶数日と奇数日で処理を分けたいんだけど、上手くできない
どうしたら良いのかアドバイスください
#!/bin/sh
DATE=`date '+%d'` # 日 を取得
buf=$(( $DATE % 2 )) # 計算
if [ ! $buf ]; then # 偶数
hoge
else # 奇数
fuga
fi >>885
#! /bin/sh -
DATE="$(date "+%d")"
if [ $((DATE % 2)) -eq 0 ]; then
echo "今日は偶数Day"
else
echo "今日は奇数Day"
fi
ある種の言語(Cとかだっけ?)はif文に0を放り込めるけど、
コマンドを逐次実行するだけのシェルスクリプトでは無理。
面倒だけど数値判定をしなきゃいけない。
あと、>>886氏の言う通り演算置換内の変数に弗記号は不要。
あと、コマンド置換は容易く入れ子にできて対も分かりよい$()を使おう。
POSIX sh 2003でもサポートされているので安心して。 BSDで標準コマンドだけで現在時刻(もしくは起動してからの)ミリ秒ってとれないのな
/proc/uptimeもBSDないみたいだしどうにかして取れないかなー
ファイルに書き込んでタイムスタンプで
取れないかなーとかもやってみたりもしたw
ファイルシステムによっては書き込まれるみたいだが
これも標準コマンドだけでどうやればー
できればなにも入ってない素のコマンドだけでやりたいんだよね
Perlでもやれるけど、dateコマンドに比べたら
起動時間が10倍も違うんだよな。
あ、ベンチマークというかコマンドの実行速度を細かく知りたいために使いたい。
timeコマンドは標準出力(エラーだっけ?)を乱すので使いたくない あれとれなかったっけ?
なんか取れた気がしたけど気のせいだったか >886-887
ありがとうできたよ。bufが空白になって常にelseに倒れてたから助かりました。
$の位置が良くわからなくて困っていたんだ
Cならいくらでも書けるんだけど、慣れない言語はちょとね・・・ >>888
timeコマンドの出力は標準エラーだよ。
標準出力の方は乱さない。
標準エラーが乱れる方も
(time sh -c '測りたいコマンド 2>&3' 2>/tmp/time.out ) 3>&2
みたいにすれば回避できるから、素直に time コマンド使う方がいい。 >>891
もう一つ問題があってなぁ。
dashじゃtimeコマンドビルトインじゃないんだよ
ビルトインじゃないからシェル関数で使えないんだよね まあ使えないわけじゃないし候補にはなるけど、
OSごとに処理分けるの嫌だなぁ いや、だからtimeコマンドだと
シェル関数扱えないからだめだって言ってるやん? シェルスクリプトの入門書を教えてください
ソフトバンクから出てるUNIXシェルスクリプト〜みたいな書名のものがAmazonでは評価高いみたいなんですが…
先輩方のおすすめを教えてください >>900
こういう分野に関してはいまだにオライリーは信頼できる書籍を発行してるぜ。
まあ俺の持論だがw
https://www.oreilly.co.jp/books/4873112672/
↑これとか参考になる。コマンドの列挙だけじゃなく、システムとシェルの性質とか非常に基礎的な部分から触れてるのでよい(と思う)。 >>901
>システムとシェルの性質とか
これ正に知りたいことです
連休中本屋さん行くので是非中身読んで検討します
ありがとうございます コマンドの出力結果を一時ファイルを作らずに
一行一変数に入れたいんですけどいい方法はないでしょうか?
変数はLINE1、LINE2・・・みたいな名前で
bash依存になる配列は使わない方針です。
foo | while read -r line; do
LINE1=$line
done
みたいにするとサブシェルだから
ループ終わると消えてしまうし sedかawkで代入文いっぱい出してevalかな。
特殊文字のエスケープちゃんと書かないといけないけど。 cat <<. |
1st Line
2nd Line
3rd Line
.
while read -r lineval; do
ctlino=$((ctlino + 1))
printf '%s%s' 'LINE'"${ctlino}"'='"$(printf '%s' "'")""${lineval}""$(printf '%s' "'")" ';'
done |
printf '%s%s\n' "$(cat)" ':'
とりあえずこうすると
LINE1='1st Line';LINE2='2nd Line';LINE3='3rd Line';:
という出力が得られる。これを評価すればいいと思ったができねえ。 改良?
cat <<'EOF' |
1st Line
2nd Li'ne
3rd Line
EOF
while read -r lineval; do
ctlino=$((ctlino + 1))
printf '%s' "${lineval}" |
sed 's/'"'"'/'"'"'"&"'"'"'/g' |
printf '%s%s' 'LINE'"${ctlino}"'='"'""$(cat)""'" '; '
done
→ LINE1='1st Line'; LINE2='2nd Li'"'"'ne'; LINE3='3rd Line'; : 改良?
cat <<'EOF' |
1st Line
2nd Li'ne
3rd Line
EOF
while read -r lineval; do
ctlino=$((ctlino + 1))
printf '%s' "${lineval}" |
sed 's/'"'"'/'"'"'"&"'"'"'/g' |
printf '%s%s' 'LINE'"${ctlino}"'='"'""$(cat)""'" '; '
done |
printf '%s%s\n' "$(cat)" ':'
とりあえず単引用符のエスケープだけ。他にも必要なものがあればsedを挟んでいけばいいんでは。 > sedかawkで代入文いっぱい出してevalかな。
やっぱり残る手はそれか $ radico rec -id=FMT -s=20180502040000
というコマンドがあったとして、「-s=」あとに今日の朝4時「date +"%Y%m%d"040000」の結果を入れたいんですが、一行で書く方法を教えてください お前はこの前のレス群に対する結果とか報告してからにしろ 何も考えずぶん投げるけど変数exportとかじゃだめなのか >>909
$ radico rec -id=FMT -s=$(date "+%Y%m%d040000")
コマンド置換くらい自力で調べーや 引数 $1 $2 $3 ・・・ のうち、特定の範囲n〜mを
別の関数の引数に渡すのってどうやればいいだろうか?
n〜mは条件で変わるものとする >>914
一兆個のシェルを書いてきた俺がそんな事必要になった事がないから
お前の解こうとしてる問題が間違っている >>915
やってることが簡単なパーサーのようなものですからね。
exprをシェルスクリプトで実装しているようなものです。
流石にこういう高度なことはやったことがないのでは? >>917
それだと前からn個以降は実現可能だけど
範囲ができないんですよね。 bashだとこんな感じですね
foo() { echo "${@:2:3}"; }
$ foo 1 2 3 4 5
2 3 4 >>918
for文使えば?
selectargnum()
{
fromargnum=$1
toargnum=$2
shift ${fromargnum}
for arg in $(seq $((toargnum - fromargnum + 1))); do
printf '%s\n' "$2" && shift
done
}
selectargnum 3 5 "$@"
注意: シェル函数への第1,2引数は必ず非負整数で,引数の範囲内であるべし。 #! /bin/sh -
selectargnum()
{
fromargnum=$1
toargnum=$2
shift ${fromargnum}
for arg in $(seq $((toargnum - fromargnum + 1))); do
printf '%s\n' "$2"
shift
done
}
selectargnum 2 4 "$@"
もうちょっと親切に書くわ。
シェル函数selectargnumの
::仕様::
selectargnum <開始位置> <終了位置> <(処理したい)引数>
開始位置・終了位置は省略不可で,常識的な範囲であることを前提にしている。
::使い方::
上のコードを適当な名前のファイル(例えばselarg.sh)に保存して実行権限を賦与。
$ chmod +x ./selarg.sh
あとはファイル中のselectargnum函数の第1,2引数を書き換えて使える。
上の例なら
$ ./selarg.sh "第1引数" "第2引数" "第3引数" "第4引数" "第5引数"
に対して
第2引数
第3引数
第4引数
という出力が得られる。 seqを除いてPOSIX準拠。
もしもより厳密にPOSIXに従いたければ当該箇所を
seq $((toargnum - fromargnum + 1))
から
yes | head -n $((toargnum - fromargnum + 1))
としてもいいだろう。 >>919のせいで勘違いさせたようですね
> 別の関数の引数に渡すのってどうやればいいだろうか?
重要なのはこれ
another_function() {
for i in "$@"; do
printf "%s\n" "$i"
done
}
foo() { another_function "${@:2:3}"; }
another_functionはそのまま使って、
fooの部分をPOSIX準拠にして
以下のような出力を得たいということです
$ foo a "b 1" "c 1" d e
b 1
c 1
d このコードの応用でできますかね?
いまいちこのコードがなにやってるのかよくわからんのですが
https://unix.stackexchange.com/questions/258512/how-to-remove-a-positional-parameter-from
for arg do
shift
[ "$arg" = "-inf" ] && continue
set -- "$@" "$arg"
done
printf '%s\n' "$@" >>923
おいおいヒドいな俺の>>920-922は無視かよ
引数をどうにかしたいコマンドをsomefuncとして
#! /bin/sh -
selectargnum()
{
fromargnum=$1
toargnum=$2
shift ${fromargnum}
for arg in $(yes | head -n $((toargnum - fromargnum + 1))); do
printf '%s\n' "$2"
shift
done
}
somefunc()
{
printf '%s\t%s\n%s\n' "$2" "$3" "$1"
}
somefunc $(selectargnum 2 4 "$@")
こういうので実現できると思うんだが?
なにかこれでは駄目な点があれば言ってくれ。
せっかくGW中とは言え頭使ったのにあまりにもあまりな仕打ちじゃマイカ >>926
somefuncは分かりづらいんでこう書き換えるけど
somefunc() {
printf '%s\n' "$@"
}
$ test.sh "a" "b" "c" "d" "e"
b
c
d
こうなるところ
$ test.sh "a 1" "b 1" "c 1" "d 1" "e 1"
b
1
c
1
d
1 somefuncはこうしないとだめだな。
何番目の変数に入っているのか分かりづらい
somefunc() {
printf '1: %s\n' "$1"
printf '2: %s\n' "$2"
printf '3: %s\n' "$3"
} しょうがないだろう。
引数には空白、シングルクォート、ダブルクォート、改行が
含まれる可能性があるんだよ 一見うまくいったと思いきや
$ test.sh "a" "b" "c" "d" "e"
1: b
2: c
3: d
変数Aに改行が含まれている文字列を入れ
$ A="b
b
b
b
"
以下のように実行するとおかしくなる
$ test.sh "a" "b${A}b" "c" "d" "e"
1: bb
2: b
3: b
> なにかこれでは駄目な点があれば言ってくれ。
駄目な点を言った なお、俺が書いたコードだと以下のように正しく出力される
$ test.sh "a" "b${A}b" "c" "d" "e"
1: bb
b
b
b
b
2: c
3: d
>>925を参考にして以下のように書いた
selectargnum() {
func=$1 start=$2 length=$3
shift 3
i=0 last=$((start+length))
for arg in "$@"; do
: $((i+=1))
[ $i -gt $length ] && shift
[ $i -ge $last ] && continue
shift
set -- "$@" "$arg"
done
$func "$@"
}
somefunc() {
printf '1: %s\n' "$1"
printf '2: %s\n' "$2"
printf '3: %s\n' "$3"
}
selectargnum somefunc 2 3 "$@" ただ問題は、>>932のコードを書いた俺自身が
なんでこのコードで動くのかよく分かってない所だなw
誰か俺の書いたコードが何をやってるのか教えてくれw
>>925のコードはなにやら引数を一周させているみたいだ。
俺が書いたコードは、その一周を途中で中断させているようだな? eval使ったほうが簡潔かつ速い気がしてきたw
set -- の所、何度も引数をずらす処理をしているわけだしね。 長くて読まないのはわかるが、
なぜ読まないということをわざわざ宣言するんだろう? まあ長いのは、>>926のコードに合わせたからであって、
メインの処理はこれだけなんだけどね
i=0 start=2 length=3 last=$((start+length))
for arg in "$@"; do
: $((i+=1))
[ $i -gt $length ] && shift
[ $i -ge $last ] && continue
shift
set -- "$@" "$arg"
done
printf '1: %s\n' "$1"
printf '2: %s\n' "$2"
printf '3: %s\n' "$3" >>932
ちょっとリファクタリング(ってほど大層じゃないが)
selectargnum() {
func="$1"; start=$2; length=$3
shift 3
i=0; last=$((start + length))
for arg in "$@"; do
i=$((i + 1))
test ${i} -gt ${length} && shift
test ${i} -ge ${last} && continue
shift
set -- "$@" "${arg}"
done
"${func}" "${@}"
} リファクタリングは文字数減らすことを言うのじゃないけど bashだと簡単にできるようになったことのどこが
間違っているというのだろうか? >>941
> リファクタリングは文字数減らすことを言うのじゃないけど
リファクタリングは文字数を増やすことじゃないって話 >>946
問題が間違っているとハッキリ書いとるやろwアホなん? なぜ問題が間違っているというのか?
結論を最初に持ってこないように >>949
あ、それが分からんのかw
引数の意味をパースすれば任意の位置指定でのスライスなど不要やからな
つまりgetoptで十分な問題を間違った角度から解こうとしとるっつー事やw
てかおまえ安価ぐらいできんのか どういう理屈で、引数の意味をパースすれば任意の位置指定での
スライスなど不要になるのでしょうか? 例えばfindコマンドのように
find . -type f -exec chmod 600 {} \;
-execが来たら、chmodコマンドを;までをオプションとして
渡して実行みたいなのはスライス相当のものがないとできませんね 自分がやったことがないことだからって
問題が間違ってるということにはなりませんよ >>950
根本的に何がしたいのかに依るんじゃねーのそれは
引数を解釈したいならgetoptでやるべきだが、今回やりたいのは引数のスライスそのものじゃね?
bashなら一行でできるそれをbash依存せずにやるにはどうすればって話なんじゃないか
まぁなんか妙なのが湧いてて話が無駄に複雑になってる感が否めないが まあ言わないでもわかるでしょうが、
わざとスルーされないように言っておきますと、
-execは残りの引数を全て、指定したコマンドの引数として実行するものではなく
; までを引数とします。だから以下のように複数の-execもしていできます。
find . -type f -exec echo {} \; -exec echo {} \; >>955
位置が固定ならいきなりスライスでも構わんが
今回のやつは任意の位置を指定したいと言っとるやろ
つまりその任意の位置がどこか分かった時点で引数の解析は終わっとるから
必要な引数も選別できているはずなんや
つまりそこからさらに位置指定でスライスしたいというのは
引数解析のアプローチが間違っとるいう訳やな >>957
そして、その選別した引数(複数)を別の関数に渡すんだろ?
配列があれば、配列に選別していった引数を入れていけばいいだろうが
bash依存しないなら、配列は使えないよな。
お前ならどうするんだ? >>957
任意の位置をどう指定するのかが要望ないからそこは>>919みたいな位置の直書きを想定してた
多分位置の指定まで引数に組み込むような汎用性高いものは要求されてないだろう
つまりいきなりスライスでいいと思ってる >>958-959
関数に渡すならその引数に割り当てた変数に保存しとくだけやな
可変個ならevalするやろしw
どっちにしろもっと多くの状況がわからんと最適解は得られんわw >>960
> 関数に渡すならその引数に割り当てた変数に保存しとくだけやな
>>914を読み返してみましょうか?
> 引数 $1 $2 $3 ・・・ のうち、特定の範囲n〜mを
> 別の関数の引数に渡すのってどうやればいいだろうか?
> n〜mは条件で変わるものとする
その引数に割り当てた変数とはなんですか?
結局↓これですか?
> 934 自分:名無しさん@お腹いっぱい。[sage] 投稿日:2018/05/03(木) 04:37:45.65
> eval使ったほうが簡潔かつ速い気がしてきたw >>961
せやでw
こいつは問題を複雑に考えすぎとるだけやw あれほど問題が間違っていると偉そうなこと言ったくせに
問題は間違ってないってことでいいんだろうな >>962
そっちじゃない。
いきなり問題が間違っているといちゃもんを付けたことに
謝れって言ってる >>963
正確には問題自体を複雑に考えすぎとるやなw
こいつの問題設定自体が間違っとるんやw >>960
> どっちにしろもっと多くの状況がわからんと最適解は得られんわw
最初の質問の>>914に全て書かれてるじゃん
他に何の状況が知りたいのさ? >>965
なんで問題設定に話をすり替えてるの?
問題は>>914。問題が間違ってるといちゃもんを付けたのは>>915 >>964
なんやおまえ質問した本人なんかw
ならもっと情報をさらけだしてみw
おにいちゃん達が手取り足取り教えてあげるやろからw レス数が950を超えています。1000を超えると書き込みができなくなります。