シェルスクリプト総合 その27

レス数が900を超えています。1000を超えると表示できなくなるよ。
2018/05/03(木) 17:54:23.25
シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)もしくはPOSIX準拠の互換シェルがデフォルトです。
　bash/zsh/ksh/ash/dash/yash/poshなどの専用機能に依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
　FreeBSDユーザは/bin/shの正体がashなので注意。
・POSIXについてのリンクは https://en.wikipedia.org/wiki/POSIX にまとめられています
　最新の仕様はこちらへ http://pubs.opengroup.org/onlinepubs/9699919799/
　（左上の「Shell & Utilities」 から参照することができます。）
・v7 shに一番近くて、現役（？）のshは、OpenSolaris由来のheirloom sh。
　 http://src.illumos.org/source/xref/illumos-gate/usr/src/cmd/sh/
　 http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
　(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
　正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆうな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
　「そういうのはperl使いましょう」と回答するのはやめましょう。
　安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
　質問に対して問題が間違ってるといちゃもんをつけるのもやめましょう
前スレ シェルスクリプト総合 その26
https://mevius.5ch.net/test/read.cgi/unix/1489979246/
2018/07/02(月) 14:55:17.35
>>803
どうもありがとうございました
2018/07/02(月) 15:22:33.69
礼儀正しいな
少し見直したw
2018/07/02(月) 15:24:56.72
manとinfoどっち使ってる？
infoは文中から別のページに飛べるから便利そうだけどウェブブラウザのように戻る進むボタンがあるわけでも無いし全部文字だけだから現在位置が分からなくなるからmanがいいと思うんだけどどう？
2018/07/02(月) 15:25:43.12
なんか最近ほんとこういうアンケートみたいなの増えたな
どっかから流れてきたか？
2018/07/02(月) 15:27:19.76
この質問は乾燥機かせてほしいだけだから
2018/07/02(月) 15:29:11.19
UNIX板だからmanだな
2018/07/02(月) 15:31:13.31
何を乾燥させたいのかしばらく悩んだ
2018/07/02(月) 18:41:01.45
「乾燥機貸して」ってアンジャッシュのネタにあったなそういや
812名無しさん＠お腹いっぱい。
垢版 |
2018/07/02(月) 19:09:02.32
man manて口で言うと恥ずかしいからinfo
2018/07/02(月) 19:35:17.38
rcsのco(1)を
2018/07/02(月) 21:56:08.50
tinfo
2018/07/02(月) 22:32:14.11
そのあたりのネタはもう聞き飽きた
2018/07/03(火) 00:21:24.80
ディレクトリの中の拡張子がm2tsのファイル全てをtsselectというコマンドに投げてその標準出力をひとつのファイルに追記で書き込みたいんですが、その際、ファイル名も一緒に書き込みたいです。
どうやってファイル名を取得するんでしょうか?

$ tsselect *.m2ts > ana.log
2018/07/03(火) 00:43:49.80
1行で書けなかったので、複数行に分けてfor分を使いました。
2018/07/03(火) 01:01:05.23
こんなん？
for i in *.m2ts; do echo $i >>ana.log; tsselect $i >>ana.log; done
2018/07/04(水) 07:39:11.34
近頃のどこか（このスレかも）で，
「fgrepはgrepより遅い」というような話を耳にしたんですが，ほんとうですか？
手元のgrepで試したところ，ほとんど有意な差はありませんでしたが……。
2018/07/04(水) 08:10:45.64
それぞれ独自バイナリだった昔の話な。
あとgrepよりegrepの方が速かったんで、
今でも手はegrepを優先して打っちゃうけどな。
2018/07/04(水) 08:43:22.98
いや独自バイナリだった頃もfgrepの方が速かったような。
grepだけ非決定性オートマトンで遅い的な。
2018/07/04(水) 15:23:44.48
ファイルの一括リネームで
$ find . -name "*X*" | while read F; do mv $F ${F/X/Y}; done
だとXXXがYXXになるんですけどYYYにするには繰り返さなきゃいけないんですかね？
2018/07/04(水) 16:18:50.48
If pattern begins with /, all matches of pattern are replaced with string.
2018/07/04(水) 16:22:26.78
日本語で書いてくれないとわかりません
できれば修正したコマンドを書いてください
2018/07/04(水) 16:25:40.84
お断りします
2018/07/04(水) 16:27:15.37
断る理由とは？
2018/07/04(水) 16:29:57.71
ひな鳥に餌を上げるのはひな鳥がかわいいからだ
なんかこのひな鳥うざいって思ったら餌は与えない
2018/07/04(水) 16:31:49.67
可愛く思われる質問の仕方でもあったんですかね
2018/07/04(水) 16:34:15.63
とりあえず「sh 変数展開」あたりでggってからここに来い
それで分からなきゃどこかの暇人が餌与えてくれるまでずっと待ってな
2018/07/04(水) 16:35:48.08
ありがとうございました
2018/07/04(水) 16:54:10.40
もう来んなよ
2018/07/04(水) 18:24:31.29
すみません
ワードとかに出来る~$で始まるファイルを一括で消したいのですがどうすればいいですか。
find ./ -name "~$*" -exec rm -rf {} \;
これだと上手くいかないです。
find ./ -name "~\$*" -exec rm -rf {} \;
エスケープしてもダメです。
find ./ -name "~*" -exec rm -rf {} \;
これだと上手くいきますが$も指定するためにはどうすればいいですか。
2018/07/04(水) 18:27:42.16
シングルクォート使っとけばぁ
2018/07/04(水) 18:30:53.83
>>833
上手くいかないです
$ find . -name ~'$'*
Unknown user: $*.

$ find . -name "~'$'*"
Illegal variable name.

$ find . -name ~"$"*
Illegal variable name.

$ find . -name '~"$"*'
何も出力されない
2018/07/04(水) 18:41:11.43
自己解決
bashにしたら\で普通にエスケープできました
find . -name "~\$*"
なんでcsh使ってたんだろ
2018/07/04(水) 18:44:18.71
csh使ってたならプロンプト$にすんなよ紛らわしい
2018/07/04(水) 18:46:56.81
cshだと%でしたねすみません
% find . -name "~\$*"
2018/07/04(水) 20:48:13.14
なんで-rつけてんねん
2018/07/04(水) 20:56:00.21
ファイルフォルダ関係なく消したいからフォルダがないとわかっていても付けてる
2018/07/04(水) 21:12:02.88
\; より + かな。forkの遅いCygwinでは特に。
2018/07/04(水) 21:21:14.22
最後以外の改行を削除する単純で可搬な方法を探しています。
私が現在使っている方法は
cat <<. | tr -d '\n' | printf '%s\n' "$(cat)"
a
bbb
cc
.
です。これは可搬性は抜群ですが、冗長すぎると感じています。
できれば一つのコマンド（sedとか？）で済ませたいです。よろしくお願いします。
2018/07/04(水) 21:32:09.95
awkで
2018/07/04(水) 21:34:23.01
フォルダっつーかディレクトリ
2018/07/04(水) 21:37:25.99
同じだろ
2018/07/04(水) 21:40:52.56
>>841

sed ':l;N;s/\n//;bl'

とかかな。// を /,/ にすると、1行CSVに出来る。
2018/07/04(水) 22:22:07.40
>>845
ありがとうございます！
すごいですね……。:lってラベル付けでしたっけ。
2018/07/04(水) 23:00:04.93
>>841
cat <<. | { tr -d '\n'; echo; }
a
bbb
cc
.
2018/07/05(木) 09:36:25.04
Mac付属のsedじゃうまく行かなかった、ってお呼びじゃないか
最近のBSD sedはどうかわからないけど
2018/07/05(木) 10:23:41.12
>>848
え？ そうなの？
OS Xを持ってないので知らんが Busyboxでも行けるくらいの可搬性はあるぜ？
全部POSIXで規定されてる命令だし。
2018/07/05(木) 12:53:17.75
macOSだけでなくBSDでだめっぽい。BSDでだめというか、GNU sedでなら動くか
2018/07/05(木) 14:18:26.92
主にパターンスペースに対して処理した直後にどうするってとこの違いかな。他ではBSDでもmacOSとOpenBSDでは行を処理しなかった場合どうするがちょっと動作が違ったり、いろいろ鬼門だなsedは

sed '$!{H;d;};${H;g;s/\n//g;}'
で、いちおう、sedもGNU sedものようだけど、ゴテっとはしてんな
2018/07/05(木) 14:50:09.34
>>845も結局改行を削除しているだけ＆最後の改行はsedの勝手に付けるだけなので、>>847の方がシンプルでこっちの方がって感じだな
2018/07/05(木) 15:36:04.46
>>845のMacやBSD向け変種でけた
sed -e :l -e 'N;s/\n//;$p;bl'
2018/07/05(木) 15:51:48.45
おおっ
ラベルを別にすれば／しなきゃなのか
$はそこに入れるのか、なるほど
GNU sedではそれだと...オプションで変えられるかな
くせが強いw
2018/07/05(木) 17:34:11.18
教訓。移植性を重視するならsedで変なことするな。普通の正規表現だけ使え
2018/07/05(木) 18:25:50.29
昔はもっと酷かったんだろうな #移植性
sedだけじゃなくてgrepとかも。
2018/07/05(木) 18:33:28.39
>>856
昔は一つしかなかったから移植性よかったよ。
GNUが台無しにした。
2018/07/05(木) 18:41:45.18
ぐぬぅ
2018/07/05(木) 22:10:39.00
sed で可搬性を考えると、セミコロンで分ける方法はちょっとあやしいから、
愚直に -e で分けるしか無いのかも知れない、短く書けないけどw

それはさておき、sed の「無限ループに N を入れる」って、趣があると思うんだよね。
C で「ファイルを while の条件文で fgets() が EOF になるまで読み込む処理」に近いというか。
2018/07/05(木) 22:32:39.96
>>855
>普通の正規表現だけ使え
というより、一行単位サイクルで処理しろかな
2018/07/05(木) 23:00:24.55
>>859
溜めに溜めて溜め込んでってイメージしかないなw
そのwhile〜fgets〜で言うなら、中にreallocでどんどこ的な

実際どうなんだろと65Mのファイルで「ちょっと」試したら、使用メモリは増えない(？？）けど終わらんぞw
2018/07/06(金) 00:57:10.67
bashのプロセス置換なんですけど、最初のプロセス置換が/dev/fd/63に固定（？）されているのはなにか理由があるんですかね。
bash-4.4$ eval echo $(yes '<(echo) ' | head -n 63)
とやったら/dev/fd/63からデクリメントされていって/dev/fd/5→/dev/fd/3→/dev/fd/64
という謎の変化を経てインクリメントされていくという……。
これ仕様ですかね。
2018/07/07(土) 16:45:13.41
仕様です
63は昔は大きい数字だったのですが
最近は小さくなってしまった
2018/07/07(土) 19:05:22.41
数千行のCSVの値を一個一個指定の条件に沿っているかチェックするにはシェルスクリプトでも出来ますかね？
参考書教えて頂けたら嬉しいです。
それともこういうのは他のスクリプトの方が適してたりしますか？
perlも使える環境ではあります。
2018/07/07(土) 19:24:54.18
>>864
そのチェックが他の行の参照を含まなくて、shellでできるかという質問にawkやsedも含まれているのなら、できる
というか、excelでやったりしないし、最近はpythonでやることが多い
2018/07/07(土) 20:21:55.89
指定の条件によるな。CSVの項目も数値や文字列だけだったらシェルスクリプトだけでもできるだろう
2018/07/07(土) 20:52:55.66
ああ、文字列の中のフィールドセパレータ(,)をフィールドセパレータとして除外というのはしないか。awkも同じかな。やってできないこともないだろうけどめんどくさいな
perlはcsv処理するモジュールを入れてだっけ、pythonは最初から入っているよな
2018/07/07(土) 21:04:50.61
それ以前にCSVのフォーマットによると思う
改行とかカンマとかダブルクォーテーションを含むとかをきちんとやりだすとシェルだけでもできるだろうけどやりたくない
2018/07/07(土) 23:07:51.61
またCSV嵐が来てんのか
2018/07/07(土) 23:12:15.86
カンマ入っている場合には "" もしくは '' で囲わなければならないから、それはシェルスクリプトにとっても都合がいい、
IFS=',' fields=($raw)
で簡単にと思ったがそう甘くはなかった。最近流行りのevalでなんとかだとしても、$とかまた別の問題があるしなあ
2018/07/07(土) 23:14:30.65
>>869
別にあれとは違うだろうにw 単にCSVだからって拒否反応示しすぎ
2018/07/07(土) 23:47:30.31
皆さんお答えありがとうございます。
出来るけど面倒だという感じですね。
PHP使いたいけど仕様上ダメみたいなんですよね。。。
後にメンテナンスが面倒くさそう
2018/07/07(土) 23:50:19.59
>>867
残念ながらpythonは入ってなかったです。DBサーバーなんで
2018/07/08(日) 00:37:11.05
>>873
perlで高機能な(？)Text::CSVを入れればだけど、それすらなら、
http://t2aki.doncha.net/?id=1403586022
なんぞの数行のをコピペってでもかな。後はperlスレだな
2018/07/09(月) 08:36:49.76
>>869
いいえ、また "お前" が来てるんですよ
2018/07/09(月) 09:05:14.05
>>872
上とかけあってperl/python/rubyのどれかを入れさせれもらった方がいいと思う。
あるいはjava VMがインストールされてるなら、そっち使ってもシェルよりは楽。
2018/07/09(月) 13:02:45.84
素直にCで書けばｗ
2018/07/09(月) 15:13:46.00
1990年代には確かにこういうプログラムもCで書いてたが、今では はやらんよ。
スクリプト言語とかJava VM系言語とかでCSVライブラリ呼ぶように書くのが普通。
もっと低レイヤの処理ならCも使うけど、業務システムにCを使うってのは、
開発効率が悪いせいで、ほぼ亡びた。
2018/07/09(月) 19:00:09.14
compgenによる補完候補の絞り込みですが
bashでは正常に動作するもののzshでは絞り込まれません。
なぜでしょう？

# bash 4.4.19 on Ubuntu 18.04
$ compgen -W "aaa bbb ccc" a
aaa

# zsh 5.5.1 on Ubuntu 18.04
% compgen -W "aaa bbb ccc" a
aaa
bbb
ccc

.zshrcでは
autoload -U +X compinit && compinit
autoload -U +X bashcompinit && bashcompinit
してます
2018/07/09(月) 22:19:36.10
>>878
すでに入ってるLL使うならわかるが、JavaVM入れるくらいならCでいだろ。
2018/07/10(火) 08:36:39.48
>>880
>>876は｢java VMがインストールされてるなら｣って書いてあるじゃろ。
つまりCSV処理のためにjava VM入れるんじゃなくて既に入ってるならって話。
入ってないなら交渉してスクリプト言語入れる方を推奨だな。

エンタープライズ系は静的型検査が欲しいので相変わらずjava VMな言語が強いのよ。
2018/07/15(日) 05:45:07.54
シェルスクリプトでwebpackみたいに結合して1ファイルにしてくれるものとか
babelみたいにトランスパイルすることで言語を拡張するものって無いかな
2018/07/15(日) 13:28:22.06
>>882
シェルアーカイブ形式とか？
file.sharという形で，ファイル後半に(圧縮した)バイナリーファイル，前半(というかヘッダ)に展開用シェルスクリプトとインストールスクリプトを書いておく)
最近のソフトウェアだとVMWare Horizon ClientsのLinux向けインストーラーがその形式だった。
2018/07/16(月) 09:08:44.64
>>883
別にバイナリファイルを動かそうって話じゃないよ
単にくっつけてくれればいいだけ
2018/07/16(月) 11:20:08.69
>>884
それがshar
886名無しさん＠お腹いっぱい。
垢版 |
2018/07/17(火) 14:15:20.69
>>885
だからぜんぜん違う
webpackみたいに1ファイルに結合するって話をしてる
結合しても結合する前と同じように動く
すこしはsharについて調べてきたら？
2018/07/17(火) 14:17:28.78
shar知らない人のために説明しておくと、
これは単なる自己解凍形式の圧縮ファイル形式に過ぎない
2018/07/17(火) 14:31:39.62
それよりwebpackとやらについて説明しておくべきだったろ
聞き方が悪い
2018/07/17(火) 14:59:08.62
名前出てるんだから調べればいいだけだろ
2018/07/17(火) 15:01:52.39
なんで聞く側が偉そうなんだよって話だろ
2018/07/17(火) 16:41:05.27
どう使いたいかとかわからんのにな
>>887って言ってるけど、得られるのは自分でそれを使ってダイレクトにも頑張ればできる範囲だし
2018/07/17(火) 18:43:00.23
webpackはCのプリプロセッサのincludeみたいなやつだよ
2018/07/17(火) 19:48:43.74
バンドルじゃないの。macOSのバンドルのようなのを単一ファイルでの
単にincludeだったらシェルスクリプトにcatでくっつければええやん。目的は単一のファイルにしたいだけなんだから
バンドルなんだからバンドルをハンドルするヤツが必要じゃないの。んなのはshar使って自分で作ればってとこじゃね
2018/07/18(水) 07:15:49.95
webpackとかbabelとか覚えたてのキーワード並べてみたかったんでしょ
そんなのが必要になる状況がクソなんだがなw
2018/07/18(水) 10:45:31.69
>>891
> >>887って言ってるけど、得られるのは自分でそれを使ってダイレクトにも頑張ればできる範囲だし
自分で頑張ればできるって話なら、ファイル結合なんだからcatでもできるよ？
自分で頑張ればいいだけ。結合されても大丈夫なようにコードを書く必要があるけどな

その頑張るのが面倒だからツール使うんだろう？

ちなみにsharなんていらない。だってこれ目的を満たすためのツールじゃないから
自分でcatで頑張る＋圧縮もしたいなーって思った時にオプションで使えるかもしれないツール
2018/07/18(水) 10:47:00.38
>>894
単一のファイルで何千行も書きたいの？
2018/07/18(水) 10:48:08.70
ちなみにsharの問題は展開しないと使えないって所
ルータのような書き込み回数に制限があるシステムでは致命的
2018/07/18(水) 10:48:51.53
あと展開のためのコマンドが入ってない可能性もあるしな
ファイル結合するだけなら、外部のコマンドにも依存しない
2018/07/18(水) 12:29:11.73
シェルスクリプトは実行可能なままファイル結合する必要性があんまりないってこと
そんなのとかトランスパイルとかが必要になるJavaScriptを指して、クソだなって言われてるんじゃない？
2018/07/18(水) 14:24:18.43
てゆうかそれ以前に、そんな長いプログラムをシェルスクリプトで書いちゃいかんやろ。
他の言語を使うべき。

JavaScriptくらい高級な言語ならアリだけど。
2018/07/18(水) 19:30:47.19
ディレクトリ A の中のファイルを全部
ディレクトリ B の中の同名のファイルと diff を撮りたいんですけどどうすればいいですか
xarg で１つの引き数を渡す方法しかわからないのでおねがいします
2018/07/18(水) 19:32:58.08
diff -r A B
でいいのでは？
2018/07/18(水) 20:29:52.99
少しはggるとかしてからここに恋や
レス数が900を超えています。1000を超えると表示できなくなるよ。
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。
ニューススポーツなんでも実況