シェルスクリプト総合その30

**デフォルトの名無しさん** · 2019/07/01(月) 23:04:27.02

シェルスクリプトに関する総合スレッドです。

全般
・荒しは無視しましょう。
・丁寧な姿勢を心掛けましょう。
・ネチケット（死語）を意識しましょう。

前スレ:
シェルスクリプト総合その29
https://mevius.5ch.net/test/read.cgi/tech/1537540487/

**デフォルトの名無しさん** · 2019/08/03(土) 00:25:50.69

>>489
どっかの書籍（確かオライリー）に
数字を考えて#は数字の前に，%は数字の後に付ける。
という連想から
#及び##は前から削る，%及び%%は後から削ると覚えるといいと書いてあった。

**デフォルトの名無しさん** · 2019/08/03(土) 00:33:21.53

自分は
キーボードの左側: # -> prefix
キーボードの右側: % -> suffix
で、削るんだっったっけ？残すんだったっけ？
結局毎回調べるという体たらく

**デフォルトの名無しさん** · 2019/08/03(土) 00:40:18.71

>>490
thanks

**デフォルトの名無しさん** · 2019/08/03(土) 00:57:31.70

>>482
ブラウザでF12キーでコンソール開いて、
var q = (xml, query) => new DOMParser().parseFromString(`<xml>${xml}</xml>`, 'application/xml').querySelector(query).innerHTML.trim();

var text = q(`
<td>
AAAA
</td>
<td>
BBBB
</td>
`, 'td:nth-of-type(2)');
console.log(text); //=> BBBB

xmlとしてのパースだから、
q(`<chinko>AAAA</chinko><chinko>BBBB</chinko>`, 'chinko:nth-of-type(2)');
とかでも大丈夫。

一方htmlとしてもパースできるけど少なくともtableタグは補わなきゃならんね↓
var q = (html, query) => new DOMParser().parseFromString(html, 'text/html').querySelector(query).innerHTML.trim();

var text = q(`
<table>
<td>
AAAA
</td>
<td>
BBBB
</td>
</table>
`, 'td:nth-of-type(2)');
console.log(text); //=> BBBB

**デフォルトの名無しさん** · 2019/08/03(土) 03:42:42.10

>>490
> 数字を考えて#は数字の前に，
あー、ナンバーサインか

俺は、コメントだから頭につけるって覚えてたわ
%は同じく100%の%で後ろって覚えてたけど

**デフォルトの名無しさん** · 2019/08/03(土) 04:43:13.91

>>494
俺含め日本人には#42みたいなのは馴染み薄いよね…
まあ「全く知らない概念」ではなかったから
とりあえず#は前，%は後，というように覚えられたけど。
コメントっていうのはいい案だと思う。
シェルスクリプトを書いている全員が把握できる概念だから。

**デフォルトの名無しさん** · 2019/08/03(土) 05:33:16.75

ナンバナィン？

#はスーパーユーザで%はcshだな

**デフォルトの名無しさん** · 2019/08/03(土) 06:07:39.94

シェルスクリプトの#と%はなんとなく使えてるが正規表現の前後読みは未だに無理ポ

**デフォルトの名無しさん** · 2019/08/03(土) 06:23:53.55

正規表現の割と新しめの拡張は
既存のメタ文字と被らないようになってるから類推しにくい記号になってしまってる場合が多い。
…まあ出典とかなくて俺の予想だけどw

最近だと「名前空間」的な概念が登場して\p{Kata}みたいな書き方が増えてきて助かる。
覚えるの簡単！

**デフォルトの名無しさん** · 2019/08/03(土) 08:10:24.89

なんのこっちゃと思ったら.NETか
[:Katakana:]でいいんじゃないか。すでにあるからわかりやすいし
思惑でそうしてないんだろうけど

**デフォルトの名無しさん** · 2019/08/03(土) 09:10:18.89

>>499
いや\p{Kata}っていう正規表現が使えるのはかなり広範な言語よ
少くともICUバインディングがあれば使える筈。

**デフォルトの名無しさん** · 2019/08/03(土) 09:11:02.22

逆に.NETでUnicodeロケールの正規表現が使えるとは思いもよらなんだ

**デフォルトの名無しさん** · 2019/08/03(土) 09:42:41.49

...| perl -pe 's{" [^"]+ "}{ $& =~ s/ /-/gr }xeg'|...
awk でもできるかもしれないけどこの正規表現が便利
"text with blank space" の中だけ空白を-で詰め物するのに使っている

空白があると正常に動作しないコードの前パイプに挟む

**デフォルトの名無しさん** · 2019/08/03(土) 10:30:59.00

>>502
なんかコマンドの引数の仕様とかを利用して
POSIXの範囲で実装できそう。
もちろんperlで十分だけど。

abc def "text with blacket" dee
に対して
abc def "text-with-blacket" dee
ってい出力を返す訳だから
for str in abc def "text-with-blacket" dee; do
printf '%s\n' "$str" | tr ' ' '-'
done | tr '\n' ' '
とか？
あ，駄目だこれだと"が戻ってこねーw

**デフォルトの名無しさん** · 2019/08/03(土) 11:33:18.72

無理やり

echo 'abc def "text with blcket" dee' |
sed -E 's:^(.*)"([^"]*)"(.*)$:printf "%s\\"%s\\"%s\n" "\1" $(echo "\2"|tr " " "-") "\3":e'

**デフォルトの名無しさん** · 2019/08/03(土) 11:35:32.45

$ echo やまだヤマダ山田 | grep -oP "\p{Katakana}"
ヤ
マ
ダ

-o使うと改行されるのね

**デフォルトの名無しさん** · 2019/08/03(土) 12:22:48.42

スペース区切りでよければ

$ echo やまだヤマダ山田 | grep -oP "\p{Katakana}" | xargs
ヤマダ

**デフォルトの名無しさん** · 2019/08/03(土) 13:09:38.57

>>485
何百ページもパースするの?
Ruby でも十分早いと思うけどなあ

**デフォルトの名無しさん** · 2019/08/03(土) 13:55:12.22

40秒で支度しな

**デフォルトの名無しさん** · 2019/08/04(日) 17:11:27.60

俺だったらperl使って全部読んで長い一行として扱って抜き出すか、または XML::Simple モジュール使って変数に展開してから取り出すかするかな。

つまり、シェルスクリプトは使わない。やってやれないことはないと思うが複雑怪奇なものになりそうなので。

**デフォルトの名無しさん** · 2019/08/04(日) 17:12:43.83

あ、リロード忘れて書いたら山盛りで他の書き込みが・・・

俺の書いたことは忘れてくれ。

**デフォルトの名無しさん** · 2019/08/04(日) 17:13:02.34

【小沢が育てた刺客】　山本太郎「政権を仕留める」
http://lavender.5ch.net/test/read.cgi/giin/1564896780/l50

**デフォルトの名無しさん** · 2019/08/04(日) 18:10:11.11

丸くても刺客

**デフォルトの名無しさん** · 2019/08/04(日) 18:11:50.20

40秒で刺客しな

**デフォルトの名無しさん** · 2019/08/04(日) 18:22:43.73

PythonのBeautifulSoupだと、パーサーにCで書かれたlxmlを選べるようになってるんだが、
そういうの使えば、シェルの方が断然速いとはならないんじゃないかな？
PerlとかRubyにも似たようなのはあるでしょ。

**デフォルトの名無しさん** · 2019/08/04(日) 18:40:40.05

ディレクトリに、test01 ～ test99 ファイルがある時に、
test100, test101 と、ファイルを増やしていくと、

表示順が、test20, test21 などよりも、
test100, test101 の方が、先に来るようになった

これらを数字順で表示するには、どういうフィルターを作れば良いでしょう？

まあ、すべてのファイル名を、test001 など、3桁表示に変えれば、解決するけど

**デフォルトの名無しさん** · 2019/08/04(日) 19:18:29.22

>>515
プレフィクスが一緒なら
そのプレフィクスと0パディングを切り取ってsortに掛ければいいんじゃないかな。
で並び換えたものにプレフィクスと%0dを追加する。

ファイル名じゃなくてすまんが↓こんな感じ？
$ <<. sed 's/test0*//1' | sort -n | while read line; do printf 'test%02d\n' $line; done
test99
test100
test21
test01
test20
test101
.

**516** · 2019/08/04(日) 19:38:16.75

改良。あとsort -nって0埋め関係ないんだな。
http://pubs.opengroup.org/onlinepubs/9699919799/utilities/sort.html#tag_20_119_04

ls -1 test* | sed 's/^test//' | sort -n | xargs -I @ printf 'test%02d\n' @

**デフォルトの名無しさん** · 2019/08/04(日) 19:45:40.73

>>515
GNUのsortなら-Vオプションがあるけど...
ls | sort -V
あるいはtest[0-9]*のファイルだけなら
ls | sort -t t -k 3n
とか（汚いけど）

**デフォルトの名無しさん** · 2019/08/04(日) 20:01:45.96

>>515
ls -v

**デフォルトの名無しさん** · 2019/08/04(日) 20:02:42.33

>>515
GNU coreutils の ls コマンドなら -v オプションで version sort してくれる

$ ls -v test*
$ man ls

-v natural sort of (version) numbers within text

**デフォルトの名無しさん** · 2019/08/04(日) 20:05:19.04

となるとMacは切り捨てだな

**デフォルトの名無しさん** · 2019/08/04(日) 20:06:51.77

おお、lsにも-vオプションあったっけ

**515** · 2019/08/04(日) 21:06:16.73

>>518
GNUのsort、-V オプション
ls | sort -V

これは便利！

**デフォルトの名無しさん** · 2019/08/04(日) 21:11:25.12

sort --help には
-V, --version-sort 自然な (バージョン) 数字順でソートする

って書いてあるけどさ、これセマンティクスバージョニングでの
比較にちゃんとなってるの？正確な仕様がわからん

**デフォルトの名無しさん** · 2019/08/04(日) 21:14:26.03

なんにせよ可搬性ないからあまり使わんほうがいい

**デフォルトの名無しさん** · 2019/08/04(日) 23:41:22.05

シェルスクリプトに可搬性期待するなって結論出たろ

**デフォルトの名無しさん** · 2019/08/05(月) 00:49:19.74

bashごと持って行けばいいんじゃね？
他のインタプリタ系の言語ってみんなそうしてるっしょ？

**デフォルトの名無しさん** · 2019/08/05(月) 00:58:52.07

>>526
馬鹿だなぁ。sortはシェルスクリプトじゃないよ。
sortコマンドだよ。可搬性がないのはsortコマンドだよ。
シェルスクリプトで実装すれば可搬性があるよ

**デフォルトの名無しさん** · 2019/08/05(月) 01:59:22.26

sortは-hもよく使うな
du -hc * | sort -hみたいに

**デフォルトの名無しさん** · 2019/08/05(月) 02:53:17.73

>>527
sortコマンドはBash組込みコマンドじゃないから関係ないんじゃ…

**デフォルトの名無しさん** · 2019/08/05(月) 04:07:47.17

busyboxをスクリプトに同梱して、
全部これに解釈させればいいじゃん
ashに加えて、よく使うコマンドも一緒についてくる

**デフォルトの名無しさん** · 2019/08/05(月) 04:23:15.10

いいじゃんと言われても…いいね。としか答えようがないw

**デフォルトの名無しさん** · 2019/08/05(月) 06:43:25.45

exitコマンドってexit $?とやってやらなくても前に実行したコマンドの終了コードを見てくれるんだな。
ずっとexit $?ってやってたわw

**デフォルトの名無しさん** · 2019/08/05(月) 07:20:51.08

if $? でやるより
&& || で分岐したほうがらしい感じにならないか？

**デフォルトの名無しさん** · 2019/08/05(月) 08:03:05.75

>>534
ああいや。
埋め込みシェルスクリプト（←なんて呼べばいいのか知らんけど
実行形式のファイルで冒頭に書かれてることがある
そのファイル自身を伸長するシェルスクリプトのこと）
で使ってたのよ。
#!/bin/sh

< "$0" sed -n '5,$p' | unar -
exit $?
こっからZIP
↑みたいに。

**デフォルトの名無しさん** · 2019/08/05(月) 11:46:23.87

tputの存在理由はわかるが
現実的な問題として、どういう場合にtput使ってよかったって思える？
もうエスケープシーケンス決め打ちでよくね？

**デフォルトの名無しさん** · 2019/08/05(月) 12:52:22.28

clearコマンドがPOSIXで定められていないのをいいことに実装されていない環境がある。
そのときにtput clear。

**デフォルトの名無しさん** · 2019/08/05(月) 13:19:56.72

> 実装されていない環境がある。

「現実的な問題」っていうのはその実装されてない環境なんて、
今どきあるの？って話なんだよ。

**デフォルトの名無しさん** · 2019/08/05(月) 13:23:05.75

clearが実装されてない環境より
tputが実装されてない環境のほうが多くて、
tputを使うと逆に動かない環境の方が多くなっちゃう
例えばbusyboxとかalpine linuxとか

**デフォルトの名無しさん** · 2019/08/05(月) 13:31:42.54

which clear >/dev/null 2>&1 && echo has || echo 404
両対応書いておけばいい

**デフォルトの名無しさん** · 2019/08/05(月) 14:26:42.83

/usr/share/terminfoの中を見てみたが、
シンボリックリンクを抜かして1700ものファイルがあった。

なるほどこれは大変だ。だがその中でどれだけのものが使われているのだろうか？
またどれだけ違いがあるのだろうか？ほとんどは細かい（殆ど使われない）
機能の違いでしか無いのではないか？

大抵は色を変えるぐらいしか使わないだろうし、
それ以上使っても画面サイズとカーソル移動ぐらいだろう。
数パターンしか違わないのであれば、独自対応も可能だろう。

実用レベルで考えるとtputを使うことは、使わないよりもデメリットが大きい気がしている。

**デフォルトの名無しさん** · 2019/08/05(月) 14:33:25.56

vt100, xterm 以外設定した覚えがないな

**デフォルトの名無しさん** · 2019/08/05(月) 14:47:57.15

おそらく端末名の後ろは細かいバリエーションだろうからと削ってみたら789種類にまで減った
それでも数が多すぎるかつこんなの誰も使ってないやろと思ってしまって
何が違うのか把握する気が起きないレベル

でもinfocmpとか便利だな。よし俺の中で方針が決まった。
もしこれらの端末に対応しなければいけない自体になったら、
プログラムで直接tputを使用するのではなく、tputと同じ引き数で関数を実行しますから、
それで出力するエスケープシーケンスは設定ファイルで書き換えられるって方式にしよう。

さしあたって、現状、色を変えるだけしかやっとらんのだがtput使う必要あるのかな？

**デフォルトの名無しさん** · 2019/08/05(月) 14:55:51.10

なんであるものを使わないんだろう
二段階認証おじさんみたいな頭の構造なんだろうか

**デフォルトの名無しさん** · 2019/08/05(月) 15:27:49.43

> なんであるものを使わないんだろう
書いたでしょ？ tputコマンドがない環境が現実としてある。

**デフォルトの名無しさん** · 2019/08/05(月) 15:54:00.38

簡単なスクリプトを書いて、とりあえずcolsについて
データベースに登録されてる1700端末をすべて調べてみたが
すべてが 0x31 0x33 0x31 0x0a だった

boldだと非対応を除いて892端末。44パターン。結構違いがあるな
setafだと340端末、11パターン

まあtputを使うほうが楽だってのはわかるけど、エスケープシーケンスが違うのは
マイナー端末だろうし、数の割にパターン数は限られているので
完璧を求めたいなら別だけど使う環境で動けば良いわけで、tputを使用するのは過剰な気がするな。

**デフォルトの名無しさん** · 2019/08/05(月) 15:55:50.50

tputがない環境って例えば何？

**デフォルトの名無しさん** · 2019/08/05(月) 16:04:49.48

む、/lib/terminfo/ 以下にも定義ファイルがあるのか
xterm-256colorがないのに使えると思ったら
まあ +40個しか変わらんけど

**デフォルトの名無しさん** · 2019/08/05(月) 16:05:10.32

>>547
書いたんだから上見ろ

**デフォルトの名無しさん** · 2019/08/05(月) 16:11:29.93

まあいいけど日記はブログで書けや

**デフォルトの名無しさん** · 2019/08/05(月) 16:18:56.02

ブログねーしｗここはみんなのらくがき帳だ

**デフォルトの名無しさん** · 2019/08/05(月) 18:58:04.34

シェルスクリプトマスターの皆様
xxxxNN.txtというファイルが大量にあります(xxxxの部分はファイル名、NNの部分は0～99の連番)
NNの部分が50未満ならxxxx50.txtにNNが50以上ならxxxx99.txtに一括でリネームしたいのですがやり方教えてください

**デフォルトの名無しさん** · 2019/08/05(月) 19:10:26.82

xxxx の部分はファイルによって異なるって前提でOK？

**デフォルトの名無しさん** · 2019/08/05(月) 19:15:29.15

>>553
YES

**デフォルトの名無しさん** · 2019/08/05(月) 19:19:16.45

無理に頭の体操的なことをせずに、こんな感じでいいでしょ？

for file in *; do
　name=${file%[0-9]}
　name=${name%[0-9]}
　num=${file#$name}
　[ $num -lt 50 ] && num=50 || num=99
　mv "$file" "$name$num"
done

**デフォルトの名無しさん** · 2019/08/05(月) 19:27:32.93

>>555
ありがとうございます
早速試してみます！

**デフォルトの名無しさん** · 2019/08/05(月) 19:28:09.53

早速試すとか言ってるが、
適当に書いたからどうなっても知らんぞ。

**デフォルトの名無しさん** · 2019/08/05(月) 21:05:22.75

>>552
ファイル名に数字がまざってなければ
例ば[a-zA-Z]だったら
dry run は
| perl -pe 's{ \d+ }{ $& < 50 ? 50 : 99 }ex'

**デフォルトの名無しさん** · 2019/08/06(火) 08:47:13.20

ほとんど気にすることないと思うんだけどさ
みなさんが今まで携わってきたシステムでshが/bin/shにないシステムってあった？
http://pubs.opengroup.org/onlinepubs/9699919799/basedefs/V1_chap10.html
ここによると/bin/shは既定されてない→つまり必ずしもあるとは限らない
みたいなんだけど、そんなシステムあるかね？

Solarisとかなら…と思ったけど/bin/shだったし。

**デフォルトの名無しさん** · 2019/08/06(火) 10:09:19.90

Androidには/bin/shがないとか聞いたことあるな

**デフォルトの名無しさん** · 2019/08/06(火) 10:19:48.23

Androidはそもそも/binも/usrも無いな
mkshが/system/bin/shにある

**デフォルトの名無しさん** · 2019/08/06(火) 10:27:23.06

Androidの環境ってよくわからん。
busyboxは採用して無くて、昔はtoolboxだったのが今はtoyboxを採用している。
しかしtoyboxのシェルであるtoyshは完成して無くてmkshを使っている。
という理解であってるんだろうか？
dockerfileないんかな？

**デフォルトの名無しさん** · 2019/08/06(火) 17:00:21.88

Androidはヘッドレスでは立ち上がらんのじゃね？
昔見た限りだとinitスクリプト中でコケるんじゃないかと

**デフォルトの名無しさん** · 2019/08/07(水) 00:56:40.08

Toyboxなんてものがあるのか。

**デフォルトの名無しさん** · 2019/08/07(水) 01:43:15.26

diffみたいに二つのファイルを開いて、一行ずつ交互に比較できないかな？
bash依存禁止で

**デフォルトの名無しさん** · 2019/08/07(水) 01:49:50.14

diff使えばいいじゃん

**デフォルトの名無しさん** · 2019/08/07(水) 01:57:20.41

diff のアルゴリズムは有名だから
あとはもっと具体的にどうさせたいのかによりそう

**デフォルトの名無しさん** · 2019/08/07(水) 02:03:50.19

誰がdiffしたいっていったよ？

**デフォルトの名無しさん** · 2019/08/07(水) 02:43:40.37

paste コマンド使うとか。見づらいけどｗ

$ paste -d '\n' file_a file_b

**デフォルトの名無しさん** · 2019/08/07(水) 02:47:37.40

一旦質問を忘れて

同時に二つのファイルを開いて処理したい

**デフォルトの名無しさん** · 2019/08/07(水) 02:48:31.68

処理の内容は自由に変えられる

**デフォルトの名無しさん** · 2019/08/07(水) 02:56:33.93

他のスクリプト言語を使う方が幸せになれる様な気がする

**デフォルトの名無しさん** · 2019/08/07(水) 03:19:53.88

>>568
こんな奴に誰が答えたいと思うだろうか？

**デフォルトの名無しさん** · 2019/08/07(水) 03:26:49.06

またいつもの奴か

**デフォルトの名無しさん** · 2019/08/07(水) 03:43:34.68

どうしてこう知識のない奴ほど傲慢なんだろうか。

**デフォルトの名無しさん** · 2019/08/07(水) 06:41:35.91

POSIXシェルのみで全て書くという縛りプレイが好きなんだろうw
POSIXは最低限のインターフェースを規格化しているだけで、結局はプラットフォーム別に書くしかないのが現状だからな
bashがあるならbashで書けばいい
GNU拡張が使えるなら使えばいい
あるもんは使えばいいんだよ
可搬性の幻想に囚われると逆に生産性が落ちる

**デフォルトの名無しさん** · 2019/08/07(水) 06:56:03.49

>>570
そんなの何やりたいのかで答えは変わってくるだろ
漠然とした質問には漠然とした回答しか返ってこないぞ

**デフォルトの名無しさん** · 2019/08/07(水) 07:11:20.44

>>575
パソコンの大先生にありがち。知識は少しはあると自負のアンバランスからだな

**デフォルトの名無しさん** · 2019/08/07(水) 08:36:36.73

awk で丸飲みしちゃえ
1ファイル1配列

メモリ節約なら
1行ずつ読むのをシンクロさせる

**デフォルトの名無しさん** · 2019/08/07(水) 11:22:21.65

>>575
ほんとそれなｗ
できるのに、知識ないやつほどぐだぐだとレスをする
答えられないのを質問者のせいにする

exec 3<file1.txt
exec 4<file2.txt

read -r file1<&3
read -r file2<&4
echo "$file1 $file2"

read -r file1<&3
read -r file2<&4
echo "$file1 $file2"

**デフォルトの名無しさん** · 2019/08/07(水) 11:28:44.82

重症だなこりゃ

**デフォルトの名無しさん** · 2019/08/07(水) 11:31:15.75

ちなみに>>580は
一回目のechoはファイルの1行目、
二回目のechoはファイルの2行目が
ちゃんと表示されるからなｗ

お前ら勉強してちゃんと質問に答えられるようになれよ
中途半端な知識で満足するな

**デフォルトの名無しさん** · 2019/08/07(水) 11:36:26.97

>>581
覚えたてで見てほしくてしようがないんだよ
生暖かい目で見守ろうやw

**デフォルトの名無しさん** · 2019/08/07(水) 11:37:40.18

などと、質問には答えずに
それでも悔しいからか、レスだけはするようで

**デフォルトの名無しさん** · 2019/08/07(水) 11:41:40.99

すげえ嫌な感じの方法思い付いた。

まず二つのファイルの行数だけ wc -l で調べ、小さい方を max に入れておく。
n=1 にしてから max までループさせて、ループの中で awk を使って NR==$n の一行を双方のファイルから抜き出してそれぞれ別の変数に入れる。

なんてことをすると2つの(またはそれよりも多くの)ファイルから1行抜き出して何かをする事は可能だ。
しかし行が長くなればなるほど無駄な処理が増えて時間が掛かることは言うまでもない。
大変効率の悪い方法だ。

**デフォルトの名無しさん** · 2019/08/07(水) 11:48:42.74

>>582
それやりたいなら普通はpaste使うけどな

**デフォルトの名無しさん** · 2019/08/07(水) 11:48:48.99

>>585
その効率の悪い方法を実装するとして、wcもawkもいらんのでは？
行数を数えるのも、特定の行を読み込むのもシェルスクリプトだけでできるし。

>>580のやり方、同時に２つのファイルを開いて処理する方法で
実現できないような場合には使えるかも。ファイルのサイズが小さいなら問題にならないし

**デフォルトの名無しさん** · 2019/08/07(水) 11:48:50.45

>>580
おお。それでできるな。

**デフォルトの名無しさん** · 2019/08/07(水) 11:51:13.86

>>586
あ、そうだね。
区切り文字とうするかだけの問題か。

シェルスクリプト総合 その30

シェルスクリプト総合その30