シェルスクリプト総合その30

**デフォルトの名無しさん** · 2019/07/01(月) 23:04:27.02

シェルスクリプトに関する総合スレッドです。

全般
・荒しは無視しましょう。
・丁寧な姿勢を心掛けましょう。
・ネチケット（死語）を意識しましょう。

前スレ:
シェルスクリプト総合その29
https://mevius.5ch.net/test/read.cgi/tech/1537540487/

**デフォルトの名無しさん** · 2019/08/05(月) 13:23:05.75

clearが実装されてない環境より
tputが実装されてない環境のほうが多くて、
tputを使うと逆に動かない環境の方が多くなっちゃう
例えばbusyboxとかalpine linuxとか

**デフォルトの名無しさん** · 2019/08/05(月) 13:31:42.54

which clear >/dev/null 2>&1 && echo has || echo 404
両対応書いておけばいい

**デフォルトの名無しさん** · 2019/08/05(月) 14:26:42.83

/usr/share/terminfoの中を見てみたが、
シンボリックリンクを抜かして1700ものファイルがあった。

なるほどこれは大変だ。だがその中でどれだけのものが使われているのだろうか？
またどれだけ違いがあるのだろうか？ほとんどは細かい（殆ど使われない）
機能の違いでしか無いのではないか？

大抵は色を変えるぐらいしか使わないだろうし、
それ以上使っても画面サイズとカーソル移動ぐらいだろう。
数パターンしか違わないのであれば、独自対応も可能だろう。

実用レベルで考えるとtputを使うことは、使わないよりもデメリットが大きい気がしている。

**デフォルトの名無しさん** · 2019/08/05(月) 14:33:25.56

vt100, xterm 以外設定した覚えがないな

**デフォルトの名無しさん** · 2019/08/05(月) 14:47:57.15

おそらく端末名の後ろは細かいバリエーションだろうからと削ってみたら789種類にまで減った
それでも数が多すぎるかつこんなの誰も使ってないやろと思ってしまって
何が違うのか把握する気が起きないレベル

でもinfocmpとか便利だな。よし俺の中で方針が決まった。
もしこれらの端末に対応しなければいけない自体になったら、
プログラムで直接tputを使用するのではなく、tputと同じ引き数で関数を実行しますから、
それで出力するエスケープシーケンスは設定ファイルで書き換えられるって方式にしよう。

さしあたって、現状、色を変えるだけしかやっとらんのだがtput使う必要あるのかな？

**デフォルトの名無しさん** · 2019/08/05(月) 14:55:51.10

なんであるものを使わないんだろう
二段階認証おじさんみたいな頭の構造なんだろうか

**デフォルトの名無しさん** · 2019/08/05(月) 15:27:49.43

> なんであるものを使わないんだろう
書いたでしょ？ tputコマンドがない環境が現実としてある。

**デフォルトの名無しさん** · 2019/08/05(月) 15:54:00.38

簡単なスクリプトを書いて、とりあえずcolsについて
データベースに登録されてる1700端末をすべて調べてみたが
すべてが 0x31 0x33 0x31 0x0a だった

boldだと非対応を除いて892端末。44パターン。結構違いがあるな
setafだと340端末、11パターン

まあtputを使うほうが楽だってのはわかるけど、エスケープシーケンスが違うのは
マイナー端末だろうし、数の割にパターン数は限られているので
完璧を求めたいなら別だけど使う環境で動けば良いわけで、tputを使用するのは過剰な気がするな。

**デフォルトの名無しさん** · 2019/08/05(月) 15:55:50.50

tputがない環境って例えば何？

**デフォルトの名無しさん** · 2019/08/05(月) 16:04:49.48

む、/lib/terminfo/ 以下にも定義ファイルがあるのか
xterm-256colorがないのに使えると思ったら
まあ +40個しか変わらんけど

**デフォルトの名無しさん** · 2019/08/05(月) 16:05:10.32

>>547
書いたんだから上見ろ

**デフォルトの名無しさん** · 2019/08/05(月) 16:11:29.93

まあいいけど日記はブログで書けや

**デフォルトの名無しさん** · 2019/08/05(月) 16:18:56.02

ブログねーしｗここはみんなのらくがき帳だ

**デフォルトの名無しさん** · 2019/08/05(月) 18:58:04.34

シェルスクリプトマスターの皆様
xxxxNN.txtというファイルが大量にあります(xxxxの部分はファイル名、NNの部分は0～99の連番)
NNの部分が50未満ならxxxx50.txtにNNが50以上ならxxxx99.txtに一括でリネームしたいのですがやり方教えてください

**デフォルトの名無しさん** · 2019/08/05(月) 19:10:26.82

xxxx の部分はファイルによって異なるって前提でOK？

**デフォルトの名無しさん** · 2019/08/05(月) 19:15:29.15

>>553
YES

**デフォルトの名無しさん** · 2019/08/05(月) 19:19:16.45

無理に頭の体操的なことをせずに、こんな感じでいいでしょ？

for file in *; do
　name=${file%[0-9]}
　name=${name%[0-9]}
　num=${file#$name}
　[ $num -lt 50 ] && num=50 || num=99
　mv "$file" "$name$num"
done

**デフォルトの名無しさん** · 2019/08/05(月) 19:27:32.93

>>555
ありがとうございます
早速試してみます！

**デフォルトの名無しさん** · 2019/08/05(月) 19:28:09.53

早速試すとか言ってるが、
適当に書いたからどうなっても知らんぞ。

**デフォルトの名無しさん** · 2019/08/05(月) 21:05:22.75

>>552
ファイル名に数字がまざってなければ
例ば[a-zA-Z]だったら
dry run は
| perl -pe 's{ \d+ }{ $& < 50 ? 50 : 99 }ex'

**デフォルトの名無しさん** · 2019/08/06(火) 08:47:13.20

ほとんど気にすることないと思うんだけどさ
みなさんが今まで携わってきたシステムでshが/bin/shにないシステムってあった？
http://pubs.opengroup.org/onlinepubs/9699919799/basedefs/V1_chap10.html
ここによると/bin/shは既定されてない→つまり必ずしもあるとは限らない
みたいなんだけど、そんなシステムあるかね？

Solarisとかなら…と思ったけど/bin/shだったし。

**デフォルトの名無しさん** · 2019/08/06(火) 10:09:19.90

Androidには/bin/shがないとか聞いたことあるな

**デフォルトの名無しさん** · 2019/08/06(火) 10:19:48.23

Androidはそもそも/binも/usrも無いな
mkshが/system/bin/shにある

**デフォルトの名無しさん** · 2019/08/06(火) 10:27:23.06

Androidの環境ってよくわからん。
busyboxは採用して無くて、昔はtoolboxだったのが今はtoyboxを採用している。
しかしtoyboxのシェルであるtoyshは完成して無くてmkshを使っている。
という理解であってるんだろうか？
dockerfileないんかな？

**デフォルトの名無しさん** · 2019/08/06(火) 17:00:21.88

Androidはヘッドレスでは立ち上がらんのじゃね？
昔見た限りだとinitスクリプト中でコケるんじゃないかと

**デフォルトの名無しさん** · 2019/08/07(水) 00:56:40.08

Toyboxなんてものがあるのか。

**デフォルトの名無しさん** · 2019/08/07(水) 01:43:15.26

diffみたいに二つのファイルを開いて、一行ずつ交互に比較できないかな？
bash依存禁止で

**デフォルトの名無しさん** · 2019/08/07(水) 01:49:50.14

diff使えばいいじゃん

**デフォルトの名無しさん** · 2019/08/07(水) 01:57:20.41

diff のアルゴリズムは有名だから
あとはもっと具体的にどうさせたいのかによりそう

**デフォルトの名無しさん** · 2019/08/07(水) 02:03:50.19

誰がdiffしたいっていったよ？

**デフォルトの名無しさん** · 2019/08/07(水) 02:43:40.37

paste コマンド使うとか。見づらいけどｗ

$ paste -d '\n' file_a file_b

**デフォルトの名無しさん** · 2019/08/07(水) 02:47:37.40

一旦質問を忘れて

同時に二つのファイルを開いて処理したい

**デフォルトの名無しさん** · 2019/08/07(水) 02:48:31.68

処理の内容は自由に変えられる

**デフォルトの名無しさん** · 2019/08/07(水) 02:56:33.93

他のスクリプト言語を使う方が幸せになれる様な気がする

**デフォルトの名無しさん** · 2019/08/07(水) 03:19:53.88

>>568
こんな奴に誰が答えたいと思うだろうか？

**デフォルトの名無しさん** · 2019/08/07(水) 03:26:49.06

またいつもの奴か

**デフォルトの名無しさん** · 2019/08/07(水) 03:43:34.68

どうしてこう知識のない奴ほど傲慢なんだろうか。

**デフォルトの名無しさん** · 2019/08/07(水) 06:41:35.91

POSIXシェルのみで全て書くという縛りプレイが好きなんだろうw
POSIXは最低限のインターフェースを規格化しているだけで、結局はプラットフォーム別に書くしかないのが現状だからな
bashがあるならbashで書けばいい
GNU拡張が使えるなら使えばいい
あるもんは使えばいいんだよ
可搬性の幻想に囚われると逆に生産性が落ちる

**デフォルトの名無しさん** · 2019/08/07(水) 06:56:03.49

>>570
そんなの何やりたいのかで答えは変わってくるだろ
漠然とした質問には漠然とした回答しか返ってこないぞ

**デフォルトの名無しさん** · 2019/08/07(水) 07:11:20.44

>>575
パソコンの大先生にありがち。知識は少しはあると自負のアンバランスからだな

**デフォルトの名無しさん** · 2019/08/07(水) 08:36:36.73

awk で丸飲みしちゃえ
1ファイル1配列

メモリ節約なら
1行ずつ読むのをシンクロさせる

**デフォルトの名無しさん** · 2019/08/07(水) 11:22:21.65

>>575
ほんとそれなｗ
できるのに、知識ないやつほどぐだぐだとレスをする
答えられないのを質問者のせいにする

exec 3<file1.txt
exec 4<file2.txt

read -r file1<&3
read -r file2<&4
echo "$file1 $file2"

read -r file1<&3
read -r file2<&4
echo "$file1 $file2"

**デフォルトの名無しさん** · 2019/08/07(水) 11:28:44.82

重症だなこりゃ

**デフォルトの名無しさん** · 2019/08/07(水) 11:31:15.75

ちなみに>>580は
一回目のechoはファイルの1行目、
二回目のechoはファイルの2行目が
ちゃんと表示されるからなｗ

お前ら勉強してちゃんと質問に答えられるようになれよ
中途半端な知識で満足するな

**デフォルトの名無しさん** · 2019/08/07(水) 11:36:26.97

>>581
覚えたてで見てほしくてしようがないんだよ
生暖かい目で見守ろうやw

**デフォルトの名無しさん** · 2019/08/07(水) 11:37:40.18

などと、質問には答えずに
それでも悔しいからか、レスだけはするようで

**デフォルトの名無しさん** · 2019/08/07(水) 11:41:40.99

すげえ嫌な感じの方法思い付いた。

まず二つのファイルの行数だけ wc -l で調べ、小さい方を max に入れておく。
n=1 にしてから max までループさせて、ループの中で awk を使って NR==$n の一行を双方のファイルから抜き出してそれぞれ別の変数に入れる。

なんてことをすると2つの(またはそれよりも多くの)ファイルから1行抜き出して何かをする事は可能だ。
しかし行が長くなればなるほど無駄な処理が増えて時間が掛かることは言うまでもない。
大変効率の悪い方法だ。

**デフォルトの名無しさん** · 2019/08/07(水) 11:48:42.74

>>582
それやりたいなら普通はpaste使うけどな

**デフォルトの名無しさん** · 2019/08/07(水) 11:48:48.99

>>585
その効率の悪い方法を実装するとして、wcもawkもいらんのでは？
行数を数えるのも、特定の行を読み込むのもシェルスクリプトだけでできるし。

>>580のやり方、同時に２つのファイルを開いて処理する方法で
実現できないような場合には使えるかも。ファイルのサイズが小さいなら問題にならないし

**デフォルトの名無しさん** · 2019/08/07(水) 11:48:50.45

>>580
おお。それでできるな。

**デフォルトの名無しさん** · 2019/08/07(水) 11:51:13.86

>>586
あ、そうだね。
区切り文字とうするかだけの問題か。

**デフォルトの名無しさん** · 2019/08/07(水) 11:53:37.08

>>586
> それやりたいなら普通はpaste使うけどな
残念ながらpasteでは自由な処理ができない

例えば、１つ目のファイルに書いてある命令を解釈しながら
2つ目のファイルを読み込んだり、他の処理をしたりとかね。

**デフォルトの名無しさん** · 2019/08/07(水) 11:56:37.01

で、POSIXで簡単にできることを、答えられずに
他の言語でやれとか、自由な処理をしたいっていうのに
それを理解しない答えを返してる奴ら
質問者の俺自身に、完璧な答えを出された気持ちはどう？ｗ

**デフォルトの名無しさん** · 2019/08/07(水) 11:57:46.26

またいい問題を思いついたら、質問（？）してやるから
じゃーねーｗ

**デフォルトの名無しさん** · 2019/08/07(水) 11:57:52.31

>>590
だからやりたいことを先に言えよ
お前はシェルスクリプトの前に質問の仕方から勉強しろ

**デフォルトの名無しさん** · 2019/08/07(水) 12:00:28.63

>>593
同時に二つのファイルを開いて処理したい
って言った。
処理の内容は自由に変えられる
って言った。

同時に二つのファイルを開く以外のなにも条件として出してない
それができれば、いろいろと応用が効く

特定のことしかできないdiffやpasteでは
処理の内容が変えられないだろ

**デフォルトの名無しさん** · 2019/08/07(水) 12:03:18.97

>>594
>>593

**デフォルトの名無しさん** · 2019/08/07(水) 12:04:06.23

>>591
なんで自分でわかるのに質問したのか謎

**デフォルトの名無しさん** · 2019/08/07(水) 12:06:48.70

>>596
>>583

**デフォルトの名無しさん** · 2019/08/07(水) 12:08:56.79

うーん、、、こんな感じ？

$ paste -d '\n' file1 file2 | xargs -d '\n' -n 2 | sh

file1 と file2 の内容例

file1:
====
ls
cp
mv
====

file2:
====
.
x y
y z
====

**デフォルトの名無しさん** · 2019/08/07(水) 12:15:06.92

あー。「どうだ俺はこんなにできるんだすごいだろう」みたいな。
じゃあ本当にやりたかった事は複数ファイル処理ではなくて自分の能力自慢か。
人から認められて承認欲求を満たしたいってことでもあるかな。
いつも人からバカにされてるから何かで人をバカにしたいというのもあるかも知れない。
合掌。

**デフォルトの名無しさん** · 2019/08/07(水) 12:15:09.78

>>598
後出し要件からするとそんな感じ
また要件変わると思うw

**デフォルトの名無しさん** · 2019/08/07(水) 12:17:59.15

>>596
> なんで自分でわかるのに質問したのか謎

質問した時点では知らなかったよ？ｗ

**デフォルトの名無しさん** · 2019/08/07(水) 12:19:12.78

>>598
後出しじゃない用件を言うと、
処理したい内容を自由に変えられないといけない

要件は同時に二つのファイルを開いて
いろんな処理をしたいってことだけ

ま、もう答えは出したがｗ

**デフォルトの名無しさん** · 2019/08/07(水) 12:21:45.21

>>599
最初に用件をちゃんといってるのに、例をいうとその例しかできない方法を出すし
その質問にたいする曲解を潰していくうちに、その時間で自分で調べて解決できてしまうんだから
どうしろっていうんだｗ

**デフォルトの名無しさん** · 2019/08/07(水) 12:22:22.45

やっぱ「自決しました」で終わらせたほうが良かったか？

**デフォルトの名無しさん** · 2019/08/07(水) 12:32:00.78

>>603
普通にわからなくて質問していてやがて自分でわかった場合、普通はそれまでに答えてくれた人に対するお礼をするしこういう方法で出来ましたと自分のやったことを書く。
君の場合なぜか答えてくれた人に対する感謝の念がない。書かれたことが間違いや見当外れのことであっても普通は書いてくれたというだけで感謝するものだ。
しないとするなら少なくともその質問は質問に偽装された何か別のものだ。

**デフォルトの名無しさん** · 2019/08/07(水) 12:36:21.05

>>604
teratailとかSOで叩かれてこい

**デフォルトの名無しさん** · 2019/08/07(水) 12:37:21.72

>>605
いい加減、客様は神様です。はやめたほうが良いよｗ

**デフォルトの名無しさん** · 2019/08/07(水) 12:42:23.91

>>607
言っている意味がわからない。何か特殊な宗教でも信奉しているのかね？

**デフォルトの名無しさん** · 2019/08/07(水) 12:45:25.69

>>608
回答者のほうが偉いみたいな考え方。
質問者と回答者は対等です。

**デフォルトの名無しさん** · 2019/08/07(水) 13:00:34.72

>>609
対等じゃないよ。金を出す側と受け取る側と同じだもの。同じわけがないじゃん。
君はなんでそんな現実と食い違う思想を持ってるんだ？それでは人とのトラブルになるだけで世の中渡っていけんだろう。

**デフォルトの名無しさん** · 2019/08/07(水) 13:17:46.60

>>610
どうやら日本の礼儀が理解できないようだ
今問題になっている隣国の人間なんだろう

**デフォルトの名無しさん** · 2019/08/07(水) 13:23:21.21

日本の礼儀と隣国の話しかできないのが世界が狭いよな

**デフォルトの名無しさん** · 2019/08/07(水) 13:27:24.72

>>611
何かを与えてくれたらお礼をするのは国に関係なくどこでも共通の礼儀だが、君はそれをしないばかりか与えてもらって当然と考えるとするならば、それは正に今の韓国と同じだね。

**デフォルトの名無しさん** · 2019/08/07(水) 13:29:19.39

優遇して与えていた側に礼を言わないばかりか盗人猛々しいとでも言うかね？

**デフォルトの名無しさん** · 2019/08/07(水) 13:31:40.13

ということで、質問に対して
答えを返した俺に感謝しろ
という話さ

**デフォルトの名無しさん** · 2019/08/07(水) 13:37:09.23

これ触っちゃあかんやつや

**デフォルトの名無しさん** · 2019/08/07(水) 13:39:19.49

俺は別に自決しましたで終わらせても良かったんだが、
俺ができるってことを示さなければ、
シェルスクリプトで同時に二つのファイルを開けるってことも
知らなかったんだろうな

**デフォルトの名無しさん** · 2019/08/07(水) 13:41:42.46

>>616
それを触りすぎw

**デフォルトの名無しさん** · 2019/08/07(水) 13:46:29.59

この先の人生、似たような問題に直面したとき、
今日の会話を思い出しながらも、なかったことにして
俺が回答したテクニックを使うのだろう

**デフォルトの名無しさん** · 2019/08/07(水) 13:49:03.15

>>615
質問者は君自信だ。それに関しては君が君に感謝すれば良い。他の人は少なくとも同じ質問はしていないのだから君に感謝する必要はない。

という、普通の事が君にはわからないのか？発達障害か何かか？だったらしょうがないから形だけ他の人を真似て合わせろ。そうすれば無用なトラブルは減らせる。

**デフォルトの名無しさん** · 2019/08/07(水) 13:51:39.12

ん？他の人って会話に参加してる人だけのことだと思ってるのか？
検索で見つけた人とかあるだろう。
相変わらず視野が狭いんだな。

**デフォルトの名無しさん** · 2019/08/07(水) 14:04:14.01

検索した人は俺に感謝する。ここでレスしてたやつも同じ問題がでたとき
嫌々ながら俺に感謝する。ウィン♪ウィン♪ってやつではないか

**デフォルトの名無しさん** · 2019/08/07(水) 14:08:05.92

>>621
おだいじに。

**デフォルトの名無しさん** · 2019/08/07(水) 14:09:22.96

夏の暑さも酷なことをするもんだ。

**デフォルトの名無しさん** · 2019/08/07(水) 14:11:08.56

エアコンもってないのか？

**デフォルトの名無しさん** · 2019/08/07(水) 15:11:31.23

どうでもいいけどアレを「完璧な回答」とか言ってる時点でお察しw
ファイルディスクリプタを使った方法にはPOSIXの範囲では解決できない重大な落とし穴がある。
まあ態々言わなくても分かるだろうから，明言はしないがw

**デフォルトの名無しさん** · 2019/08/07(水) 15:23:56.01

ああ一応分からん人の為にヒントをいうと，実は2018年あたりの過去スレで言及してる。

**デフォルトの名無しさん** · 2019/08/07(水) 18:34:55.40

※その落とし穴がなんなのか言わないのは、わからん人のためよりも
俺に意地悪をすることを選んだから。結局それがそいつの本性なんだよ。

**デフォルトの名無しさん** · 2019/08/07(水) 19:38:28.14

{{"item1":["key1":"value1"]},{"item2":["key2":"value2"]}}
{{"item1":["key1":"value1"]}}
{}
{{"item1":["key1":"value1"]},{"item2":["key2":"value2"]},{"item3":["key3":"value3"]}}

みたいに中途半端なjsonがたくさん混ざっているファイルを

item1,item2,item3
value1,value2,
value1,,
,,
value1,value2,value3

のような綺麗なcsvで出力する方法ってありますか？
jqコマンドを使っても上手くいかず……

**デフォルトの名無しさん** · 2019/08/07(水) 19:41:37.81

>>629
それ中途半端なjsonじゃねーよ
jsonlという形式だ。jsonエル

**デフォルトの名無しさん** · 2019/08/07(水) 19:46:34.34

1行ずつループで回してもできそうだが、なんどもjqコマンドを呼び出すことになって
時間がかかりそうだから、
[
1行目 ,
2行目 ,
3行目 ,
4行目
]

みたいに変換して、jq一発にしたほうが速いだろうな。
そのやり方は、俺以外でも答えられるやろ？

**デフォルトの名無しさん** · 2019/08/07(水) 22:04:49.28

>>629
GNU awk 4.0.0 以降で

$ gawk -ijoin -vFPAT='"[^"]+"' '{
for(i=1;i<=NF;i+=3){
item[$i]=1
row[NR,$i]=$(i+2)
}
}END{
for(i in item){x[n++]=i}
n--
print join(x,0,n,",")
for(i=1;i<=NR;i++){
k=0
for(j in x){
r[k++]=row[i,x[j]]
}
print join(r,0,n,",")
}
}' data.jsonl

**デフォルトの名無しさん** · 2019/08/08(木) 02:47:04.99

これは、Ruby で、JSON.parse できない。
何や、この形式は？
{"item1":["key1":"value1"]}

[ ] の中に、{ } を入れたら、OK だが、
{"item1":[{"key1":"value1"}]}

**633** · 2019/08/08(木) 03:01:29.15

https://jsonformatter.curiousconcept.com/

このサイトで、JSON の形式が正しいかどうかチェックしたら、エラーになった！

{"item1":["key1":"value1"]}
Error:Expecting comma or ], not colon.

**デフォルトの名無しさん** · 2019/08/08(木) 03:55:09.53

>>632
すげえ！
口先だけの>>631とは全然違うわw

**デフォルトの名無しさん** · 2019/08/08(木) 06:10:00.05

>>629
{{"item1":["key1":"value1"]}}
じゃなくて
{{"aaaa":["bbbb":"cccc"]}}
でも
"cccc" って表示されるけどOK？

あと {{"item1":["key1":"val\"ue1"]}}
みたいに " がデータに入ってる場合はあるの？

それと key1、key2、key3 ってキー名が変わるのは正しいの？

jsonlとしても正しくないけど、書き間違いじゃないの？

**デフォルトの名無しさん** · 2019/08/08(木) 07:06:18.58

>>629
これJSONじゃないしフォーマットおかしいってだけじゃね？
正しいJSONならjqだけでcsv変換できるぞ

**633** · 2019/08/08(木) 07:20:32.75

JavaScript で、: は、オブジェクトの属性だろ。
だから、{ } 内でしか使えない

だから、1 はダメで、2, 3 はOK

1. {"item1":["key1":"value1"]}

2.1 {"item1":["value1"]}
2.2 {"item1":["key1","value1"]}

3. {"item1":[{"key1":"value1"}]}

シェルスクリプト総合 その30

シェルスクリプト総合その30