シェルスクリプト総合 その27

■ このスレッドは過去ログ倉庫に格納されています
2018/05/03(木) 17:54:23.25
シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)もしくはPOSIX準拠の互換シェルがデフォルトです。
　bash/zsh/ksh/ash/dash/yash/poshなどの専用機能に依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
　FreeBSDユーザは/bin/shの正体がashなので注意。
・POSIXについてのリンクは https://en.wikipedia.org/wiki/POSIX にまとめられています
　最新の仕様はこちらへ http://pubs.opengroup.org/onlinepubs/9699919799/
　（左上の「Shell & Utilities」 から参照することができます。）
・v7 shに一番近くて、現役（？）のshは、OpenSolaris由来のheirloom sh。
　 http://src.illumos.org/source/xref/illumos-gate/usr/src/cmd/sh/
　 http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
　(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
　正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆうな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
　「そういうのはperl使いましょう」と回答するのはやめましょう。
　安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
　質問に対して問題が間違ってるといちゃもんをつけるのもやめましょう
前スレ シェルスクリプト総合 その26
https://mevius.5ch.net/test/read.cgi/unix/1489979246/
2018/05/21(月) 23:07:13.46
PIDが若いから特権があるわけでもないしPIDが推測しやすいからっていうセキュリティ懸念ってなんだろ？
2018/05/21(月) 23:36:33.95
cat >/tmp/tmpfile.$$
みたいに手抜きな一時ファイル作成してると
シンボリックリンク攻撃くらうからそのリスクを減らせたりする。
ちゃんと攻撃避ける正しい書き方してれば関係ない話だけど、
世の中にテキトーなスクリプトは尽きないから。
2018/05/21(月) 23:39:26.38
なるほど。OSのセキュリティではなくPIDを利用したナニかに対するか
2018/05/21(月) 23:43:34.05
ん？PIDを知ることができる(当然知ることは普通にできる)ってとこがキモで推測しやすいのとは別のような。まあ、いいや、ナニかあるなってことで
2018/05/21(月) 23:47:30.91
ああ、シンボリックリンク攻撃を誤解してた。事前に(大量に)シンボリックリンク作ってしまうわけね。なるほど
102名無しさん＠お腹いっぱい。
垢版 |
2018/05/22(火) 02:34:29.36
知り合いから教えてもらったパソコン一台でお金持ちになれるやり方
時間がある方はみてもいいかもしれません
グーグルで検索するといいかも『ネットで稼ぐ方法　モニアレフヌノ』

GXGZT
2018/05/22(火) 12:13:09.28
シンボリック攻撃ってシンボリックリンクを作成する時にパーミッション関連の隙を突いて本来保護されているコマンドを改竄することだよね。
大量に作成する必要なないんじゃないかしらん。もちろんある種の陽動にはなるだろうけど。
10472
垢版 |
2018/05/22(火) 19:13:09.08
>>77>>78
これで一発で成功しました
驚いています
このコードをもっと理解すると共に、自分も先輩のようなプログラマーになれるよう勉強を続けていきたいです
マジで助かり、勉強になりました
本当にありがとうございました
10572
垢版 |
2018/05/22(火) 23:19:32.73
もちろん>>83の修正も加えさせていただきました
コードをくだすった方と同じ方かはわかりませんがそもそも>>75でこちらの仕様を把握してくださったのがすごい
要求仕様、要件定義の大切さも少しわかりました
そしてコードはこちらの望む通りの結果を出して一発で動きましたよと
2018/05/22(火) 23:39:50.60
>>105
別人だ。俺はスマホだからここにコードは書けん
10772
垢版 |
2018/05/22(火) 23:57:04.16
>>106
そうでしたかm(_ _)m

いずれにせよスレの複数の先輩方にお世話になりました
しかも勉強になります
2018/05/23(水) 03:10:49.54
あのなぁ、お前さんここをどこの板だと思っているんだい？
歴史あんだぜ
まあその話はもうほんとに一昔前の出来事になっちまったけどな
2018/05/23(水) 04:11:43.99
イザナミだ
2018/05/23(水) 10:26:18.02
伝説って？
2018/05/23(水) 10:49:34.46
なんだったか、2chの鯖に関する貢献があったような
当時からいたわけじゃないからどっかのサイトで知った話だが
Flash黄金期にその話がFlash化されてたから見て知ったな
2018/05/23(水) 12:29:35.00
read.cgiの改良作業だよね。
直接関わってはいないけど、当時はリアルタイムで見ていたし、手元の
どこかに運営から住民に開示されたread.cgiも残ってると思う。

アクセスが増えて通信量が増加して、当時借りてたホスティング業者から
追い出されそうになってたんだけど、HTTPの通信をgzipで圧縮して通信量を
削減しようという話だったかと思う。

ただ、UNIX板でも話をして作業には参加していたものの、プログラム板と
かの方でもガリガリやっていたような記憶がある。
2018/05/23(水) 14:05:37.49
それとは別に SYN flood 攻撃に対し SYN cookie 有効化で対抗した時はUNIX板で主に議論してた気がする。
リアルタイムで見てたというか発言してたけど(SYN cacheと比較した得失とか書いた気が)、
こういうのはあくまで個人としての行動なので板自慢に繋げるのは好きじゃないな。
むしろ統一とかとれてなくてカオスなのが5chの良いところだと思うので。
2018/05/23(水) 15:36:26.79
>>112
gzip圧縮ってapacheの設定じゃないの？
2018/05/23(水) 21:48:48.59
他の顧客がいるからミドルウェアで圧縮できない、というホスティング屋を使っていたんじゃなかったのかな(後から知った話だから、違うかもしれない)
116名無しさん＠お腹いっぱい。
垢版 |
2018/05/23(水) 23:46:31.17
オイスター作戦ね
もう15年は前でしょ
2018/05/24(木) 00:55:41.47
>>113
新ブラッドなつかしす
2018/05/24(木) 07:58:22.34
馴れ合いならよそでやれ(ｷﾘｯ)
2018/05/24(木) 08:33:06.96
なれ合いですらなくて、おっさんが勝手に郷愁に浸ってるだけという。
2018/05/24(木) 20:05:30.06
$ cat a.file > b.file
とやるのと
$ cp a.file b.file
とやるので違いが生じる場合はありますか？
2018/05/24(木) 20:22:49.22
>>120
パーミッションがどうのこうの
2018/05/24(木) 21:28:22.51
>>120
b.fileというディレクトリがあった場合の動作
2018/05/24(木) 22:42:29.15
ディレクトリの場合はケツに / つけろや
2018/05/24(木) 23:23:09.46
イミフ
2018/05/24(木) 23:30:13.33
>>123によると
cat a.file > b.file/
ってやるといいんだって
2018/05/25(金) 00:17:51.08
意図してディレクトリじゃないからつけろもなんもないのにな
2018/05/25(金) 10:57:24.97
>>120
CoWが効いたり
2018/05/25(金) 10:59:54.02
そんなcpの実装ってある？
2018/05/25(金) 11:34:57.95
Linuxのは実装はしてるみたいだな。デフォではないから話の流れでの実装してるとは言えんけど
2018/05/25(金) 14:50:09.69
シェルスクリプトの勉強をするのにおすすめの本はありますか？
2018/05/25(金) 15:20:37.79
最近あったな
https://mevius.5ch.net/test/read.cgi/unix/1489979246/900-902
132130
垢版 |
2018/05/25(金) 16:54:14.54
>>131
ありがとうございます
2018/05/26(土) 04:09:24.19
お知恵お借りしたいです。

awk '($3 !~ /ここにパイプ区切りで記述したい/) && ($4 ~ /01/)' output.txt

上記のawkで条件に当てはまるファイルを絞り込みたいのですが
その１　別ファイルからのawkの結果を $aaa に設定してある
その2　$aaa は複数列の出力なので set コマンドにて位置パラメータに分けてある
その3　各変数を展開して文字列としてパイプで区切ってawkを使いたい。

以上のようなことをやってみたのですがどうもうまく行きません。
また、違うやり方もあるようでしたらご教示いただけるとありがたいです。
よろしくお願いします。
2018/05/26(土) 04:35:42.94
> $aaa は複数列の出力なので set コマンドにて位置パラメータに分けてある
これはどういう意味？ set はシェル自身の設定だと思うんだけども
2018/05/26(土) 05:07:26.79
cat ZZZ.txt |grep XXX
hoge
fuga

と複数行でしたので
aaa=$(cat ZZZ.txt |grep XXX)　としてみました。
そして set $aaa と設定して
$1 $2 $3 ...と変数が自動で割り振られるなら増減しても対応できるのでは考えました。
（本来は0個のときもあるのでそれも考慮しなければならないんですが）
そして $1 等に入っている変数(hogeやfuga) を展開してパイプで区切れれば動くと思うんです。
2018/05/26(土) 07:13:03.91
ごめん俺の理解が悪いと思うのだがあなたのやりたいことが見えない。
他の人にまかせるわ。
もしくはZZZ.txtの内容をプライバシーに障らない程度に具体的に教えてほしい。
「ZZZ.txtからgrepで取り出した値をパイプで連結して処理する」という文言からは
ZZZ.txtには命令が一行ずつ書かれているように受け取れるのだが、そうじゃないよね。
それとも「パイプで繋ぐ」というのはシェルのパイプ実行ではなく単に文字列としてパイプを区切りとして使うという意味？
もしそうなら
$ cat ZZZ.txt | grep XXX | tr '\n' '|' | sed 's/|$//1'
↑こういうので行けるけど。違うでしょ？
2018/05/26(土) 07:35:37.60
説明がヘタですみません。ZZZ.txtの中身はyoutube等の
URL タイトル 日付 がタブ区切りで複数行書かれているファイルです。
123.com hoge 02
456.com fuga 05
789.com peke 08
のような感じです。
それらから条件から当てはまる行や列を抜き出してパイプ区切りにしたいのです。
パイプの解釈は hoge|fuga で hoge or fuga と展開して awkのパターン入れて読ませたい訳です。
2018/05/26(土) 08:23:21.90
>>137
なるほどね。こういうこと？ (ZZZ.txtの代わりにヒアドキュメント使ってる）
$ cat <<. | awk '($2 ~ /(hoge|fuga)/) && ($3 ~ /02/) {print}'
example111.com hoge 02
example222.com hoge 03
456.com fuga 05
456example.com fuga 02
789.com peke 08
.
example111.com hoge 02
456example.com fuga 02
2018/05/26(土) 09:09:37.27
勉強不足でヒアドキュメントの知識が浅くて申し訳ないのですが
多分合ってると思います。
うまくいかないのは hoge|fuga の部分が一定でなく
peke|hoge|miso だったり fuga のみだったりするので悩ましいのです。
2018/05/26(土) 09:53:14.80
条件をコマンドの結果から作りたい＆その条件をawkの条件に埋め込みたいってだけ？

hogehuga=( $(cat ZZZ.txt |grep XXX) )
SAVEIFS=$IFS
IFS=$'|'
hogehuga="${hogehuga[*]}"
IFS=$SAVEIFS
[ "$hogehuga" = "" ] && hogehuga="0個の条件"
awk '($3 !~ /'"$hogehuga"'/) && ($4 ~ /01/)' output.txt

って感じとか
2018/05/26(土) 10:05:05.40
ああ、条件の作成は>>136の最後ですでにワンライナーで教えているのか。しつれい
2018/05/26(土) 10:44:16.45
>>139
そのhoge|fugaはどこから来るの？
grep(1)コマンドの結果？
2018/05/26(土) 10:58:04.08
>>135 の最初で説明してね？>>135-137は噛み合ってないだけかなw というか、>>136の確認／質問のキモがわかってないというか
2018/05/26(土) 11:18:16.86
条件文の | をパイプとかいうからわけわかんなくなる
145133
垢版 |
2018/05/26(土) 11:49:32.72
そういう場合はパイプって言わないんですか。失礼しました。
正規表現でつかう or の役割を hoge fuga の間には挟みたいのです。
2018/05/26(土) 12:01:23.51
>>145

>>136
>$ cat ZZZ.txt | grep XXX | tr '\n' '|' | sed 's/|$//1'
>↑こういうので行けるけど。違うでしょ？
って教えてくれてるやん。「違わない」「それです」でいいんじゃないの？それが違うならどう違うって言うべきかと(どうみても違わないとしか思えないけど)
質問自体がアレだが自分の言いたいことをうまく説明できないのはいいとして、応えてくれてる人の言ってることがわからない／それに応えないのはアレだな
2018/05/26(土) 12:03:34.81
awkの手前で別途 fgrep -f か egrep -f を使った方が、改行→｢|｣変換をサボれて楽な気がする。
fgrep/egrep -f を使うときは bashないし zsh 依存になるけど
fgrep -f <(grep XXX ZZZ.txt)
と書くともっと楽だね。
2018/05/26(土) 12:10:12.44
\じゃないよバックスラッシュだよ
というのがありそうな気もしないでもない
149133
垢版 |
2018/05/26(土) 12:32:36.46
シェルスクリプト内で自動で行いたい旨を
書き損じておりました。
cat ZZZ.txt |grep XXX
hoge
fuga

から
awk '($3 !~ /hoge|fuga|neko/) && ($4 ~ /01/)' output.txt
としたいのです。

>>146
>$ cat ZZZ.txt | grep XXX | tr '\n' '|' | sed 's/|$//1'
でまさしく狙い通りの出力がされるのですが>>133のawkのパターン部にどうかけば同じ文字列が出せるかわかりません
2018/05/26(土) 12:38:10.49
awk の文はただの文字列でしかない
awk '($3 !~ /'"$aaa"'/) && ($4 ~ /01/)' output.txt
でも、
awk "(\$3 !~ /${aaa}/) && (\$4 ~ /01/)" output.txt
でも(他にエスケープ必要なのあるかな？)、
普通にシェル変数を(文字列内に)展開するのと変わらんぞ
2018/05/26(土) 12:42:16.30
書き損じどうこうじゃなくて、受け応えができないのが致命的ではあるなw
2018/05/26(土) 12:44:02.94
よく見たら、
hoge
fuga
から
hoge|fuga|neko
って、nekoはどこから来たっていう。まあうっかりだろけど
153133
垢版 |
2018/05/26(土) 13:37:00.34
みなさん申し訳ありません
>>150のレスを見てクォートをよ&#12316;く見なおしたら動きました。
初心者のたわごとに付きあわせてしまい申し訳ありませんでした。
2018/05/27(日) 08:08:25.73
nekoです。nekoはいます。
2018/05/30(水) 15:51:14.73
寝た子は起こすな
寝子は起こすな
156名無しさん＠お腹いっぱい。
垢版 |
2018/05/30(水) 20:03:13.31
sedコマンドでSGRを扱いたいんですがどうすればいいですか。
$ echo abc | sed 's/^a/\033[1m&\033[0m/1'
などとしてaを太字にしたりしたいです。
2018/05/30(水) 20:16:35.46
echo abc | sed -e 's/^a/'$'\033[1m&'$'\033[0m/1'
2018/05/30(水) 21:08:39.87
横からだが、
なんのこっちゃと思ったら $'' はエスケープ文字処理してくれんのね。なるほど
最初のだけでいいのでは？もしくは最初に付ける。もしくは逐一付けて閉じる
echo abc | sed -e 's/^a/'$'\033[1m&\033[0m/1'
echo abc | sed -e $'s/^a/\033[1m&\033[0m/1'
echo abc | sed -e 's/^a/'$'\033''[1m&'$'\033''[0m/1'
と思いました
159156
垢版 |
2018/05/31(木) 06:51:45.12
ありがとうございます。解決しました。
これは後出しになってしまいますが、POSIXの範囲でやりたかったので
$''ではなく$(printf)を使いました。
2018/06/02(土) 23:56:12.94
英語圏の序数詞を適切に処理するシェルスクリプト（というかワンライナー）を考えたのですが添削してください
$ for i in $(seq 15); do echo $i$(case $i in *1) echo st;; *2) echo nd;; *3) echo rd;; *) echo th;; esac); done
出力は一応望み通りでまたPOSIX utils+seq(1)のみで実行可能です。
2018/06/03(日) 00:35:29.50
11st とか 12nd になってるけどそれはいいの？
162名無しさん＠お腹いっぱい。
垢版 |
2018/06/03(日) 00:38:58.53
なにいっとるんやこいつw
163名無しさん＠お腹いっぱい。
垢版 |
2018/06/03(日) 01:12:42.26
なにいっとるんやってなにいっとるんやww
164160
垢版 |
2018/06/03(日) 01:46:34.86
すいません。>>161 さまのおっしゃる通りです。
$ for i in $(seq 30); do echo $i$(case $i in *1?) echo th;; *1) echo st;; *2) echo nd;; *3) echo rd;; *) echo th;; esac); done
これでどうでしょうか
2018/06/03(日) 16:20:05.98
クソ
2018/06/03(日) 16:34:12.72
いんでね
2018/06/03(日) 17:38:56.64
まず添削してくださいってどうしてほしいんだ
ちゃんと動いてんならそれはもう正解だと思うんだが
2018/06/03(日) 21:36:16.19
実際間違ってたんだし、いいじゃん
2018/06/04(月) 20:30:59.60
>>167
ちゃんと動いているかどうか判断できないから聞いてるんでは
2018/06/04(月) 20:52:08.98
エラるのはbashのバージョンのせいかな？3.2.57ではエラる／4.3.48では問題ない
だとしたらPOSIX utils云々はちょっと違うんじゃねと思わなくもない。POSIX utils云々って書いている意図がよくわからんけど
2018/06/04(月) 21:51:17.95
case文をこうしたら3.2.57で動いた
case $i in (*1?) echo th;; (*1) echo st;; (*2) echo nd;; (*3) echo rd;; (*) echo th;; esac
2018/06/04(月) 22:16:01.07
おおっ。ぱーふぇくつ(？)やねっ！
( が必要？？なんなんなん？？と謎だけど
2018/06/04(月) 22:26:45.14
$() 内では、case の ) を case の ) と認識してないで、$( の終わりと見てまうってのか。それで普通は使わない ( をか。いちおう ( はつけてもいいのね。つけてもつけなくてもいい存在みたいだけど
2018/06/04(月) 22:42:04.72
え……
>>164 のやつ、GNU bash 4.4.12，zsh 5.3.1，dash全てで動いたんだけど（Debian GNU/Linux）。
もちろん$()判定の不具合を回避したcase ()版でも動いたけれども。
2018/06/04(月) 23:08:17.44
bashの前のバージョン 3.2.57 でのなんですけど
2018/06/04(月) 23:49:50.64
あ。>>170でそう書いてあるな……。すいません。
177名無しさん＠お腹いっぱい。
垢版 |
2018/06/05(火) 00:18:12.94
sedなどで
1. 「%」以降改行までを削除
2. ただし「%」の直前に「\」があれば削除しない
（要するにTeXシステムのコメント除去）
をしたいです。また、できればなのですがPOSIXの範疇で行いたいです。
しかし2.を表わす正規表現が分かりません。教えていただけないでしょうか。
sedでsed -e '/%/{}'のようにして{}の内部で「\」が前置されているか判定するのが一番一般的かとは思うのですが
それさえ……。
どうかよろしくおねがいします。
2018/06/05(火) 00:27:24.06
sed -e '/^%/d' -e 's/\([^\]\)%.*$/\1/g'
でも確かTeXってオプション引数に%含まれてる場合コメントにならないんじゃなかったか？
\somecs[hoge=42%]{VAL}
↑こういうの。いや俺の記憶違いかもしれんが
2018/06/05(火) 01:22:58.47
sedのスレもあれば
正規表現のスレもある
なんでここで聞く
2018/06/05(火) 01:34:56.97
使えるからかな
181名無しさん＠お腹いっぱい。
垢版 |
2018/06/05(火) 15:36:09.34
以下のCのソースコードをシェルスクリプトに直したいのですが難しくてできない状態です
お願いできますでしょうか？
Cでは動作確認済みです
インデントするとここに貼れなかったので、見にくくなっていてすみません
どなたかよろしくお願いします


#include <stdio.h>
int main(void){
int res, i;
printf("2以上の整数をキーボードから入力してください。\n");
scanf("%d", &res);
for (i = 2; i <= res; i++) {
if (i == res) {
printf("%dは素数でした。\n", res);
}
else if ((res % i) == 0) {
printf("%dは素数ではありません。%dで割り切れます。\n", res, i);
break;
}
}
return 0;
}
2018/06/05(火) 16:08:24.34
宿題っぽい
2018/06/05(火) 16:10:05.52
なんかここ最近大学の宿題か？っていう質問多いな
2018/06/05(火) 16:10:24.26
丸被りしててワロタ
2018/06/05(火) 16:12:56.96
さすがに今回のはな
2018/06/05(火) 16:18:19.15
判定方法から見直した方がいいんじゃないの
なんか無駄そう
2018/06/05(火) 16:31:28.92
宿題は自分でやろう
188181
垢版 |
2018/06/05(火) 16:41:35.30
その通りっすね
スレ汚し失礼しました
2018/06/05(火) 17:10:33.43
以下のCのソースコードをシェルスクリプトに直したいのですが
× 難しくてできない状態です
○ 馬鹿だからできないです


勝手に難しい状態にするんじゃねーよ
2018/06/05(火) 17:13:20.82
普通に読めば自分にとっては難しいってことなんじゃ
大学生の宿題も困るが読解力の無いバカも困る
2018/06/05(火) 17:14:42.20
だな
2018/06/05(火) 17:16:21.87
このスレは馬鹿ばかりいる状態ですｗｗｗ
2018/06/05(火) 17:16:51.44
だな
2018/06/05(火) 17:18:07.86
プライドで自分が馬鹿でわかりませんって言うことができないから
それは悪くねぇけどさぁ、難しい状態になっちゃんてんのよー
って言いたいからそう書いてるんだろ
それぐらい読み取れよ
2018/06/05(火) 17:19:01.78
だな
2018/06/05(火) 17:22:56.16
よほど気に障ったか気に入られたらしいwどっちかな？
2018/06/05(火) 17:37:21.07
だな
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。
ニューススポーツなんでも実況