シェルスクリプトに関する総合スレッドです。
全般
・荒しは無視しましょう。
・丁寧な姿勢を心掛けましょう。
・ネチケット(死語)を意識しましょう。
・「○○(他の言語)でいいやん」は禁止。他のスレに行ってください。
シェルスクリプト総合 その32
https://mevius.5ch.net/test/read.cgi/tech/1571929725/
シェルスクリプト総合 その33
■ このスレッドは過去ログ倉庫に格納されています
2020/03/23(月) 01:12:30.31ID:TYte82vJ
570デフォルトの名無しさん
2020/07/02(木) 22:29:06.37ID:SkSFT8E6 OSでいくらutf8に対応しようが末尾AのAPI使ったアプリはsjisの入出力前提で書かれてるんだし
対応しようとすれば文字列周りは全部作り直しだよ
VBAやVBScriptとかのWSHも同じ問題を抱えてる
Windowsのutf8完全移行なんて10年後すら怪しい
対応しようとすれば文字列周りは全部作り直しだよ
VBAやVBScriptとかのWSHも同じ問題を抱えてる
Windowsのutf8完全移行なんて10年後すら怪しい
571デフォルトの名無しさん
2020/07/02(木) 23:58:17.21ID:9cYvmHwP だからそれはアプリの問題じゃん
Windowsの標準コマンドはUnicode前提(対応)で書かれている。
PowerShell等から利用するUnicode前提
WSLもUnicode(透過的に変換されるUTF-8)
VBAやVBScriptとかのWSHも同じ問題を抱えてるというが
問題があるのはそれとバッチファイルぐらいでしょ。
今は殆ど使われてない
Windowsの標準コマンドはUnicode前提(対応)で書かれている。
PowerShell等から利用するUnicode前提
WSLもUnicode(透過的に変換されるUTF-8)
VBAやVBScriptとかのWSHも同じ問題を抱えてるというが
問題があるのはそれとバッチファイルぐらいでしょ。
今は殆ど使われてない
572デフォルトの名無しさん
2020/07/03(金) 10:48:21.18ID:D1jLBB9V 今は殆ど使われてない[要出典]
573デフォルトの名無しさん
2020/07/03(金) 13:31:14.36ID:adDL+CTN Windowsを使うな(暴論)
574デフォルトの名無しさん
2020/07/03(金) 22:08:43.15ID:pyXUrnYQ エディタが対応した時点で932とか捨てたわ
変換する必要すらない(更新予定のない)古いメモ以外に残っていない
21世紀も20年目に入ってるというのにまだそんなの使ってる自体遅れいるのか
変換する必要すらない(更新予定のない)古いメモ以外に残っていない
21世紀も20年目に入ってるというのにまだそんなの使ってる自体遅れいるのか
575デフォルトの名無しさん
2020/07/03(金) 22:26:00.04ID:uIgOlo/V 俺がcp932を捨てたのいつだっけな?
Windowsになってからlzhを捨ててzipにした。
日本語が含まれる可能性がある個人用のファイル圧縮に
Unicodeを使う7zを使うようになったのは、うーん?2000年頃かなぁ
9x系に見切りをつけて(動かなければソフトの方を諦める)Windows 2000にした頃には
ファイルはどうしても無理な場合を除いてUTF-8を使うようにしていたし
cp932を使っていた時代は、LinuxもEUC-JPだったし大変だったね
LinuxでEUC-JPからUTF-8に変わった時には、WindowsもUTF-8を使うようにした
Windowsになってからlzhを捨ててzipにした。
日本語が含まれる可能性がある個人用のファイル圧縮に
Unicodeを使う7zを使うようになったのは、うーん?2000年頃かなぁ
9x系に見切りをつけて(動かなければソフトの方を諦める)Windows 2000にした頃には
ファイルはどうしても無理な場合を除いてUTF-8を使うようにしていたし
cp932を使っていた時代は、LinuxもEUC-JPだったし大変だったね
LinuxでEUC-JPからUTF-8に変わった時には、WindowsもUTF-8を使うようにした
576デフォルトの名無しさん
2020/07/03(金) 23:44:56.51ID:9C03Lp22 文字コードとしてのcp932と
システムロケールとしてのcp932をごっちゃにしてるやつが多すぎる
前者は単なる文字コードだから、個人レベルでどうにでもなる
長いことWindowsでutf-8を使ってると言う場合はこれに当たる
後者は現在のwin10でもバリバリの現役で、utf-8は1803から追加されたものの、未だベータ扱い
一部の古いソフトだと不具合がでるので、そう簡単な話ではない
たとえば、このレスを書くために開いているJane Style
システムロケールとしてのcp932をごっちゃにしてるやつが多すぎる
前者は単なる文字コードだから、個人レベルでどうにでもなる
長いことWindowsでutf-8を使ってると言う場合はこれに当たる
後者は現在のwin10でもバリバリの現役で、utf-8は1803から追加されたものの、未だベータ扱い
一部の古いソフトだと不具合がでるので、そう簡単な話ではない
たとえば、このレスを書くために開いているJane Style
577デフォルトの名無しさん
2020/07/03(金) 23:59:49.05ID:uIgOlo/V システムロケールはOSではなくてソフトの問題なんだよな
Windows自体はシステムロケールの設定に依存していない
なぜならすべてUnicode(UTF-16)で処理してるから
(もちろん互換性のための処理として一部例外はあるだろうが)
Windows自体はシステムロケールの設定に依存していない
なぜならすべてUnicode(UTF-16)で処理してるから
(もちろん互換性のための処理として一部例外はあるだろうが)
578デフォルトの名無しさん
2020/07/04(土) 00:30:48.50ID:1qYUKBUR ソフト側でロケールを理解できなかったらダメだからねぇ
そういえば、Linuxもutf-8への移行期(Fedora Core 1が最初だっけ?)に、
それまでのRed Hat 9で問題のなかったeuc-jp前提のソフトがダメダメだった
まぁシェルスクリプトは問題なかったはず
そういえば、Linuxもutf-8への移行期(Fedora Core 1が最初だっけ?)に、
それまでのRed Hat 9で問題のなかったeuc-jp前提のソフトがダメダメだった
まぁシェルスクリプトは問題なかったはず
579デフォルトの名無しさん
2020/07/04(土) 05:09:47.82ID:ve9MtcL4 Windowsの場合Unicodeで作ってれば
システムロケールなんて関係ないよ
システムロケールを理解する必要があるのは
Unicode(UTF-16)非対応アプリの話
システムロケールと使用する言語(表示する言語)は別だからね
システムロケールなんて関係ないよ
システムロケールを理解する必要があるのは
Unicode(UTF-16)非対応アプリの話
システムロケールと使用する言語(表示する言語)は別だからね
580デフォルトの名無しさん
2020/07/05(日) 00:52:27.71ID:m0wz7oid メモ帳の保存形式にあるUnicodeとかいう多重トラップ嫌い
581デフォルトの名無しさん
2020/07/13(月) 19:16:41.40ID:Xa4f7njE Austinで大規模なファイル更新があって,
お,何か重要な局面を迎えたのかな?と期待して報告書を読んだら,
全文書に存在する"POSIX.1-201x"を"POSIX.1-202x"に書き換える作業だったていうオチ。
お,何か重要な局面を迎えたのかな?と期待して報告書を読んだら,
全文書に存在する"POSIX.1-201x"を"POSIX.1-202x"に書き換える作業だったていうオチ。
582デフォルトの名無しさん
2020/07/15(水) 10:35:51.78ID:GO+Zaox3 組み込み系のash環境です。
以下のコードは、外部テキストファイル(shift-jis)をwhileで1行ずつ読み込んで、
シリアルポートの/dev/ttyUSB0へ1行の内容をそのまま送信する処理の一部です。
ファイルの中に日本語の0x5cのバックスラッシュがあると、文字化けしてしまいます。
0x5c混在のサンプルとして「表示」の漢字が正常に送れるかの試験コードを作りました。
以下のスクリプトの文字コードはshiftJISで保存し実行しました。
text=ダメ文字表示テスト
filtered_text=`echo $text | sed -e 's/\\/\\\\/g'`
echo -e "ORG text $text"
echo -e "filtered_text $filtered_text"
echo -e "$filtered_text" > /dev/ttyUSB0
結果
sed: unmatched '/'
ORG text ダメ文字侮ヲテスト
filtered_text
やりたいこと
シェルスクリプト内の変数に格納して、/dev/ttyUSB0へ「ダメ文字表示テスト」とそのまま送信したいです。
1行ずつ送信する理由は、たまに行間で制御コードを混ぜる必要があるためです。
sedの行が肝になると思い、作例を1日探しましたが、探し方が下手で見つけられませんでした。
sed以外のコマンドでも使えるコマンドがあれば何でもいいです。
nkfは無しでした。iconvはありましたがShiftjisのコードが含まれていませんでした。
そもそも最終的に送信するデータがshiftjisなので、これらは関係ないと気づきました。
どのような書き方でできるか、お知恵をいただけないでしょうか。
以下のコードは、外部テキストファイル(shift-jis)をwhileで1行ずつ読み込んで、
シリアルポートの/dev/ttyUSB0へ1行の内容をそのまま送信する処理の一部です。
ファイルの中に日本語の0x5cのバックスラッシュがあると、文字化けしてしまいます。
0x5c混在のサンプルとして「表示」の漢字が正常に送れるかの試験コードを作りました。
以下のスクリプトの文字コードはshiftJISで保存し実行しました。
text=ダメ文字表示テスト
filtered_text=`echo $text | sed -e 's/\\/\\\\/g'`
echo -e "ORG text $text"
echo -e "filtered_text $filtered_text"
echo -e "$filtered_text" > /dev/ttyUSB0
結果
sed: unmatched '/'
ORG text ダメ文字侮ヲテスト
filtered_text
やりたいこと
シェルスクリプト内の変数に格納して、/dev/ttyUSB0へ「ダメ文字表示テスト」とそのまま送信したいです。
1行ずつ送信する理由は、たまに行間で制御コードを混ぜる必要があるためです。
sedの行が肝になると思い、作例を1日探しましたが、探し方が下手で見つけられませんでした。
sed以外のコマンドでも使えるコマンドがあれば何でもいいです。
nkfは無しでした。iconvはありましたがShiftjisのコードが含まれていませんでした。
そもそも最終的に送信するデータがshiftjisなので、これらは関係ないと気づきました。
どのような書き方でできるか、お知恵をいただけないでしょうか。
583デフォルトの名無しさん
2020/07/15(水) 11:54:50.30ID:IqfNcqeZ ダメ文字は、数十年前の話w
584デフォルトの名無しさん
2020/07/15(水) 12:02:36.35ID:gwK3CNky585デフォルトの名無しさん
2020/07/15(水) 12:03:29.33ID:gwK3CNky586デフォルトの名無しさん
2020/07/15(水) 12:04:14.63ID:gwK3CNky いい加減文字コードはUTF-8に一括変換してから
処理して戻すってことを覚えたほうがいい
処理して戻すってことを覚えたほうがいい
587デフォルトの名無しさん
2020/07/15(水) 12:07:30.43ID:gwK3CNky >>582
echoは使うなprintfを使え
echoは使うなprintfを使え
588デフォルトの名無しさん
2020/07/15(水) 12:09:01.51ID:gwK3CNky > 1行ずつ送信する理由は、たまに行間で制御コードを混ぜる必要があるためです。
意味がわからん。制御コード1文字が二行に分かれたりでもするんか?
意味がわからん。制御コード1文字が二行に分かれたりでもするんか?
589デフォルトの名無しさん
2020/07/15(水) 13:17:28.61ID:4eO2mC8f590デフォルトの名無しさん
2020/07/17(金) 17:54:07.38ID:pKRyHByg >>582
>sed: unmatched '/'
SJIS云々の前にsedのコマンドがちゃんと認識されてないじゃん。
とりあえず、バックスラッシュの数を変えたり``じゃなくて$()を使ってみたらどう?
>sed: unmatched '/'
SJIS云々の前にsedのコマンドがちゃんと認識されてないじゃん。
とりあえず、バックスラッシュの数を変えたり``じゃなくて$()を使ってみたらどう?
591デフォルトの名無しさん
2020/07/18(土) 06:32:49.36ID:belUdedc ひょっとしてSJIS完全対応のテキストエディタってLinuxには存在しない?
昔mousepadで盛大に化けた覚えが
昔mousepadで盛大に化けた覚えが
592デフォルトの名無しさん
2020/07/18(土) 07:03:52.09ID:6UJBCs7F Emacs
593デフォルトの名無しさん
2020/07/18(土) 10:26:12.51ID:PyiwbgQS Vim
594デフォルトの名無しさん
2020/07/18(土) 10:38:54.42ID:W7WHirLG vscode
595デフォルトの名無しさん
2020/07/18(土) 11:38:05.10ID:PyiwbgQS バカな投稿をすると釣られた人間が正しい知識を教えてくれるメソッド
よかったな,>>591!
よかったな,>>591!
596デフォルトの名無しさん
2020/07/18(土) 11:44:04.46ID:fwbEJCvA つまりvscodeが正しいと?
597デフォルトの名無しさん
2020/07/18(土) 12:39:31.97ID:PyiwbgQS 俺のスレ読んでないの?w
598デフォルトの名無しさん
2020/07/18(土) 13:28:14.79ID:fwbEJCvA お前のレス?釣られた人間が正しい知識を教えてくれるんでしょう?
それ以外になんかあるの?
それ以外になんかあるの?
599デフォルトの名無しさん
2020/07/18(土) 13:48:08.58ID:W7WHirLG エディタも使いこなせないならwinのメモ帳でも使いなよ。sjis対応だよ
600デフォルトの名無しさん
2020/07/19(日) 08:53:42.63ID:b8gde26L お前いつも壁と話してんな
601デフォルトの名無しさん
2020/07/19(日) 10:23:03.44ID:HNDAT4gV 壁だと思ってるのはお前だけで、実は人間なんだぜ(ホラー風)
602デフォルトの名無しさん
2020/07/19(日) 11:15:59.84ID:W3hSYpRn ぬりかべ「かべっ!?」
603デフォルトの名無しさん
2020/07/27(月) 19:01:06.79ID:prTniRCc manコマンドはPOSIXに取り入れられそうなのに
その表示に関わるroffコマンドは影も形もないって、
なんつーか意味あんのかそれって思う。
その表示に関わるroffコマンドは影も形もないって、
なんつーか意味あんのかそれって思う。
604デフォルトの名無しさん
2020/07/27(月) 20:34:03.79ID:Sw4i8xv6605デフォルトの名無しさん
2020/07/27(月) 20:48:14.37ID:9y96d1KX manをPOSIXに取り入れるぐらいなら
HTMLビューワーをPOSIXに取り入れたほうが良い
JavaScriptとCSSに対応させる必要はないからさ
HTMLビューワーをPOSIXに取り入れたほうが良い
JavaScriptとCSSに対応させる必要はないからさ
606デフォルトの名無しさん
2020/07/27(月) 20:50:03.70ID:9y96d1KX curlをPOSIXに入れればいいのに
フル機能じゃなくていいけどREST API叩けるぐらい
フル機能じゃなくていいけどREST API叩けるぐらい
607デフォルトの名無しさん
2020/07/27(月) 21:12:03.12ID:vTLRE8Va >>603
おお、するどい。
でもmanが入ってないというのはどう言う意味? POSIXとSUSの意味の違いにこだわる?
で実際manの記述を見ると文章の整形とかそれをどう作るとかは書いてないので、
そういうレベルのものは規定しないという態度なのかも。
あと事実上GNU roffが標準だと思うが、さすがにそれを規格には入れられないのかも。
かといって今更大昔のroffに制限するのもなあと。
しかし最近GNUで検索するとKingの方がヒットしやすくてうざいw
おお、するどい。
でもmanが入ってないというのはどう言う意味? POSIXとSUSの意味の違いにこだわる?
で実際manの記述を見ると文章の整形とかそれをどう作るとかは書いてないので、
そういうレベルのものは規定しないという態度なのかも。
あと事実上GNU roffが標準だと思うが、さすがにそれを規格には入れられないのかも。
かといって今更大昔のroffに制限するのもなあと。
しかし最近GNUで検索するとKingの方がヒットしやすくてうざいw
608デフォルトの名無しさん
2020/07/27(月) 21:16:04.45ID:vTLRE8Va というか、King Gnuと言ったらRMSしかありえないだろw
609デフォルトの名無しさん
2020/07/28(火) 08:42:48.22ID:UlETHBDV こんなのか?
https://www.e-hon.ne.jp/bec/SA/Detail?refShinCode=0100000000000030681001&Action_id=121&Sza_id=F3
まだ役に立ってるよ。俺が持ってるのは 20.3 だけど。
https://www.e-hon.ne.jp/bec/SA/Detail?refShinCode=0100000000000030681001&Action_id=121&Sza_id=F3
まだ役に立ってるよ。俺が持ってるのは 20.3 だけど。
610デフォルトの名無しさん
2020/07/28(火) 13:13:59.11ID:R16GmJU5 質問。
次のような行からいずれかのvalueをきれいに削除するにはどうすれば?
name=value0,value1,value2,value3
たとえば次のコマンドだと、value1を削除できるものの、先頭か末尾か連続かのカンマが残ってしまう。。。
sed 's/^(name=.*)value1(.*)$/¥1¥2/'
残ったカンマを後で処理したらいいんだけど、そもそも一発でうまくやることができるんでは?という気がどうしても。
次のような行からいずれかのvalueをきれいに削除するにはどうすれば?
name=value0,value1,value2,value3
たとえば次のコマンドだと、value1を削除できるものの、先頭か末尾か連続かのカンマが残ってしまう。。。
sed 's/^(name=.*)value1(.*)$/¥1¥2/'
残ったカンマを後で処理したらいいんだけど、そもそも一発でうまくやることができるんでは?という気がどうしても。
611デフォルトの名無しさん
2020/07/28(火) 13:23:54.46ID:Mb4DOiRz ^(name=.*)bvalue1,?(.*)$
こうかな
こうかな
612デフォルトの名無しさん
2020/07/28(火) 13:24:17.04ID:Mb4DOiRz 文字化けてるとこは円記号な
613デフォルトの名無しさん
2020/07/28(火) 13:53:56.25ID:DVrEteyf King Gnu?
どっかで聞いたことあるようなないような▪▪▪
どっかで聞いたことあるようなないような▪▪▪
614デフォルトの名無しさん
2020/07/28(火) 14:07:36.32ID:R16GmJU5615デフォルトの名無しさん
2020/07/28(火) 14:08:46.03ID:3p32kQjL 残らないが?
616デフォルトの名無しさん
2020/07/28(火) 14:25:35.27ID:R16GmJU5 残るが。
value3直前のカンマが¥1に含まれるので。
value3直前のカンマが¥1に含まれるので。
617デフォルトの名無しさん
2020/07/28(火) 23:58:59.24ID:2KWkEgO3 >>610
>name=value0,value1,value2,value3
頭を柔らかくして、
最初に、この末尾に、カンマを追加すれば、処理しやすい形式になる
name=value0,value1,value2,value3,
>name=value0,value1,value2,value3
頭を柔らかくして、
最初に、この末尾に、カンマを追加すれば、処理しやすい形式になる
name=value0,value1,value2,value3,
618デフォルトの名無しさん
2020/07/29(水) 00:10:05.86ID:bLm2KFbe sed縛りなの?
後方参照する必要ないんじゃない?
value[0-2] については冗長だけど、以下の形式なら全部同じようにできるかと。
'?'の正規表現って、sedだとGNU sed とかだとつかえるのかな?
'?'はウチでは使えない。
echo 'name=value0,value1,value2,value3' | sed -e 's/value0,*//' -e 's/,$//'
echo 'name=value0,value1,value2,value3' | sed -e 's/value1,*//' -e 's/,$//'
echo 'name=value0,value1,value2,value3' | sed -e 's/value2,*//' -e 's/,$//'
echo 'name=value0,value1,value2,value3' | sed -e 's/value3,*//' -e 's/,$//'
後方参照する必要ないんじゃない?
value[0-2] については冗長だけど、以下の形式なら全部同じようにできるかと。
'?'の正規表現って、sedだとGNU sed とかだとつかえるのかな?
'?'はウチでは使えない。
echo 'name=value0,value1,value2,value3' | sed -e 's/value0,*//' -e 's/,$//'
echo 'name=value0,value1,value2,value3' | sed -e 's/value1,*//' -e 's/,$//'
echo 'name=value0,value1,value2,value3' | sed -e 's/value2,*//' -e 's/,$//'
echo 'name=value0,value1,value2,value3' | sed -e 's/value3,*//' -e 's/,$//'
619デフォルトの名無しさん
2020/07/29(水) 03:25:12.86ID:ZD2Ud5DP >>617
Perlとかならそうするが、sedだとなかなか?
sedはあんまり使わないので、そうしたくてもよくわからない。。。
>>618
sed縛りではないけど、Linux最小インストールでも対応したいので、sedくらいしか?
ほかに使えるならそれも可。
後方参照してるのは、「name=」で始まる行だけに限定したいから。
それ以外の行はそのままで。
「?」が使えない正規表現があるの?
POSIXに含まれてなかったっけ?
ちなみに現在はこうしてたっけかな?
細かいところはちょっと違うかも。
sed -r 's/^(name=.*)value1,?(.*)$/¥1¥2/;s/^(name=.*),+$/¥1/' -i file.txt
なんかくどくて、もっとさっぱり書けるやろと。。。
Perlとかならそうするが、sedだとなかなか?
sedはあんまり使わないので、そうしたくてもよくわからない。。。
>>618
sed縛りではないけど、Linux最小インストールでも対応したいので、sedくらいしか?
ほかに使えるならそれも可。
後方参照してるのは、「name=」で始まる行だけに限定したいから。
それ以外の行はそのままで。
「?」が使えない正規表現があるの?
POSIXに含まれてなかったっけ?
ちなみに現在はこうしてたっけかな?
細かいところはちょっと違うかも。
sed -r 's/^(name=.*)value1,?(.*)$/¥1¥2/;s/^(name=.*),+$/¥1/' -i file.txt
なんかくどくて、もっとさっぱり書けるやろと。。。
620デフォルトの名無しさん
2020/07/29(水) 05:18:27.85ID:W2ZwK0DF Ruby で作った
text = <<"EOT"
a
name=value0,value1,value2,value3
x
EOT
word = "value2,"
text.each_line do | line | # 1行ずつ処理する
# 先頭が、name= 以外は処理しない
next unless line.start_with? "name="
line.chomp! # 末尾の改行を削除する
line += "," # 処理しやすいように一旦、末尾にカンマを付ける
line.slice! word # 取り除く
line.slice! -1 # 末尾のカンマを取り除く
puts line #=> name=value0,value1,value3
end
text = <<"EOT"
a
name=value0,value1,value2,value3
x
EOT
word = "value2,"
text.each_line do | line | # 1行ずつ処理する
# 先頭が、name= 以外は処理しない
next unless line.start_with? "name="
line.chomp! # 末尾の改行を削除する
line += "," # 処理しやすいように一旦、末尾にカンマを付ける
line.slice! word # 取り除く
line.slice! -1 # 末尾のカンマを取り除く
puts line #=> name=value0,value1,value3
end
621デフォルトの名無しさん
2020/07/29(水) 06:28:49.20ID:Fq72tfsf sedの正規表現で最短一致は使えないって地味に罠だよな
[^]で工夫すれば行けるらしいが
[^]で工夫すれば行けるらしいが
622デフォルトの名無しさん
2020/07/29(水) 07:17:15.52ID:SoSaYlfN for((aa=-1;aa<4;aa++)); do echo name=value0,value1,value2,value3 |sed -e"/^name=/{s/$/,/; s/value${aa},//; s/,$//;}"; done
623618
2020/07/29(水) 11:42:17.47ID:bLm2KFbe >>622
完全に同意。個人的には {} 使わないで -e で並べたい派だけど。
*を使うより厳密に置換できてよいと思う。
619には以下の書き方のほうが分かりやすそう。
sed -e '/^name=/{s/$/,/; s/value0,//; s/,$//;}'
>>619
sedの正規表現では '?' 使えないはず。
GNU sed でもオプション使わないと通らないのが確認できた。
できれば -E を使ってほしいかな。個人的には。
-E, -r, --regexp-extended
use extended regular expressions in the script
(for portability use POSIX -E).
完全に同意。個人的には {} 使わないで -e で並べたい派だけど。
*を使うより厳密に置換できてよいと思う。
619には以下の書き方のほうが分かりやすそう。
sed -e '/^name=/{s/$/,/; s/value0,//; s/,$//;}'
>>619
sedの正規表現では '?' 使えないはず。
GNU sed でもオプション使わないと通らないのが確認できた。
できれば -E を使ってほしいかな。個人的には。
-E, -r, --regexp-extended
use extended regular expressions in the script
(for portability use POSIX -E).
624デフォルトの名無しさん
2020/07/29(水) 11:58:07.49ID:10XNhQ52 そうやって、外部コマンドをあれこれ駆使して
どうにかして簡単に書ける方法はないか?に
無駄な時間使ってるのを見るとアホやなぁって思う
一般的なやり方でできないなら諦めろよ
そのコマンドを使うのが間違ってるんだ
どうにかして簡単に書ける方法はないか?に
無駄な時間使ってるのを見るとアホやなぁって思う
一般的なやり方でできないなら諦めろよ
そのコマンドを使うのが間違ってるんだ
625デフォルトの名無しさん
2020/07/29(水) 12:32:30.11ID:ZD2Ud5DP626デフォルトの名無しさん
2020/07/29(水) 12:44:55.15ID:ZD2Ud5DP627デフォルトの名無しさん
2020/07/29(水) 13:19:38.86ID:E/WNSRes データがカンマを含む場合はどうしますか?
name1=v0,"v,,1",v2,,,vvv,unko,
name2=,sss,"hdj,du,n",,ss,,,,kkkk
name1=v0,"v,,1",v2,,,vvv,unko,
name2=,sss,"hdj,du,n",,ss,,,,kkkk
628デフォルトの名無しさん
2020/07/29(水) 15:37:47.77ID:iTLEUVw7 特定の行で区切った塊ごとで処理したいんだけどいい方法ない?
例えばこんなのだったら====で区切って
abc
def
==== 1
ghi
jkl
==== 2
mno
pqr
abc〜def、ghi〜jkl、mno〜pqrという3つの塊をそれぞれ処理したい。
それと ghi〜jklという塊を処理している時は1ですよ。という数字も知りたい
(最初の塊の時は数字なし)
例えばこんなのだったら====で区切って
abc
def
==== 1
ghi
jkl
==== 2
mno
pqr
abc〜def、ghi〜jkl、mno〜pqrという3つの塊をそれぞれ処理したい。
それと ghi〜jklという塊を処理している時は1ですよ。という数字も知りたい
(最初の塊の時は数字なし)
629デフォルトの名無しさん
2020/07/30(木) 06:16:08.96ID:ixil7w/z >>628
cat |sed -ne "/^===/! {H;}; $ b ll; /^=/ {:ll; s/=//g; x; s/\n/ /g; p;}" << EOL
abc
def
==== 1
ghi
jkl
==== 2
mno
pqr
EOL
abc def
1 ghi jkl
2 mno pqr
cat |sed -ne "/^===/! {H;}; $ b ll; /^=/ {:ll; s/=//g; x; s/\n/ /g; p;}" << EOL
abc
def
==== 1
ghi
jkl
==== 2
mno
pqr
EOL
abc def
1 ghi jkl
2 mno pqr
630デフォルトの名無しさん
2020/07/30(木) 06:42:42.05ID:oWxKF5YB631デフォルトの名無しさん
2020/07/30(木) 06:43:43.55ID:oWxKF5YB あと塊から改行を取り除いてはいけません
632デフォルトの名無しさん
2020/07/30(木) 14:54:43.85ID:Ws4Sjpc9 $!をリセットする方法はないですかね?
空とかunsetとか0とか
空とかunsetとか0とか
633デフォルトの名無しさん
2020/07/30(木) 15:15:25.11ID:l+t/gnGC Perl 使うと楽だが、シェルスクリプトで、か・・・
634デフォルトの名無しさん
2020/07/31(金) 00:34:30.45ID:h2BvMEZJ Ruby なら、
def f( num, line )
puts num, line
end
# num は、inject の蓄積変数。0 は初期値
File.foreach( "input.txt" ).inject( 0 ) do |num, line|
if line.start_with? "==== " # 先頭が、これなら
line.chomp! # 末尾の改行を削除する
num = line[ 5..-1 ].to_i # 数字の部分を取り出して、整数にする
next num
end
f( num, line )
num
end
出力
0
abc
0
def
1
ghi
1
jkl
2
mno
2
pqr
def f( num, line )
puts num, line
end
# num は、inject の蓄積変数。0 は初期値
File.foreach( "input.txt" ).inject( 0 ) do |num, line|
if line.start_with? "==== " # 先頭が、これなら
line.chomp! # 末尾の改行を削除する
num = line[ 5..-1 ].to_i # 数字の部分を取り出して、整数にする
next num
end
f( num, line )
num
end
出力
0
abc
0
def
1
ghi
1
jkl
2
mno
2
pqr
635デフォルトの名無しさん
2020/07/31(金) 01:26:11.97ID:1vLgXRtq >>630
Bashなら、プロセス置換(process substitution)でできるのでは。
<(echo;最初のデリミタ行までを抽出するコマンドライン)
<(echo 1;最初から次のデリミタ行までを抽出するコマンドライン)
<(echo 2;最後のデリミタ行からを抽出するコマンドライン)
としたら、先頭行が番号、それ以降がテキスト行として読み込める。
個人的には、さすがここまでのレベルならPerlとかでやったほうが。
Bashなら、プロセス置換(process substitution)でできるのでは。
<(echo;最初のデリミタ行までを抽出するコマンドライン)
<(echo 1;最初から次のデリミタ行までを抽出するコマンドライン)
<(echo 2;最後のデリミタ行からを抽出するコマンドライン)
としたら、先頭行が番号、それ以降がテキスト行として読み込める。
個人的には、さすがここまでのレベルならPerlとかでやったほうが。
636デフォルトの名無しさん
2020/07/31(金) 19:26:43.51ID:qTuk7lt4 bashの#!でのオプションについて質問。
先頭行を次のようにすると、「invalid option name」エラーになります。
#!/usr/bin/bash -o pipefail
...
しかし、コマンドラインに同じように書くとエラーになりません。
/usr/bin/bash -o pipefail -c '...'
どうして?
-eならどっちも問題ないので、#!行のオプションの解釈になにか秘密があるんだろうけど。
先頭行を次のようにすると、「invalid option name」エラーになります。
#!/usr/bin/bash -o pipefail
...
しかし、コマンドラインに同じように書くとエラーになりません。
/usr/bin/bash -o pipefail -c '...'
どうして?
-eならどっちも問題ないので、#!行のオプションの解釈になにか秘密があるんだろうけど。
637デフォルトの名無しさん
2020/07/31(金) 20:01:20.64ID:j/9/9lyu >>636
MacOSやFreeBSDだと上手くいく。
原因はLinuxのexecl()関数が
「/usr/bin/bash」と「-o pipefail」という
二つの引数を実行しているせい。
とうぜん「o pipefail」というオプションはないので,怒られる。
MacOSやFreeBSDだと上手くいく。
原因はLinuxのexecl()関数が
「/usr/bin/bash」と「-o pipefail」という
二つの引数を実行しているせい。
とうぜん「o pipefail」というオプションはないので,怒られる。
638デフォルトの名無しさん
2020/07/31(金) 20:03:04.24ID:j/9/9lyu さらに言うと,
シバンはPOSIXが「実装ごとに挙動がバラバラなんで俺はこの動作を規定しません」
って公言するくらい,各種OSごとに扱われかたが違う。
今調べられないけど,古いAIXとかだと
「!/usr/bin/bash -o pipefail」とかいうコマンドを探しにいってエラー吐いてた記憶がある。
シバンはPOSIXが「実装ごとに挙動がバラバラなんで俺はこの動作を規定しません」
って公言するくらい,各種OSごとに扱われかたが違う。
今調べられないけど,古いAIXとかだと
「!/usr/bin/bash -o pipefail」とかいうコマンドを探しにいってエラー吐いてた記憶がある。
639デフォルトの名無しさん
2020/07/31(金) 20:39:05.80ID:k/mzlDiC >>636
/usr/bin/bash -o pipefail ではなく
/usr/bin/bash "-o pipefail" を実行している
まあ素直に
#!/bin/bash
set -o pipefail
って書けってことだな
/usr/bin/bash -o pipefail ではなく
/usr/bin/bash "-o pipefail" を実行している
まあ素直に
#!/bin/bash
set -o pipefail
って書けってことだな
640デフォルトの名無しさん
2020/07/31(金) 21:40:13.69ID:j/9/9lyu もう書いたんだが…
641デフォルトの名無しさん
2020/07/31(金) 21:44:42.11ID:qTuk7lt4642デフォルトの名無しさん
2020/07/31(金) 21:56:20.95ID:k/mzlDiC /usr/bin/bashにbashがあるとは限らない
というか普通無い
というか普通無い
643デフォルトの名無しさん
2020/07/31(金) 22:30:39.13ID:j/9/9lyu644デフォルトの名無しさん
2020/07/31(金) 22:35:57.38ID:h2BvMEZJ 普通は、/bin/bash
じゃないの?
じゃないの?
645デフォルトの名無しさん
2020/07/31(金) 22:55:43.76ID:qTuk7lt4646デフォルトの名無しさん
2020/07/31(金) 23:03:07.55ID:w9lTjcUH $ lsb_release -d
Description: Ubuntu 20.04.1 LTS
$ ls -1 /bin/bash
/bin/bash
$ ls -1 /usr/bin/bash
ls: cannot access '/usr/bin/bash': No such file or directory
Description: Ubuntu 20.04.1 LTS
$ ls -1 /bin/bash
/bin/bash
$ ls -1 /usr/bin/bash
ls: cannot access '/usr/bin/bash': No such file or directory
647デフォルトの名無しさん
2020/07/31(金) 23:31:35.93ID:BwwodwaD >>645
Linuxの場合/usr/binにbashがあるのは/bin -> /usr/binになっている環境ぐらい。それ以外はほぼ間違いなく/binにある。元々シングルユーザーモード用の/binになかったら、シングルユーザーモードでシェルが使えないでしょ。
最近は/binと/usr/binを統合する動きが進んでいるから将来はどっちでも良くなるかもしれないし、あるいは/binがなくなるかもしれないけど、今はまだ従来の環境も普通にあるから/bin/bashがいい。その為にシムリンクを張っているわけなので。
UbuntuやDebianは、今インストールすると統合されるけど、従来の環境からアップデートした場合は統合されない。
あとGentooとかは今クリーンインストールしても統合されない。
Linuxの場合/usr/binにbashがあるのは/bin -> /usr/binになっている環境ぐらい。それ以外はほぼ間違いなく/binにある。元々シングルユーザーモード用の/binになかったら、シングルユーザーモードでシェルが使えないでしょ。
最近は/binと/usr/binを統合する動きが進んでいるから将来はどっちでも良くなるかもしれないし、あるいは/binがなくなるかもしれないけど、今はまだ従来の環境も普通にあるから/bin/bashがいい。その為にシムリンクを張っているわけなので。
UbuntuやDebianは、今インストールすると統合されるけど、従来の環境からアップデートした場合は統合されない。
あとGentooとかは今クリーンインストールしても統合されない。
648デフォルトの名無しさん
2020/08/01(土) 01:21:21.09ID:6XTg5Iao >>647
シングルユーザー環境はまったく想定外なので。。。
ファイルパスをあわせても、実際の具体的な環境は把握できてないし、どうせ動作確認もしないから、きっぱりわりきることにしたのだ。
binの統合の話は、RHEL8のドキュメントで見た気がするけど、だったらもうとっととのっとこう、と思ったのもある。
うちのメインはCentOSだし、そうなってない環境を使うことになったら自分でシンボリックリンクを追加したらええんやろ、ということで。
シングルユーザー環境はまったく想定外なので。。。
ファイルパスをあわせても、実際の具体的な環境は把握できてないし、どうせ動作確認もしないから、きっぱりわりきることにしたのだ。
binの統合の話は、RHEL8のドキュメントで見た気がするけど、だったらもうとっととのっとこう、と思ったのもある。
うちのメインはCentOSだし、そうなってない環境を使うことになったら自分でシンボリックリンクを追加したらええんやろ、ということで。
649デフォルトの名無しさん
2020/08/01(土) 08:14:01.78ID:6JQgXAfu 又聞きで悪いが,Oracleかなにかだと,/usr/bin/にはGNU系の製品が入ってなかったとか。
/export/以下にあるとかなんとか。
/export/以下にあるとかなんとか。
650デフォルトの名無しさん
2020/08/01(土) 08:30:02.46ID:2HCIDb75 /opt/bin とかに入ってるのもあったなぁ
651649
2020/08/01(土) 10:05:25.94ID:6JQgXAfu >>650
あー。これで思い出した。
/opt/bin/だわ。
/export/は利用者のホームディレクトリとかがある所だわ。
Bashの場所とは関係ない話になるけど,
昔$HOME変数とか使わずに/home/***以下にあるやろって決め打ちしてたら
Solarisではまさかの/export/home/***にあるっていう罠に引っ掛かったw
あー。これで思い出した。
/opt/bin/だわ。
/export/は利用者のホームディレクトリとかがある所だわ。
Bashの場所とは関係ない話になるけど,
昔$HOME変数とか使わずに/home/***以下にあるやろって決め打ちしてたら
Solarisではまさかの/export/home/***にあるっていう罠に引っ掛かったw
652デフォルトの名無しさん
2020/08/01(土) 13:49:06.35ID:U7vGE7b3 何十年経ってもディレクトリが分類できる未来はないんやな
653デフォルトの名無しさん
2020/08/01(土) 17:25:34.94ID:WzMhf7ZH >>652
OS作る時にOSの仕様として組み込んでしまうぐらいしか方法無いと思う。ちょっとでも自由があると必ずそこから崩れる。
OS作る時にOSの仕様として組み込んでしまうぐらいしか方法無いと思う。ちょっとでも自由があると必ずそこから崩れる。
654デフォルトの名無しさん
2020/08/01(土) 23:28:16.58ID:huzWWnKB 10MBぐらいのテキストファイルでさ
指定したバイト目から〜バイトの範囲を取得っていうのを
やるととしたらどういう方法が一番高速だろうか?
bashismなし。外部コマンドは呼び出してもいいけど遅いな
指定したバイト目から〜バイトの範囲を取得っていうのを
やるととしたらどういう方法が一番高速だろうか?
bashismなし。外部コマンドは呼び出してもいいけど遅いな
655デフォルトの名無しさん
2020/08/02(日) 00:54:32.67ID:hIQzyyzC Perlでワンライナーが速そう。w
656デフォルトの名無しさん
2020/08/02(日) 00:55:21.79ID:KvZo8Zjs でもPerlを呼び出すコストがかかるでしょ?
657デフォルトの名無しさん
2020/08/02(日) 03:03:58.88ID:hIQzyyzC じゃあ、全文をPerlに書き直そう。w
いっそCで?
マジな話、ファイルを直に開いてseekできるPerlならトータル黒字なんでは。
知らんけど。
いっそCで?
マジな話、ファイルを直に開いてseekできるPerlならトータル黒字なんでは。
知らんけど。
658デフォルトの名無しさん
2020/08/02(日) 08:34:06.01ID:fjyVy3s+ dd, od, head/tail
コンパイル済みのCのコードのほうが速いやろ
コンパイル済みのCのコードのほうが速いやろ
659デフォルトの名無しさん
2020/08/02(日) 09:26:03.25ID:mglN/rTr >>654
dd一択。
dd一択。
660デフォルトの名無しさん
2020/08/02(日) 12:16:22.41ID:pZSLu0WP そもそも設定が/etc/に雑に放り込まれてる時点でな
個人設定だって~/直下だったり~/.dirだったり~/.config/.dirだったりてんでバラバラだし
個人設定だって~/直下だったり~/.dirだったり~/.config/.dirだったりてんでバラバラだし
661デフォルトの名無しさん
2020/08/02(日) 14:14:46.24ID:hIQzyyzC662デフォルトの名無しさん
2020/08/02(日) 14:18:23.50ID:hIQzyyzC いや、head $(())|tailとすればマシなのか。
元コメのPerl起動時間さえ気にする用途にはあわんかもだけど。
元コメのPerl起動時間さえ気にする用途にはあわんかもだけど。
663デフォルトの名無しさん
2020/08/02(日) 15:04:27.21ID:mglN/rTr664デフォルトの名無しさん
2020/08/02(日) 15:44:30.48ID:hIQzyyzC >>663
別人かもだけど、そういう気持ちは元コメから書いてあったから。。。
head/tailは、--bytesオプションがあるやろ?
算術式展開は、でもBash限定なんだっけ?
ただ、いずれにしてもddにしろheadにしろtailにしろ、スキップが読み捨てなのか直シークなのかで速度が違いそう?
別人かもだけど、そういう気持ちは元コメから書いてあったから。。。
head/tailは、--bytesオプションがあるやろ?
算術式展開は、でもBash限定なんだっけ?
ただ、いずれにしてもddにしろheadにしろtailにしろ、スキップが読み捨てなのか直シークなのかで速度が違いそう?
665デフォルトの名無しさん
2020/08/02(日) 19:23:27.16ID:mglN/rTr >>664
算術展開はPOSIXで定義されてるから
最近のPOSIX準拠を謳うシェルなら必ず使える。
https://pubs.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#tag_18_06_04
算術展開はPOSIXで定義されてるから
最近のPOSIX準拠を謳うシェルなら必ず使える。
https://pubs.opengroup.org/onlinepubs/9699919799/utilities/V3_chap02.html#tag_18_06_04
666デフォルトの名無しさん
2020/08/02(日) 19:30:06.31ID:TAOBMMvc >>661
ファイルの大きさを見て一番後ろを見に行くから遅いはずがない
ファイルの大きさを見て一番後ろを見に行くから遅いはずがない
667デフォルトの名無しさん
2020/08/02(日) 19:39:48.99ID:wSiq9/7A $ ls -1sh input.dat
10M input.dat
$ dd if=input.dat of=output.dat bs=1M skip=1 count=1
$ ls -1sh output.dat
1.0M output.dat
10M input.dat
$ dd if=input.dat of=output.dat bs=1M skip=1 count=1
$ ls -1sh output.dat
1.0M output.dat
668デフォルトの名無しさん
2020/08/02(日) 20:02:20.24ID:hIQzyyzC669デフォルトの名無しさん
2020/08/02(日) 20:07:58.65ID:hIQzyyzC■ このスレッドは過去ログ倉庫に格納されています
