文字コード総合スレ part13

**デフォルトの名無しさん** · 2020/07/03(金) 20:53:47.08

Windows NTは初代からUnicodeがネイティブの文字コードです。cp932ではありません。
プログラマーなら一度は煩わされたことのある文字コードについてのスレ。
UTF-8、Shift_JIS、JIS、EUC、Unicode、UCS、サロゲートペア、コードポイント、文字コード判定、
合成文字、ソート、TRON、外字コード、その他について語り合いましょう。
各言語での文字列の扱いについての質問もOKです。
基本マッターリ、ささ、茶でもどうぞ。

■過去スレ
文字コード総合スレ part1 http://pc11.2ch.net/test/read.cgi/tech/1031028205/
文字コード総合スレ part2 http://pc11.2ch.net/test/read.cgi/tech/1143375639/
文字コード総合スレ part3 http://pc11.2ch.net/test/read.cgi/tech/1180250376/
文字コード総合スレ part4 http://pc11.2ch.net/test/read.cgi/tech/1228052369/
　（スレ再利用）UnicodeとUTF-8の違いは？ http://pc12.2ch.net/test/read.cgi/tech/1177930957/
　（隔離スレ）UnicodeとUTF-8の違いは？　その2 http://pc12.2ch.net/test/read.cgi/tech/1274937437/
文字コード総合スレ part5 http://pc12.2ch.net/test/read.cgi/tech/1236529563/
文字コード総合スレ part6 http://hibari.2ch.net/test/read.cgi/tech/1278923059/
文字コード総合スレ part7 http://toro.2ch.net/test/read.cgi/tech/1306595564/
文字コード総合スレ part8 http://peace.2ch.net/test/read.cgi/tech/1354248962/
文字コード総合スレ part9 http://peace.2ch.net/test/read.cgi/tech/1401301779/
文字コード総合スレ Part10 http://mevius.2ch.net/test/read.cgi/tech/1444822140/
文字コード総合スレ Part11 https://mevius.5ch.net/test/read.cgi/tech/1516629503/
文字コード総合スレ Part12 https://mevius.5ch.net/test/read.cgi/tech/1544931495/

**デフォルトの名無しさん** · 2021/12/14(火) 02:29:21.85

ANSI Colorによる強調を使わずに絵文字による強調を使うのが主流になっていきそうな気がするよ
例えば、ビルドログのエラーをパイプリダイレクト先でも強調したい時に気軽に使える
⛔ build failed

**デフォルトの名無しさん** · 2021/12/14(火) 02:46:27.66

以下の文字は、とりあえず色付き絵文字で注目させたい時に使えそう
🔴 🔵 🔶 🔷 🔸 🔹 🟠 🟡 🟢 🟣 🟤 🟥 🟦 🟧 🟨 🟩 🟪 🟫

**デフォルトの名無しさん** · 2021/12/14(火) 08:38:06.25

>>280
notoは名前変えなきゃいけなくなるじゃん

**デフォルトの名無しさん** · 2021/12/14(火) 17:31:45.84

📛 build failed

**デフォルトの名無しさん** · 2021/12/14(火) 17:35:31.31

💮 Build Success

**デフォルトの名無しさん** · 2021/12/14(火) 17:46:34.82

⛔天下一品

**デフォルトの名無しさん** · 2021/12/14(火) 19:25:55.56

一私企業が文字コードを独占利用するなんて横暴だ
〠
🚅
㍾

**デフォルトの名無しさん** · 2021/12/14(火) 21:05:37.79

〄
↑これ永遠にこのまま変わらないのかね

**デフォルトの名無しさん** · 2021/12/14(火) 21:05:55.66

〄
こうか

**デフォルトの名無しさん** · 2021/12/14(火) 21:25:02.47

✅ Build Success
💯 Build Success
絵文字の意味よりも色が重要かも

**デフォルトの名無しさん** · 2021/12/16(木) 00:51:31.68

100があるなら0～99もあるべきではないか

**デフォルトの名無しさん** · 2021/12/16(木) 03:24:30.66

💮 WHITE FLOWER (U+1F4AE)は、macOSとiOSの場合「大変よくできました」って日本語が縦書きされてるんだよな

**デフォルトの名無しさん** · 2021/12/17(金) 02:09:05.04

興味深い

**デフォルトの名無しさん** · 2021/12/17(金) 11:47:44.47

>>292
元の絵文字は「花丸」だった。赤ペンでぐるぐる丸を書く感じの。
Mac上でグリフがデザインされたとき、やや拡大解釈気味に「大変よくできました」の花の
スタンプになった。
その後他社はこれに引きずられたのか、赤線で花のイラストにした。結局Unicodeの名前も
White Flowerになってしまった。

これとおんなじかと https://youtu.be/8guQ43WGcjQ?t=268

**デフォルトの名無しさん** · 2021/12/18(土) 04:47:18.20

ゆうて鉄砲が水鉄砲になるみたいなのもあるからな
規格がどうだろうと大手がこぞって無視したらそうなってしまうのな

**デフォルトの名無しさん** · 2021/12/18(土) 05:18:07.09

読み手に色で注目を促したいだけならANSI Colorみたいに文字列そのものの色を変える必要ないんだよな
文字列の手前に色付き絵文字を配置するだけでも同じ効果があるので、例えば重要な情報がログが埋もれてしまうのを緩和できる

**デフォルトの名無しさん** · 2021/12/18(土) 17:09:34.24

https://emojipedia.org/white-flower/ の記述を信じると「大変よくできました」が
入っているデザインがMSも含めて半分ぐらいあるけど、自分のWin10で軽く試すと
花の真ん中はただの点々だなあ。

**デフォルトの名無しさん** · 2021/12/18(土) 18:10:37.82

>>296
今時のテキストエディタは絵文字ちゃんと表示できるし、その方向はいいなあ

**デフォルトの名無しさん** · 2021/12/18(土) 18:41:26.04

以前ログを何かのチャット経由で送ってもらったら、勝手に絵文字に変換するフィルターが
かかっていたようで、えらいことになってた
たとえばdebugという文字列が虫の絵になってたりして、面白くてログの内容が入ってこなかった

**デフォルトの名無しさん** · 2021/12/18(土) 21:46:25.14

大昔ここでもそういうやつの話題見たことあるな
Webフォントで、絵文字に対応する英単語ごとに複数文字の合字として入ってるの
やっぱ弊害のほうが大きいよな

**デフォルトの名無しさん** · 2021/12/18(土) 22:36:51.82

勝手に置換するのが問題であって絵文字は関係ないがな

**デフォルトの名無しさん** · 2021/12/19(日) 01:29:19.44

絵文字を使ったログというのはこういうやつかな
ttps://spin.atomicobject.com/2019/10/15/faster-debugging-emoji/

**デフォルトの名無しさん** · 2021/12/19(日) 08:18:21.32

端末の文字列を色付けする従来のANSI Colorだとパイプやリダイレクトや画面テキストコピペで情報が失われてしまうけど
絵文字だと情報が失われない利点がある

**デフォルトの名無しさん** · 2021/12/19(日) 08:46:52.31

Visual Studioでビルドしてると単色テキストでログが画面に出力されるんだけど、
コマンドプロンプトとかでmsbuild使ってビルドするとテキストが色分けされているのがわかる。
何が言いたいかというと、Visual Studioでさえログから色情報が捨てられて、もったいないことになっているよ、という話

**デフォルトの名無しさん** · 2021/12/19(日) 16:04:22.86

集計画面があるからでは？

**デフォルトの名無しさん** · 2021/12/19(日) 18:00:54.55

絵文字か... めんどくさい。
文字コードが実質統一されたことで文字化けは減ったかも知れんが、絵文字を下手に触って
文字化け（絵化け?）する場合がありそう。

**デフォルトの名無しさん** · 2021/12/19(日) 20:08:53.97

>>306
絵文字は実害が出る前に国際化未対応の不具合を見つけるのに役立ってきたよ
ま、絵文字が化けることそれ自体が実害だというなら実害なのかもしれんが

🛠工事中
🛠工事中

**デフォルトの名無しさん** · 2021/12/20(月) 01:45:44.75

それはある

**デフォルトの名無しさん** · 2021/12/20(月) 02:33:20.46

なるほど。まあ国際化というか正しいUnicodeの扱い方? のような気もするが。
え、Unicodeを使うこと＝国際化だって? あとはやたら中立を求めてくるやつ? 文化ガーとか
肌の色ガーとか性別ガーとか。

しかし、単に「工事中」と言っても含まれるメッセージには「工事中だから入ってくんな」とか
「工事中なので待っててね）」とかがあるような。
それは後者かな。IDEとかでありがちな。前者は日本由来の🚧はどうでしょう。

**デフォルトの名無しさん** · 2021/12/20(月) 02:44:04.59

ま確かに最近はいかにICUを正しく使うかみたいな感じはある... 自分の界隈では

**デフォルトの名無しさん** · 2021/12/20(月) 06:43:37.99

Windows10だとU+1F6E0とU+FE0Fの連続で以下画像と似た絵文字が表示されるはず
https://uc-emoji.azureedge.net/orig/18/83d86f5c30039ddf01bcb271f219a2.png
2chの挙動なんか怪しい、とりあえず
🛠 U+1F6E0(ハンマーとレンチ) U+FE0F(バリエーションセレクター16) の組み合わせでハンマーとレンチ絵文字を表示するテスト
🛠

**311** · 2021/12/20(月) 06:45:57.85

再現した
どうも5ch(2chじゃなかった)に投稿する時にU+FE0F(バリエーションセレクター16)が捨てられてしまうようだ

**311** · 2021/12/20(月) 06:58:14.29

以下サイトは、U+FE0F(バリエーションセレクター16が付随したハンマーとレンチの絵文字をクリップボードにコピーできる
https://emojigraph.org/ja/hammer-and-wrench/

ちなみにWindows10標準機能の「Win+.(ドット)」ショートカットキーで利用可能な絵文字パッドで選択できるハンマーとレンチは、なぜかU+FE0Fが捨てられた状態で取得される

**デフォルトの名無しさん** · 2021/12/20(月) 10:45:36.33

Macでテスト: 🛠

**デフォルトの名無しさん** · 2021/12/20(月) 11:37:43.26

>>314
macOSやiOSの場合は、U+FE0Fなしでも色付き絵文字として見かけ上まったく同じに表示されるので区別がつきにくいね

**デフォルトの名無しさん** · 2021/12/20(月) 16:28:50.79

AndroidもmacOS,iOSと同じく「バリエーションセレクター16」なしでも「ハンマーとレンチ」を色付き表示できている
「バリエーションセレクター16」の有無で「ハンマーとレンチ」の表示が異なることを確認できているのはWindows10のみ
他のOSは手元にないのでわからない

**デフォルトの名無しさん** · 2021/12/21(火) 03:44:56.69

ううむこれはまた

**デフォルトの名無しさん** · 2021/12/21(火) 03:59:02.76

>>315
ちな逆にVS15(U+FE0E)でテキストスタイルにできるけど、これはならないな、俺環では。
これに関しては絵文字でしか持っていないということかな?
テキストスタイルで持ってるフォントをインストールしたら違うとか。

**デフォルトの名無しさん** · 2021/12/21(火) 04:09:54.96

>>280
豆腐のグリフはあるからいいんじゃないですか

**デフォルトの名無しさん** · 2021/12/21(火) 07:31:46.91

色付き絵文字のデザインは各ベンダーが独自性にこだわってくれても構わないんだが、
色付き絵文字になるかどうかの規則性だけは統一してほしい

**デフォルトの名無しさん** · 2021/12/21(火) 07:40:59.61

OSベンダーとは別にFireFoxなどWebブラウザベンダーも独自に絵文字対応しており、以下の文字列が国旗で表示される
🇦🇨 🇦🇩 🇦🇪 🇦🇫 🇦🇬 🇦🇮 🇦🇱 🇦🇲

**デフォルトの名無しさん** · 2021/12/22(水) 03:27:49.45

マイクロソフトはやってくれないの

**デフォルトの名無しさん** · 2021/12/23(木) 14:43:01.09

Windowsシステムでの国旗の絵文字はアルファベットで示すのはなぜ？
https://www.emojiall.com/ja/blog/321

すべての「国」が国際的に承認されるわけではなく、地域の旗も公式と非公式に分ける場合があります。Microsoftは国際テック企業として、政治的な問題や紛争を避けるため、いっそそれらの旗の絵文字を地域インジケーターシンボルで表示すると決定しました。

**デフォルトの名無しさん** · 2021/12/23(木) 15:13:05.23

>>304
vscodeに関しては知らんけど、コンソールへ出力吐いたりフィルタ的なプログラムは大体オプションで選べるようになってるはず
出力先がターミナルならスルーして、それ以外なら落とすのがデフォルト動作であることが多い

**デフォルトの名無しさん** · 2021/12/24(金) 04:25:34.61

なんか下位区分の地域コードってイギリスだけなん？
日本の都道府県も使えるようになれば神奈川県旗とかいろいろ使い勝手がよさそうだと思うんだけど

**デフォルトの名無しさん** · 2021/12/29(水) 14:33:10.51

誰こんな絵文字作ったの…
⌬

**デフォルトの名無しさん** · 2021/12/29(水) 16:06:37.53

安息香酸置いときますね
⌬-COOH

**デフォルトの名無しさん** · 2021/12/29(水) 18:33:37.38

シクロヘキサノール置いときますね
⎔-OH
⬡-OH

**デフォルトの名無しさん** · 2021/12/30(木) 00:57:43.00

フラーレンもあったぞ⚽

**デフォルトの名無しさん** · 2021/12/30(木) 14:03:40.49

フラーレンはトモダチ！

**デフォルトの名無しさん** · 2021/12/30(木) 21:33:42.26

COOH-?-COOH
パラしか書けんな

**デフォルトの名無しさん** · 2021/12/30(木) 23:39:41.16

もう何も書けない

**デフォルトの名無しさん** · 2022/01/01(土) 01:18:33.10

🎍あけましておめでとうございます🎍

意外と鏡餅の絵文字ってないのですね🤔

**デフォルトの名無しさん** · 2022/01/02(日) 13:07:53.96

お正月絵文字
https://lets-emoji.com/newyear-emoji/

このページには凧が書いてないな(正月に限ったものではないが)。
U+1FA81 が凧ね。

鏡餅と独楽はUnicodeにないので欲しいところだ。

**デフォルトの名無しさん** · 2022/01/02(日) 23:04:36.47

めんこ入れて

**デフォルトの名無しさん** · 2022/01/06(木) 07:59:23.44

絵文字でやたら日本ぽいものは一番最初のときに入ったやつだろうなあ。
めんことか、ローカル文化的な絵文字を入れるのは今ってどうなんだろう。

そういえばベーゴマは形を変えベイブレードという名前になりアニメ化され
日本以外にも広まりつつあるので、いつか絵文字になる可能性が??

**デフォルトの名無しさん** · 2022/01/06(木) 10:27:59.82

でもまあ、文字もローカル文化といえばそうか

**デフォルトの名無しさん** · 2022/01/06(木) 10:35:57.05

何せUnicodeの絵文字の名前は日本語読みの emoji だもんな。英語圏ではちょっと誤解されてるようではあるが。
https://youpouch.com/2017/06/20/440108/

**デフォルトの名無しさん** · 2022/01/06(木) 11:54:37.73

オフィス系アプリでフィルタの意味で使われることが多い漏斗の絵文字があってもよさそうなのにないね、漏斗

**デフォルトの名無しさん** · 2022/01/07(金) 23:48:02.46

あれロートだったんか
なんやこれって思ってた

**デフォルトの名無しさん** · 2022/01/08(土) 05:10:39.79

💾を「保存」メニューで見ても意味不明のまま使っている人も多いんだろうなあ。
他にもあるだろうか。

**デフォルトの名無しさん** · 2022/01/08(土) 14:04:53.25

漏斗もなんでフィルターの意味になるのか分からん

**デフォルトの名無しさん** · 2022/01/08(土) 14:55:13.39

漏斗の中にコーヒーフィルターみたいなやつ入れる

**デフォルトの名無しさん** · 2022/01/08(土) 18:15:51.46

インスタントコーヒーしか飲まない人にはわからない、と。

**デフォルトの名無しさん** · 2022/01/08(土) 19:23:00.43

理科の実験でろ過やるでしょ
今どきのナウなヤングは、やらないの？

**デフォルトの名無しさん** · 2022/01/08(土) 20:50:34.15

>>341
ちょっと話それるけど小中学生ぐらいの頃ずっと
「ダイアログ」は「選択肢がある小さいウィンドウ」、
「ウィザード」は「順番に設定させる仕組み」を表す英語なんだと思ってたわ

**デフォルトの名無しさん** · 2022/01/09(日) 01:13:06.70

もしかして日本ってもうIRGの会議に参加してない？
https://appsrv.cse.cuhk.edu.hk/~irg/irg/irg58/IRG58.htm
去年はActivity Report用に割り当てられた文書番号IRGN2455は結局使われずじまい
今年は番号割り当て自体がされていない状態

**デフォルトの名無しさん** · 2022/01/22(土) 23:28:02.81

どういうこつなの

**デフォルトの名無しさん** · 2022/01/30(日) 21:50:00.84

結論-------
UTF-8が最強

**デフォルトの名無しさん** · 2022/01/31(月) 00:20:06.51

でもutf8には冗長コードの問題があるから内部処理コードには向いてな

**デフォルトの名無しさん** · 2022/01/31(月) 00:20:17.62

かったりするよね

**デフォルトの名無しさん** · 2022/01/31(月) 00:29:24.37

UTF-16,32にも同じ問題はあるでしょ

**デフォルトの名無しさん** · 2022/01/31(月) 00:54:14.96

32にはないだろ

**デフォルトの名無しさん** · 2022/01/31(月) 12:44:12.35

互換漢字とか合成順序とかあるので重複コーディングがあるといえばある。規格を正しく運用すれば対応できる（例外あり）
一方でUTF8も規格が改定されて最短表現のみが正当とされることになったので、規格を正しく運用すれば対応できる。

**デフォルトの名無しさん** · 2022/01/31(月) 19:15:59.02

やがてストレージはPB単位が普通になりメインメモリはTBが当たり前になると、1文字が4バイトでも誰も気にしなくなる。
その時組み込み用の小さいマイコンはメモリがGB単位。SSDのストレージがTB単位。32TBで800円ぐらい。

**デフォルトの名無しさん** · 2022/01/31(月) 21:38:18.36

そういえばあの頃はまだ1文字32bitだったよね

**デフォルトの名無しさん** · 2022/01/31(月) 22:38:52.91

>>353
当分の間は問題化しないというだけであり、理論上は問題がある
time_t型が64bitになったことで桁あふれが起きる時期が先送りされたのと似た問題

**デフォルトの名無しさん** · 2022/02/01(火) 21:11:53.44

>>357
Unicodeコードポイントの最大値は未来永劫U+10FFFFであると定められているので
32bitで足りなくなることはあり得ない。

**デフォルトの名無しさん** · 2022/02/01(火) 21:16:16.71

未来永劫ではなく現時点でしょ
未来なんて誰にもわからない
👽地球外生命体とコンタクトすれば全人類だけではなく地球外生命体の文字コードも網羅しなければならなくなる

**デフォルトの名無しさん** · 2022/02/01(火) 21:23:34.67

UTF-32の話をしているのにバカな事言わないで貰えますか？

**デフォルトの名無しさん** · 2022/02/01(火) 21:38:13.10

コンソーシアムがとち狂って個人のポートレートや企業ロゴを文字コードに採用したらあっという間に枯渇できる

**デフォルトの名無しさん** · 2022/02/01(火) 22:55:38.79

>>361
多分絵文字で枯渇する気が…

**デフォルトの名無しさん** · 2022/02/01(火) 23:15:37.24

過去・現在・未来の人類ひとりひとりに固有Unicode文字を割り当てたらあっという間に枯渇できるから安心してほしい
つまり歴代天皇や君も僕も人柱だ

**デフォルトの名無しさん** · 2022/02/01(火) 23:18:23.82

妄想はそれ位にしとけ
つまらないから

**デフォルトの名無しさん** · 2022/02/02(水) 01:38:55.00

やがて emoji に埋め尽くされ32bitでは足りなくなる

**デフォルトの名無しさん** · 2022/02/02(水) 06:08:48.50

すべての人がUTF文字コードとして記録されていくなんてすばらしいじゃないか
お墓いらずだ

**デフォルトの名無しさん** · 2022/02/02(水) 21:40:22.89

マイコちゃん

**デフォルトの名無しさん** · 2022/02/02(水) 23:56:56.99

全ての人だけでなく全ての動物もやろうとして破綻

**デフォルトの名無しさん** · 2022/02/03(木) 00:02:44.44

Unicodeが共同墓地として利用される日が来ないと言い切れるか？

**デフォルトの名無しさん** · 2022/02/03(木) 08:37:22.23

👱🏿‍♀
すでに32bitに収まってないやんけ
フルカラー&ゲーミング肌色も遠くないかもねー

**デフォルトの名無しさん** · 2022/02/04(金) 00:58:17.10

やはり1文字128bit必要か

**デフォルトの名無しさん** · 2022/02/04(金) 00:59:27.52

可変長に耐えられる仕様にしろ、がFAだよ

**デフォルトの名無しさん** · 2022/02/04(金) 01:00:35.02

あ、理論上無限な可変長って意味ね

**デフォルトの名無しさん** · 2022/02/05(土) 01:16:52.31

つらE

**デフォルトの名無しさん** · 2022/02/11(金) 16:39:52.03

vimにcocプラグイン入れて:CocUpdateコマンド使うと、
以下のような点字図形文字を使った待機アニメーションが出力されるね
⠇⠋⠙⠸⠴⠦

なるほど上手いなと思ったんだけど、既知？

**デフォルトの名無しさん** · 2022/02/11(金) 18:35:39.64

マルチプラットフォームなツールなのにMac版だけ点字クルクルアニメなのを見た気がする。何だったかな

**デフォルトの名無しさん** · 2022/02/11(金) 18:47:52.13

思い出した。flutterだ

**デフォルトの名無しさん** · 2022/02/11(金) 21:33:05.23

U+2572を使えばMSゴシックなどバックスラッシュが円マークで表示されるフォントでもそれらしく表示できるので以下のように待機アニメーションが可能
╲|/-

**デフォルトの名無しさん** · 2022/02/11(金) 21:36:04.16

あー思い出した、日本ファルコムの「ザナドゥ」って名前の昔のPCゲームで魔法Needleがまさに >>378 だった
魔法の描画が特殊な文字フォントとして表示される不思議なゲームだった

**デフォルトの名無しさん** · 2022/02/12(土) 01:38:51.31

ゲームは独自文字コードの話なんかがあるとわくわくしちゃう