文字コード総合スレ part13

**デフォルトの名無しさん** · 2020/07/03(金) 20:53:47.08

Windows NTは初代からUnicodeがネイティブの文字コードです。cp932ではありません。
プログラマーなら一度は煩わされたことのある文字コードについてのスレ。
UTF-8、Shift_JIS、JIS、EUC、Unicode、UCS、サロゲートペア、コードポイント、文字コード判定、
合成文字、ソート、TRON、外字コード、その他について語り合いましょう。
各言語での文字列の扱いについての質問もOKです。
基本マッターリ、ささ、茶でもどうぞ。

■過去スレ
文字コード総合スレ part1 http://pc11.2ch.net/test/read.cgi/tech/1031028205/
文字コード総合スレ part2 http://pc11.2ch.net/test/read.cgi/tech/1143375639/
文字コード総合スレ part3 http://pc11.2ch.net/test/read.cgi/tech/1180250376/
文字コード総合スレ part4 http://pc11.2ch.net/test/read.cgi/tech/1228052369/
　（スレ再利用）UnicodeとUTF-8の違いは？ http://pc12.2ch.net/test/read.cgi/tech/1177930957/
　（隔離スレ）UnicodeとUTF-8の違いは？　その2 http://pc12.2ch.net/test/read.cgi/tech/1274937437/
文字コード総合スレ part5 http://pc12.2ch.net/test/read.cgi/tech/1236529563/
文字コード総合スレ part6 http://hibari.2ch.net/test/read.cgi/tech/1278923059/
文字コード総合スレ part7 http://toro.2ch.net/test/read.cgi/tech/1306595564/
文字コード総合スレ part8 http://peace.2ch.net/test/read.cgi/tech/1354248962/
文字コード総合スレ part9 http://peace.2ch.net/test/read.cgi/tech/1401301779/
文字コード総合スレ Part10 http://mevius.2ch.net/test/read.cgi/tech/1444822140/
文字コード総合スレ Part11 https://mevius.5ch.net/test/read.cgi/tech/1516629503/
文字コード総合スレ Part12 https://mevius.5ch.net/test/read.cgi/tech/1544931495/

**デフォルトの名無しさん** · 2021/12/19(日) 16:04:22.86

集計画面があるからでは？

**デフォルトの名無しさん** · 2021/12/19(日) 18:00:54.55

絵文字か... めんどくさい。
文字コードが実質統一されたことで文字化けは減ったかも知れんが、絵文字を下手に触って
文字化け（絵化け?）する場合がありそう。

**デフォルトの名無しさん** · 2021/12/19(日) 20:08:53.97

>>306
絵文字は実害が出る前に国際化未対応の不具合を見つけるのに役立ってきたよ
ま、絵文字が化けることそれ自体が実害だというなら実害なのかもしれんが

🛠工事中
🛠工事中

**デフォルトの名無しさん** · 2021/12/20(月) 01:45:44.75

それはある

**デフォルトの名無しさん** · 2021/12/20(月) 02:33:20.46

なるほど。まあ国際化というか正しいUnicodeの扱い方? のような気もするが。
え、Unicodeを使うこと＝国際化だって? あとはやたら中立を求めてくるやつ? 文化ガーとか
肌の色ガーとか性別ガーとか。

しかし、単に「工事中」と言っても含まれるメッセージには「工事中だから入ってくんな」とか
「工事中なので待っててね）」とかがあるような。
それは後者かな。IDEとかでありがちな。前者は日本由来の🚧はどうでしょう。

**デフォルトの名無しさん** · 2021/12/20(月) 02:44:04.59

ま確かに最近はいかにICUを正しく使うかみたいな感じはある... 自分の界隈では

**デフォルトの名無しさん** · 2021/12/20(月) 06:43:37.99

Windows10だとU+1F6E0とU+FE0Fの連続で以下画像と似た絵文字が表示されるはず
https://uc-emoji.azureedge.net/orig/18/83d86f5c30039ddf01bcb271f219a2.png
2chの挙動なんか怪しい、とりあえず
🛠 U+1F6E0(ハンマーとレンチ) U+FE0F(バリエーションセレクター16) の組み合わせでハンマーとレンチ絵文字を表示するテスト
🛠

**311** · 2021/12/20(月) 06:45:57.85

再現した
どうも5ch(2chじゃなかった)に投稿する時にU+FE0F(バリエーションセレクター16)が捨てられてしまうようだ

**311** · 2021/12/20(月) 06:58:14.29

以下サイトは、U+FE0F(バリエーションセレクター16が付随したハンマーとレンチの絵文字をクリップボードにコピーできる
https://emojigraph.org/ja/hammer-and-wrench/

ちなみにWindows10標準機能の「Win+.(ドット)」ショートカットキーで利用可能な絵文字パッドで選択できるハンマーとレンチは、なぜかU+FE0Fが捨てられた状態で取得される

**デフォルトの名無しさん** · 2021/12/20(月) 10:45:36.33

Macでテスト: 🛠

**デフォルトの名無しさん** · 2021/12/20(月) 11:37:43.26

>>314
macOSやiOSの場合は、U+FE0Fなしでも色付き絵文字として見かけ上まったく同じに表示されるので区別がつきにくいね

**デフォルトの名無しさん** · 2021/12/20(月) 16:28:50.79

AndroidもmacOS,iOSと同じく「バリエーションセレクター16」なしでも「ハンマーとレンチ」を色付き表示できている
「バリエーションセレクター16」の有無で「ハンマーとレンチ」の表示が異なることを確認できているのはWindows10のみ
他のOSは手元にないのでわからない

**デフォルトの名無しさん** · 2021/12/21(火) 03:44:56.69

ううむこれはまた

**デフォルトの名無しさん** · 2021/12/21(火) 03:59:02.76

>>315
ちな逆にVS15(U+FE0E)でテキストスタイルにできるけど、これはならないな、俺環では。
これに関しては絵文字でしか持っていないということかな?
テキストスタイルで持ってるフォントをインストールしたら違うとか。

**デフォルトの名無しさん** · 2021/12/21(火) 04:09:54.96

>>280
豆腐のグリフはあるからいいんじゃないですか

**デフォルトの名無しさん** · 2021/12/21(火) 07:31:46.91

色付き絵文字のデザインは各ベンダーが独自性にこだわってくれても構わないんだが、
色付き絵文字になるかどうかの規則性だけは統一してほしい

**デフォルトの名無しさん** · 2021/12/21(火) 07:40:59.61

OSベンダーとは別にFireFoxなどWebブラウザベンダーも独自に絵文字対応しており、以下の文字列が国旗で表示される
🇦🇨 🇦🇩 🇦🇪 🇦🇫 🇦🇬 🇦🇮 🇦🇱 🇦🇲

**デフォルトの名無しさん** · 2021/12/22(水) 03:27:49.45

マイクロソフトはやってくれないの

**デフォルトの名無しさん** · 2021/12/23(木) 14:43:01.09

Windowsシステムでの国旗の絵文字はアルファベットで示すのはなぜ？
https://www.emojiall.com/ja/blog/321

すべての「国」が国際的に承認されるわけではなく、地域の旗も公式と非公式に分ける場合があります。Microsoftは国際テック企業として、政治的な問題や紛争を避けるため、いっそそれらの旗の絵文字を地域インジケーターシンボルで表示すると決定しました。

**デフォルトの名無しさん** · 2021/12/23(木) 15:13:05.23

>>304
vscodeに関しては知らんけど、コンソールへ出力吐いたりフィルタ的なプログラムは大体オプションで選べるようになってるはず
出力先がターミナルならスルーして、それ以外なら落とすのがデフォルト動作であることが多い

**デフォルトの名無しさん** · 2021/12/24(金) 04:25:34.61

なんか下位区分の地域コードってイギリスだけなん？
日本の都道府県も使えるようになれば神奈川県旗とかいろいろ使い勝手がよさそうだと思うんだけど

**デフォルトの名無しさん** · 2021/12/29(水) 14:33:10.51

誰こんな絵文字作ったの…
⌬

**デフォルトの名無しさん** · 2021/12/29(水) 16:06:37.53

安息香酸置いときますね
⌬-COOH

**デフォルトの名無しさん** · 2021/12/29(水) 18:33:37.38

シクロヘキサノール置いときますね
⎔-OH
⬡-OH

**デフォルトの名無しさん** · 2021/12/30(木) 00:57:43.00

フラーレンもあったぞ⚽

**デフォルトの名無しさん** · 2021/12/30(木) 14:03:40.49

フラーレンはトモダチ！

**デフォルトの名無しさん** · 2021/12/30(木) 21:33:42.26

COOH-?-COOH
パラしか書けんな

**デフォルトの名無しさん** · 2021/12/30(木) 23:39:41.16

もう何も書けない

**デフォルトの名無しさん** · 2022/01/01(土) 01:18:33.10

🎍あけましておめでとうございます🎍

意外と鏡餅の絵文字ってないのですね🤔

**デフォルトの名無しさん** · 2022/01/02(日) 13:07:53.96

お正月絵文字
https://lets-emoji.com/newyear-emoji/

このページには凧が書いてないな(正月に限ったものではないが)。
U+1FA81 が凧ね。

鏡餅と独楽はUnicodeにないので欲しいところだ。

**デフォルトの名無しさん** · 2022/01/02(日) 23:04:36.47

めんこ入れて

**デフォルトの名無しさん** · 2022/01/06(木) 07:59:23.44

絵文字でやたら日本ぽいものは一番最初のときに入ったやつだろうなあ。
めんことか、ローカル文化的な絵文字を入れるのは今ってどうなんだろう。

そういえばベーゴマは形を変えベイブレードという名前になりアニメ化され
日本以外にも広まりつつあるので、いつか絵文字になる可能性が??

**デフォルトの名無しさん** · 2022/01/06(木) 10:27:59.82

でもまあ、文字もローカル文化といえばそうか

**デフォルトの名無しさん** · 2022/01/06(木) 10:35:57.05

何せUnicodeの絵文字の名前は日本語読みの emoji だもんな。英語圏ではちょっと誤解されてるようではあるが。
https://youpouch.com/2017/06/20/440108/

**デフォルトの名無しさん** · 2022/01/06(木) 11:54:37.73

オフィス系アプリでフィルタの意味で使われることが多い漏斗の絵文字があってもよさそうなのにないね、漏斗

**デフォルトの名無しさん** · 2022/01/07(金) 23:48:02.46

あれロートだったんか
なんやこれって思ってた

**デフォルトの名無しさん** · 2022/01/08(土) 05:10:39.79

💾を「保存」メニューで見ても意味不明のまま使っている人も多いんだろうなあ。
他にもあるだろうか。

**デフォルトの名無しさん** · 2022/01/08(土) 14:04:53.25

漏斗もなんでフィルターの意味になるのか分からん

**デフォルトの名無しさん** · 2022/01/08(土) 14:55:13.39

漏斗の中にコーヒーフィルターみたいなやつ入れる

**デフォルトの名無しさん** · 2022/01/08(土) 18:15:51.46

インスタントコーヒーしか飲まない人にはわからない、と。

**デフォルトの名無しさん** · 2022/01/08(土) 19:23:00.43

理科の実験でろ過やるでしょ
今どきのナウなヤングは、やらないの？

**デフォルトの名無しさん** · 2022/01/08(土) 20:50:34.15

>>341
ちょっと話それるけど小中学生ぐらいの頃ずっと
「ダイアログ」は「選択肢がある小さいウィンドウ」、
「ウィザード」は「順番に設定させる仕組み」を表す英語なんだと思ってたわ

**デフォルトの名無しさん** · 2022/01/09(日) 01:13:06.70

もしかして日本ってもうIRGの会議に参加してない？
https://appsrv.cse.cuhk.edu.hk/~irg/irg/irg58/IRG58.htm
去年はActivity Report用に割り当てられた文書番号IRGN2455は結局使われずじまい
今年は番号割り当て自体がされていない状態

**デフォルトの名無しさん** · 2022/01/22(土) 23:28:02.81

どういうこつなの

**デフォルトの名無しさん** · 2022/01/30(日) 21:50:00.84

結論-------
UTF-8が最強

**デフォルトの名無しさん** · 2022/01/31(月) 00:20:06.51

でもutf8には冗長コードの問題があるから内部処理コードには向いてな

**デフォルトの名無しさん** · 2022/01/31(月) 00:20:17.62

かったりするよね

**デフォルトの名無しさん** · 2022/01/31(月) 00:29:24.37

UTF-16,32にも同じ問題はあるでしょ

**デフォルトの名無しさん** · 2022/01/31(月) 00:54:14.96

32にはないだろ

**デフォルトの名無しさん** · 2022/01/31(月) 12:44:12.35

互換漢字とか合成順序とかあるので重複コーディングがあるといえばある。規格を正しく運用すれば対応できる（例外あり）
一方でUTF8も規格が改定されて最短表現のみが正当とされることになったので、規格を正しく運用すれば対応できる。

**デフォルトの名無しさん** · 2022/01/31(月) 19:15:59.02

やがてストレージはPB単位が普通になりメインメモリはTBが当たり前になると、1文字が4バイトでも誰も気にしなくなる。
その時組み込み用の小さいマイコンはメモリがGB単位。SSDのストレージがTB単位。32TBで800円ぐらい。

**デフォルトの名無しさん** · 2022/01/31(月) 21:38:18.36

そういえばあの頃はまだ1文字32bitだったよね

**デフォルトの名無しさん** · 2022/01/31(月) 22:38:52.91

>>353
当分の間は問題化しないというだけであり、理論上は問題がある
time_t型が64bitになったことで桁あふれが起きる時期が先送りされたのと似た問題

**デフォルトの名無しさん** · 2022/02/01(火) 21:11:53.44

>>357
Unicodeコードポイントの最大値は未来永劫U+10FFFFであると定められているので
32bitで足りなくなることはあり得ない。

**デフォルトの名無しさん** · 2022/02/01(火) 21:16:16.71

未来永劫ではなく現時点でしょ
未来なんて誰にもわからない
👽地球外生命体とコンタクトすれば全人類だけではなく地球外生命体の文字コードも網羅しなければならなくなる

**デフォルトの名無しさん** · 2022/02/01(火) 21:23:34.67

UTF-32の話をしているのにバカな事言わないで貰えますか？

**デフォルトの名無しさん** · 2022/02/01(火) 21:38:13.10

コンソーシアムがとち狂って個人のポートレートや企業ロゴを文字コードに採用したらあっという間に枯渇できる

**デフォルトの名無しさん** · 2022/02/01(火) 22:55:38.79

>>361
多分絵文字で枯渇する気が…

**デフォルトの名無しさん** · 2022/02/01(火) 23:15:37.24

過去・現在・未来の人類ひとりひとりに固有Unicode文字を割り当てたらあっという間に枯渇できるから安心してほしい
つまり歴代天皇や君も僕も人柱だ

**デフォルトの名無しさん** · 2022/02/01(火) 23:18:23.82

妄想はそれ位にしとけ
つまらないから

**デフォルトの名無しさん** · 2022/02/02(水) 01:38:55.00

やがて emoji に埋め尽くされ32bitでは足りなくなる

**デフォルトの名無しさん** · 2022/02/02(水) 06:08:48.50

すべての人がUTF文字コードとして記録されていくなんてすばらしいじゃないか
お墓いらずだ

**デフォルトの名無しさん** · 2022/02/02(水) 21:40:22.89

マイコちゃん

**デフォルトの名無しさん** · 2022/02/02(水) 23:56:56.99

全ての人だけでなく全ての動物もやろうとして破綻

**デフォルトの名無しさん** · 2022/02/03(木) 00:02:44.44

Unicodeが共同墓地として利用される日が来ないと言い切れるか？

**デフォルトの名無しさん** · 2022/02/03(木) 08:37:22.23

👱🏿‍♀
すでに32bitに収まってないやんけ
フルカラー&ゲーミング肌色も遠くないかもねー

**デフォルトの名無しさん** · 2022/02/04(金) 00:58:17.10

やはり1文字128bit必要か

**デフォルトの名無しさん** · 2022/02/04(金) 00:59:27.52

可変長に耐えられる仕様にしろ、がFAだよ

**デフォルトの名無しさん** · 2022/02/04(金) 01:00:35.02

あ、理論上無限な可変長って意味ね

**デフォルトの名無しさん** · 2022/02/05(土) 01:16:52.31

つらE

**デフォルトの名無しさん** · 2022/02/11(金) 16:39:52.03

vimにcocプラグイン入れて:CocUpdateコマンド使うと、
以下のような点字図形文字を使った待機アニメーションが出力されるね
⠇⠋⠙⠸⠴⠦

なるほど上手いなと思ったんだけど、既知？

**デフォルトの名無しさん** · 2022/02/11(金) 18:35:39.64

マルチプラットフォームなツールなのにMac版だけ点字クルクルアニメなのを見た気がする。何だったかな

**デフォルトの名無しさん** · 2022/02/11(金) 18:47:52.13

思い出した。flutterだ

**デフォルトの名無しさん** · 2022/02/11(金) 21:33:05.23

U+2572を使えばMSゴシックなどバックスラッシュが円マークで表示されるフォントでもそれらしく表示できるので以下のように待機アニメーションが可能
╲|/-

**デフォルトの名無しさん** · 2022/02/11(金) 21:36:04.16

あー思い出した、日本ファルコムの「ザナドゥ」って名前の昔のPCゲームで魔法Needleがまさに >>378 だった
魔法の描画が特殊な文字フォントとして表示される不思議なゲームだった

**デフォルトの名無しさん** · 2022/02/12(土) 01:38:51.31

ゲームは独自文字コードの話なんかがあるとわくわくしちゃう

**デフォルトの名無しさん** · 2022/02/12(土) 02:08:09.53

TeraTerm でフォントを MSゴシックにして送受信UTF-8にして LANG=ja_JP.UTF-8 になっている Linux から

perl -e 'binmode STDOUT,":utf8";print "\x{2572}\n"'

をやったら "?" が出た。

TeraTerm いまいちだな。

**デフォルトの名無しさん** · 2022/02/12(土) 05:58:06.53

記憶補正されてたみたいなので修正。ニードルの描画はバーティカルバーとハイフンを使わない。
╲/のみ。以下が実際のゲーム画面
[PC-88] Dragon Slayer II - Xanadu (1985) (Nihon Falcom)
https://youtu.be/QcQpec98nCA?t=397

**デフォルトの名無しさん** · 2022/02/12(土) 15:46:35.31

Tera Pad も、新し目の文字には対応していない

だから漏れは、サクラエディタに移行した

**デフォルトの名無しさん** · 2022/02/12(土) 21:10:02.53

ぼくはemEditorちゃん

**デフォルトの名無しさん** · 2022/02/13(日) 05:32:46.63

今日日Windows標準アプリのメモ帳(notepad.exe)でさえ╲を表示できるというのに

**デフォルトの名無しさん** · 2022/02/13(日) 16:46:47.29

デバッグ機能をもちいてnppを開くようにしているので、
メモ帳を見ることもない（できない）

**デフォルトの名無しさん** · 2022/02/16(水) 15:51:43.42

Oo　←　オー
Οο　←　オミクロン

**デフォルトの名無しさん** · 2022/02/16(水) 18:14:50.69

U+041Eが抜けてるからやり直し

**デフォルトの名無しさん** · 2022/02/16(水) 19:28:36.79

OOoを思い出した

**デフォルトの名無しさん** · 2022/02/16(水) 20:46:32.06

仮面ライダーOOOのことか

**デフォルトの名無しさん** · 2022/02/17(木) 02:53:07.08

○ ← 丸
◯ ← 大きな丸

**デフォルトの名無しさん** · 2022/02/18(金) 23:29:32.04

〇 ← 漢数字の0

**デフォルトの名無しさん** · 2022/02/18(金) 23:40:40.63

さほど大きくない

**デフォルトの名無しさん** · 2022/02/19(土) 21:56:34.84

>>389
Oracleになって一瞬でオワコンになったねOOo。

**デフォルトの名無しさん** · 2022/02/20(日) 15:09:08.00

(;´Д`)｡ｏＯ(　　)

**デフォルトの名無しさん** · 2022/03/26(土) 20:09:02.80

今日の某クイズ系YouTuberの問題。
俺らなら朝飯前だよな？

U+25CBは何の記号？

**デフォルトの名無しさん** · 2022/03/26(土) 22:37:56.00

（´-`）.｡oO(顔文字のなんでだろう.....その１8
https://mevius.5ch.net/test/read.cgi/kao/1624068762/

**デフォルトの名無しさん** · 2022/04/01(金) 06:35:47.75

全銀の半角カナは未来永劫続くのかな

**デフォルトの名無しさん** · 2022/04/02(土) 19:11:52.31

>>383
＞Tera Pad も、新し目の文字には対応していない
あれは新しい文字とかの区分でなく表示の仕様上の理由で使えるフォントが制限されてるだけ
テキストエディタの使い勝手の思想そのものが古いツール

**デフォルトの名無しさん** · 2022/04/02(土) 20:03:45.33

>>398
スーパーとかのレシートに書かれてる品目名もそういう後方互換性で半角になってるの？

**デフォルトの名無しさん** · 2022/04/02(土) 20:12:40.94

文字コードスレなのに半角とか言ってるのどうよ

**デフォルトの名無しさん** · 2022/04/02(土) 20:15:50.54

半角カタカナって意味でしょ
>>401 は行間読めない人？

**デフォルトの名無しさん** · 2022/04/02(土) 20:26:44.01

行間じゃなくて規格読もうよ

**デフォルトの名無しさん** · 2022/04/02(土) 21:18:46.01

HALFWIDTH KATAKANAって半角じゃないの