文字コード総合スレ Part12

**デフォルトの名無しさん** · 2018/12/16(日) 12:38:15.61

Windows NTは初代からUnicodeがネイティブの文字コードです。cp932ではありません。
プログラマーなら一度は煩わされたことのある文字コードについてのスレ。
UTF-8、Shift_JIS、JIS、EUC、Unicode、UCS、サロゲートペア、コードポイント、文字コード判定、
合成文字、ソート、TRON、外字コード、その他について語り合いましょう。
各言語での文字列の扱いについての質問もOKです。
基本マッターリ、ささ、茶でもどうぞ。

■過去スレ
文字コード総合スレ part1 http://pc11.2ch.net/test/read.cgi/tech/1031028205/
文字コード総合スレ part2 http://pc11.2ch.net/test/read.cgi/tech/1143375639/
文字コード総合スレ part3 http://pc11.2ch.net/test/read.cgi/tech/1180250376/
文字コード総合スレ part4 http://pc11.2ch.net/test/read.cgi/tech/1228052369/
　（スレ再利用）UnicodeとUTF-8の違いは？ http://pc12.2ch.net/test/read.cgi/tech/1177930957/
　（隔離スレ）UnicodeとUTF-8の違いは？　その2 http://pc12.2ch.net/test/read.cgi/tech/1274937437/
文字コード総合スレ part5 http://pc12.2ch.net/test/read.cgi/tech/1236529563/
文字コード総合スレ part6 http://hibari.2ch.net/test/read.cgi/tech/1278923059/
文字コード総合スレ part7 http://toro.2ch.net/test/read.cgi/tech/1306595564/
文字コード総合スレ part8 http://peace.2ch.net/test/read.cgi/tech/1354248962/
文字コード総合スレ part9 http://peace.2ch.net/test/read.cgi/tech/1401301779/
文字コード総合スレ Part10 http://mevius.2ch.net/test/read.cgi/tech/1444822140/
文字コード総合スレ Part11 https://mevius.5ch.net/test/read.cgi/tech/1516629503/

**デフォルトの名無しさん** · 2020/02/12(水) 13:32:59.34

👽 全宇宙の未知なる知的生命体の使用言語を網羅しなきゃならないのだから可変長は必須

**デフォルトの名無しさん** · 2020/02/12(水) 20:36:54.81

>>876
え、じゃあイギリスの旗はさらにそれにスコットランド分とアイルランド分が追加されるの

**デフォルトの名無しさん** · 2020/02/12(水) 21:06:37.28

>>878がおもしろいことを言った

**デフォルトの名無しさん** · 2020/02/13(木) 15:10:18.42

ウェールズ「俺は？」

**デフォルトの名無しさん** · 2020/02/13(木) 21:26:26.80

Google、絵文字を組み合わせた「ハート付きうんち」などを使える「Emoji Kitchen」開始
https://www.itmedia.co.jp/news/articles/2002/13/news068.html

**デフォルトの名無しさん** · 2020/02/14(金) 11:14:07.77

そんな文字要らんわ

**デフォルトの名無しさん** · 2020/02/14(金) 13:42:19.65

グーグルってしょっちゅう意味のわからんことするよな

**デフォルトの名無しさん** · 2020/02/14(金) 14:22:25.49

MSやAppleだって訳判らんことするときもある

**デフォルトの名無しさん** · 2020/02/14(金) 14:26:10.19

実行ファイルがテキストとデータで構成されるように、絵文字表現もテキストとデータを組み合わせた文法が出てきそう。

**デフォルトの名無しさん** · 2020/02/14(金) 17:14:21.07

顔文字より正規表現のためのメタ文字とかあったほうが良いのにね。
まあGoogleじゃ無理か。

**デフォルトの名無しさん** · 2020/02/14(金) 21:11:02.23

(.*_*)

**デフォルトの名無しさん** · 2020/02/14(金) 22:37:55.75

そのメタ文字にマッチしたい正規表現を書く日が来るぞ

**デフォルトの名無しさん** · 2020/02/15(土) 00:14:12.35

\��

**デフォルトの名無しさん** · 2020/02/15(土) 05:28:54.23

規格名：JIS X 0215
文字数：15000字超（非漢字：1700字超，漢字：13300字超）
区点域：0～127区，0～127点（最大16384字収納）
通　称：いちごJIS

**デフォルトの名無しさん** · 2020/02/21(金) 14:33:03.02

https://twitter.com/akinomyoga/status/1230127240806985728

修正の入った Cygwin 3.1.4 のリリースノートが来て、見てみたら @cjksingle という不穏な locale が発明されてる。
何かと思ったら「CJK文字も全て半角にすれば文字幅問題解決じゃん」という欧米人(東欧系?)の思いつきで、これは新しい悪夢なのでは…。mintty は仕事が早すぎ
https://gitlab.freedesktop.org/terminal-wg/specifications/issues/9#note_406682

因みにこの東欧人を追うともっと面白い(?)ものが。。漢字や絵文字が行末に収まらない時は左半分はその行に右半分は次の行に表示するのが合理的だと Windows Terminal に赴いて主張してる。
曰く、殆どの漢字は偏(へん)と旁(つくり)から成るので分断しても意味を失わないとか…
https://github.com/microsoft/terminal/issues/4345#issuecomment-578434025
https://twitter.com/5chan_nel (5ch newer account)

**デフォルトの名無しさん** · 2020/02/21(金) 15:07:53.93

糸
色
女
子
言
周

**デフォルトの名無しさん** · 2020/02/21(金) 20:47:45.26

半角と全角の区別付かなくなると困るから元の半角文字はさらに半分で表示したらどうかな

**デフォルトの名無しさん** · 2020/02/21(金) 22:45:17.77

まぁ、全部全角にすれば万事解決なんだけどな。

**デフォルトの名無しさん** · 2020/02/22(土) 03:15:16.13

絵文字っていわゆる全角よね

**デフォルトの名無しさん** · 2020/03/02(月) 02:11:23.28

いわゆるって何を指してる?

**デフォルトの名無しさん** · 2020/03/02(月) 16:54:16.25

公式定義ではなく現実によく目にする幅、かな

**デフォルトの名無しさん** · 2020/03/02(月) 17:38:15.13

最近は倍角とか4倍角とか聴かなくなったな

**デフォルトの名無しさん** · 2020/03/07(土) 16:24:06.57

Microsoft、Shift_JISや外字からUnicodeへの移行を呼びかけ | スラド
https://srad.jp/story/20/03/06/1237211/

Windows と日本語のテキストについて - Windows Blog for Japan
https://blogs.windows.com/japan/2020/02/20/about-windows-and-japanese-text/

**デフォルトの名無しさん** · 2020/03/07(土) 18:02:03.37

外字というと丸囲みの数字が①～⑳以外にもほしくて
21以降も外字で作ってしまっていた事務所を思い出す

何度かPCを入れ替えるうちに使わなくなり、忘れ去られ、
久々に古い文書を引っ張り出して来たら謎の文字化けで外字の存在が発覚
外字が何故か⑳から始まってたり途中に別の字が挟まってたりしてもはや解読作業

**デフォルトの名無しさん** · 2020/03/08(日) 21:08:48.53

㉑

**デフォルトの名無しさん** · 2020/03/08(日) 22:48:15.28

今は㊿まであるんだな、知らんかったわ

**デフォルトの名無しさん** · 2020/03/09(月) 05:26:10.28

(0)とか黒丸の小文字英字とか白丸のンとか黒丸の仮名とかは
Unicodeですら未だに無いんだよな．．．

**デフォルトの名無しさん** · 2020/03/09(月) 14:12:03.27

それはわいせつだからでは

**デフォルトの名無しさん** · 2020/03/09(月) 14:20:33.44

わいせつだって文字情報じゃないか!
それともなにか君は辞書から陰茎とか陰核という単語を削除せよというのか!

**デフォルトの名無しさん** · 2020/03/09(月) 16:04:20.40

��

**デフォルトの名無しさん** · 2020/03/09(月) 17:52:27.97

>>903
◎と字形が同じとかで一緒にされそう

あと将棋の駒(上下とか白黒)も欲しいとか言ってた人？

**デフォルトの名無しさん** · 2020/03/09(月) 20:31:39.39

お城マークってある？
凸の下辺がないようなやつ

**デフォルトの名無しさん** · 2020/03/09(月) 21:26:52.19

>>902
50まで作るんだったら、99まで作れば良かったのに。
できれば、100まで欲しかった。

**デフォルトの名無しさん** · 2020/03/09(月) 22:01:13.14

>>908
⛫

**デフォルトの名無しさん** · 2020/03/09(月) 23:06:46.00

ゴリッパだな

**デフォルトの名無しさん** · 2020/03/10(火) 07:55:14.17

>>900
Unicodeがまさにそんな感じだよ
符号位置なんて空いてりゃなんでも詰め込んでくる

**デフォルトの名無しさん** · 2020/03/10(火) 09:32:00.64

一方場所が足りない云々でCJK統合漢字爆誕

**デフォルトの名無しさん** · 2020/03/10(火) 12:18:50.37

アレはUNICODEが16ビットだったときの産物だからなー

囲み付き文字は合字でなんぼでも表示できるんじゃなかったのか？
黒字に白抜きはないか。

**デフォルトの名無しさん** · 2020/03/11(水) 00:27:59.48

⓿と🄌は何が違うのこれ

**デフォルトの名無しさん** · 2020/03/12(木) 14:56:02.24

Announcing The Unicode$#174; Standard, Version 13.0
https://home.unicode.org/announcing-the-unicode-standard-version-13-0/

**デフォルトの名無しさん** · 2020/03/13(金) 04:51:42.81

要らん文字ばっか増えていくな

**デフォルトの名無しさん** · 2020/03/13(金) 07:25:49.78

う、うん…

**デフォルトの名無しさん** · 2020/03/13(金) 20:00:06.77

Unicode 13.0.0
http://www.unicode.org/versions/Unicode13.0.0/
Components of Unicode 13.0.0
http://www.unicode.org/versions/components-13.0.0.html
Core Specification (PDF)
http://www.unicode.org/versions/Unicode13.0.0/UnicodeStandard-13.0.pdf
Code Charts (PDF・110 MB)
http://www.unicode.org/Public/13.0.0/charts/CodeCharts.pdf

**デフォルトの名無しさん** · 2020/03/13(金) 20:29:09.67

でっかいPDFだなあ

**デフォルトの名無しさん** · 2020/03/13(金) 22:24:02.25

あれ、もうUnicode 13.0.0出たの？
改訂するのは確か毎年6月ねって決めたんじゃ……と思ったら去年から3月だった。

**デフォルトの名無しさん** · 2020/03/14(土) 04:49:42.78

Win10は頻繁にバージョンアップしてるけど、
使ってるUnicodeは2015年に出た8.0のままなんだよな．．．

**デフォルトの名無しさん** · 2020/03/14(土) 05:08:58.28

そーそー
新しいフォント入れてもリンクが効かんという...
全部入りフォント作るにゃ16bitの壁

**デフォルトの名無しさん** · 2020/03/14(土) 16:17:25.81

え、そうなんだ
そんな罠が

**デフォルトの名無しさん** · 2020/03/18(水) 09:00:29.25

高松もキャンセルなのかな
それともISO/IECはまた別の判断か
https://www.iso.org/covid-19.html

**デフォルトの名無しさん** · 2020/04/09(木) 14:28:17.94

Unicode 14.0 Delayed for 6 Months
http://blog.unicode.org/2020/04/unicode-140-delayed-for-6-months.html

Due to COVID-19, the Unicode Consortium has decided to postpone the release of version 14.0 of the Unicode Standard by 6 months, from March to September of 2021.
This delay will also impact related specifications and data, such as new emoji characters.

This announcement does not affect the new emoji included in Unicode Standard version 13.0 announced on March 10, 2020.

**デフォルトの名無しさん** · 2020/04/09(木) 17:31:08.32

せっかくだから細菌��とは別にウイルスの絵文字つくってくれ

**デフォルトの名無しさん** · 2020/04/09(木) 23:42:25.68

コロナ菌入れるの？

**デフォルトの名無しさん** · 2020/04/10(金) 03:17:26.49

��マスク
��トイレットペーパー

**デフォルトの名無しさん** · 2020/04/10(金) 14:38:09.67

細菌の絵文字なんてあるのか
🦠

**デフォルトの名無しさん** · 2020/04/10(金) 15:29:18.32

最近出来た

**デフォルトの名無しさん** · 2020/04/11(土) 06:13:53.13

外人が絵文字大好きなのは勝手だけど、既存コードの部分もちゃんとして欲しい

**デフォルトの名無しさん** · 2020/04/11(土) 16:23:43.45

e門司

**デフォルトの名無しさん** · 2020/04/18(土) 12:50:14.52

最近出来た細菌の絵文字・・・

**デフォルトの名無しさん** · 2020/04/18(土) 14:58:29.31

なるほど、最近と細菌がかかってる、とこういうわけですな

**デフォルトの名無しさん** · 2020/05/07(木) 16:04:22.09

するってえと何かい？
最近と細菌がかかってるというわけかい？

**デフォルトの名無しさん** · 2020/05/08(金) 15:47:36.35

ウィルスの絵文字も頼むわ

**デフォルトの名無しさん** · 2020/05/09(土) 15:44:09.31

corona emoji ��

**デフォルトの名無しさん** · 2020/05/20(水) 21:19:51.18

https://lister.tokyo/emoji/unicode_emoji.php?emoji=%F0%9F%A6%A0

絵文字
🦠

意味
微生物
【類似･説明】細菌、ウイルス、アメーバなどを表す

**デフォルトの名無しさん** · 2020/05/21(木) 14:54:55.41

ちょっといくらなんでも雑やな

**デフォルトの名無しさん** · 2020/05/22(金) 00:52:38.66

ウィルスを生物扱いする悪い子はここか？

**デフォルトの名無しさん** · 2020/05/22(金) 21:40:13.82

ゴブリン��&オーガ��

**デフォルトの名無しさん** · 2020/06/20(土) 20:24:55.95

>>891
超遅レスだが、全角半角問題の亡霊が絵文字とかで再燃してる感じ?

そっか絵文字ってサロゲートの領域のやつ以外にVSを使ってるのもあるのか。面倒だな。

>>897
Unicodeには公式定義があるでしょ

話は違うが、外人は絵文字をEmotional Iconかなんかの略だと思ってる感があって
そこはどうなんだという。

**デフォルトの名無しさん** · 2020/06/20(土) 20:46:42.29

ひらがなの'あ'よりも'W'のほうが幅広だったり、
★マークが半角幅だったりするフォントが溢れてるのに、
半角全角区別しても仕方ないだろ

**デフォルトの名無しさん** · 2020/06/20(土) 21:34:59.63

まあだからそこはターミナルとか限られた環境の話で。
フォントもそれ用のを選ぶし。

そろそろ全角半角なんてのをやめて、文字のカラム位置を揃えたいならフォントの
メトリックスの方で調整すればいいだけ、かもしれないけど。

**デフォルトの名無しさん** · 2020/06/21(日) 00:33:45.74

>>943
絵文字の幅って公式定義があるの？

**デフォルトの名無しさん** · 2020/06/21(日) 14:21:00.23

>>946
Unicodeに収録された文字には文字幅のプロパティがある、という意味で。

**デフォルトの名無しさん** · 2020/06/22(月) 00:32:43.95

>>947
かみ合ってないやん
>>894からの流れなんだから

**デフォルトの名無しさん** · 2020/06/22(月) 19:13:13.28

>>894 ? 知らんがなw
そもそも「全部」ってどういう意味だ? 全部の文字? 全部のターミナルに関わるソフトの挙動?

**デフォルトの名無しさん** · 2020/06/22(月) 20:41:37.97

発端は>>891だろう

**デフォルトの名無しさん** · 2020/06/23(火) 00:16:31.95

既存定義とは違う新しい定義の話題に
「既存定義があるぞ」は全然かみ合ってないし
知らんがなと笑われてもそれこそ知らんがな

**デフォルトの名無しさん** · 2020/06/23(火) 10:14:55.66

倍角と2倍角は違うんだっけ
4倍角もあったような

**デフォルトの名無しさん** · 2020/06/24(水) 00:49:18.29

倍角って横だよね
縦倍角ってのもあった気がする

**デフォルトの名無しさん** · 2020/06/24(水) 02:37:42.69

〴〳
〵〵

これの有効活用をしたい

**デフォルトの名無しさん** · 2020/06/24(水) 12:14:26.52

>>951
というかどういうレベルの話をしているのか掴みかねてね。

「絵文字にはUnicodeで文字幅が定義されている」これは大雑把に正しいぞ。

リンク先の元ネタをフォローしてみようか? U+2764 U+FE0F はどうするか、という話。
ここでは誰もフォローしてなかったのでこのレベルの話はしてないと理解した。
でもフォローしてみよう。

**デフォルトの名無しさん** · 2020/06/24(水) 12:28:35.59

と思ったがまたそのうちw

**デフォルトの名無しさん** · 2020/06/24(水) 13:08:49.76

どこまでもかみあわんやっちゃな

**デフォルトの名無しさん** · 2020/06/24(水) 19:38:46.76

というか、既存の定義とは何かもはっきりしてなかったのに新しい定義?
なので既存の定義（の一つ）を示してみたのだが。

全角半角というのは、SJISとかEUCとか使ってた頃の化石の概念だが、ターミナルでの
文字表示にナニゲに悪くはないので、むやみに廃止せず、Unicodeの種類が増殖していく中
如何にサポートできるか? それとも廃止した方がいいのか? あるいはターミナル自体が化石w?
みたいな問題意識を共有? できるならば話はできるかもw

**デフォルトの名無しさん** · 2020/06/24(水) 22:24:49.91

んだからUnicodeは全角半角を再定義してるんだよ
https://ja.wikipedia.org/wiki/東アジアの文字幅

**デフォルトの名無しさん** · 2020/06/25(木) 18:59:45.90

>>959
なんだそれを「再」定義というのか。だったらその前の「定義」って何? どれのこと?
SJISやEUCで、文字のバイト数＝幅という「慣習」はあったと思うが。大昔に。

で、U+2764 U+FE0Fはその再定義では駄目なので再々定義しないといけないw

個人的な意見ではU+2764 U+FE0Fは半角でいい（せざるを得ない）と判断する。
その根拠は... 省略w
ただ、ターミナルの特殊性 vs フォントのデザイン vs 文字コードで幅を決定等、
いろいろと無理がある中で妥協点を見つけるとすると、そうなるかな、という感じ。

**デフォルトの名無しさん** · 2020/06/25(木) 22:37:41.64

曖昧な定義は定義じゃないというならべつに「再」は削ってもいいが？

**デフォルトの名無しさん** · 2020/06/26(金) 13:02:51.64

%s の文字数とかで文字列の幅調整出来ないんだよな

**デフォルトの名無しさん** · 2020/06/26(金) 20:34:46.91

しかし絵文字の力はすごい。
これを使いたいがために外人共もUnicodeを以前よりはるかに意識するようになってきてる。
VSとか、漢字の字形の微妙な差とかの用途より、もはや絵文字がメインユーザー。

同様なことが「文字幅」にも起きつつあるようだ。もはや東アジアだけの問題ではないのかもw

**デフォルトの名無しさん** · 2020/06/26(金) 20:59:35.95

そして線がごちゃごちゃしてる漢字はいらなくね？って話になって排除されるんでしょう？
白人のやることはいつもそうだ

◆QZaw55cn4c · 2020/06/26(金) 21:31:32.20

>>964
それはグレートチャイナ様が抵抗してくださるのでは？

**デフォルトの名無しさん** · 2020/06/26(金) 22:11:14.85

彼らも漢字から線減らしてるじゃん
そのうち中共の悪事を次世代に隠すために漢字を扱えるのは中共の上の方だけになりかねない気もする
そのとき中国の一般人民が使ってるのが絵文字だよ

◆QZaw55cn4c · 2020/06/26(金) 22:22:00.35

>>966
それは失策だったという評判です、実際、現行である第一次案は通りましたが、第二次漢字簡化方案は失敗しました

**デフォルトの名無しさん** · 2020/06/27(土) 00:33:35.05

簡字体は半角でも行けそう感あるな

**デフォルトの名無しさん** · 2020/06/27(土) 01:47:56.80

斎と斉と齊と齋は一緒だから一つにしろとかな
渡辺渡邊渡邉もどうせ一緒だろうとか

**デフォルトの名無しさん** · 2020/06/27(土) 01:53:30.16

ひどいよな
一と二や三などたかが横線の一本二本すら妥協できないのに、
異体字はひとつにまとめようとするひどい話だ。

**デフォルトの名無しさん** · 2020/06/27(土) 02:06:13.19

>>969
これは一緒にしろよと思うことはある
文献で必要だから分けて欲しいが、明治の戸籍作成時の書き間違いまで
大事に引き継ぐ必要はないだろ

**デフォルトの名無しさん** · 2020/06/27(土) 02:22:38.17

そして再委託で中国人アルバイトに丸投げして
年金記録問題になるとな

**デフォルトの名無しさん** · 2020/06/27(土) 02:25:59.19

ｶﾝｼﾞｶﾅﾍﾝｶﾝ(キリｯ

**デフォルトの名無しさん** · 2020/06/27(土) 03:48:57.43

でもそれ用途があってのことだから規格側の仕事じゃないのよね
統合したいのなら運用のほうを変えないことにはね

いずれにしてももう入れちゃったから永久保存だね

◆QZaw55cn4c · 2020/06/27(土) 03:56:37.95

はしご高とくち高は無理やり統合されちゃって有耶無耶らしいのですが…

**デフォルトの名無しさん** · 2020/06/27(土) 08:30:57.19

>>970
マジレスすると「異体字」という言葉は正しく使って欲しい気が。