自然言語処理スレッド　その４

**デフォルトの名無しさん** · 2018/05/24(木) 11:01:13.03

2OND8

**デフォルトの名無しさん** · 2018/06/26(火) 00:19:49.53

冒険者の広場では提案広場・あしあと伝言板にて言論規制がしかれている。
提案広場では主にスクエニに対して不利になるような発言
WiiUで発売してすぐ、ウィンドウズ版では出さないといっておきながら
発売を発表、それにより広場は荒れたものの、超速で削除。
両手剣スレイプニールのチート問題、これもチート行為は絶対にないと
いいきってからの問題発覚、これも荒れて超速削除。
他全年齢対象のためちょっとでも卑猥と感じる内容は削除
ネタバレと書かなければ、ネタバレと思われるものは削除
これについては運営側がネタバレと加筆すればいいだけの話だと思うけど。
あしあと伝言板は悪口と思われる内容の言葉が含まれていれば
自動で削除される。
この装備イカす→カス
ちょっとバカンスに行ってきます→バカ
パチンコばっかりいってた→チンコ
どう考えても冤罪削除。しかも累積すると冒険者の広場利用停止。
横暴。
ちなみに冤罪削除を訴えた発言も削除される。
異議申し立ても悪だというらしい。
サポートセンターに問い合わせたところ、調べてもくれなかった。
https://ameblo.jp/cinnamon-rilakkuma/entry-12317442377.html

**デフォルトの名無しさん** · 2018/07/04(水) 22:07:34.62

5UX

**デフォルトの名無しさん** · 2018/07/05(木) 16:32:39.56

5UX

**デフォルトの名無しさん** · 2018/07/09(月) 09:01:50.15

誰か今日の研究会行く？

Mb · 2018/07/16(月) 06:02:54.03

省略のある文を構文解析するときに、
あらかじめ「省略がある」と解っている場合は
いいんだが、文法が間違ってて「ないはずの省略が
あることになってしまっている」場合は
ややこしい話になりそうに思う。
「すごく面白い」は「省略なし」で「すごく」が
「面白い」にかかるんだが、「すごい面白い」だと、
構文解析木自体が変わってきてしまう。
それとも、「解析木自体が違う」と認識して、
もっと上位の意味解析とかで処理するほうが
いいのかね？

Mb · 2018/07/16(月) 06:18:39.78

逆に、誤用とか慣用として、辞書レベルで処理しちゃったほうが
実用上は便利なのかね？
「そうすべきだ」なんていうのは、構造としては、
「そうするべきことだ」のはずなんだが、
「××する」みたいな附属語的な用法や、「漢字一字＋ｓ」
の形の五段活用動詞の連体形の変化形とは違って、単独の
「する」の連体形が「す」として使われる例はあんまりない
（文語じゃねぇんだから）。
で、「べき」は連体形だから、助動詞「だ／です／である」に
接続する場合は、本来は間に体言が入らないとおかしい。
でなかったら、「べし」と命令形にしちゃうのが文法的には
正だろう。
こういうのは、処理の観点からいうと、どう扱ったらいいのかね？

**デフォルトの名無しさん** · 2018/07/16(月) 07:59:54.86

好きにすれば？

Mb · 2018/07/16(月) 08:41:11.73

>>510
それは、「おれは好きにするからユーザは文句言うな」
なのか、「ユーザが好きに処理できるように、アプリに
自由度を持たせろ」なのか。

Mb · 2018/07/16(月) 08:48:33.94

そもそも、「人間のチェックには漏れがある」から
「コンピュータにチェックさせる」のが本筋なのに、
「コンピュータの解析精度が低いから、人間が
処理結果をチェックしないといけない」というのが
本末転倒だ。
標準表記外音は『常用漢字表』（昭和56内閣告示）によれば、
「時」には「と」の音はないため、「時計」を「とけい」と読むと
表記外になるとか、「日」には「に」の音はないため、「日本」を
「にほん」と読むと表記外となるとか、そんなの人間がチェックしたら
見落とすに決まってるだろ。
「じゃあ、他にはそういう例があるのか？」とかいったデータくらい、
ちゃんと用意してどっかに公開しておけというのだ。

Mb · 2018/07/16(月) 11:05:42.72

だいたい、中学校で
「活用するのが『用言』で、活用しないのが『体言』」とか
教えてるくせに、
天（あめ→あま）
天日嗣（あまつひつぎ）・天津日嗣（あまつひつぎ）・天照大神（あまてらすおおみかみ）・天の川（あまのがわ）・天水（あまみず）
雨（あめ→あま）
雨足（あまあし）・雨脚（あまあし）・雨蛙（あまがえる）・雨傘（あまがさ）
・雨具（あまぐ）・雨乞い（あまごい）・雨水（あまみず）・雨漏り（あまもり）
雨（あめ→さめ）
秋雨（あきさめ）・霧雨（きりさめ）・小雨（こさめ）・細雨（ささめ）
・春雨（はるさめ）・氷雨（ひさめ）・村雨（むらさめ）
とかいうのはどう説明したらいいんだよ。
「日本語処理の技術者は、中学校レベルの文法知識も持っていない」って、
中学校で教えるのかよ。
で、高校受験や大学受験で、「本当のこと」を主張したら減点されて
不合格のリスクを負うのか？
それっておかしいとは、おまいら自然言語処理をやっている人間は思わんのか。

**デフォルトの名無しさん** · 2018/07/16(月) 11:21:56.62

>「活用するのが『用言』で、活用しないのが『体言』」とか
>教えてるくせに、

ええぇぇぇっ

Mb · 2018/07/16(月) 11:36:38.15

>>514
> ええぇぇぇっ
いや、ここは驚くとこじゃねぇだろう。
中学二年で習う「文法」だと、
まず「自立語」と「附属語」の区別があって、
自立語のうち「その役割によって形を変える語」を
「用言」といい、「形を変えない語」を「体言」というと、
しっかり教科書に書いてある。
だもんだから、教師はそれを信じてテストの問題を作り、
それに「教師が正しいと思った解答」を書かなかった
児童・生徒は成績評価が低くなる。
で、「それはおかしいんじゃないですか？」とかいって
文句をつける保護者は、「モンスター・ペアレント」として
扱われる。

めでてぇな。

**デフォルトの名無しさん** · 2018/07/16(月) 11:36:41.25

最近少し興味を持った初心者なのですが、
2ch用語やギャル語、話し言葉や文法的な違いはどのような手順で処理されるのですか？

例えば、

>それっておかしいとは、おまいら自然言語処理をやっている人間は思わんのか。

おまいら自然言語処理をやっている人間は、それっておかしいとは思わんのか。

あなた方の様に自然言語の処理を行う人達は、「それはおかしい」と思わないのですか？

**デフォルトの名無しさん** · 2018/07/16(月) 11:54:52.76

>>515
その「教え方(ほんとなら)」に驚いてるんじゃなくて

>>513 の認識に驚いてる

**デフォルトの名無しさん** · 2018/07/16(月) 12:10:49.45

しょせんは人が決めた分類なんで従うしかない

って書こうとしたけど
漢字って単語のさらに一部分で雨水はいつだってあまみずだから
雨水を単語として分類するとき体言にするのはべつに間違ってないような

https://kotobank.jp/word/%E4%BD%93%E8%A8%80-91058
定義もっとこまかかった最初の前提からちがう

Mb · 2018/07/16(月) 12:54:56.73

>>518
> 漢字って単語のさらに一部分で雨水はいつだって「あまみず」だから
　開く（あく／ひらく）
　開ける（あける／ひらける）
　温める（あたためる／あっためる／ぬくめる）
　暖める（あたためる／あっためる）
　温まる（あたたまる／ぬくまる）
　言う・謂う・云う（いう／ゆう）
　怒る（いかる／おこる）
　行く・逝く・往く（いく／ゆく）
　射殺した（いころした／しゃさつした）
　抱く（いだく／だく）
　行った（いった／おこなった）
　出し（(文)いでし／(現)だし／(文)でし）
　居る（いる／×おる）
　入る（いる／はいる）・入れない（いれない／はいれない）
　得る（うる／える）
（以下、規制に引っかかるので省略）
「雨水溝」は、「うすいこう」なのよ。

Mb · 2018/07/16(月) 13:03:08.07

>>516
> 2ch用語やギャル語、話し言葉や文法的な違いはどのような手順で
> 処理されるのですか？
いや、普通に処理してるけど？
「文法格の一意性」とか「非交差則」とかで説明できるんだけど。
ただ、「処理の結果が気にくわない！」って言ってる、自然言語処理
分野のヒトが邪魔してるだけだし。文語文法とかの研究者は、
「使えるツールがあれば欲しい」っていう要望があるんだけど。
そのあたりは早稲田大学の文理学部の筧先生とかに嘆願してね。

Mb · 2018/07/16(月) 13:08:49.98

>>518
「の」とか「ん」で表される、いわゆる「準体助詞」は
主語にならないから体言じゃないんだな？

Mb · 2018/07/16(月) 13:12:52.10

>>516
そのあたりは運用上の意味論がある。
わりと有名な例だが、
「てめぇは馬鹿か？」は通るが、
「あなたは知恵遅れではありませんか？」と
言ったら、血の雨が降る。

Mb · 2018/07/16(月) 13:16:06.01

慣用・誤用、あるいはいわゆる“百姓読み”

口腔外科
「こうくうげか」ではなく「こうこうげか」。
清拭
「せいしき」ではなく「せいしょく」。
独壇場
正しくは「独擅場」と表記して、「どくせんじょう」。
疾病
「しつびょう」ではなく「しっぺい」。
偏執狂
「へんしつきょう」ではなく「へんしゅうきょう」。
情緒
慣用は「じょうちょ」。正式には「じょうしょ」。
膏肓
「病、膏肓に入る」は「やまいこうもうにいる」ではなく「やまいこうこうにいる」。
捏造
慣用は「ねつぞう」。正式には「でつぞう」。「捏ち上げる」は「でっちあげる」。

Mb · 2018/07/16(月) 13:17:32.40

>>523
あ、ごめん。うっかり送信しちゃった。

Mb · 2018/07/16(月) 13:22:00.06

>>519
続き。
　脅かす（おどかす／おびやかす）
　下り（おり／くだり）
　降り（おり／ふり）
　解す（かいす／ほぐす）
　通った（かよった／とおった）
　来る（きたる／くる）
　汚す（けがす／よごす）
　汚れる（けがれる／よごれる）
　煙る（けぶる／けむる）
　扱く（こく／しごく）
　栄える（さかえる／はえる）
　誘う（さそう／いざなう）
　認める（したためる／みとめる）
　狭まる（せばまる／はさまる）
　狭める（せばめる／はさめる）
　初めて（そめて／はじめて）
　逸らす（そらす／はやらす）
　逸れる（それる／はぐれる／はやれる）
　違う（たがう／ちがう）
　尊ぶ（たっとぶ／とうとぶ）
　貴ぶ（たっとぶ／とうとぶ）
　違える（たがえる／ちがえる）
　吐く（つく／はく）
　留める（とめる／とどめる）
　留まる（とまる／とどまる）
　叩く（たたく／はたく）
　弾く（はじく／ひく）
　瞬く（またたく／まばたく）

Mb · 2018/07/16(月) 13:25:35.64

せっかくだから、最後までやっとこうか。
　(文)悪し（あし／わろし）
　良い・善い・好い（いい／よい）
　鈍い（にぶい／のろい）
　辛い（からい／つらい）
　難い（かたい／にくい）
　臭い（くさい／におい）
　尊い（たっとい／とうとい）
　貴い（たっとい／とうとい）
　難しい（むずかしい／むつかしい）
　(文)良し（よし／よろし）

（まだ続く）

Mb · 2018/07/16(月) 13:26:51.56

　(文)悪し（あし／わろし）
　良い・善い・好い（いい／よい）
　鈍い（にぶい／のろい）
　辛い（からい／つらい）
　難い（かたい／にくい）
　臭い（くさい／におい）
　尊い（たっとい／とうとい）
　貴い（たっとい／とうとい）
　難しい（むずかしい／むつかしい）
　(文)良し（よし／よろし）

抜けてる例があったら知らせてくれ。

Mb · 2018/07/16(月) 13:29:11.05

で、質問があったらカモーン！　歓迎するぜぇ！

Mb · 2018/07/16(月) 13:49:08.35

>>517
> その「教え方(ほんとなら)」に驚いてるんじゃなくて
中学校の国語教科書なら神保町の三省堂書店で
売ってるから確かめてみたらどうだ。

Mb · 2018/07/16(月) 15:36:36.28

ところで、
「ところで」を漢字で表記する場合、
「処で」「所で」「處で」のどれが正しいのか、
知っているヒトがいるんだったら教えてほしい。
本当に。

**デフォルトの名無しさん** · 2018/07/16(月) 16:15:34.93

>>523
確執は？

Mb · 2018/07/16(月) 16:59:58.75

>>531
それは別板の話題だと思うが …
「固執」「執事」「偏執狂」との絡みで解決してくれい。

**デフォルトの名無しさん** · 2018/07/16(月) 17:13:46.84

なんでこの人ID真っ赤なの？

Mb · 2018/07/16(月) 17:22:46.07

>>533
べつにおれの知ったこっちゃないんだが、
あっちゃこっちゃの板でヒトに嫌われるようなコトを
ホザいてたからだろう。

Mb · 2018/07/16(月) 17:30:44.70

>>533
なんか知らんが、数学板とかプログラマ板とか、
あっちゃこっちゃで粘着してくる香具師がいるんだよ。
どうしたもんかなぁ …

**デフォルトの名無しさん** · 2018/07/16(月) 18:49:32.10

国文法の細かい話題に参加する気はないが
人間が文法を間違えたときにどう処理するかは
自然言語処理で昔から問題になってる

Mb · 2018/07/16(月) 21:00:28.41

>>536
> 昔から問題になってる
っつーのはよく解る。
清少納言が「べきにもあらず」とか
書いてるけど、文法的には「べからず」が
正しいと思う。

「慣用形」として認めるのはアリだと思うが、
しょっちゅう使うから「慣用」なんであって、
そこを網羅するのがコンピュータの出番だと
思うんだがどうだろう。

つーか、記述文法の精度が低すぎるのが
本来の問題なんだが、

おまいら記述文法を舐めてねぇか？

という連中が自然言語処理業界に多すぎるのが
問題だと思うが。

**デフォルトの名無しさん** · 2018/07/16(月) 21:05:53.77

憤慨ポイントがよくわからない

自分のアプリで処理できないから怒ってるのか？

Mb · 2018/07/16(月) 21:14:19.70

>>536
“じつは”というか、“ぶっちゃけ”というか、
もう四半世紀（要するに二十五年以上）前から、
そこいらにあるパソコンの（形態素解析レベルの）チェック
能力は、人間を軽く超えているんだよ。
ただ、構文解析に関しては、国語学とか自然言語処理とか
数学とかコンピュータサイエンスとか認知心理学とか、
そのあたりの合意がとれてないわけよ。
だから、そのあたりを整理する必要があるわけなんだけど、
苫米地英人とかが引っ掻き回しやがってバカヤロウ、
みたいな話があるんだわ。

Mb · 2018/07/16(月) 21:24:18.35

>>538
そもそも先人の業績をないがしろにしてるところが
気にくわんのだよ。
処理はできるんだが、その結果が「気に食わん」という奴が
いるわけだ。
「文法格の一意性」とか「非交差則」とか言うと、
学会で「こいつ GC とか信じてやがる pgr」とか云われるんだよ。

Mb · 2018/07/16(月) 21:28:39.50

>>540
× GC
〇 CG
汎文法（common grammer）な。
「文を構成するのは述語である」とか、
「述語に対する役割が、文法格である」とかいった、
「言語には、基本的な構成要素がある」っていう
構造主義的な立場だ。

**デフォルトの名無しさん** · 2018/07/16(月) 21:48:34.53

文法よりまずおまえの頭を整理したほうがいいきがする
結局なにゆーてんかわからん

Mb · 2018/07/16(月) 22:09:23.58

>>542
とりあえず、トポロジーとかカタストロフィ理論とかから
勉強してきてくれるとありがたいんだが。
一から説明してると面倒臭いんだわ。

「私はラーメンを餃子を喰う」とは言わんだろ？
「私はラーメンと餃子を喰う」んだわ。
「喰う」という動詞に対して、文法格を
持つ対象は一意なんだよ。だから、「ラーメンと餃子」というふうに、
集合体になってるわけ。これが、「文法格の一意性」。

**デフォルトの名無しさん** · 2018/07/16(月) 22:12:55.13

２行目で頭がフットーした
絶対おれの知識不足じゃなくてお前の話し方に問題がある

Mb · 2018/07/16(月) 22:12:55.55

>>542
でもって、昔（文語文法）は形容詞は述語になってたんだが、
いまの文法（いわゆる学校文法）では、形容詞は述語に
ならんのよ。だから、

「象は鼻が長い」

は、「述語がないのに主語が二つもあるのはおかしい！」という
批判が出てるわけ。

おわかりか？

**デフォルトの名無しさん** · 2018/07/16(月) 22:28:36.42

文法の細かいことはほとんどわからんが

ようはその文法格とかをメインに考えてきたおまいらの方針が
AIとかの漠然とした解析方法に押されて消えちゃいそうで
危機感を感じて発狂してるということなのか？

**デフォルトの名無しさん** · 2018/07/16(月) 22:55:46.12

批判ってつまり
今の文法格の考え方じゃ対処できてないじゃんって
おまいさんが突っ込まれたってことだよね

誰かが日本語の文法批判してるみたいじゃねーかまぎらわしい

それともなにか
本当に教育に干渉して日本語の文法に変更を加えようとしてるのか

Mb · 2018/07/17(火) 09:14:36.43

>>547
> 誰かが日本語の文法批判してるみたいじゃねーか
> まぎらわしい
国語学者が中学校の現代国語で教えられている
「いわゆる学校文法」を批判してるんだよ。
「学校文法　批判」でググると五十万件以上
ヒットするから読んでみるといい。
特に、文語文法を教えてる先生は、言葉が通じなくて
頭を抱えてる。

Mb · 2018/07/17(火) 09:25:46.63

>>546
つーか、自然言語処理自体が AI の一分野なんだよ。
だけど、事前言語処理をやっている人間の多くは
學校文法の延長でしか日本語の文法を捉えていないので、
日本語処理の技術の進歩が停滞しとるのよ。

Mb · 2018/07/17(火) 09:28:18.11

>>547
これなんか、よくまとまってる。
ttps://ci.nii.ac.jp/els/contentscinii_20180717092612.pdf?id=ART0001102905

Mb · 2018/07/17(火) 09:34:38.84

なお、本居春庭が悪いとか、橋本進吉が悪いとかいう話ではない
（大野晋先生は橋本進吉先生の弟子）。
中学校の文法教育が、文法嫌いを六十年以上拡大再生産
しているのが悪い、っちゅー話。

**デフォルトの名無しさん** · 2018/07/17(火) 14:03:22.52

いまどきAIの分野でない自然言語処理なんてあるの？

Mb · 2018/07/17(火) 14:40:42.81

>>552
ある。「かな漢字変換」とか「ローマ字かな変換」とかな。
「programwo」は、本来なら「プログラム（program）を」と
変換してほしいところだが、「ｐろｇらｍを」と変換される。
これを「AI の限界」とか言ってる奴も多いが、
技術的にはすでに解決されてる。

Mb · 2018/07/17(火) 14:50:17.21

>>552
かな漢字変換システムの形容詞の辞書登録で、
「i」とか「e」とかで終わる形容詞を登録してみ？
「i」終わりは「みみっちい」「ばっちい（ばばっちい）」
くらいしか存在しないので、登録時のチェックで注意喚起
してくれるのが正しいありかただ。
「e」末尾は、「かそけき」「さやけき」「むくつけき」「猛き」
あたりが該当するが、現代語の連体形が存在しないので、
「かそけい」「さやけい」「むくつけい」「猛い」が
変換候補として出てきたときに腹が立つかどうか、という
話になる。

Mb · 2018/07/17(火) 14:55:42.16

でもって、自然言語処理というのは、一般的に
「形態素解析ができて、それを構文解析したときに、
正しい（ちゅーか、実用的な）解析木（ちゅーか、
情報処理するときに扱いやすいデータ構造）に落ちるか
どうか」が勝負なんだよ。
だけど、「そんな解析木は認めない！」ていって
頑張っている奴が業界を押さえていると、日本語処理
っていうもの自体が成り立たなくなるわけだ。
だから、「まず、記述文法から交通整理しよう」っちゅー
話をしとるわけよ。

Mb · 2018/07/17(火) 15:08:30.84

「日本人は髪が黒い」という表現は、「黒い」が「髪」を連体修飾
してて、「髪」がとりたてによって強調されているから、「黒い」
の前に出てきて、とりたて詞「が」が用いられる、って言っただけで、
学会で吊るし上げを喰らうんだぞ？
で、まともな反論が返ってくるならともかく、
「くぁｗせｄｒｆｔｇｙふじこふじこふじこ！」
みたいなコトになるんだぞ？
「いや、ちゃんと動いてるシステムがあるんですが」とか
言っても、「あーあーあーあーあー聞こえない聞こえない聞こえなーい」
みたいな反応しか返ってこないんだぞ？
だけど、普通の研究者は逆らえないんだ。そういう連中は、大っぴらには
言えんけど大きな企業で国の予算を貰っていて、その一部をスポンサーとして
研究機関に流してるところから来た、背広着てネクタイ締めて学会に来てる
ような連中だからだ。
「日本語処理が実用化されたりなんかしたら、研究費が出なくなって
自分らが干上がる」というのを知っている連中が、日本語処理業界に
巣食ってるんだよ。

**デフォルトの名無しさん** · 2018/07/17(火) 15:53:21.98

>>556
どこの学会よ？
情処やJSAIはもちろんNLP学会でもそんなの見たことないが

**デフォルトの名無しさん** · 2018/07/17(火) 16:56:24.01

原子力学会かよ

Mb · 2018/07/17(火) 17:08:28.25

>>557 >>558
自然言語処理に関係してる学会なんて、
だいたい想像つくだろうに。

Mb · 2018/07/17(火) 17:17:24.52

で、益岡隆志／田窪行則『基礎日本語文法』以外の文法は
認められないんだ。
なぜかというと、JUMAN や ChaSen や MeCab とかを
いじくって「日本語処理やってまーす」つってアピールして
予算貰って生きてくしかないからだ。

**デフォルトの名無しさん** · 2018/07/17(火) 20:17:31.80

どうせ構文解析器なんて要らなくなるよ
不毛な議論

Mb · 2018/07/17(火) 20:31:47.87

でまぁ、本筋に戻るんだが、
現代日本語の動詞と形容詞の終止形（連体形と形は同じ）は、
じつは連体形の終止用法で、その後に体言とコピュラが
省略されていると考えると、処理も楽だし解析木も
ややこしくならない。試してみりゃあすぐ解る。
だけど、これを大声で言うと冷や飯を食わされるやら
煮え湯を飲まされるやら、いろんな目にあう。

Mb · 2018/07/17(火) 20:47:58.86

>>561
まぁ、「データが木構造なんで、図で説明するのに
便利」っちゅー以上の意味はないわな。
「修飾関係が交差しない」から、木の形で
描ける、つーだけの話だし。
フローチャートと同じで、滅んだほうがいい
文化かもしれん。

**デフォルトの名無しさん** · 2018/07/18(水) 17:42:01.84

>>561
それな

どうせ文法なんて人間の都合で勝手に名付けた物だったりルールがあると錯覚してるだけだし

**デフォルトの名無しさん** · 2018/07/18(水) 18:58:52.59

>>564
ところが、「ハナモゲラ語」とか「言葉のサラダ」とか、
そういうのが、コンピュータで生成しようとしても
面白くならないんだよなぁ。
「ある」のは分ってるんだが、それが「何なのか」っつーのが
わからないのが文法の面白いところなのよ。

**デフォルトの名無しさん** · 2018/07/19(木) 11:52:00.94

ランダムでやってもつまらんだろ

**デフォルトの名無しさん** · 2018/07/19(木) 13:27:00.87

>>566
だな。つまらん。
n-gram 法の単純なやつで、2-gram 法でウケてた時代も
あったんだが（筒井康隆『狂気の沙汰も金次第』参照）、
いまどきはそれで笑いは取れん。
昨今はスパムフィルタを潜り抜けるための
ネタでしかない。
自然言語処理の研究者は何をやってるんだ、という
怒りが消えない。

**デフォルトの名無しさん** · 2018/07/19(木) 13:31:36.20

つーか、東工大とかお茶の水女子大とかは、
「自然言語処理」っつって何をやってるんだ、
という怒りがある。
正直、いっぺん行ってシメてきたほうが
いいような気がする。

**デフォルトの名無しさん** · 2018/07/19(木) 13:51:07.59

日本以外の国ではどうなん？自然言語処理。

**デフォルトの名無しさん** · 2018/07/19(木) 15:32:56.09

>>569
日本語みたいに膠着語の国が少ないので、
もうちょい楽。
ただ、わりと手に負えないのが韓国語と
インド諸語かな？
インドは英語が普及してるんで、あんまり
自国語（つーても方言が多いので、何が
なんやら分らんのだが）の自然言語処理には
熱心じゃないらしい。
韓国は、とにかくハングルの字母の数が多いうえに、
正書法が確立しとらんのだよ。
「子音＋母音＋子音」でカナ一個の文字なんで、
単純に子音が十個で母音が五個としても、カナが
五百個ある勘定になる。

**デフォルトの名無しさん** · 2018/07/19(木) 15:51:30.42

ハングルは使い慣れると便利っつーのは
分るんだけど、できればローマ字表記を
確立してほしい。
「ピビン麺」と「ビビンバ」を並べて
見るとイラッとくる。

**デフォルトの名無しさん** · 2018/07/19(木) 16:31:30.15

連投してる奴が何に対して怒ってるのか分からん
現状を打破する何かを自分で開発すればいいだけだろ

**デフォルトの名無しさん** · 2018/07/19(木) 17:56:05.63

>>572
開発したからイラついてんだよ。
だったらおまいは何を開発したか
言ってみろ。

**デフォルトの名無しさん** · 2018/07/19(木) 18:24:18.12

>>573
開発中だが別にイラついて文句言ってないから
言わないといけない義理はない

**デフォルトの名無しさん** · 2018/07/19(木) 19:54:40.83

>>574
「ビビンバ」は、「混ぜご飯」の意味で、発音は“pi-bim-pap”。
「ビビン麺」は、「混ぜ麺」の意味で、表記は “bi-bim-guk-su”。
だけど、「ピビンパ」とか「ビビン飯」とか変換するとダメだと言われ、
「ビビングスク」とか変換するとダメだと言われる。
「じゃあ、どうすればいいのか？」という話になると、
「それは説明できないが、とにかくそうなんだ」と言われる。

まぁ、そんな連中はいっぱいいるので、べつに「韓国人は」
みたいなことで怒っているわけではないし、
ユーザの要求を聞き取って、具体的な仕様に落とすのが
システムエンジニアの仕事ではあるんだが、
自然言語処理の世界だと、「いやだー！　いやだー！
そうじゃないんだー！　うわぁぁぁぁぁぁぁ！」みたいな話で
ぶっ壊れる案件が多いというのは知っておくといい。
少なくとも金が自分の懐に入るまでは、油断しないほうがいい。
もっとも、その後で知的所有権がなんだかんだ、で懐から
金が出てゆくこともあるから油断はできないが。

**デフォルトの名無しさん** · 2018/07/19(木) 20:01:12.43

>>564
> どうせ文法なんて人間の都合で勝手に名付けた物だったり
> ルールがあると錯覚してるだけだし
「だから説明できないけどおれが正しい」って言われても、
説得できないのが自然言語処理。
で、説得しようとすると、「あんたは日本語処理とかなんとか
言ってるけど、あんたは日本語がわかってない」と言われる。
それが日本語処理業界の現実。

**デフォルトの名無しさん** · 2018/07/19(木) 20:29:21.21

これは言いたかなかったけど、
「支配者の言語」というのがあって、「被支配者の言語」の
言語表現を規制するのが「規範文法」。で、被支配者の
言語表現に対して、「それは文法に適っていない」と言えるのは、
支配者の権利だとする思想がある。
それがあるんで、左派の言語学者は「文法なんてない」と主張するし、
おれは「すべての言語表現において普遍的な原則」としての
「高精度の記述文法」というのを考えたワケ。
だから、おれが「あんたの表現は文法的に間違ってるぞ？」と
言うときは、「そういう言い方だと、他の奴には通じないぞ？」と
いう意味で使ってる。で、精神科医は、そういう発話を「言葉のサラダ」
と謂うんだ。

**デフォルトの名無しさん** · 2018/07/19(木) 21:01:52.09

>言葉のサラダ

お医者さんにそういわれたのか
言われたんだろうな…

**デフォルトの名無しさん** · 2018/07/20(金) 03:36:24.54

>>568
それでも研究費が出るからぬくぬくしてるんじゃないの？

**デフォルトの名無しさん** · 2018/07/20(金) 06:28:12.00

>>579
たぶん、ぬくぬくはしてないと思う。全体のパイが
小さいから、研究費（あるいは科研費）の奪い合いが
熾烈なんだと思う。だから、足の引っ張り合いになるんだろう。
日本語が論理式（モンタギュー文法）にうまく落ちないとか
形態素解析の精度が上がらないとかいうことになると、
「日本語は非・論理的だ」「日本語の文法は不完全だ」みたいな
ことを言いだして、「大規模データを統計的に処理すれば …」
とかいって予算を取ろうとする。
だから、哲学（論理学が絡むとこっちに該当する）とか
記述文法なんかやってる奴が下手に成果なんか上げちゃったら、
そいつらが困る。

**デフォルトの名無しさん** · 2018/07/20(金) 10:16:08.42

>>571
韓国人はピもビも同じ文字を使って区別しないで発音してるけど、日本人が聞くとピビンバに聞こえるんだな。どっちの表記が正しいってこともないけど表記揺れはちょっともやもやするな。

日本語でも「パパ」って発音したとき1個目のパは有気音、2個目のパは無気音で発音するので、韓国人にしてみれば同じカナなのに別の発音してるって感じるはず。

**デフォルトの名無しさん** · 2018/07/20(金) 13:02:25.01

別に困んないけど

本当にpracticalならともかく

**デフォルトの名無しさん** · 2018/07/20(金) 13:26:52.30

朝鮮人パカするな

**デフォルトの名無しさん** · 2018/07/20(金) 14:58:22.06

>>581
まぁ、「マンガ」「メガネ」の「ガ」は鼻濁音だし、
「軍歌」の「カ」と「軍靴」の「カ」は違うんだけど
（後者は「クワ（ワは小さく）」）、普通の日本人は
気にせんのだけどな。

>>583
おれは朝鮮人と呼ばれてバカにされても一向に気にしない
（大陸顔なのは理解している。鹿賀丈史とか米倉斉加年が
代表的な大陸顔だ）。
必ずしもすべての朝鮮人が馬鹿ではないし
（例を思い浮かべられないのがなさけないが、
呉善花は入れておいていいかもしれないと思う）、
すべての馬鹿が朝鮮人だという話でもない
（馬鹿な日本人は少なからずいる）。

力道山や大山倍達や大木金太郎については
コメントは控えておきたい。

**デフォルトの名無しさん** · 2018/07/20(金) 15:05:41.59

千田是也さんが、関東大震災のときに、「朝鮮人が叛乱を
企てている」というので自警団が検問をしているときに
引っかかって、「『水道局』と言ってみろ」と言われ、
滑舌が悪くて「しゅっ … しゅいどうこく！」と言ったら
「鮮（せん）だ、これは。」と言われたので、「千田是也」という
ペンネームを使っていたというのは有名な話。

**デフォルトの名無しさん** · 2018/07/20(金) 15:11:04.74

「おれは東京生まれの東京育ちで、日本橋の出身だから
訛りなんかない」と豪語していた奴が同僚にいたので、
「だったら『潮干狩り』って言ってみろ」と言ったら、
しばらく絶句してから、「しっ …… しおしがり！」って
言ってから勝手に落ち込んでた。
ちなみに江戸弁だと「ひよしがり」が正。

「鮭」は「しゃけ」、「朝日新聞」は「あさししんぶん」。
かな漢字変換用の辞書には登録しておくのが吉。

**デフォルトの名無しさん** · 2018/07/20(金) 15:19:37.45

あと、「蠅帳」は、正訓は「はえちょう」。江戸弁では「はいちょう」。
「蚊帳」は、日本中「かや」。
「棟梁」の正訓は「とうりょう」。江戸弁では「とうりゅう」。
「道了尊」は、「どうりょうそん」と「どうりゅうさん」。
形態素解析っていうのは、ここまでやって一丁前。

**デフォルトの名無しさん** · 2018/07/20(金) 15:29:07.28

>>582
「義足とか義手とかなくても、別に困んないけど。
おれ健常者だし」
「べつにハングル表記とかなくても、別に困んないけど。
おれに帆人だし」

「本当にpracticalならともかく」。
あーやだやだ、想像力とか共感性のない奴は。

「自然言語処理とかなくても、別に困んないけど。
普通に言葉分かってるし」ってぇ話だろ？

**デフォルトの名無しさん** · 2018/07/20(金) 17:35:58.98

>>588
×に帆人
〇日本人

**デフォルトの名無しさん** · 2018/07/20(金) 17:40:15.50

あと、昔の越後の人は「し」と「す」の区別がつかなくて、
「伸びた“シ”と結んだ“シ”」というんで区別してた。
「お寿司」と「お獅子」とかな。

**デフォルトの名無しさん** · 2018/07/20(金) 18:01:44.97

日本橋の『たいめいけん』の茂出木心護さんが、
越後の出身者は「えちご」と「いちご」が発音上
区別できなくて、「ストロベリー」と云われて
馬鹿にされたという話を書いている。

**デフォルトの名無しさん** · 2018/07/20(金) 18:34:54.69

正しい日本語処理。

「やってみてくれ」
　⇒金融機関が借入金を引き上げようとしているので、
なんか儲かりそうな話をでっち上げてくれ。
「やってくれ」
　⇒「できません」とか言ったらぶっ殺すぞ。とにかく
儲けを出せ。
「上からの GO が出た」
　⇒逃げ支度が済むまで引っ張れ。
「君には失望させられたよ」
　⇒ぜんぶお前の責任だ。お前が尻拭いをしろ。おれらは
知らない。

そんなもんですよ。

**デフォルトの名無しさん** · 2018/07/20(金) 18:57:49.52

連投してる奴いろいろ書いてるけど
他人に対して何か伝える文章じゃないな
結局何が言いたいのかぼんやりしたまま

**デフォルトの名無しさん** · 2018/07/20(金) 19:55:29.19

人工無脳がなんか言ってますよ。

ところで、「なさい」「ください」「いらっしゃい」とかは、
文法的にいうと、動詞の活用としては何形になるのかねぇ？

**デフォルトの名無しさん** · 2018/07/20(金) 20:02:56.67

>>593
> 連投してる奴いろいろ書いてるけど
> 他人に対して何か伝える文章じゃないな
> 結局何が言いたいのかぼんやりしたまま

「連投して（い）る奴（が）いろいろ（と）書いて（い）る[けど
（＝「けれども」）]、他人に対して何か（を）伝え（「ようとしてい」？／
「られ」？）る文章[じゃ（＝「では」の口語的に崩れた形）]ないな
結局、何が言いたいのか（が）ぼんやりしたまま（の）（何か）（だ）」。

こんな屑な人口無脳を作った馬鹿は、どこの大学のどこの研究室の所属だ。

**デフォルトの名無しさん** · 2018/07/20(金) 20:05:19.46

>>595
×人口無脳
〇人工無脳
こんな屑な IME を作ったのはマイクロソフトだ。

**デフォルトの名無しさん** · 2018/07/20(金) 20:41:02.84

>>595
馬鹿はお前だよ
自然な省略だろ

>>594
＞かねぇ？
ってのは口語的に崩れた形だろうが
分かったらお前も人工無能な

**デフォルトの名無しさん** · 2018/07/20(金) 20:53:07.41

>>597
> 自然な省略だろ
自然言語処理をやっているなら、何が自然なのかを説明してくれ。

>＞かねぇ？
>ってのは口語的に崩れた形だろうが
そんな甘いツッコミを入れられてもサムいだけだ。
まぁ、ここのところ猛暑が続いているからご愛敬だけどな。
「動詞の活用としては何形になるのかねぇ？」
だったら、
「動詞の活用としては、何形になる（の）（でしょう）かねぇ？」
とツッコんでほしかった。「なる」は連体形だから、その後に何かが
省略していないと文が完結しないので、そのあとに「体言＋コピュラ」が
省略されている、と推測するのが正解、くらいのツッコミが入ったら、
おれも素直に頭を下げられるんだが。

ついでながら、「ってのは」は「というのは」の、口語的に崩れた形だ。

**デフォルトの名無しさん** · 2018/07/20(金) 20:58:35.72

>>597
> お前も人工無能な
文脈としては、
×人工無能
〇人工無脳
だと思うが。“も”っていうことは、お前は無能なんだな？
おれが人工無脳だったら、製作者はとっくにチューリング賞を
獲っとるわ。

**デフォルトの名無しさん** · 2018/07/20(金) 21:25:48.02

くそう。叱られちゃったい。
> ないな
「ない（体言:省略）（コピュラ:省略）な」
> ぼんやりした
「ぼんやり（と:省略）した」
が正解。

**デフォルトの名無しさん** · 2018/07/20(金) 22:01:12.70

しよはしよじゃないの？

**デフォルトの名無しさん** · 2018/07/21(土) 06:57:48.94

>>598
＞そんな甘いツッコミ
お前が自分に甘いだけだろ
だから馬鹿なんだよ

**デフォルトの名無しさん** · 2018/07/21(土) 07:37:00.82

>>602
事実と意見は区別しないと、論文は通らないぞ？

**デフォルトの名無しさん** · 2018/07/22(日) 06:53:00.75

>＞そんな甘いツッコミ
> お前が自分に甘いだけだろ
> だから馬鹿なんだよ
せっかくだから自然言語処理に関係のある話をしておこう。
形容詞は暗黙の主語として話者を要求する。「>>602 は恥ずかしい奴だ」は
「>>602 は自分を恥じている」を含意しない。「>>602 は（話者である）私を
して“恥ずかしい”と感じせしめる人物である」という意味を内包している。
また、「とりたて詞『が』は強調転置を起こす」ので、
「お前が自分に甘い」は「自分に甘いお前」を含意するが、たいていの奴は
自分に甘い。
「だから馬鹿なんだよ」は、「だから」と「馬鹿」のどちらに強意があるかが
字面からは読み取れない。前者だとすると、「馬鹿」という概念が
すでに所与のものとしてあり、前提から導出が可能だ、と主張している
ことになるが、後者では、「馬鹿」というのは文中にトピックとして
出てきたことになる。

**デフォルトの名無しさん** · 2018/07/22(日) 07:05:30.26

日本人動物学者「こいつは馬鹿だ！」
満州アカシカ「いかにも私は馬鹿です」

**デフォルトの名無しさん** · 2018/07/22(日) 09:01:24.76

日本語には体言の省略が多い（ただし異論はある）。
ただ、「その、省略された対象が何か」を推定するのに、
シソーラスと「その名詞にはどういう性質（内包的な意味）が
付与されているか」というデータが必要になってくる。
仮に百科語を二万語として、それだけのシソーラスを
作るのは並大抵の労力ではない。
そうすると、なにか限定されたジャンル（医学とか、化学とか）を
扱うしかなくなってくるが、それだと一般性が乏しくなる。
中学・高校あたりの理科系分野とかに狙いをつけるのが
いいんだろうか。
素人向けの医学・薬学・栄養学的な知識、というのも
考えたんだけど、厳密な体系にならないんだよね。

**デフォルトの名無しさん** · 2018/07/22(日) 12:40:16.29

>>606
もうひとつ、述語の中心である動詞の場合、要求する
「文法的な格」がどのようなものであるか、が明らかであって、
しかも「かかる」相手がどういうカテゴリーにあるか、というのが
分らないと、体言に附属した助詞が省略された場合に、「述語から
要求される文法格」が何であるかを推定できないんですよね。
「彼、スパゲティ、食べた」が、「彼はスパゲティを食べた」なのか
「スパゲティが彼を食べた」なのかは決定不能なのね。
「コタツが葬儀屋を食べた」は無意味文になりそうだけど、
映画『バトルヒーター』（一九八九）という文脈があったら、
「意味がある」と判断されると思うんだけど。

**デフォルトの名無しさん** · 2018/07/23(月) 08:38:44.41

一時期「ら抜き」が問題になってたけど、
「可能」と「尊敬」を区別できるという
メリットがあるので、一概に否定はできないと
思っている。だったら「れる」を「ことが可能である」と
入力時に機械的に置き換える（あるいは変換候補として出す）
くらいの芸はできんのか、とは思う。
一行めの「なってた」も「なっていた」が候補に出ていいし、
「あっさりした」も「あっさりとした」が正のはず。
入力時にチェックするのは難しいにしても、
テキストデータをチェックするくらいは簡単なように
思われるんだけどね。

**デフォルトの名無しさん** · 2018/07/23(月) 12:57:40.81

>>601
> しよはしよじゃないの？
そこんとこ kwsk

**デフォルトの名無しさん** · 2018/07/27(金) 14:22:16.44

本番過ぎちゃったので時期遅れですが

You might or more heard a two fishes.

**デフォルトの名無しさん** · 2018/07/27(金) 14:25:38.80

>>610
ダメだ。暑気中りが治ってない。

×You might or more heard a two fishes.
〇You might or more heard today's a two fishes.

冬バージョン
You might or more heard today's some fishes.

**デフォルトの名無しさん** · 2018/07/27(金) 20:23:15.22

>>611
私は
You might think but today's hot fish
と習いました

**デフォルトの名無しさん** · 2018/07/28(土) 23:43:24.97

>>612
粋な先生だな。
じゃあ、「“ghoti”と書いて何と発音するか？」とか
習ったクチだな？
おれはすれっからしの自然言語処理屋なんで、
“Time flies like an arrow.”を
「時蠅は矢を好む。」とか「矢のように時を測れ。」とか
訳してしまうクチだ。

**デフォルトの名無しさん** · 2018/07/29(日) 00:46:36.29

>>613
象は鼻が長い、で二、三時間話ができそうだな。

**デフォルトの名無しさん** · 2018/07/29(日) 11:52:38.73

>>614
どっかの国語学者は何十年とかそういう話をやってるので、
二三時間で片がつくならいつでもやるんだが(^_^;)。
ついでながら、>>613 は
「enough」の "gh"、「women」の "o"、「nation」の "ti" で
「フィッシュ（fish）」だそうだ。

電算業界では「jail（牢獄）」というテクニックがあるのだが、
「本当は『geol』」とか思ってしまうおれはへそまがりだ。

**デフォルトの名無しさん** · 2018/07/29(日) 12:05:56.01

「象は鼻が長い」は、「象は鼻が長いのです」を含意し、
準体助詞の「の」の役割を考えると、「象は鼻が長いのです」
は「象は鼻が長い（X）（です）」を含意すると看做せると
解釈可能である。
しかしながら、「長い」は「鼻」を修飾しているので、X は
「哺乳類」「生物」とかいったものであると解釈するのが
妥当であろう。したがって、とりたて詞「が」によって「鼻」が
強調されて転置が怒り、「長い」の連体修飾という役割が、
結果として文構成のなかで引き継がれた、と解釈すると、
構文解析によって自然な解釈であろうと私は主張するのだ。

できればツッコミをよろしく。

**デフォルトの名無しさん** · 2018/07/29(日) 12:34:29.98

ここは「は」の機能に焦点をあてて説明した方がいいんじゃないのかな。

**デフォルトの名無しさん** · 2018/07/29(日) 14:10:34.39

>>617
「は」「が」は「とりたて詞」であって、「主格の格助詞」では
ない、とかいう主張はなかなか通らないんだよね。
そうすると「主格の格助詞が存在しない」ということに
なってしまうから（個人的には、ないと思っている）。
で、「は」「が」がつくと、格助詞が消えるという現象が
あると思っている。「をは」「をが」「にが」って使わないだろう？
「には」はあるし、「へは」「へが」「からは」「からが」「までは」
「までが」等々はあるわけだから、「『は』『が』はとりたて詞であって、
格助詞ではない」というのは強調しておきたいところだ。

**デフォルトの名無しさん** · 2018/07/29(日) 16:07:45.71

言語学者とか要らなくなるね

**デフォルトの名無しさん** · 2018/07/29(日) 16:35:02.64

文法の存在ってのは幻みたいなもんだと思うけど、言語にはよく分からんけど法則があることだけは確かなんだよなあ。

**デフォルトの名無しさん** · 2018/07/29(日) 16:59:44.89

>よく分からんけど法則

結局なんでもそうだし
機械学習やDLに向いてる分野ってことかな

でも法則自体は判らんでも何故かうまくこなすっていうAIっぽいのが生まれるっていう展開

**デフォルトの名無しさん** · 2018/07/29(日) 19:07:58.68

とりたて詞って副助詞のこと？

**デフォルトの名無しさん** · 2018/07/29(日) 20:06:05.33

>>622
おれらは自然言語屋なんで、むしろ「副助詞」の
定義がわからん。「ね」「さ」「よ」「な」「ぞ」
は、「強調助詞」と呼んでいる。「とりたて詞」は、
トピックであることを示すと同時に、語順の
転換が起きる。それを「強調転置」と呼んでいるので、
「用語の統一ができていない！」と叱られそうに思うが。
「だからね、そのあたりはさ、適当によ、塩梅してな、
欲しいぞ？」みたいなのは強調助詞、という話。

**デフォルトの名無しさん** · 2018/07/30(月) 03:32:11.29

よくわからん。
このスレはプログラム板のスレなんだからコンピュータで自然言語処理するのに有用な話をしてほしい
ぶっちゃけ、MeCabにもKNPにも出てこない品詞の話をされても意味がない。

**デフォルトの名無しさん** · 2018/07/30(月) 07:03:35.67

end-to-endの時代なのにね

わざわざnmtに構文解析の結果をぶち込んでくるバカがいて
誰がやってんのかなと思ったら東大だった

**デフォルトの名無しさん** · 2018/07/30(月) 08:31:39.90

>>624
>>560
若いのに痛ましいのう。

**デフォルトの名無しさん** · 2018/07/30(月) 08:45:24.47

ぶっちゃけ形態素解析システムなんて自前で開発しても
たいした手間じゃないぞ？　方針が分かってりゃ
１人月くらいで書ける。
１）まず、形容詞を活用語尾で引っ掛けるルーチンを書く。
２）それを使って形容詞の辞書を作る。
３）それでコツを掴んだら、動詞で同じことをする。
４）受け身だとか尊敬だとか使役だとかの処理と、
各種の形態素の処理を書く。これは数が少ないので
大した手間じゃない。
５）残った奴は名詞句なので、助詞やらなんやらの処理を
考えつつ名詞の辞書を作る。
ただ、これをやると、「もうちょっと抽象化できんかな？」とか
考えてしまい、全部捨てて新しいシステムを書きたくなる。
ただ、ここまで来ると日本語の文法体系が頭に入っていて
必要な辞書はあらかた揃ってるから、勝負は早い。

**デフォルトの名無しさん** · 2018/07/30(月) 09:02:59.59

形態素解析システムを自前で開発すると、いくつか副作用があって、
「モーニング娘。」とか「藤岡弘、」とか見ると
反射的にイラッとくるようになる。

**デフォルトの名無しさん** · 2018/07/30(月) 09:05:49.92

あと、メモが手放せなくなる。
「さっぱりした」の「さっぱり」と、
「さっぱりわからん」の「さっぱり」は、
別の単語として辞書に登録したほうがいい、とか
その場でメモるからだ。
「さっぱりとした」は言うが、
「さっぱりとわからん」は普通言わない
（いう地方もあるかもしれんが）。

**デフォルトの名無しさん** · 2018/07/30(月) 09:10:43.80

作ったことないでしょ

**デフォルトの名無しさん** · 2018/07/30(月) 09:15:05.66

いい面での副作用としては、
「文語」「（正体の）口語」「俗語的な口語」の
区別に敏感になる。
「むくつけし」「猛（たけ）し」「かそけし」のような
e 音で終わる形容詞は、文語にはあるが現代語にはない
（「むくつけい」「たけい」「かそけい」はない）。
「し」ではなく i 音で終わる形容詞は、俗語では使うが
正体では使わない。「みみっちい」「ばばっちい」などが
あり、「ずるっちい」を使う人はいる。
文語動詞では「子音終わりは四段」「母音終わりは一段」が
基本。ただし、母音は i, e しかない。
ところが、現代語では五段活用ワ行があり、a/o/u という
母音で終わっているのに五段活用、というややこしい話に
なっている。これは動詞末尾の h 音が消失しまったせいだが、
h 音の前が i/e である動詞は行き場がなくなって、けっこうな
騒動になっていることが形態素解析で判る。

**デフォルトの名無しさん** · 2018/07/30(月) 09:22:41.82

あるよ。新旧とりまぜて三つほどある。
１）C 言語ベタ書きバージョン、
２）C 言語文法分離バージョン、
３）Java で書き直してメモリリークや
ワイルドポインタを防止したバージョン。ただし、
Java の使い方が当時はよくわからなかったので、
多段解析を実装できなかったのが悔やまれる。
（２）のバージョンは、ローマ字英単語交じりの
文字列を漢字かな交じり文に変換する、というのも
可能だった。
あと、（２）と（３）は双方向のシステムで、
漢字かな交じり文の読みびらきと、かな漢字変換の
両方が同じシステムで可能だった。

**デフォルトの名無しさん** · 2018/07/30(月) 09:28:45.10

あと、全件辞書引きは Google が使ってるダブル配列法じゃなくて、
その原形であるトリプル配列法を使ってる。
マルチバイト文字の場合、「辞書がコンパクトになる」という
ダブル配列法のメリットが生きなくて、トリプル配列のほうが
コンパクトになったりする。
まぁ、昨今のマシンは作業用のメモリがギガバイト単位なんで、
それほど気にする必要はないんだが。
ほかになんか質問ある？

**デフォルトの名無しさん** · 2018/07/30(月) 09:35:40.86

ところで質問なんだけど、
MeCabとかKNPとかって、文語とか解析できるの？
文法って、どんな形で持ってるの？
品詞分類とか変えられるの？

**デフォルトの名無しさん** · 2018/07/30(月) 12:28:22.50

あ、古い人なんだ

**デフォルトの名無しさん** · 2018/07/30(月) 12:34:35.75

JAI-Parserとかかな

**デフォルトの名無しさん** · 2018/07/30(月) 12:41:04.42

>>635
つーか、JUMAN とほぼ同時期に開発したシステムだから、
茶筅とか MeCab とかは、はなから使ったことがないのよ。
unix 環境なんて、手近になかったからね。初代は PC-98 とかで
動かしてたらしい。
当初、辞書をフロッピーディスクに置いといたら、やたら
カッチャンカッチャンとアクセスするので、「ドライブが
壊れるかと思った」てな話を聞いた。で、その後「RAM
ドライブ」っちゅーのが出て、384 Kb くらいの「マシンから
見るとドライブだけど、じつはメモリ空間」っつーのができて、
そのあたりの心配はなくなった。
で、その後 IBM-PC 互換機ができてメモリ空間が広がったんで
普通に実メモリ空間に置いて、アスキーの出版技術部の
TEX のチームの前でデモしたら、「それで？」と言われたそうだ。
あんまり処理が速かったんで、ただファイルを出力してただけだと
思われていた、というオチがついている。

**デフォルトの名無しさん** · 2018/07/30(月) 12:41:58.32

>>636
なんで知ってんだ？

**デフォルトの名無しさん** · 2018/07/30(月) 12:42:57.61

文体と興味が特徴的すぎる

**デフォルトの名無しさん** · 2018/07/30(月) 12:49:03.23

>>639
そっちか。rStone とか『bit』とかを知ってる
古い世代かと思った。

**デフォルトの名無しさん** · 2018/07/30(月) 18:23:05.86

たまごとかの世代ですが何か？

**Mr.Moto** · 2018/07/30(月) 19:38:47.79

>>641
じゃあ、Wnn（「私の名前は中野です」）あたりは知ってるんだ。
おれらは VJE-Pen（VJE-β）とか「ことえり」とか Wnn とか
よりちょっと遅れた時代だ。rStone-JE は、JAI-Perser の、
>>632 の（１）を実装してる。
（２）は、自動ルビ振り／自動点訳システム「紅玉（Ruby）」に実装
したんだが、まつもとゆきひろさんの「Ruby」が流行っちゃったので
あんまり有名にならなかった。

**Mr.Moto** · 2018/07/30(月) 21:22:57.38

たいへん・またせて・ごめんなさい

**Mr.Moto** · 2018/07/30(月) 21:25:45.64

「くるまでまつ」
「はくさいやだいこんなどのやさいが」
「やまのうえにはながさきました」

懐かしいのぅ。

**Mr.Moto** · 2018/07/30(月) 21:29:31.72

今は、
「長く庄内平野を転々としながらも私は肘折の渓谷に分け入るまで
月山がなぜ月の山と云われるのかを知りませんでした」
を、一発で構文解析できるシステムをインプリメントしようと
思案中。

**Mr.Moto** · 2018/08/02(木) 17:06:15.29

スレが止まってるのが気にくわんなぁ。
せっかくの夏休みなのに、
喧嘩売ってくるとか、
質問してくるとか、
なんかスレを伸ばすような話題はないのか？
自然言語処理をやってる研究室は何をやっとるんだ？

**デフォルトの名無しさん** · 2018/08/03(金) 10:26:42.91

昔のソースを発掘したのはいいが、
なにせ量が多すぎて頭を抱えている。
辞書管理とかとツールが多いんだよなぁ ……
やっぱり日本語処理システムの開発は、
ある程度頭数が揃ってないとしんどいわ。

**デフォルトの名無しさん** · 2018/08/03(金) 12:24:06.18

githubで公開すれば？

**デフォルトの名無しさん** · 2018/08/03(金) 15:27:48.96

>>648
昔のソースなんで、恥ずいからやだ。
だいたい、Tomcat 上で SubVirsion 使ってソースは公開してたのに、
ずっと無視されてたから知ったこっちゃない。

**デフォルトの名無しさん** · 2018/08/03(金) 21:12:14.93

自分から閉ざしちゃいかん

**Mr.Moto** · 2018/08/04(土) 09:55:56.28

>>650
わかった。努力する。

**Mr.Moto** · 2018/08/06(月) 06:44:57.20

スキーマと辞書の扱いを、どうすりゃいいのかな？
A)田中は台所でカップ焼きそばを作っている。
B)田中は工場でカップ焼きそばを作っている。
があって、
C)田中は栃木でカップ焼きそばを作っている。
は、どう解釈するか、っちゅーのが問題なんだが。

**Mr.Moto** · 2018/08/06(月) 13:59:40.47

漢字二字熟語で置きかえるというのはひとつの手段ではあるのだが、
A)田中は台所でカップ焼きそばを作っている。
→田中は台所でカップ焼きそばを調理している。
B)田中は工場でカップ焼きそばを作っている。
→製造している／開発している。
くらいはOKとして、
「子供を作っている」とか「家庭を作っている」とか
いうのは、なかなか説明しづらいものがあるように思う。

**デフォルトの名無しさん** · 2018/08/07(火) 09:52:26.98

昔ながらの方法だな
いずれ収拾がつかなくなるだろう

**デフォルトの名無しさん** · 2018/08/07(火) 12:45:26.68

>>654
昨今はどんなのが流行りなんだ？
多世界解釈とか言われても困るぞ？

**Mr.Moto** · 2018/08/07(火) 19:12:08.68

かなり昔の話だが、
『ぼんさんがへをこいた』というパソコンの
ソフトがあった。

今日、近所のローソンへ行ったら、なんかしら
レジのところに『おいしいおでんのつくり方』という
のが置いてあって、「これって書籍ですか？　それとも
店内のマニュアルですか？」と訊いたら、「あ、これは
店内用のマニュアルです」という返答だった。

「おいしいおでんのつくり方」をコンピュータに説明できるか、
というのは、けっこうテーマになりそうに思う。

**デフォルトの名無しさん** · 2018/08/07(火) 19:49:55.57

つまなさう

**Mr.Moto** · 2018/08/07(火) 20:07:35.64

>>657
と、いうことは、おまえは「田楽芋」が「おでん」になった経緯を
説明できる自然言語インターフェースを備えた知識ベースシステムを
すでに実装して運用してるということだな？

**デフォルトの名無しさん** · 2018/08/08(水) 08:24:21.25

知識ベースに疑問を持てよ

**Mr.Moto** · 2018/08/08(水) 13:13:47.75

>>659
知識ベース＝プロダクション・システムという
昨今の決めつけには疑問を持ってる。
とはいえ、様相論理とかフレーム理論とか、
そのあたりを取り込みゃあうまくいくかというと、
そうでもなさそうな気はする。
なんか、そこいらを統合するコンセプトが
ありそうな気はするんだが、おれには今のところ
思いつかない。

**デフォルトの名無しさん** · 2018/08/08(水) 20:15:37.89

正直でよろしい

**Mr.Moto** · 2018/08/08(水) 21:46:41.52

>>661
おまいも上から目線でコメすだけじゃなくて、
なんか具体的な意見出せや

**デフォルトの名無しさん** · 2018/08/09(木) 12:51:14.04

このスレさあ、最近俺とお前しか書き込んでないよ

**デフォルトの名無しさん** · 2018/08/09(木) 12:56:18.84

ごみん

**Mr.Moto** · 2018/08/09(木) 22:08:36.40

形態素解析って、流行ってねぇんだなぁ ……
真面目にやると面白いんだけどな。

**Mr.Moto** · 2018/08/09(木) 22:15:20.21

そういやぁ「三階」を「さんがい」って言う奴はいるけど、
「三回」は「さんかい」なんだよな。
そういうのって自然言語処理の世界で真面目に研究してる
奴っておるんかな？
AI も方言でインタフェースが成立すりゃあ可愛げがあるのに。

**デフォルトの名無しさん** · 2018/08/10(金) 10:58:25.21

>>666
言語学ではそういう感じの論文はよくあるよね。

**Mr.Moto** · 2018/08/10(金) 15:24:14.22

>>667
あるのか！
繰返しになるが、人間って、文法というものを所与のものとして
受入れているので、「形態素解析でイレギュラーなものを拾う」
っていうのは、けっこう困難なんだよ。
だけど、メジャーな形態素解析システムって、そういうのを
スクリーニングするようにできてないので、インターネット
のおかげで言語データが大量にあるのに、そういう例外を
掬うのって、なかなか手段がないんだよ。
昨今のパーソナルコンピュータは、そういうのに使えるだけの
性能を持ってるのに、研究者がそういうツールを使いこなせない、
っていうのは（研究者に対して言ってんじゃなく、サポートする
体制のほうに言ってんだが）イカンと思う。

**デフォルトの名無しさん** · 2018/08/10(金) 15:41:04.46

最近の研究に触れてないの？

**Maria** · 2018/08/10(金) 15:54:03.82

>>669
研究者が、あらかた、意味論とかそっちの方に逃げちゃってるので、
記述文法とかの話になると、誰も相手をしてくれないんだよねー。
昔は大修館の『言語』の『言語空間』で、国広哲弥先生とガチのバトルとか
してたんだけどねー。
「相撲好き」っていうのかなぁ？　がっぷり四つに組んで、「おまえの
底力を見せてみろ！」みたいなヒトって、最近は見ないでしょう？

**デフォルトの名無しさん** · 2018/08/11(土) 20:51:29.75

ところでだ。「チンボがシコシコする」という日本語表現は、文法的に正しいのか？

チンボ「を」シコシコするのではなくて、チンボ「が」シコシコする。この場合、「チンボ」は主語となる。

オブジェクト指向で言う「集約」は２種類あって、全体（俺）と部分（チンボ）が繋がっている場合と、
全体（俺）と部分（チンボ）が別々になっている場合とが考えられる。けれども「チンボ」はそれ自体
が独立した生き物であり、所有者の意思とは無関係に、勃起して「シコシコする」。
例えば寝てる時にエロい夢みて朝起きてみたらチンコが勃起して射精してたとか。

違うか？

「頭がズキズキする」は良いが、「チンボがシコシコする」はダメな理由を、５０字以内で述べろ！>>98

**デフォルトの名無しさん** · 2018/08/11(土) 21:00:32.98

>>671
チンボがシクシクする

なら、ありだと思います

**Mr.Moto** · 2018/08/11(土) 21:23:15.94

>>671
それは運用論の話だな。たしか
城生佰太郎『言語学は科学である ―「象ガ国会デ宿題ヲ忘レル」
不思議への招待』で「なぜ『元祖ゴキブリラーメン』がないのか？」
みたいな話で論考してたと思う。

**Maria** · 2018/08/11(土) 21:31:55.39

>>671
あんた、どっかの大学の自然言語処理系の研究室から、鉄砲玉として
送り込まれてきたんだろうけどさぁ、命（タマ）ぁ獲れなかったら、
どういう目に遭うか、覚悟はできてるんだよね？
逃げるんじゃないわよぉ？　ほら、こっちはいくらでも
相手になろうって言ってるのよ？

**デフォルトの名無しさん** · 2018/08/11(土) 21:38:52.01

>>674
戯言はいいから、はやく！

**Maria** · 2018/08/11(土) 22:01:16.57

>>675
だから、質問しなさいって言ってるのよ。
仁義切って、啖呵切って、勝負はそれからでしょう？
「お控えなすって」
「早速のお控え、ありがとうござんす。手前、生国は …」
から始めるのが仁義でしょう？
せめて、どんな研究してて、どういう分野に興味があって、
どういう点に疑問やら反論やらがあるのか、
はっきりしなさいよ！
どこの所属とかは訊かないけどさ、
「この分野だったらおれのほうが上だ！
白黒つけてやるから勝負しろ！」くらいの
勢いでかかってきなさいよ。

**デフォルトの名無しさん** · 2018/08/11(土) 22:02:45.90

「シコシコ」は対象と他の物体の摩擦を表す擬音。
「ズキズキ」は対象が発してる状態の擬音。
よって対象そのものについて述べるのに
外部要因がある「シコシコ」を使うのは適切じゃない。

つまり50文字で纏めると

全く自然言語処理をやってないプログラマですが
いつも楽しく拝見しています
ところでスレチじゃないですかね

となる

**Maria** · 2018/08/11(土) 22:28:42.02

>>677
あー、こういう方がいらっしゃって下さると、
ありがたいわー。

「背中がヒリヒリする」とか「喉がイガイガする」とかは、
内部なのか外部なのかが判然としないけど、「シコシコ」は
内部化がしにくい、っていうコトですよね？
とはいえ、肩凝りなんかだと、「僧帽筋と菱形筋と最長筋が
“シコシコ”してるんですよ」とかいう表現は、運用上は“あり”だと
思うわけです。

となると、これは自然言語処理というよりも、意味論のほうの
話になると思うんですよ。

「できる」の命令形「できろ」は、文法上は禁止されていませんが、
運用上は「それ、無理でしょ？」っていう話になってしまいます。
それと同じことだと思うんですよ。

**デフォルトの名無しさん** · 2018/08/12(日) 02:28:21.41

>>671
(´・ω・｀)頭は自分の意思とは関係なくズキズキするから「が」
(´・ω・｀)ちんぽは自分の意思でシコシコするから「を」
自分の意思かどうかで主語が変わる

**デフォルトの名無しさん** · 2018/08/12(日) 02:58:57.41

最近気になるのは、DVDが発売する、だな

**デフォルトの名無しさん** · 2018/08/12(日) 09:56:42.76

>>680
> 最近気になるのは、DVDが発売する、だな
それは「DVD が発売される」じゃなくってか？
たしかに「DVD が出る」みたいな表現はあるから
なんかしらの説明はあるのかもしれんけど。
強いていえば「DVD を発売する」の「DVD」が
強調されて「DVD “が” 発売する」になった、
あたりかな？　そうでなければ「発売する」に
自発の意味がある、という解釈だな。

**Mr.Moto** · 2018/08/12(日) 10:29:17.36

「おいしいおでんの作り方」と
「おでんをおいしく作る方法」は
意味がほぼ同じであるように見えるのに、
文構造がかなり違う (-_-!)
どこかに「食べる」が省略されているとでも
考えないといかんのか？　食べなかったら
「おいしい」というのが判断できないわけだから。
「（食べて）おいしいおでんの作り方」はともかく、
「おでんをおいしく作る方法」は、ちょっと
珍しい形の転置が起きた結果、文の構造が
見えにくくなっている感じがする。
「おいしく食べられるおでんが作れる方法」を
どうひねくったら「おでんをおいしく作る方法」に
なるのかがわからん。

**Mr.Moto** · 2018/08/12(日) 12:47:07.64

>>682
ようやく解ってきた。
述語にかかる句には、
「文法格をもつ句」（主語とか目的語とか）と、
「修飾句」（「さっぱり」「あっさり」「粛々と」）と、
「相」（「夏に」「谷川岳で」）があるという分類が
立っているのだが、いわゆる「具格」は、文法格ではなくて
相であり、体言が述語にかかるときに「で」が附属するので
あって、「で」は「具格を表す格助詞」ではないっちゅー
コトなんだな？
文法格がないんで、述語に対する一意性もないわけで、
「～で～で」みたいなのもアリ（なかなか実例が
示せないんだが）なんだと思う。
「鶏は鍋でおろし醤油で食うのが好きだ」の場合、
「鍋」と「おろし醤油」が助詞「で」によって
述語「食う」に係っているわけで、これを
「鶏は鍋とおろし醤油で食うのが好きだ」とすると
語感がおかしくなる。そう考えると、
「方法」というのは、「場所」や「時刻」「季節」と
同じように、「相」であると考えたほうが、
動詞の型分けがすっきりしそうだ。

**デフォルトの名無しさん** · 2018/08/12(日) 17:57:06.47

おいしいおでんの作り方＝how to make おいしいおでん
「おいしい」は「おでん」に対する修飾語

おでんをおいしく作る方法＝how to make おでん (to be) おいしい
「おいしい」は「おでん」に対する述語

「おいしく作る」は「穴を掘る」と同じように考えればよく
「食べる」が省略されているなどと考える必要はない。

**Mr.Moto** · 2018/08/12(日) 18:01:52.82

>>684
よし、解った。
「鮟鱇は土鍋で出汁で煮る」はオッケーだが、「土鍋と出汁で煮る」は NG。
「鮟鱇は土鍋でかえしと出汁で煮る」もオッケー。
「鮟鱇は土鍋でかえしと出汁で強火で煮る」もオッケー。

つーことは、具格は文法格ではないから、なんかしら別の呼び名を
立てたほうがいい、っちゅーこっちゃね。するってぇと「具相」とかに
なるのかな。

**Mr.Moto** · 2018/08/12(日) 18:18:00.76

>>684
> 「おいしい」は「おでん」に対する述語
なるほど。そこへ来たか。
確かに文語では形容詞は述語になる（終止形もある）
よなぁ。
うん。反論を考えてみる。

**Mr.Moto** · 2018/08/12(日) 18:35:32.47

>>684
> おでんをおいしく作る方法＝how to make おでん (to be) おいしい
うん。
ひょっとしたら、The way of make おいしいおでん
みたいな脳内変換が行なわれているかもしれない、という
可能性を考慮する必要はあるだろうな、と思っている。

強調転置は、とりたて詞「は」「が」を “常に” 伴うと、ずっと
思っていたので、「を」がそのまま使われて
強調転置が行なわれる、というケースを考えていなかった。
やっぱり、形態素解析 “だけ” を考えて自然言語処理を
行なおうとすると、どっかしらに無理がくるということか。

**Mr.Moto** · 2018/08/12(日) 18:41:17.81

>>687
「The way of make」とか書いたらダメだな(^_^;)。
俗語・口語に慣れちゃってるんで、気づかなかった。
「The way of to make」とか「The way of how to make」
とか書かないと、英語教師には叱られそうだ。

**デフォルトの名無しさん** · 2018/08/13(月) 16:13:26.37

６６６
読みで揺らいでるけど
「依存」は「いぞん」がいつのまにか「いそん」に変わってしまった
「マスゴミ」は「マスコミュ」
でないといけない

**684** · 2018/08/13(月) 17:13:57.48

> Mr.Moto

> 「おいしく作る」は「穴を掘る」と同じように考えればよく
と書いたこちらの意図がまったく伝わっていないようだが。
穴を掘る、湯を沸かすなどと同じく、ただの結果を先取りした表現。
「壁を白く塗る」と同じといってもよい。

**Mr.Moto** · 2018/08/13(月) 17:28:37.19

>>690
おれは、形容詞は（暗黙の）主語を要求するという点に着目した。
「おいしいおでん」の「おいしい」の主語は、「そのコンビニの店員」
ではなくて、「そのコンビニの系列の店で、リピーターになってくださる
お客様」だと思うんだよ。
ペットショップでミジンコとかコオロギとかゴキブリとか
冷凍のヌードマウスを買ってくお客さんが、「おいしい」っていうのは
また別な意味だろう？
プロの料理人が言ってたけど、「うまみ調味料は、半分までだったら
バレないけど、肝心な出汁の味がマスクされちゃうので、味がブレた
ときに、しかたなく使う」「塩味は、ギリギリまで強くすりゃあ、
客は『うまい』って言ってくれるんだけど、外で食うなら
ともかく、家で毎日食うんだったら、『ちょっと物足りない』
くらいが普通」だそうだ。

**Maria** · 2018/08/13(月) 17:30:28.58

>>689
それ言ったら、「寄贈」だって「きぞう」じゃなくて「きそう」でしょ？

**Maria** · 2018/08/13(月) 17:41:26.57

>>689
正確にいうと、「いそん」が正で、「いぞん」は “百姓読み” と
呼ばれる俗語の訓なのよねー。
「マスゴミ」も、「マス・コミュネーション」+「ゴミクズ」
の合成語であって、「マス・コミュネーション」＝「マスゴミ」では
ないんですよ。「ミニコミ」⇔「マスコミ」っていう対義語関係も
あるしね。

**デフォルトの名無しさん** · 2018/08/13(月) 20:20:51.00

>>693
×マス・コミュネーション
〇マス・コミュニケーション

失礼いたしました m(_ _)m

**デフォルトの名無しさん** · 2018/08/15(水) 01:38:57.48

>>689
君は存在をぞんざいと読むのかね？

**Maria** · 2018/08/15(水) 10:39:21.70

>>695
「ぞんさい」と「そんさい」はあるかもしれない。
「無人島」も、「むにんとう」「ぶにんとう」「むじんとう」
の訓があるわけだし。小笠原には「ムニンノボタン」が
生えているし、英語だと「ぶにんとう」→「ボーニン・アイランド」だし。

**デフォルトの名無しさん** · 2018/08/15(水) 14:37:14.24

理屈っぽさと独創的なプログラミングスキルには負の相関がある、
と誰かが言ってたな
理屈こねて長文レスしまくってる人はもうプログラミングやめた方がいいかも

**Mr.Moto** · 2018/08/15(水) 16:21:40.83

>>697
ご意見はありがたく拝聴しておくが、
「じゃあ、おまえはどんなプログラムを書いたんだ？」と
質問しておこう。
せめて、まともな理屈くらいこねてくれ。

**デフォルトの名無しさん** · 2018/08/16(木) 04:30:16.20

>>679
＞ちんぽは自分の意思でシコシコするから

ならオシッコを我慢するときは？

**デフォルトの名無しさん** · 2018/08/16(木) 04:33:08.06

>>496
＞テレビゲームのような仮想世界をインプットして、

人体というのは宇宙のように広大で、コンピューターには入り切らないぞ？

>>485
＞CycはFredがひげをそっている間、Fredはそれでも人間なのかと尋ねた。

人間の動作というのはそれだけ複雑だってことだな。

**デフォルトの名無しさん** · 2018/08/16(木) 09:58:38.18

>>700
SF だけど、『未来の二つの顔』でやってたな。
星野之宣さんのマンガでやってたけど、
仮想空間の中でコンピュータに目玉焼を作らせようと
したら、フライパンの中に割らずに卵を載せて
しまうとか …。
で、「これは、やっぱり実際の空間の中でやんなきゃ
ダメだ！」っつーんで、コンピュータ制御の戦闘用ドローンと
武器を持った人間が、宇宙ステーションの中で
ドンパチをやるという話。

**デフォルトの名無しさん** · 2018/08/16(木) 10:03:34.87

自然言語処理と関係なくなっちゃいそうだから、
それっぽいものも足しておこう。
『２００１：宇宙のオデッセイ』
『ヴァレンティーナ』
『月は無慈悲な夜の女王』
『ウォー・ゲーム』（映画）
『ノーラの方舟』
『アメリカの黒船』（笑）