【統計分析】機械学習・データマイニング31

2021/09/26(日) 01:32:46.82

!extend:on:vvvvvv:1000:512
!extend:on:vvvvvv:1000:512
↑すれたてる毎に１つずつ減るので、減ってたら３回に増やしてたてること。

機械学習とデータマイニングについて語れ若人

＊機械学習に意識・知能は存在しません。
　　人の意識に触れたい方はスレ違いです。

■前スレ
【統計分析】機械学習・データマイニング29
https://mevius.5ch.net/test/read.cgi/tech/1597882603/
-EOF-
【統計分析】機械学習・データマイニング30
https://mevius.5ch.net/test/read.cgi/tech/1609459855/

VIPQ2_EXTDAT: default:vvvvvv:1000:512:: EXT was configured

**615** (ﾜｯﾁｮｲ a67e-guLU [121.93.95.95]) · 2022/05/24(火) 19:04:18.42

>>616
>>617
kerasの実用的な使用方法探してたんだけど、調べてもイマイチ
自分で思いつくものはOCRだったり時系列だったりで違うっぽい
植物分類とか車種のデータセット自分でつくるのもめんどくさいなーとなったところです

2022/05/24(火) 19:19:53.27

手段が目的化してんだろ
考え直したほうがいい

2022/05/24(火) 20:05:35.87

卒研かよ(笑)

2022/05/25(水) 09:27:48.52

生き物好きならネタは腐るほどあるが
それでもデータセット作りは面倒

2022/05/26(木) 13:24:36.20

画像分類の練習したいんですが、画像のピクセル数ってデータセットで統一しないといけないんですか？
ネットで拾ってきてばらばらのときはどうすればいいですか？

2022/05/26(木) 16:25:26.04

リサイズ

2022/05/26(木) 17:02:35.13

Crop

2022/05/26(木) 17:37:50.23

昔のモデルを拾ってきて実行したらリサイズ関数が現在バージョンで無効になってて
そこだけ小改造したなあ

2022/05/26(木) 18:25:55.94

>>622
データセットの正規化や標準化で調べるとよいかと。

基本的にはライブラリに仕組みが用意されてます。

2022/05/29(日) 10:13:03.26

本に書いてある通りにCartPoleやったのに全然学習してくれなくて、
コード見直したらコピペしてたところが微妙に違ってて自分が悪かったｗ

2022/06/05(日) 20:36:53.10

PythonのtensorflowでResNETを書いたら、
CustomMaskWarning: Custom mask layers require a config and must override get_config. When loading, the custom mask layer must be passed to the custom_objects argument.
warnings.warn('Custom mask layers require a config and must override '
という警告が出て、うまく学習しません。
get_configとやらを書くようなのですが、どこにどのように書けばいいのでしょうか？

2022/06/07(火) 09:53:50.73

https://jdla.connpass.com/event/249769/

なんでjdla会員と検定資格合格者だけに限定するのかわからん😡

人材を増やしたいんじゃないのか

すぐ利権化するのなこんな資格、日本限定のごく一部の組織しか重要視しないのに

2022/06/07(火) 12:45:06.42

>>629
その極一部の組織が主催してるからでは？

2022/06/07(火) 13:13:20.27

>>630
そういう閉じた発想を批判してる

講演の最初と最後にjdlaを紹介するだけでいいだろ

conpassのこの手のイベントは大体無料で、特別な参加資格を要さずに広く参加者を募るのに

2022/06/07(火) 14:53:21.30

>>631
そう思うのなら開かれた組織が開催する方だけに参加すればいいと言われるだけでは？

2022/06/07(火) 18:21:58.87

Rの年収が高いのは一部の金融が入ってるからだろと思ってたけど、
実際はpythonで利益がたっぷり取れてて給料が高い会社がプラスアルファで学術的アプローチのものもフォローしたいからRの人を採用してるんだと気づいた。
Rを使える人が結果を出すわけじゃないが、Rができれば今のところ高給に就職できるのは間違い

2022/06/07(火) 21:42:22.03

それはどの言語にも言える話で、特定の分野の高給取りが何かの事情で特定の言語を使っているとその言語の収入平均が上がる相関があるだけで、
特定の言語ができるから給料が上がる訳じゃないんだよな。
大体高給取りは優秀だからどの言語も必要になれば使うだろうっていう。
どの分野、どの会社で働くかの方がよっぽど因子としてはでかいと思う。

2022/06/07(火) 22:35:24.62

統計を知らない人がR言語だけ覚えたって仕事にありつけるわけはないがな

2022/06/08(水) 15:02:01.86

>>629
取り合えず運営に文句言っといた

2022/06/08(水) 20:02:49.23

ngセンセの講義は学生じゃなくてもお金払わなくても見られるね

有名私大はお金払った人しか相手にしないということをしないで無料で講義を公開してうまくやってる

niconicoはお金払わない人冷遇してyoutubeが大繁盛

2022/06/08(水) 21:05:01.16

この世で最も鬱陶しいもの
業界通気取りの部外者からのアドバイス

2022/06/10(金) 23:17:09.23

機械学習勉強しているとよくわからない間はベイズが偉いように感じるけど
本当はベイズはたいしたことなくて，偉いのはオイラーやラグランジュ，ハミルトンだよな。

2022/06/10(金) 23:57:15.52

>>639
我々凡人が優劣をつけて論じる姿が滑稽なことは確かだと思いますが。

2022/06/13(月) 11:26:59.27

google brainとかopenaiに勤めてる日本人ているのかな

2022/06/13(月) 18:08:45.23

これ実画像を数式で再現して、その再現された画像を使って学習するって話で合ってる？
結局数式で再現可能な画像しか学習出来ないなら実世界では使えないと思うんだけどどうなんだろう

大量の実画像データの収集が不要なAIを開発
－数式からAIが自動学習、人の判断を経た学習と同程度以上の認識精度を実現－
https://www.aist.go.jp/aist_j/press_release/pr2022/pr20220613/pr20220613.html

2022/06/13(月) 18:45:12.30

>>642
仮に現実の空間を再現した仮想空間、メタバースみたいなのがあったとしたら
そこから2Dにした画像と、現実世界の写真と学習するAIにはどっちでもいいんじゃね？
結果的に役に立つモデルを作れるなら元データが実写かCGか絵画がとかはどうでも良いかも

2022/06/13(月) 19:02:28.63

>>642
実世界によく見られるパターン(フラクタル)を数式で再現する訳だから使えるんだろう

2022/06/15(水) 11:17:31.40

https://arxiv.org/abs/2206.04615
この手の論文に日本人がいなくて寂しい

2022/06/15(水) 11:22:52.64

機械は思考できるか

2022/06/15(水) 12:05:30.32

他人が思考してるかなんて判断しようが無いし

2022/06/15(水) 15:39:57.11

本で読んだけど、われわれもラジオのようなものかもしれないって話
ラジオは自分を分解して、しゃべれる謎やボリュームやチャンネルが変わる謎を解き明かそうとするが、電波塔から電波が飛んできてることを知らないからいつまでたっても謎が謎のままだと
われわれも思考したり自由意思で何かしたりしているけど、実は全部操られてるかもねって話
そうするとわれわれの思考とPCでプログラム動かすのは大差ないということになる

2022/06/15(水) 16:03:34.37

思い出した
意識は傍観者である、って本
スレチすまそ

2022/06/15(水) 18:15:43.49

おもろそうね読んでみる

2022/06/15(水) 18:31:04.72

過半数の人間はルーチンワークしかしないしな
それを知能と言うのかどうかという問題はある

2022/06/15(水) 19:06:46.53

学習したものだろｗ

2022/06/15(水) 20:06:42.41

「GoogleのAIが感情や知性を獲得した」というエンジニアの指摘は間違っていると専門家から批判が殺到
https://gigazine.net/news/20220614-google-ai-lamda-sentient-nonsens/

これこれ

2022/06/15(水) 23:50:10.86

人間の行動のうち反射、条件反射は統計学習というよりは
if then else
過半数の人間は反射、条件反射しかしない
これは知能なのか?
学習の結果ではあるのだが

2022/06/16(木) 10:20:18.17

小脳の機能の実現は簡単だｗ

2022/06/16(木) 13:28:09.52

jupyterで一つのセルのアウトプットで複数のfigureの出力(axesではなくて)ってできますか?

2022/06/17(金) 10:55:07.17

AlphaZeroのプログラムを本に書いてある通りやったのにうまく動かないぞ、この本は糞だな、
って思ってたんだけど、ふとプログラムを見たときにおかしいところがあって、確認したら自分の打ち間違いだったorz

2022/06/17(金) 21:03:08.74

kaggleのノートブックってメモリ不足でkaggleの環境じゃエラーになるやつって公開してる人います?

2022/06/18(土) 22:30:04.73

詳しくないけど
確かにたまにKaggle環境で実行するとタイムアウトだかで最後までいかないコードあるよね
そうなのかなと思ってる

2022/06/19(日) 03:58:41.62

CNNで、各出力が０－２５５になっています
１というのが邪魔で、学習で最終的に０に収束するのですが、さっさと０にしてしまう方法はありませんか？

2022/06/19(日) 06:32:29.92

なんか草

2022/06/19(日) 07:38:29.27

俺には状況がまったく分からん

2022/06/19(日) 09:35:16.08

何が問題なのかわからんが、完全に0になると勾配も消失するので学習が進まなくなるのでは

2022/06/20(月) 14:17:38.78

知性=intelligenceで、AI=artificial intelligenceなののに、AIが知性を獲得したって何

感情とか意識を語るならまず感情とか意識を定義しないとダメだろ
あいまいな「動物が持ってるもの」みたいなニュアンスで語るから議論にすらならないわけで

2022/06/20(月) 14:28:02.14

>>664
自分もその通りだと思う
まず、自分に備わっている感情や意識だと感じているものはなんなのかを定義し、
そして果たして自分以外の他人は感情や意識を持っているのかという疑問に答えなければAIが感情や意識を持っているかどうかなんて議論できないよね。
素朴に「自分も他人も意識を持っているに違いない」から出発してしまう人が多いように思う。

2022/06/20(月) 17:55:39.64

相手が人工無能でも気付かずにチャットし続ける人は一定数居るからな

2022/06/20(月) 19:04:17.98

ツイッターにボットと延々喧嘩してるDQNいるw

2022/06/20(月) 19:21:22.56

ボットンかどうかはどうやって判断してるの？

2022/06/20(月) 20:28:17.53

いやむしろ人工無能とチャットしたい

2022/06/20(月) 21:28:57.91

人工無能みたいな受け答えをする人いるよな

2022/06/20(月) 21:33:45.22

妻と話している時は時々そうなってるわ

2022/06/20(月) 22:02:42.71

反応をみて人間が知性を感じるかどうかじゃね
多くの人が試すと知性を感じるか感じないか分かれるだろうから70%超えたらとか閾値が必要になるんだろうけど

2022/06/20(月) 22:27:35.92

>>672
個人的にはそんなザルなやり方だとまずいと思うな。人権を与えるかなどに関わってきて、人工知能研究するのに倫理委員会通さなきゃいけなくなるよ。
意識のハードプロブレム、この界隈だと皆知ってると思ったけどそうでもないのかな？
中国人の部屋とか、哲学的ゾンビとか、一元論二元論とか

2022/06/20(月) 22:31:34.40

>>673
人間がやる事でも倫理委員会通さないとダメな事はある
ヒトのクローン作るとか

2022/06/20(月) 22:33:15.49

知的かどうかは結果で判断するんじゃね？
人間の脳のプロセスはまだ分かってないんだし
プロセスで考えるのなら人間の考えることでも知的とは言えなくなる

2022/06/20(月) 22:37:12.97

別の視点だと知的かどうかより役に立つかどうか

2022/06/20(月) 23:48:46.95

まずは知性があるかを判定するAIを作る必要があるなw

2022/06/21(火) 00:00:09.64

そもそも知性があろうとなかろうと役に立つならどうでもいい

2022/06/21(火) 00:04:28.92

知性や意識や感情が存在したとして、なんで権利を与える必要が出てくるのか論理が飛躍し過ぎる白人

2022/06/21(火) 00:48:32.87

犬やイルカやチンパンジーに人権は与えないでしょう。

2022/06/21(火) 01:10:15.28

>>679
じゃあ、AIが本当に痛みを感じていたとして、生存形態の違いが歴然だからと差別してなかったことにしていいのか？人種差別の再来だろ。
>>680
最近はそうでもないだろ

逆に、意識、人権判定システムが出来たとして人間だと思ってた自分がその判定に通らず人権を与えられなかったらどうするんだ？

ナイーブな発想の奴が多すぎる。

2022/06/21(火) 01:11:12.83

>>674
当たり前だろ。
>>675
だったら馬鹿な奴には人権与えなくていいってことになるな。

2022/06/21(火) 01:49:27.75

>>681
人権は知性や意識の有無で定まるものではないですよ。それを言っているのが動物の例です。

なにより現代社会ならば人工の知性には倫理で対処するのが自然でしょう。
動物に対する危害や実験を禁止している現状を考えれば簡単に理解できるかと。

知性ある存在として扱うにしても、それは法人のような法的な人格で対処できるわけで、人権を与えて人間と混同する意味はありませんね。

2022/06/21(火) 01:54:41.01

>>681
AIに「生存」てなに

お前みたいな感情論でしか語れない奴が出てくるから、生命、意識、感情、それらを定義してからじゃないと話にならないんだよな
AIを人間ぽい反応するように作ったとして、それを「人種」の1つに混同してしまう脳はどういう深層学習してきたんだよ
人間とそれ以外すら区別付けられない天然無能じゃないか

2022/06/21(火) 02:02:21.12

黒人奴隷を正当化するための詭弁と同じようなふいんきを感じるのはなんなんだろうかこれ

2022/06/21(火) 02:17:39.53

それマジで言ってる？
黒人は人間が作ったんじゃなく元からそこにいた生物で他の色の人種と交わって子を為せる「人種」の1つで、
AIは人間が作ったデジタルデータプログラムに過ぎないのに、それを同種に考えるってちょっと頭おかしいと思わないの？

これ、AIは人間だ！って言い出す人間が増える前にきちんと定義して法整備しないとおかし世の中になるな
シーシェパードとかグリーンピースみたいなやつのAI保護活動家版がAI会社にテロ仕掛けたりするようになるぞ

2022/06/21(火) 02:24:03.92

まさかAIが人間っぽい話し方を出来るようになった程度で、「人間」の定義すら揺らぐとは思わなかったわ

2022/06/21(火) 07:09:58.64

機械学習や人工知能の理論を少しでも勉強した人ならこの程度の単純なプログラムを人間扱いするとか人権を与えるとか馬鹿馬鹿し過ぎるとすぐに分かるはずだけど

2022/06/21(火) 07:24:51.07

PytorchやTensorFlowはお母ちゃんかな

2022/06/21(火) 08:13:23.46

>>1を嫁

2022/06/21(火) 08:19:54.39

>>670
女性の車が故障したコピペ思い出した

2022/06/21(火) 10:11:42.24

>>682
人権は人間が産まれながらに持っている権利
知性がどうとかは関係なくて
人間であれば誰でも持っている権利のこと

不適切な知識、判断をする人間は知的なのか

2022/06/21(火) 19:46:18.50

私たちが日常美味しくいただいてる牛、豚、鶏などにその類の権利があるだろうか？
人間だけ特別という考え方は傲慢なのではないだろうか？
むしろ我々人類は生物界の貴族階級などではないことを肝に命ずるべきであろう。

2022/06/21(火) 19:59:29.24

中國人の部屋は知らんけど
韓國人ならイメージ湧くわω

2022/06/21(火) 20:32:02.26

>>693
人権を特権か何かと勘違いしてる時点で自身の考え方の根底に傲慢な前提があるのが露呈してますよ。

2022/06/21(火) 21:31:27.84

>>693
税金納めている？

2022/06/21(火) 21:32:13.37

>>666無能

2022/06/22(水) 00:50:19.40

結局のところ人権は人間同士で無駄に戦争起こさないために人間が作った概念であり、
AIとも無駄に戦争起こさないために似たような概念を人類は再び作ることになるだろう

2022/06/22(水) 16:10:36.98

ひとまず100年ぐらいはその心配はなさそう

2022/06/22(水) 16:11:53.12

うーんどうかなあ
もう少し早いんじゃない？

2022/06/22(水) 20:07:40.12

そうだな99年ぐらいかな

2022/06/24(金) 10:26:09.77

>>698
その意見には反対しますね

人権は、その本質は哺乳類、特に社会的哺乳類が進化の過程で徐々に主に教育を通じて獲得してきた無形文化であり、最近 300 年になってやっと明文化できるようになっただけでしょうね

2022/06/24(金) 11:30:49.48

どうでも良い

2022/06/25(土) 21:23:52.99

>>702
Pythonで語れPythonで。

2022/06/25(土) 22:19:41.61

文章解析・生成及び進化シミュレーションをpythonでやるのか

2022/06/26(日) 19:11:15.82

暫く放置してたら変なのが出てるな

>>681,692,693,698
スレ違い>>1をしっかり読め

2022/06/26(日) 19:27:23.81

kaggle notebookってlinuxのOSコマンドで仮想的にメモリ増やせないの?
16GBじゃ足りない

2022/06/26(日) 21:43:42.90

無理

2022/06/28(火) 11:05:32.57

ゲームAIの強化学習で自己対戦してるんですが、１回のトレーニングがなかなか終わりません
さっさと回転させるには複数台マシンで対戦を並行するのが考えられますが、マシンがありません
１台のマシンで対戦を加速する方法はありませんか？

2022/06/28(火) 11:11:27.92

>>709
どのような環境なのか全くわからないのでソフト面でのアドバイスのしようがないのではないでしょうか？

ハード面の単純な解決策としては、並列化出来るようですのでクラウドサービスのリソースを利用する方法があると思います。

2022/06/28(火) 12:39:16.45

並列化の技術はApe-X

2022/06/28(火) 17:10:35.04

multiprocessingってやつを使うと自己対戦が何倍速かになったりしないのかね
使ったことある人いない？

2022/06/28(火) 18:49:17.83

>>707
swapやzram入れるかだけど重くなる

2022/06/29(水) 05:42:14.85

試しに自己対戦にmutiprocessingを使ってみたが、なぜかかえって遅くなった

2022/06/29(水) 10:34:21.61

使えば必ず早くなるというものではないから；；

2022/06/30(木) 15:05:11.66

モンテカルロ木探索のポリシーバリューネットワークを使ってゲームAIを作った時、
勝ちが1で負けが-1とするとバリューが勝率みたいなものになりますよね
ところがただこうするだけだと、最短の勝ち筋を見逃して冗長な勝ち筋を選ぶ場合が出てきます
そこで局面評価を勝ち1負け-1だけではなく、手数で減点していくようなことを考えているのですが、
これはあくまで学習データの数値をいじるだけで、ネットワーク部分のwに加算する値はいじってはいけないのでしょうか？
それとも、ネットワーク部分もいじってバリューが勝率とは少し離れた値になるようにすべきでしょうか？

2022/06/30(木) 16:14:27.14

うまくいかなそう