【統計分析】機械学習・データマイニング25

2019/06/27(木) 01:53:38.17

機械学習とデータマイニングについて語れ若人

＊機械学習に意識・知能は存在しません。
人の意識に触れたい方はスレ違いです

■関連サイト
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/
Machine Learningを用いた論文一覧2018
https://shiropen.com/seamless/machine-learning/2018
2017年のディープラーニング論文100選
https://qiita.com/sakaiakira/items/f225b670bea6d851c7ea
DeepLearning研究 2016年のまとめ
http://qiita.com/eve_yk/items/f4b274da7042cba1ba76

■前スレ
【統計分析】機械学習・データマイニング23
https://mevius.5ch.net/test/read.cgi/tech/1551352040/
-

【統計分析】機械学習・データマイニング24
https://mevius.5ch.net/test/read.cgi/tech/1556674785/

VIPQ2_EXTDAT: checked:vvvvvv:1000:512:----: EXT was configured

2019/06/27(木) 07:57:36.23

2ゲットー！

ズザザザ－！
(超満員の電車内なのでAA貼れない！)

2019/06/27(木) 08:43:37.55

乙

2019/06/28(金) 08:25:13.31

意識のないAIなんてAIとは言わないよ

2019/06/28(金) 10:05:12.77

AI完全をクリアしてから考えればいい
意識云々いう奴は自己陶酔のオナ猿

2019/06/28(金) 16:26:34.11

多次元尺度構成法ってデータ間のユークリッド距離を見てユークリッド距離をほぼ再現できる別次元のデータ構成をつくりなおすってことで合ってる？

2019/06/28(金) 16:29:44.88

距離を再現する必要はない

2019/06/28(金) 17:21:29.21

>>6
違う

2019/06/28(金) 18:57:47.38

>>8
ウソつくな馬鹿たれが！

2019/06/28(金) 19:10:52.92

😭💦💦

2019/06/28(金) 22:19:19.82

いわゆる最小二乗法っていうのは正規線形モデル(つまり誤差項が正規分布に従う仮定の線形モデル)でほかの確率分布を想定するために一般化線形モデル(正規分布以外の分布にも従うことを想定するモデル)があるっていうことでいいんでしょうか？だれかおしえてください
私の認識では正規分布に従う仮定ならばパラメータの推定は最小二乗法という簡単な行列計算で行うことができるけど他の分布の仮定であれば一般化線形モデルのもと最適化アルゴリズムを利用した最尤法を行わなければいけないという理解なんだけどあってるのかな？

2019/06/28(金) 22:31:38.89

いわゆる最小二乗法っていうのは正規線形モデル(つまり誤差項が正規分布に従う仮定の線形モデル)でほかの確率分布を想定するために一般化線形モデル(正規分布以外の分布にも従うことを想定するモデル)があるっていうことでいいんでしょうか？だれかおしえてください
私の認識では正規分布に従う仮定ならばパラメータの推定は最小二乗法という簡単な行列計算で行うことができるけど他の分布の仮定であれば一般化線形モデルのもと最適化アルゴリズムを利用した最尤法を行わなければいけないという理解なんだけどあってるのかな？

2019/06/29(土) 06:26:54.34

この前の目黒記念449,000円ごっつぁんです( ´∀`)/~~。
ラジオNIKKEI賞楽しみだな。
python一辺倒だったのを、統計解析部分をRに代えてやったら回収率が飛躍的にアップした。
Pythonはデータの取り出しに特化させるのが向いてるみたい。

2019/06/29(土) 09:34:37.29

>>13
それは言語の問題ではない
Rで処理している事をpythonで処理すれば良いだけ
つまり統計処理自体の選択が適切ではなかった
あなたのミスだ

2019/06/29(土) 09:35:22.12

>>13
前回うまくいったとして
今後10回とか繰り返したら損するかもしれないよ

2019/06/29(土) 09:50:41.55

>>11
>>12
質問の意味が分からん

2019/06/29(土) 10:01:58.78

>>12
文がごちゃついてるけど
合ってる

2019/06/29(土) 10:10:42.33

統計処理はRの方が楽なことが多いが統計学を理解していれば言語で結果が変わるなど起こらないはず

2019/06/29(土) 10:56:23.50

みんな統計検定準一級って持ってる？
機械学習やるなら持ってた方がいいかなって思ってるけどどう？

2019/06/29(土) 11:36:03.57

機械学習に数学は不要
統計学に数学は必要
ゆえに機械学習に統計学は不要

2019/06/29(土) 13:38:25.90

>>19
必要だと思うなら持てばいいじゃん
人に聞いてどうすんの？

2019/06/29(土) 14:14:30.70

deepnude
https://headlines.yahoo.co.jp/hl?a=20190629-00000002-jij_afp-int

2019/06/29(土) 17:04:47.33

>>20
機械学習じゃあ中途半端な数学は
意味ないからかなり勉強しないと。

統計学は基本からしっかり勉強すれば
数学は役に立つね

これからは機械学習でも
数学やってないと
淘汰されそうじゃね？

2019/06/29(土) 17:43:05.37

アノテーション作成がメインのお仕事なデータ・サイエンティスト系なのかも

2019/06/29(土) 18:49:31.23

アノテーション作成って
アルバイトがやるやつ？
まあ、それなら数学いらんわな

2019/06/29(土) 18:59:08.09

アノテーションと言えば最近読んだこれ思い出した
https://www.itmedia.co.jp/news/articles/1906/27/news042.html

2019/06/29(土) 20:50:27.68

面白そうな本を見つけた。
買いでしょうか？かなり高いけどw

昆虫の脳をつくる ─君のパソコンに脳をつくってみよう─
https://www.asakura.co.jp/books/isbn/978-4-254-10277-2/

2019/06/29(土) 23:50:32.96

さっきのサヨナラのランニングホームラン
なんでエンタイトルツーベースにならなかったのか

2019/06/30(日) 02:05:07.60

>>15
やってみます。
試行錯誤しながら精度上げていきます。

2019/06/30(日) 02:07:01.19

>>15
10回と謂わずに100レース以上試してベストな方法でやってみます。

2019/06/30(日) 02:11:22.24

>>23
競馬やってるが、極めてくるとプログラミングなんて知識よりも数学の知識が重要になってくる。
プログラミングなんて競馬予想をスムーズに効率的にやるツールに過ぎない。
最終的に数学の知識が必要になる。
極端な話、プログラミングなんてどうでもよくてその時代のベストなツールを組み込んでやれば良いが、ベースは統計学だから。

2019/06/30(日) 02:18:37.02

機械学習ってプログラミングと言っていいのか
ライブラリ作ってる人は凄いと思うが
使う人はなんかマクロ言語使ってる感覚に近いんじゃね
だから言語は何でもいい

2019/06/30(日) 02:19:40.66

>>14
恐らくそのようですね。
自分のコーディングの問題ではあると思いますが、統計解析ではRの方が実行速度が速いですね。
特にリアルタイムでオッズ表示してやるものとか。
自分のプログラム自体に問題あるかも(；´_ゝ`)。

2019/06/30(日) 02:37:04.55

>>32
その通り。
中のライブラリ(数学の知識)が重要なんよ。
コーディングだけやるなら大したことないが。

2019/06/30(日) 08:21:41.61

>>30
ベストかどうかは想定内の選択肢の中で一番良い
という事でしかないと思う
想定外のアプローチでより良い結果を得られるかもしれないけどな

2019/06/30(日) 08:24:25.93

>>31
統計処理にミスがあったら損する事になるけどな
理論も実践も重要

理論的には実現できるけど実際にやろうとすると
見込み利益よりコストがかかって赤字とかのパターンもある

2019/06/30(日) 08:25:31.26

>>34
中のライブラリにないものは自分で作るしかない

2019/06/30(日) 08:27:38.23

>>33
結果を得るまでに必要な時間が
必要な時間内に収まるかどうかも問題になる事がある

自動運転とか結果を得るまでに5秒とかかかってたら役に立たない

2019/06/30(日) 09:10:52.59

>>32
個人的には電気回路設計にかなり近いと感じている
新しい回路を設計する人はもはや殆どいない
トラ技等の雑誌を見てノウハウを学びつつ、実務では完成されたネットワークを使って変更点のある部分はPICやFPGAでなんとかする感じ

2019/06/30(日) 11:21:11.95

回路パラメータは計算で決められるけど機械学習のハイパーパラメータはそうはいかないんだよな

2019/07/01(月) 07:32:53.79

>>36
コストの方がかさむなら理論の時点で間違いだろw

2019/07/01(月) 12:11:54.39

理論が間違いというか、細かい人件費や手数料などどこまで計算に入れるかの問題だろう
あまり具体的に入れすぎても汎用性がなくなって使いにくくなるし、逆にシンプル化しすぎると現実とのズレが大きくなる

2019/07/01(月) 22:39:51.18

人間って視点を移動しながら視野の全体を認識してるけど
これをAIの画像認識にも応用すれば学習コストって大分少なくできるような気がするな
視点の中心に特徴量を集中させればいいだけだからかなり効率的だと思う

2019/07/02(火) 01:31:56.34

だからさ、そんなこと誰でも考えるの

アイデアを形にして結果を出せなければ
ただの馬鹿でしかないから。

2019/07/02(火) 09:12:22.72

どこに視点を合わせるの？馬鹿乙

2019/07/02(火) 09:15:54.85

ランダムフォレスト分類の予測結果に「A」「B」「C」があった場合、
それ以外に確信度が低ければ「わからない」というラベルを
出力することができますか？
それかテスト入力データを与えたら、予測結果だけでなく
確信度的なものを数値で把握したい。
ランダムフォレストは多数決で判定結果を決めているということは
複数の木での意見の一致度とか意見が割れているとかが算出できるのでは
ないかと思います。
判定を間違えるくらいなら「わからない」と言ってくれたほうがいいので。
ランダムフォレスト回帰でも同様のことをしたいです。
pythonのscikit learn RandomForestでこのような機能があったら
教えて頂けるとありがたいです。