【統計分析】機械学習・データマイニング26

[1 デフォルトの名無しさん (ﾜｯﾁｮｲ efda-zBa2) 2019/09/15(日) 09:23:06.34 ID:bjsiNRs40]

機械学習とデータマイニングについて語れ若人

＊機械学習に意識・知能は存在しません。
人の意識に触れたい方はスレ違いです

■関連サイト
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/
Machine Learningを用いた論文一覧2018
https://shiropen.com/seamless/machine-learning/2018
2017年のディープラーニング論文100選
https://qiita.com/sakaiakira/items/f225b670bea6d851c7ea
DeepLearning研究 2016年のまとめ
http://qiita.com/eve_yk/items/f4b274da7042cba1ba76

■前スレ
【統計分析】機械学習・データマイニング23
https://mevius.5ch.net/test/read.cgi/tech/1551352040/
-
【統計分析】機械学習・データマイニング25
https://mevius.5ch.net/test/read.cgi/tech/1561568018/

【統計分析】機械学習・データマイニング24
https://mevius.5ch.net/test/read.cgi/tech/1556674785/
-
VIPQ2_EXTDAT: checked:vvvvvv:1000:512:----: EXT was configured

---

VIPQ2_EXTDAT: checked:vvvvvv:1000:512:: EXT was configured

[2 デフォルトの名無しさん (ﾜｯﾁｮｲ bd7c-+dKN) 2019/09/15(日) 09:59:37.11 ID:tu3q64lr0]

O2

[3 デフォルトの名無しさん (ｵｯﾍﾟｹ Sr99-XqlE) 2019/09/24(火) 23:47:17.70 ID:gKQtLd2vr]

XGBoostが諸刃の剣になっちまった

[4 デフォルトの名無しさん (ﾜｯﾁｮｲ 1dad-CDEi) 2019/09/25(水) 00:19:36.48 ID:BREdOFJe0]

前スレ>>992
べイズ統計学ってなーに？
分かりやすく教えて！

[5 デフォルトの名無しさん (ｱｳｱｳｸｰ MM19-tMNN) 2019/09/25(水) 07:14:40.74 ID:tY/xHREXM]

>>4
https://to-kei.net/bayes/basic/

頻度論
パラメータが定数、データが変数（確率変数）

ベイズ統計
パラメータが変数（確率変数）、データが定数

[6 デフォルトの名無しさん (ﾜｯﾁｮｲ 2388-9GzD) 2019/09/25(水) 08:15:33.35 ID:CV7fPBbD0]

>>5 最近機械学習始めたバカだけど、ベイズ統計のほうが圧倒的に役立つ気がする。

[7 デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MMe3-ubMc) 2019/09/25(水) 08:37:12.96 ID:1+OtauDZM]

須山がすっきりわかる本を出せばいいのに出さないのが悪い

[8 デフォルトの名無しさん (ｵｯﾍﾟｹ Sr99-8lXu) 2019/09/25(水) 09:16:10.18 ID:78OcKefnr]

>>5
最尤推定はベイズなの？

[9 デフォルトの名無しさん (ｱｳｱｳｸｰ MM19-BK4p) 2019/09/25(水) 09:54:14.76 ID:MmbVy9zrM]

前処理→頻度統計(ここでの意味は、一昔前の統計学)
機械学習の理論→ベイズ統計

前処理がうまくなると、精度が上がるだけでなく、モデルの安定性が格段に増す
理論が分かると、個別の問題設定に対応した黒魔術が出来るようになる

結論、どっちも大切

[10 デフォルトの名無しさん (ｱｳｱｳｸｰ MM19-tMNN) 2019/09/25(水) 10:52:23.26 ID:tY/xHREXM]

>>8
最尤推定推定は最尤推定、ベイズ推定とは別と理解している。

深層学習とかで使う、対数尤度の式を展開するときベイズから展開する時があるような？

[11 デフォルトの名無しさん (ﾜｯﾁｮｲ 63bd-Ms+D) 2019/09/25(水) 13:19:04.63 ID:OmIBYJEg0]

>>6
最近始めたばかりのやつがどちらが役立つかなんてわかるわけねーだろ

[12 デフォルトの名無しさん (ｱｳｱｳｸｰ MM19-BK4p) 2019/09/25(水) 13:30:28.23 ID:PT03VQPIM]

でも勉強を進める上でどっち先にやればつまらないかってのはあるんじゃない
理論よりならベイズ、実務よりなら頻度だろうな

[13 デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MMe3-ubMc) 2019/09/25(水) 14:09:59.84 ID:1+OtauDZM]

みんなはどうやって環境構築してるの
anacondaを使ってやるのがセオリー？

[14 デフォルトの名無しさん (ｱｳｱｳｸｰ MM19-BK4p) 2019/09/25(水) 15:07:16.78 ID:PT03VQPIM]

anacondaは初心者のうちだけ使う
でも最近はAWSがサポートしてるからまた使いたくなってきたな

[15 デフォルトの名無しさん (ｻｻｸｯﾃﾛﾙ Sp99-cpyx) 2019/09/25(水) 18:36:46.01 ID:LyljOph0p]

俺、初心者じゃないけどanaconda使うわ

anaconda使うことを否定する派は
1. 昔のトラブル多い時代から触っているヤツ
2. システム環境領域にインストールするヤツ
のどっちか

個人領域にインストールする分には全く問題ない

[16 デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MMe3-ubMc) 2019/09/25(水) 18:40:09.58 ID:1+OtauDZM]

環境構築は今アホみたいに簡単になってるのね
参入障壁下がったなー

[17 デフォルトの名無しさん (ｱｳｱｳｸｰ MM19-BK4p) 2019/09/25(水) 19:38:21.27 ID:PT03VQPIM]

condaは数年前からあるよ

[18 デフォルトの名無しさん (ｱｳｱｳｸｰ MM19-BK4p) 2019/09/25(水) 19:39:44.94 ID:PT03VQPIM]

数年どころじゃないな。でも日本で広く普及したのは2015年ぐらいからだと思う
その頃にはアプリをダウンロードして解凍すればハイって
状況が整ってた。書籍もいっぱい出てたし

[19 デフォルトの名無しさん (ｱｳｱｳｴｰ Sa13-9GzD) 2019/09/25(水) 21:30:03.73 ID:P5XKQ29wa]

うｂｙにもcondaがあればな
gemじゃだめだ

[20 デフォルトの名無しさん (ﾜｯﾁｮｲ 7b66-kReW) 2019/09/25(水) 21:32:09.14 ID:jOSWKpSY0]

rubygem

[21 デフォルトの名無しさん (ﾜｯﾁｮｲ 2d01-9GzD) 2019/09/25(水) 22:49:49.65 ID:J2adDr870]

anacondaは今でもPATHの問題はある。
それでも他のpython管理でぐっちゃになるよりかは管理は楽だったりする。
それでも問題ならコンテナ使うなりVM使うのが正解。

[22 デフォルトの名無しさん (ｱｳｱｳｸｰ MM19-BK4p) 2019/09/25(水) 23:40:30.85 ID:PT03VQPIM]

個人で使うならcondaでもいいけど、
linux環境ならVMでpipかコンテナ、windowsならコンテナを使うほうが主流だと思う

pythonのコミュと、condaのコミュが喧嘩したままなのがすべて悪い

[23 デフォルトの名無しさん (ﾜｯﾁｮｲ 9b66-vFU9) 2019/09/26(木) 07:08:44.02 ID:GjmPRA6D0]

>>pipかコンテナ

コンテナっていうのはanacondaとかvirtualenvのこと？

[24 デフォルトの名無しさん (ﾄﾝﾓｰ MMf9-tbXw) 2019/09/26(木) 08:47:24.45 ID:/HqP+5MIM]

簡単だから
ついアナコンダ使って
インスコしてしまうw

[25 デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MMa3-MfK0) 2019/09/26(木) 09:10:37.91 ID:qqF5D8YZM]

重いコンダラ

[26 デフォルトの名無しさん (ｱｳｱｳｸｰ MM01-LR8f) 2019/09/26(木) 15:00:47.07 ID:nS47tYDvM]

>>23
dockerを想定していた

[27 デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MMa3-MfK0) 2019/09/26(木) 17:08:15.06 ID:qqF5D8YZM]

dockerかーそっかー

[28 デフォルトの名無しさん (ｻｻｸｯﾃﾛﾙ Sp81-ELeT) 2019/09/26(木) 19:20:37.52 ID:J18tRDCpp]

>>22
気持ちは分かるなぁ

Pythonコミュニティは無償で維持し続けているのに、単なるパッケージャのAnacondaが会社まで建てて儲けまくり

それでもmklを無償で使えたり、Nvidiaのドライバがすんなり入るのはAnacondaチームの政治力だと思うんだ

[29 デフォルトの名無しさん (ﾜｯﾁｮｲ 9b66-MfK0) 2019/09/26(木) 21:15:34.59 ID:GjmPRA6D0]

mklのインストールもすんなり行くけどね

[30 デフォルトの名無しさん (ｱｳｱｳｸｰ MM01-LR8f) 2019/09/26(木) 23:00:37.89 ID:nS47tYDvM]

>>28
あの会社、そんなに影響力あるんだ

[31 デフォルトの名無しさん (ｻｻｸｯﾃﾛ Sp81-kDWV) 2019/09/27(金) 00:37:37.36 ID:Rn9jKya4p]

機械学習だけか分からんけど、英語論文に出てくるmotivationってどういう意味なの？直訳動機付けなんだけど…

[32 デフォルトの名無しさん (ﾜｯﾁｮｲ 8d90-srNF) 2019/09/27(金) 05:01:55.83 ID:WHTSWUXA0]

機械学習に見切り付けるよ。サヨウナラ
客の懐事情が悪い。

[33 デフォルトの名無しさん (ﾜｯﾁｮｲ 233d-8aXa) 2019/09/27(金) 06:28:45.14 ID:GCYoetCo0]

画像処理か。もうどこも導入が終わって下火だよなあ

[34 デフォルトの名無しさん (ﾜｯﾁｮｲ 0552-MfK0) 2019/09/27(金) 08:02:21.46 ID:FC76HeOJ0]

へー

[35 デフォルトの名無しさん (ﾜｯﾁｮｲ 3501-srNF) 2019/09/27(金) 08:39:58.85 ID:7AQBen6M0]

今の日本は奴隷国家だから機械学習使うよりもたいていは
人間こき使った方が採算獲れるというね。。

[36 デフォルトの名無しさん (ﾄﾝﾓｰ MMf9-tbXw) 2019/09/27(金) 09:00:45.67 ID:vVIjh5fvM]

画像処理は世界共通だからね。
ベトナムの企業に依頼すると
日本の10分の1で済んでしまう

[37 デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MMa3-MfK0) 2019/09/27(金) 14:41:02.85 ID:wZU7EPf1M]

dockerを使ったら
pipでもanacondaでもどちらでもよくね？

[38 デフォルトの名無しさん (ﾜｯﾁｮｲ 2b7c-wGQq) 2019/09/27(金) 16:07:12.55 ID:bGFj4S5H0]

ちょっと酷いよね
https://toolmania.info/post-9815/

[39 デフォルトの名無しさん (ｱｳｱｳｸｰ MM01-8aXa) 2019/09/27(金) 16:24:04.32 ID:2DQWdxIUM]

画像処理は仕事がまだあるけど、需要と供給が拮抗しはじめて以前ほどボロくない
あとカメラ業界が儲からなくなって、若く優秀なエンジニアが画像処理に転職してくてるから、
全体のレベルは跳ね上がって別の意味でも辛い

[40 デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MMa3-MfK0) 2019/09/27(金) 17:04:54.88 ID:wZU7EPf1M]

cudnnて何でCUDA toolkitと一緒に入れてくれないんだろう
あと、なんて読むのだろう
クゥドゥン？

[41 デフォルトの名無しさん (ﾜｯﾁｮｲ 8302-X8w6) 2019/09/27(金) 20:29:30.83 ID:v6XbQiA90]

画像系はとっくにコモディティ化したのかと

GCPは数十枚単位の画像で学習終了

[42 デフォルトの名無しさん (ﾜｯﾁｮｲ 8d90-srNF) 2019/09/27(金) 23:53:42.50 ID:WHTSWUXA0]

>あとカメラ業界が儲からなくなって、若く優秀なエンジニアが画像処理に転職してくてるから、
カメラメーカーからソフト屋に転職してきてるのか・・・最悪だな

[43 デフォルトの名無しさん (ｱｳｱｳｶｰ Sa71-FTXU) 2019/09/28(土) 01:00:16.83 ID:1q0wGLn+a]

カメラ技術者をソフト会社がわざわざ雇う意味あるの？

[44 デフォルトの名無しさん (ﾜｯﾁｮｲ 8d90-srNF) 2019/09/28(土) 01:39:26.59 ID:ec95vgaT0]

カメラのメーカーにもプログラマーはいる

[45 デフォルトの名無しさん (ﾜｯﾁｮｲ 233d-8aXa) 2019/09/28(土) 06:53:25.01 ID:ubKeWw8E0]

カメラメーカーでCのコードを叩いてるエンジニアは、能力的には上の上でも給料的には並だったりするんだよね

BtBの画像処理は光学やカメラに対する知識の方が画像処理より重要だったりするんだけど、
奴らはそれを理解しているから機械学習を勉強して転職してくる
生粋のソフト屋より有能

[46 デフォルトの名無しさん (ﾜｯﾁｮｲ 9b66-MfK0) 2019/09/28(土) 06:58:42.45 ID:gG4VWWHP0]

妄想じゃん

[47 デフォルトの名無しさん (ﾜｯﾁｮｲ 233d-8aXa) 2019/09/28(土) 06:59:47.47 ID:ubKeWw8E0]

プログラマーがカメラメーカーに就職してメカトロ勉強するのマジ辛いけど
向こうからこっちくるの超簡単じゃん。それでお給料がボンッ、ボンッと増えるんだから
侵略しにくるでしょ。俺達では太刀打ちできない

[48 デフォルトの名無しさん (ﾜｯﾁｮｲ 233d-8aXa) 2019/09/28(土) 07:01:07.69 ID:ubKeWw8E0]

>>46
勉強会で知り合った人がカメラメーカーに務めていて、
彼から話を聞いた。マジ

[49 デフォルトの名無しさん (ﾜｯﾁｮｲ 8d90-srNF) 2019/09/28(土) 07:01:35.44 ID:ec95vgaT0]

噂じゃねえか

[50 デフォルトの名無しさん (ﾜｯﾁｮｲ 3501-srNF) 2019/09/28(土) 08:03:18.08 ID:eyOXXdxS0]

そうだとは思うけれど絶対数がかなり少ないだろ

[51 デフォルトの名無しさん (ｱｳｱｳｳｰ Sa69-3AID) 2019/09/28(土) 12:29:51.89 ID:VkgXlNvUa]

>>35
人間こき使ってコスパで負けるようになって機械学習を使う。

[52 デフォルトの名無しさん (ﾜｯﾁｮｲ 234b-srNF) 2019/09/28(土) 17:00:38.83 ID:ATQt8OTo0]

>>35
派遣社員っていう会社にとって都合のいい社員も存在するしな
誰があんなものを作ったのか中国やアメリカの派遣社員より相当緩い仕組みになっているし
漫画家とか技術者もそうだが中間で採取されて制作している人にはお金が行かないようになっている
全体的に上に行っても負担が増すぶん給料は上がらないんで上昇志向はどの国よりも低く
今の若い奴等は年金が支払われる前に痴呆症になってるんじゃないかっていうぐらいまで働かないといけないっていう

[53 デフォルトの名無しさん (ｱｳｱｳｶｰ Sa71-FTXU) 2019/09/28(土) 17:18:59.65 ID:+uNdfll6a]

そんなことは就職前から分かりきったことなんだから最初から搾取する側に入ればいいだけのこと
努力せず遊び呆けて働きだしてから「日本は搾取の構造だ！」と叫ぶ馬鹿が多すぎる

[54 デフォルトの名無しさん (ﾜｯﾁｮｲ 234b-srNF) 2019/09/28(土) 17:35:15.12 ID:ATQt8OTo0]

>>53
採取する側は叩けば埃の出るような犯罪者っぽいのがほとんど
競争社会を勝ち抜いて行った先にあるのがそれだろ
それに努力すれば金持ちになれるようなルールにはなっていない

[55 デフォルトの名無しさん (ﾄﾝﾓｰ MMf9-tbXw) 2019/09/28(土) 17:46:59.71 ID:uMRmbRaFM]

そうそう
儲けたほうが勝ち！
楽しんだほうが勝ち！

[56 デフォルトの名無しさん (ｱｳｱｳｶｰ Sa71-FTXU) 2019/09/28(土) 17:51:02.93 ID:+uNdfll6a]

努力して上位大学を卒業するだけで割と簡単に搾取する側になれるルートが誰にも用意されているのに何を言っているのか