【統計分析】機械学習・データマイニング19

2018/03/09(金) 18:09:45.75

機械学習とデータマイニングについて何でもいいので語れ若人

※ワッチョイだよん

次スレ立ての際は、一行目冒頭に
!extend:on:vvvvv:1000:512つけてね

■関連サイト
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/
DeepLearning研究 2016年のまとめ
http://qiita.com/eve_yk/items/f4b274da7042cba1ba76

■前スレ
【統計分析】機械学習・データマイニング17
http://mevius.5ch.net/test/read.cgi/tech/1502032926/
【統計分析】機械学習・データマイニング18
http://mevius.5ch.net/test/read.cgi/tech/1507807291/

VIPQ2_EXTDAT: default:vvvvv:1000:512:----: EXT was configured

2018/07/13(金) 10:43:41.57

Pythonでプロトタイピングして、モデルができたらプロダクションはJavaとかC#で組み込むんだよ

2018/07/13(金) 13:49:34.72

数理とかは吸収されたんじゃなかったっけ

2018/07/13(金) 20:56:04.86

Deep Learningの輪読資料を公開
2018年07月12日 soneoka education, news
Ian Goodfellow 他著「Deep Learning」の輪読資料の一覧を当サイトで公開しました。
詳細はこちらから

http://deeplearning.jp/seminar-2/#1515565927378-9a11fdc4-798a

2018/07/13(金) 21:05:32.58

既出

2018/07/13(金) 21:12:14.22

【裏切られた、〝安保″】　イラン核施設　　←(2010,11)―＜サイバー攻撃＞―(2011,03)→　　福島原発
http://rosie.5ch.net/test/read.cgi/liveplus/1531447465/l50

アメリカと断交すべき

2018/07/14(土) 07:55:16.63

fast.aiのライブラリは既存のライブラリに比べてどう優れているのでしょうか？
速度？精度？メモリ節約？

2018/07/14(土) 10:17:36.67

教育用

2018/07/14(土) 13:43:18.95

ユニバーサルトランスフォーマーで自然言語は一区切り付いたな
全ベクトル再帰+タイムステップ&ポジション付与

https://arxiv.org/abs/1807.03819

2018/07/14(土) 19:25:55.08

わざわざ独立して下請けとかやりたくねーなぁ

2018/07/14(土) 21:10:08.81

深層学習に仮説など必要ない。膨大なデータがあれば
そのデータを検証するだけでいくらでも有益な結論を導き出せる！

みたいこと言う輩が最近多いなあ
無理なんだけど

2018/07/14(土) 21:31:32.08

深層学習は自分はしたことないけど、勾配消失してるのか結構学習失敗するみたいね。

2018/07/14(土) 22:27:35.42

そもそも入力ベクトルの各成分が独立性・白色性強いと良い結果はほとんど出ないよ

2018/07/15(日) 13:14:59.57

つまりは株には使えん

2018/07/15(日) 21:57:31.50

AIを株の売買に使って儲けている奴は確かに居るけど、
正しい判断を下す為の道具として使っているだけ。

AIにどれだけ精通しようと、素人が出る幕は無いので、大人しく、投資ファンドに雇って貰おう。

2018/07/15(日) 22:15:33.54

無理無理（笑）

2018/07/15(日) 22:31:04.95

投資ファンドが素人を雇うｗｗｗ

2018/07/15(日) 23:35:32.06

学習機に突っ込む前に恣意的にある程度データ整形する必要があるんだが、
バカはとにかく突っ込めば結果出るんでしょ？とか思ってる。

2018/07/15(日) 23:53:15.01

いや突っ込めば結果出て来るだろ

2018/07/16(月) 10:17:12.58

株は個人で買える金額に限度があるし
仮に限度無く買えるならそもそも相場を支配出来るやろ

2018/07/16(月) 11:21:24.18

限度なく買えるぐらい資金あるならわざわざ運用などしない

2018/07/17(火) 00:52:13.74

私立文系卒エンジニアだけど、機械学習とかデータサイエンス興味ある。
数学力どれくらい必要？？？

2018/07/17(火) 00:58:35.16

ちなみに自分のスペック

32歳

学歴
ｰｰｰ偏差値60程度の私立文系学部卒

実務経験
ｰｰｰ汎用機（COBOL開発、保守）エンジニア歴5年半
ｰｰｰエンジニアと無関係の総合職1年

資格
ｰｰｰ応用情報技術者
ｰｰｰデータベーススペシャリスト
ｰｰｰネットワークスペシャリスト

スレ見てる感じだと、クラウドとか重要らしいから、ネットワークスペシャリストの勉強通して得た知識役に立つのかな？
面白いから実務にあんま関係ないけど勉強してましたが
機械学習なら活きる？？
数学は高校二年で捨ててしまった。
センター数1Aは平均点程度で、数2Bは20点くらいしか取れなかった覚えがある。

2018/07/17(火) 01:51:15.26

どうとでもなる

2018/07/17(火) 06:34:34.24

ならないのが現実

2018/07/17(火) 06:53:16.54

＞数学力どれくらい必要？？？
質問の意味がよくわからない

2018/07/17(火) 07:48:05.19

そのくらい自分で調べて準備できないなら無理だから諦めろ

2018/07/17(火) 09:07:19.14

馬鹿には無理（テンプレ）

2018/07/17(火) 10:01:41.40

研究者になって論文発表するのでなければ、>>719のスペックが理解できる範囲で十分

2018/07/17(火) 10:35:39.70

実際アドホック分析ならExcelとSQLくらいで十分

2018/07/17(火) 21:32:11.00

ディープラーニング検定ってどうよ？

2018/07/17(火) 23:04:14.62

仕事以外で機械学習勉強された方はいますか？
最近勉強を始めてまずはアルゴリズムの概要や基本的な部分の理解を進めてるのですが、演習みたいな物もやってみたいなと感じているのですが、独学で勉強された方はどのように身につけましたか？

2018/07/17(火) 23:42:34.69

>>728
https://www.coursera.org/learn/machine-learning

2018/07/18(水) 04:37:40.49

有料

2018/07/18(水) 09:03:15.48

>>728
魚の本

2018/07/18(水) 09:06:59.48

>>728

英語が読めればfast.aiやkaggleのtitanicチャレンジ
読めなければQiitaなどで初心者向けにコードを載せている人や
kaggleの解法を解説している人がたくさんいる
手元にExcelぐらいしかなければブラウザでh2oを動かすとか

2018/07/18(水) 12:50:26.39

>>729
これ、英語解説じゃないのか？

2018/07/18(水) 18:50:30.72

>>728 です
レスくださった方ありがとうございます
courseraは先月始めてみました
スケジュール的には大丈夫かと思ってたら10分の動画ですら理解するまで1時間以上かかって全然進まず、テストも1週目から全然分からずで自分の理解力の無さに絶望しました
kaggleは聞いたことなかったのでQiitaを見ながら進めてみます

2018/07/18(水) 23:06:47.00

無料

2018/07/19(木) 00:05:50.18

コーセラやってたけど俺も予定時間よりとんでもなくかかったし何より1週目のテストの問題の意味が分からなくてそこでやめた
動画見たときは分かったつもりだったのにテストは答えられない、質問の意味すら理解出来ないで自分に絶望したわ
いやー無能はつらいっす

2018/07/19(木) 04:01:32.28

♪ コーセーラ、コーセーラ
♪もーひーとーつーコーセーラ

2018/07/19(木) 13:35:48.59

わからなくてもとりあえず飛ばして先進めばいいのに

2018/07/19(木) 18:06:42.26

大学行って、嬉しかったが、いつも出てくる講義はコーセラ
今日もコーセラ、明日もコーセラ、是ぢゃ年から年中コーセラ

2018/07/19(木) 20:22:11.34

やがて中年コーセラ

2018/07/20(金) 00:19:43.13

大学行ってコーセラってどういうこと？
授業料の無駄

2018/07/20(金) 14:53:52.22

教授が書いた教科書買わされた挙げ句、授業がつまらなくて結局サボるより良心的

2018/07/20(金) 16:14:01.21

>>741
https://youtu.be/aY66ixyTdZI

2018/07/20(金) 20:09:15.62

コーセラ化粧品歌謡ベストテン

2018/07/22(日) 06:25:51.10

>>744
宮川泰丸木陽子

2018/07/22(日) 09:06:49.10

井上コーセラ

2018/07/22(日) 11:05:44.98

線形代数ってさ、ベクトルの復習みたいなのから始まって、加法、定数倍とかなんだ簡単じゃんとか
思って進んで行くと、なんか急にわからなくなる断絶感があるんだけどいい本ない？

2018/07/22(日) 11:53:42.40

線型代数入門　斉藤

2018/07/22(日) 12:00:13.26

高校数学向けに洗練された範囲とそうでない範囲の違い

◆QZaw55cn4c (ﾜｯﾁｮｲ 9f60-4GkJ) · 2018/07/22(日) 12:05:14.99

>>749
高校数学で固有値固有ベクトルってやったっけ？

2018/07/22(日) 12:06:20.94

算法大全指南車

2018/07/22(日) 13:06:47.34

>>750
うちはやった覚えがある

2018/07/22(日) 14:05:14.48

Courseraの機械学習の有名なやつ、Pythonでやってくれたらいいのに

2018/07/22(日) 14:38:53.50

>>747
線型代数長谷川浩司
線型代数学佐武一郎

2018/07/22(日) 14:51:22.05

線形代数は大学で講義受けてた頃はひたすら新しい定理を出して証明するような感じだったから意味不明だったけど
要は大量の連立方程式を解くための方法を工夫しているだけだと考えればそれほど難しくはないと思えるようになった

2018/07/22(日) 15:05:48.92

最近PAP-1がPAPPに見えるのが気になって仕方がない

2018/07/22(日) 15:50:49.51

>>755
後半は勘違いしてるよ

2018/07/22(日) 17:32:39.25

そうだね

2018/07/22(日) 18:03:20.95

つーか機械学習に数学なんていらない

2018/07/22(日) 20:35:15.90

goto 612

2018/07/22(日) 21:22:02.23

数学いらないなんて言ってると
仕事なくすよん

2018/07/22(日) 22:27:47.80

>>254
本人に渡るのは3分の1以下が相場じゃないか？

80万で発注してるとしたら、本人に渡るのは27万ぐらいで、税金やらなんやらで手取り20万強といったところ。

だから、使ってるほうは高い金払ってんのになぁ、となり、使われるほうは、大して貰ってないのにあれこれ言われんなぁ、となる。

2018/07/23(月) 08:47:36.46

機械学習に数学は必要だけど、テストじゃないんだから、数式が解けることがゴールじゃない。

数学や物理で博士号持ってる奴は理解度が全く違うと思う。

2018/07/23(月) 08:56:06.01

つまり数学的側面の理解は大前提ということ

2018/07/23(月) 09:06:21.19

数学はディープラーニングだからな。
数学は計算して答えが出るようでは駄目で、問題が出ると
答えが勝手に出てくる脳作りが一番大事。

2018/07/23(月) 10:03:50.99

暑さでやられてるｗ

2018/07/23(月) 10:10:54.97

カーブフィッティングか判断するには統計的知識は必要だよな

2018/07/23(月) 10:46:18.87

>>762
公務員がピンハネしてる総奴隷社会

2018/07/23(月) 13:14:23.65

kerasを使い、かつ新たな機械学習モデルを作らないならば
数学は必要なし
それ以外は必要
フィッティングも可視化すれば形式的に判断できるからね

Tensorflowでもkerasの使用を推薦してるから
需要過多の現状、ライブラリ知識だけでもいいんじゃね
どうせそのうち新たなモデル自体をMLで作るようになるしな

2018/07/23(月) 14:41:22.79

python+vimキーバインドでデータ解析するための環境を模索してるけど結局ブラウザで実行するjupyter notebookが一番快適だな
pycharmがいいという記事を色々見つけたから試したけどjupyter notebookとの連携ではvim拡張がmarkdownセルで効かなかったりセル間移動に使えなかったりでブラウザ版には敵わない

2018/07/23(月) 15:20:41.90

数学勉強するほうが手っ取り早い

2018/07/23(月) 15:46:23.93

超初心者だけどkaggleやりたい
どうやって勉強すればいいんだ

2018/07/23(月) 16:01:21.79

kaggleやりたいにme tooだ
微積→線形代数→大学一年程度の統計学→
最適化数学の基礎→はじパタ本→自然言語処理の基礎→
pythonの入門書→ゼロから作るdeep learning(now!)

もうそろそろ、kaggleをはじめられますかねえ
アカウント作ってみたけど、とっかかりが分からん
教えてエロい人

2018/07/23(月) 18:36:49.14

kaggleはtitanicが入り口
公開されているkernelで良さげなものをforkするとか
ダウンロードしてローカルまたはクラウド上で
パラメータを変えたり
欠損値の補完の仕方を変えたりすることから
始めてみればいいと思う

titanicの解説は日本語でも掃いて捨てるほどあるし
敷居が高いとは全く思わない

2018/07/23(月) 19:31:26.52

>>774
ありがとう。なるようにしかならないし、やるだけやってみるわ

2018/07/25(水) 07:41:32.23

宣伝乙と言われるかもしれないけど
noteで初心者向けtitanicレクチャーみたいなやつ売ってる人いたよ
それだけ本買う金あるなら買ってみたら？

あとド初心者ならSIGNATEの方がおすすめ

2018/07/25(水) 09:16:01.27

大学の数学の内容ほとんど忘れてるレベルなんですが、kaggleとかやってみたいです
スレざっと見たんですが、SIGNATEとかやった方がいいんでしょうか？
一応東大の松尾ラボのGoogle Driveに保存してある、講座があるんですけど、それから始めるべきか？
数学をやり直すべきか？
どっちがいいでしょうか？

2018/07/25(水) 10:25:39.46

諦める

2018/07/25(水) 11:40:49.39

>>778
カーネル関数も理解できてない癖に死ねよ

2018/07/25(水) 14:00:09.07

>>779
お前から先に死ねよ、カーネル関数（笑）

2018/07/25(水) 15:51:36.80

最低限、微積と線形代数

2018/07/25(水) 16:11:30.44

確率偏微分

2018/07/25(水) 16:21:38.83

カーネル関数って、非線形写像の時に出てくるアレか
線形代数をちょっとかじってればその場で理解できることだし
単語知らないぐらいならなんとかなりそうなもんだけど違うの

2018/07/25(水) 17:54:24.58

どっちがいいかとか聞いてる奴は自分で学習効率も測定できないアホ

2018/07/26(木) 08:03:25.79

>>781
ベクトル解析

2018/07/26(木) 17:04:06.80

ベクトル解析は必要かな
勾配とかナブラとか、そういう事を漠然とわかっていれば、とりあえず論文は読めるよね
いらない気がするけど自分が大したもんじゃないから実際のところは分からん

2018/07/26(木) 17:14:12.09

どうせ証明なんて自分でしないんだから
計算術だけ判ってればOK

2018/07/26(木) 17:40:36.16

機械学習に数学はいらない

ベクトル解析もいらない。そもそも>>786からしてどうみてもベクトル解析理解してないｗ

2018/07/26(木) 18:30:41.18

機械学習の線形代数なんか単なる計算テクニックに過ぎないわけだが学者さんは難しく考えたがるよね
テクニックじゃなく本質的に重要なのは統計学

2018/07/26(木) 19:21:47.98

>>786
俺もベクトル解析わかってないけど、まあ論文読めるよと言いたかっただけだ
だから必要ないんじゃないかなーと思ってるけど

でも十年後は分からないよね。なんとなく複素解析とか、フーリエ解析とかやっておいた方が良さそうな予感。やったことないけど。でも音声認識とかまだ実務では中々つかえないけど将来的には食える技術な気がする。直観

2018/07/26(木) 20:13:27.23

>>789
例えば問題によっては自分でペナルティ項考えたりしないといけないと思うけど、そういう時にどう計算すればちゃんと解が求まるかとか考えるには線形代数の知識や数値計算のテクニックとかは要るよね

2018/07/27(金) 04:22:25.03

ゼロからともう一冊読んだけどディープラーニングは数学はいらないよ。
ディープラーニングは感性で考えられてるからね。

2018/07/27(金) 04:29:49.04

アホ参上

2018/07/27(金) 04:37:51.29

数学要らない厨しつけえよ

2018/07/27(金) 06:11:40.95

実際いらないのだから仕方がない

2018/07/27(金) 06:44:40.05

いらないものをいると主張するやつの方がしつこい

2018/07/27(金) 06:50:02.55

不良などの要因分析によく使われるアルゴリズムを勉強したいのですが、決定木が適しているのかなと感じたのですが、他にはどのようなアルゴリズムがありますか？

2018/07/27(金) 06:53:39.85

アキネーターみたいなやつかな