【統計分析】機械学習・データマイニング19
■ このスレッドは過去ログ倉庫に格納されています
機械学習とデータマイニングについて何でもいいので語れ若人
※ワッチョイだよん
次スレ立ての際は、一行目冒頭に
!extend:on:vvvvv:1000:512つけてね
■関連サイト
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/
DeepLearning研究 2016年のまとめ
http://qiita.com/eve_yk/items/f4b274da7042cba1ba76
■前スレ
【統計分析】機械学習・データマイニング17
http://mevius.5ch.net/test/read.cgi/tech/1502032926/
【統計分析】機械学習・データマイニング18
http://mevius.5ch.net/test/read.cgi/tech/1507807291/
VIPQ2_EXTDAT: default:vvvvv:1000:512:----: EXT was configured 初心者ですで頭おかしいこと言ってるかもしれませんが質問に答えて下さい
損失関数の極小解を出すためのアルゴリズムに確率的勾配降下法などがありましが、今主流なのはなんでしょうか？ライブラリはTensorFlowを使う予定です >>288
答えて下さいよ
勉強足りないのは自覚しています >>287
SGDは損失関数（loss func）じゃなくて最適化関数（optimizer）な
数式ちゃんと理解しないと学習率の調整が出来ないから、全部ちゃんと調べる様に 結局、バックボーンとなる数学的な理論を理解しないと何もできないんだよな。
ライブラリーはあるけど、使うだけなら、パラメータをチューニングするだけなら、
Excel使いと同じレベルだし、技術者でも何でも無い。
AI技術者とかいって客に高い単金を要求しているが、
普通のJavaとかphpのプログラマ未満の技術力しかない。 そりゃインパクトファクターの多い論文は基礎の理論を展開しているけど
大半の論文は学習方法や既存のネットワークの最適化だよ 理論が重要なのはわかるけど、ほとんどの人にとって知りたいのは導出過程よりも結論だけだろうしなあ。
そのうち理論なんか誰も見向きもしなくなったりしないかな？ 理論が分かる人が新しい技術を生み出し搾取する側になれる
理論が分からず結果を利用するだけの人はいつまで経っても操られ搾取される側でしかない >>296
>理論が重要なのはわかるけど、ほとんどの人にとって知りたいのは導出過程よりも結論だけだろうしなあ
こういう言い訳する人は多いが、導出過程を知ることが大切なのではなくて、
導出過程を通じて考え方を学ぶことが大切なんだよ。
そういう考え方を通じて正しい使い方は分かるのはもちろん、新しい発想が生まれる。 道具として使って結果が欲しいか、道具から新しい世界を発展させたいか。
車を使って移動したいか、車を使って新しい社会の仕組みを作りたいか。
目的に敵ってりゃどっちでもいいんでね？
全員が新しい発想しないといけないってこともあるまい、一般に利用しやすくなったのは素晴らしい事じゃないかね。 利用しやすくなるのは、技術者だけじゃなくてユーザーもそうだから。
「なんだ！これじゃ〜、AI技術者ｗｗに頼まなくても、俺たちでやれるわ」
で仕事がなくなるだけ。
昔、静的なwebサイト作るのにも、一式30万円も50万円も取られた時代があったが、
今じゃ、その程度の奴はユーザー自身が本見て作るし、ランサーズで1万円も出せば、そこそこの奴作ってくれる。 中米の論文数に焦ってるやつが前にいたけどなんか落ち着いてるね >>301
AIエンジンができれば誰でもできるようになるね。 >>299
車にガソリン入れるときにライターで口を照らすような人が減るのは良いね _, ._
（ ・ω・）んも〜
○=｛=｝〇,
|:::::::::＼, ', ´
､､､､し ､､､((（.＠）ｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗ 使うためには原理を理解するのが必要なんだよ。
株予測してみた、みたいのは数値予測させるのに画像分類のサンプルコードをそのまま当てはめて
上がるか下がるかで分類させてるひどいのもある 株や為替予測AIを作っている人は酷いモデルが多いね
自然言語AIまで勉強してないから、LSTMちゃんと使いこなせてない >>311
どうせチャートとファンダメンタルズだけ組み込んで要人の発言とか新商品とか新技術の材料は組み込めない。 >>313
>要人の発言とか新商品とか新技術の材料は組み込めない
そういうのは技術的にAIに学習させたとしても無意味。
発表前に既に株価に織り込み済みだから。ちょっと株価を研究した奴なら分かる。
情報戦で勝とうとしても、上には上が居て厳然たる情報の非対称性もあって勝ち目なし。 一番確実なのは、明地文男の3点チャージ投資法。
公式サイトにも載っている
それか、サザエさんの視聴率。
株価は半年先の予測だけど、サザエさんは、さらに早い
日曜夕方の視聴率が下がったら、仕事か外食してるから、景気が良くなる
アノマリーもある。
たいてい同じ月に、上下する
ゴールデンウイークには旅行して、秋には東京ゲームショウ、冬には花粉症とか、
株が上がる月が、決まっているから まぁ、そういう気づきが大事だね。
従来の発想をそのままAIに持ち込んで、自動化とかいう発想じゃなくて。
俺も色々と発想を膨らませて予測している。 >>317
Rubyじゃないけど発表はクリスマス前とかボーナス前やろ scikit-learnとTensorFlowによる実践機械学習っていう本買った
ゼロから作る奴との橋渡しになればいいなぁ 自然言語処理AIの勉強が必要なのは、別に「要人の発言を組み込め」っていう意味じゃなくて
Seq2SecとかAttentionとかの言語モデルの使い方をちゃんと理解してからLSTMで波形分析しようって意味なんだけど… キズナアイが人工知能と聞いたんですが、ほんとですか 人工知能＝人工的に作られた、知能を持っているように見えるもの
なので基本的に受け手側の考え方次第で何でも人工知能になり得る ライブラリを利用できるだけのプログラマーの間でも
特徴抽出のセンスだけで腕に相当の差がつきそうなもんだけど
そういう組み込み系のエンジニアの年収はどのあたりの幅に収まるもんなんだろう 特徴抽出のセンスってデータの前処理の話？
そのデータを長年扱ってて背景知識あるかどうかだよ そっか、自分いま機械学習の勉強を進めてて
数学・統計学まわりから先にがっつり勉強したから機械学習本体の
学習がまだ進んでないような段階なんだけど、この先どの程度の年収の職に就けるのか
不安を感じている。これは世間で言われているほど美味しくないんじゃないか >>331
お前にとって美味しいかは知らないが実力があれば今と今後、最も稼げるのはほぼそうだろ。
プロ野球とか芸能人とかも年収差はある。 >>331
>>246
君には輝ける未来が待っている（適当） 日本で一生過ごす前提なら結局スペック高かろうが低かろうが大して収入なんて変わらない 特殊スキル持っても一般では理解されず、学歴で見られる
漏れも出来るなら職に就かず稼ぐ方を進める 日本である程度稼いだら東南アジアに引っ越してダラダラと暮らしたい 年収600万くらいかねえ。1エンジニアで1000万とかまず超えない 日本では文系職でも理系職でも皆同じようにしか昇給しないからな
表向きは成果主義導入してても成果による差はごくわずか
公平感を保つためと言うがやる気のある人からすればむしろ不公平感しかない 現時点でAIデータサイエンティストとして院卒レベルの人材じゃないとノーチャンだよな
冷静に考えて足りないのは、機械学習の上辺を理解してる営業だけ
技術職のキャパはすでに上限ギリギリいっぱいな気がするわ
英語がネイティブレベルならまだ話は別かもだが
自分で事業起こすにしても
凄まじい計算資源がないとまともな事業展開は無理だから、超大手の研究や投資に依存せざるを得ない
量子コンピュータの機械学習への組み込みに成功したらなおさらそれが加速する
割と今ってディストピアまっしぐらじゃね？ データサイエンティストって職業成り立ってない。
雑用ばかり 問題はデータサイエンティストとしての知識を披露したいのに、結局凡人が理解出来る範囲しかデータを提供出来ないということ。
分かりやすくするためにいろいろ削った結果、言いたいことがほとんど残らない。
とりあえずクライエントが望みそうな方向に誘導するのが一番無難。 そういうのは論文か本かブログで発表するといいと思いう いやだからお客様のデータを論文で披露するわけないやん >>354
まともなAI(ω)なら会社変われって結論を出すと思うが
おまいは従えるか？ DSの仕事は日本にはそうそうないらしい
面接や就職説明会ではどの会社もいい部分ばかりみせるけど
優秀なDSを本当に活用できる企業はほんの一握りで、ほとんどのDSはアナリストのよう
な雑務をこなしながら、いつか良い職に就ける日を夢見て独学で頑張ってるようだ
でも英語を勉強すれば外資にいけるし、英語が出来なくても本当に優秀なDSなら、学歴か実績があれば最近はいろいろといい求人があるんじゃないかな 機械メーカーの研究開発職であちこちセンサー付けた自社製品の機械をひたすら動かしてデータ収集して
種々の解析して異常発生の兆候を見るための手法の開発してるけどこれはデータサイエンティスト？
そうだとしたらほとんどの研究職はデータサイエンティストだろうけど 客のデータで重要な知見が得られたならそれは当然客が競争優位に立つために重要なので詳細を公表できるわけがない
自分の成果を第三者にアピールするなら自力でデータ集めからやるか、個別案件に依存しない新たなアルゴリズムの開発、公の機関との共同研究ぐらいしかないだろう この分野もプログラミングと一緒で
何か個人で成果を出さないと認められない世界になってきた
ということでいいのでしょうか？ そんなことないさ
極端は話、論文を読んで実装できるレベルで数学、数理統計学、ベイズ統計、機械学習の理論をしっかり理解し、
pythonおよびライブラリを有名どころ一通り使いこなせて
C++かjavaでアプリを自由自在に組めて、rubyにも精通していて、SQLでDBの操作が出来て、前処理の実務経験も豊富で、本職のDSのようにRを使いこなせたら、年収1500万ぐらいは楽に稼げるだろう
はじパタ本ぐらい読んでこの業界に入る人にとっては、そんなに遠いところでもないはず。自分はまだそこまでたどり着けてないけど この業界で出来る人、ほんとにそのぐらい出来るぞ
rubyはとりあえずアプリを組めれば何でもいい時にできるといいらしい（らしい） pythonできるならpythonでやればいいだろう。 案外遠くないかも
そこに自由自在に英語を使いこなすがあると、キツかった ruby持ち出すあたりと言語の数でアピールするあたりは土方 >>369
rubyでやるようなことをC++でやるのは時間の無駄だろう 論文読んで実装できて、DBを操作できて、画像なり自然言語なりひとつ専門分野を
持っていれば、年収1200万以上の求人がちらほらあるな
まあ、そういう奴は他にもいろいろと出来ることがあるんだろうけど rubyやpython等のスクリプト言語はあくまでスクリプトでありその場で結果を確認しながらデータを操作するのに向いている
C等のコンパイル言語はその場で確認といった用途には向かないが最適化すれば実行速度は圧倒的に高速
なのでスクリプト言語でデータを弄りながら方針決めをして、今後同様の操作を何度も行うのであればコンパイル言語でプログラム作成するのが正しいやり方 DSならほとんどの職場でRはメイン言語
機械学習エンジニアでも、DSと職務の分業が進んでなければ、なんだかんだで
Rを使う仕事が回ってくることが多い
てかうちがそう 日本なんかpythonエンジニア用無し。
アメリカは高収入なのに。
日本は未だCOBOLエンジニアの需要がある。 COBOLは退職間際のオッサンなら無理に他の言語学ぶ必要もないが、20代・30代がやるのは危険過ぎる
確実に現役中に需要がほぼ皆無になるのが確定してるから あの何でもコピーして済ませようとする性癖が身につくと
他の言語では３流以下だしね 500以上の求人は管理職クラスになってくるからきついよ DSはともかく、機械学習のエンジニアの求人は、1000以上でもスキル要件自体はそこまで厳しくないような…
まあ。中身よく分からないけどライブラリ実装できます、みたいな奴は論外としても。
大学一年程度の数学を理解していて、はじパタ本に毛が生えた程度の、機械学習の理論に関する理解があって、自分の専門領域を自然言語処理でも画像認識でもとにかく一つぐらい持っていれば、それでスキル要件を満たすんじゃないか
もちろん実務に関する細々としたスキルも、持ってること前提の話だけど ■ このスレッドは過去ログ倉庫に格納されています
