X

【統計分析】機械学習・データマイニング23

■ このスレッドは過去ログ倉庫に格納されています
2019/02/28(木) 20:07:20.50ID:PNBr8RBB0
!extend:on:vvvvvv:1000:512
機械学習とデータマイニングについて語れ若人


■関連サイト
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/
DeepLearning研究 2016年のまとめ
http://qiita.com/eve_yk/items/f4b274da7042cba1ba76

■前スレ
【統計分析】機械学習・データマイニング22
https://mevius.5ch.net/test/read.cgi/tech/1547338417/
VIPQ2_EXTDAT: default:vvvvvv:1000:512:----: EXT was configured
2019/04/08(月) 11:45:39.70ID:qrhOu38P0
>>616
そう
何か別物と思ってる人がいるみたいだけど
2019/04/08(月) 14:22:48.88ID:QRsHzIhL0
>>604 外国にはまだあるけど日本はやめたのかも。

still alive http://www-03.ibm.com/innovation/ca/en/cognitivecooking/cognitive-cooking.html . they recreate the Quebecer poutine
2019/04/08(月) 21:02:00.20ID:r6ctvFAb0
ibmはリストラ早いから
620デフォルトの名無しさん (ﾜｯﾁｮｲ 8b82-k9gu [113.20.238.175])
垢版 |
2019/04/08(月) 21:28:59.65ID:ClaymXo60
>>618
外国にはあるということは使えるのですか？
どうやって使える？
2019/04/09(火) 09:21:31.64ID:Xb/cLdUa0
＞＞620　クリックすればいいじゃん
622デフォルトの名無しさん (ｽｯﾌﾟ Sdc3-k9gu [1.72.9.12])
垢版 |
2019/04/09(火) 12:49:26.87ID:9s7RZ40vd
>>621
スマホからだけど、どこをクリックしたらいいのかわかりません。
どこも単なる紹介記事のようなもので、シェフワトソンは見当たらない。
2019/04/09(火) 17:29:19.97ID:HbJ8wPKJ0
>>622 本当だね、諦めなさい。 そのうちいろんなベンダーがWatson を使って同じ様なサービスを始めるから。
IBM としてはそれらの邪魔になってはいけないから閉じたんだと思う。

日本だとクックパッドとか始めそう。 シェフワトソンを使ったレシピなんてやってるし。
2019/04/09(火) 17:32:04.24ID:HbJ8wPKJ0
クックパッドはデータを持ってるから AI (ワトソン) を使う環境は整ってる。
2019/04/09(火) 18:05:57.31ID:n7Xbwl5Z0
後から来て間違えた奴が偉そうにｗ
626デフォルトの名無しさん (ｱｳｱｳｸｰ MMc9-gZRC [36.11.225.30])
垢版 |
2019/04/09(火) 18:59:38.24ID:1KTVyE26M
scikit-learnをプロダクトで使ってもいいの？
2019/04/09(火) 19:47:12.08ID:YPZe2Y4xa
具体的にsklearnの何をどういうプロダクトで使いたいのか
2019/04/09(火) 19:57:42.47ID:mg+oftxD0
使ってもいいけどscikit-learnはもうかなり古いぞ
2019/04/09(火) 20:48:56.18ID:40L2/srO0
>>628
初心者の自分には驚愕の事実…
他に台頭してるライブラリがあるのですか？
2019/04/09(火) 21:31:31.81ID:mg+oftxD0
>>629
keras（tensorflow）かpytorch
ちなみにgoogleとmicrosoftがそれぞれ使っている
更についでに言うと、俺も数年前にscikit-learn使って同じ事思った
2019/04/09(火) 21:39:05.58ID:VbkiJFWvd
>>630
ライブラリとしてのレイヤーがぜんぜん違うだろ
2019/04/09(火) 21:52:49.03ID:oqMw30MG0
うーんマグロもシャケも同じ同じぃぃ！
2019/04/10(水) 00:51:48.43ID:cNM9Wy/Xa
sklearnは機械学習というよりその前処理に使うのが主
2019/04/10(水) 02:51:52.58ID:b3+peZdtp
>>633
そんなわけない
適当過ぎるだろw
635デフォルトの名無しさん (ﾄﾝﾓｰ MMe1-x8An [210.142.95.171])
垢版 |
2019/04/10(水) 08:40:51.68ID:Dtz57xGyM
>>634
禿同
636デフォルトの名無しさん (ﾄﾝﾓｰ MMe1-x8An [210.142.95.171])
垢版 |
2019/04/10(水) 08:41:40.81ID:Dtz57xGyM
>>633
禿違
637デフォルトの名無しさん (JP 0He1-Eqc7 [210.251.91.153])
垢版 |
2019/04/10(水) 10:40:49.77ID:lWLoQ9ihH
anacondaて使っている人は多いの？
最適化されてなさそうで不安なんだけど
2019/04/10(水) 15:05:42.51ID:KH2onUUop
ancondaは初学者用
もう穴の時代は終わった
2019/04/10(水) 15:07:29.07ID:/RJ3Xoqha
Anaconda使ってます！初学者です！！！
640デフォルトの名無しさん (ｽｯﾌﾟ Sdc3-k9gu [1.72.9.12])
垢版 |
2019/04/10(水) 15:11:40.13ID:aleM+Xhdd
なんか深層学習の凄いアルゴリズムはないですか？
2019/04/10(水) 19:15:30.26ID:20MEu+vm0
Pytorch勉強するわ
2019/04/10(水) 19:20:45.40ID:xcPdAU380
画像や動画、音声なんかでdeep learningやろうって話じゃなけりゃscikitlearnで十分だよ。
古いと言えばそうだが逆に言えばライブラリとしては結構枯れてる。
まあただこの仕事に憧れる奴はミーハーだろうからそういうのは好きじゃないんだろうけどな。
2019/04/10(水) 20:20:37.68ID:aO8gbFpB0
そもそも本格的にやろうとする人はpythonみたいな遅い言語は使わない
2019/04/10(水) 20:35:35.38ID:Tj/eQorQ0
専門外だけどちょっと機械学習やったら後悔したよ
もうやめたい
2019/04/10(水) 20:48:11.24ID:wpQ7q5oXp
>>644 自由にやめれば良い。 誰にやらされてんだよ。
2019/04/10(水) 21:00:09.35ID:Tj/eQorQ0
会社
2019/04/10(水) 21:12:05.86ID:UESsnIOiM
会社ならDataRobotとかSPSS Modelerみたいな一般向けのツール買えばいいでしょ
2019/04/10(水) 21:21:21.50ID:xcPdAU380
ああいうの逆に使いづれーわ。excelのがマシなレベル。
2019/04/10(水) 21:42:06.24ID:20MEu+vm0
>>646
やれって言われたの？
2019/04/10(水) 21:46:00.32ID:Fome10Mm0
excel使いではな、公務員に転職したら
2019/04/10(水) 22:07:04.91ID:xcPdAU380
結局フォーマット合わせなり微妙な調整するんだからスクリプト書くことになる。
だったら最初からpythonで書いた方がマシっていう当たり前のことがバカには通じない。
2019/04/10(水) 22:27:38.52ID:Gpwaqo520
ホームページビルダーみたいなもんでしょ
2019/04/10(水) 22:38:51.09ID:xcPdAU380
>>652
だからその手の手軽な分析だったらexcel使ってヒストグラムでも出した方がマシって話なんだよ。
ツールありきで考えるような人間はこの仕事に首を突っ込まない方が幸せだよ。
本人も周りも。
2019/04/10(水) 22:40:29.50ID:SWhoo2cva
分析や機械学習までツールに投げるかは別にしても、データの準備にTalendみたいなETLツール使ったりは普通にやるだろ
2019/04/10(水) 22:51:35.01ID:xcPdAU380
>>654
そういうツール使ってうまくいくほど世の中のデータベースはスキーマがまともなことはない。
そしてそういう残念な組織ほど一発ツール使って解決しようとしてドツボにはまる。
スキーマがまともな組織な場合はまともなプログラマがいるのでこういうことで悩んだりしないという
ある種のデッドロックツールなんだよ。
2019/04/10(水) 23:10:31.24ID:Gpwaqo520
田舎のおじさん企業にも始められる機械学習ツールて位置づけじゃない
そら国内sotaな現場ばかりじゃないからな
MLは高い数学の素養が求められる分またハードル高いし
2019/04/11(木) 05:49:37.85ID:2KDMmxCk0
そこまで高尚でもない
658デフォルトの名無しさん (ｱｳｱｳｳｰ Sae3-F38n [106.161.116.78])
垢版 |
2019/04/11(木) 05:55:00.73ID:JbjmuqI4a
>>650
役所すらRPAに。
659デフォルトの名無しさん (ｴﾑｿﾞﾈ FFf2-grM/ [49.106.193.12])
垢版 |
2019/04/11(木) 11:44:01.58ID:bTGeujWNF
pythonは初学者用
もう蛇の時代は終わった
2019/04/11(木) 12:13:20.63ID:CZCzN54v0
>>656　もう小学生でも遊べる時代だぞ。
2019/04/11(木) 12:15:00.11ID:CZCzN54v0
>>659 初学者からプロ用途まで幅広く利用される。　実際にAI系はPythonがなければ始まらない。
2019/04/11(木) 18:34:12.24ID:XplD4nHz0
データが綺麗ならそりゃツールにぶちこむだけで済むだろうが
そんな簡単な話は世間には転がってない。
2019/04/11(木) 19:41:03.21ID:w5gwslMV0
>>660
そりゃMLツールで遊ぶだけなら誰でも出来るだろ
ビジネスやら研究の領域になったらそんな寝言は出てこん
664デフォルトの名無しさん (ﾄﾝﾓｰ MMfb-Ouf2 [210.142.95.240])
垢版 |
2019/04/11(木) 21:20:07.45ID:OqhcHWodM
>>648
分かる。
ビッグデータ分析といっても
ほとんどの会社では
Excelレべル。

python使ってど一のこ―のってのは
増えてきているが
ツール使うほどじゃない。

ツール使うとキレイな
グラフ描けるというぐらい。

Excel使って月収130万の俺が
言うのだから。
儲かってウハウハ！
2019/04/11(木) 21:29:58.73ID:Uca+hwXU0
すげーな（鼻糞ほじほじ）
666デフォルトの名無しさん (ｱｳｱｳｲｰ Saa7-OsDm [36.12.23.55])
垢版 |
2019/04/11(木) 22:46:29.44ID:Fzh9hQBha
そもそも、
利用についての話か
開発についてか
研究についてか
全部がごっちゃになってるので
話があわんよね
2019/04/11(木) 23:04:48.44ID:RdKZ3Rx30
みんなDLのフレームワークは何使ってる？
やっぱtensorflow？
2019/04/12(金) 00:33:50.18ID:98gTOJct0
kerasってフレームワーク？ラッパー？
2019/04/12(金) 00:38:03.84ID:wLs4Sov90
ラッパーだけどこんあ世間話ならkerasっていっていいんじゃない
670デフォルトの名無しさん (ｱｳｱｳｴｰ Sa6a-grM/ [111.239.44.147])
垢版 |
2019/04/12(金) 04:37:48.52ID:S2+S1yfha
ブラックホール観測データからpythonで補間しとった
671デフォルトの名無しさん (ｱｳｱｳｸｰ MMa7-QAgd [36.11.224.106])
垢版 |
2019/04/12(金) 04:40:47.15ID:8+fBpsEYM
須山がひよってた
672デフォルトの名無しさん (ｱｳｱｳｳｰ Sae3-F38n [106.161.121.189])
垢版 |
2019/04/12(金) 06:48:10.78ID:oYZHGCwYa
>>661 >>659
pythonは遅い。なんでJuliaを使わない。
673デフォルトの名無しさん (ｱｳｱｳｳｰ Sae3-F38n [106.161.121.189])
垢版 |
2019/04/12(金) 06:49:02.07ID:oYZHGCwYa
>>667
Flux。
2019/04/12(金) 07:28:52.14ID:P5gBEkCQa
速いから使うんじゃなくてライブラリの充実度や実装事例が多いから選ばれるんだぞ
2019/04/12(金) 07:47:44.32ID:iSiavc0f0
てかライブラリがなけりゃ速いも遅いもないだろ。
結局ライブラリはcで書かれるわけで言語なんて関係ねーわ。
2019/04/12(金) 08:53:06.76ID:YPpuO6F7a
うん、だからpython向けのライブラリの大半と同様機能のライブラリが多言語向けにあるならそっちでもいいだろうけど今のところその点においてpythonから移るほどのメリットがある言語は存在しない
2019/04/12(金) 09:00:06.85ID:wLs4Sov90
機械学習じゃないけど、昔のライブラリは色々な言語で出すのが流行ってたね
678デフォルトの名無しさん (ｱｳｱｳｸｰ MMa7-QAgd [36.11.225.234])
垢版 |
2019/04/12(金) 09:10:07.52ID:rsS9oVcUM
flux？
2019/04/12(金) 09:15:33.99ID:XF8boQYv0
>>675 pythonライブラリがC で書かれてるからって他の言語で自由に使えるわけじゃないぞ。
結局Python でしか使えないからみんな Python を使ってる。
2019/04/12(金) 11:34:48.14ID:Lv2SN3lRH
他言語がpythonと同程度にライブラリやらモジュール群、フレームワークが充実してたらここまでpython一択の状態になってない
てかjulia使ってみたいからjuliaエコシステム構築してけろ
2019/04/12(金) 14:36:30.51ID:C748WCqyp
初心者はkeras使うべきだったかもしれん…
pytorchわけわからん…
2019/04/12(金) 21:45:37.39ID:piIxPc4G0
pythonの文法、numpy(scipy)、pandas、scikit-learnと覚えること一杯過ぎる
2019/04/12(金) 22:16:52.56ID:XojitUxja
全部覚えてる人なんてごく少数だと思うよ。
できる人は、最低限必要な範囲を覚えてて、それ以外は概念を理解して
詳細がどこにあるか探し方が上手い。
2019/04/12(金) 23:13:50.71ID:YvxbfTFep
【IT】ディープラーニング初心者向けの日本語学習サイト、PFNが無償公開 ･
https://egg.5ch.net/test/read.cgi/bizplus/1555071423/
2019/04/12(金) 23:15:02.89ID:Hp+AmMVvr
初心者はkerasやkeras-rlで十分だよ
中級以上の用途でも既存クラスを継承して必要な所だけ改修すれば大抵は事足りるし
2019/04/13(土) 19:51:09.94ID:VfvZkeVc0
NEURON、てのを見つけた
https://neuron.yale.edu/neuron/

使っている人いる？
2019/04/13(土) 23:30:17.50ID:Sarxek9xp
>>680
juliaは純粋に良い言語だと思ったよ
行列周りがスッキリかけていいね
一応pythonのライブラリ呼び出せるから無理すれば使えないことはないが、業務で使うレベルにはないかな
688デフォルトの名無しさん (ﾜｯﾁｮｲ 0682-iXRD [113.20.238.175])
垢版 |
2019/04/14(日) 07:52:58.10ID:hqo19SQo0
フレームワークとライブラリの違いがよくわかりません。
Pythonはフレームワーク？
2019/04/14(日) 08:24:01.10ID:+dOQvHeb0
Python は、プログラミング言語です

「フレームワーク ライブラリ 違い」で検索！
2019/04/14(日) 08:25:20.18ID:paHu6MVLa
Pythonは言語処理系で、特定のプログラミング言語を解釈して実行する。
フレームワークは文字通り枠組みで、特定のアプリケーションの共通部分
を提供してくれるので、残りの固有の部分を作ればよい。
ライブラリは一般的な機能をまとめたもので、実績のあるものを選ぶことで
ソフトの品質を保ち、テストや開発を効率的する。
敢えて包含関係をつけると Python＜ライブラリ＜フレームワーク
691デフォルトの名無しさん (ﾜｯﾁｮｲ 0682-iXRD [113.20.238.175])
垢版 |
2019/04/14(日) 08:38:57.40ID:hqo19SQo0
>>684
良さげなサイト。
これを学んだら、G検定合格に結びつく？
2019/04/14(日) 11:23:33.03ID:epDxsc+aM
就活で機械学習使えます！って言うにはどんなこと理解してればいいの？
取り敢えずオライリーの機械学習の本は1週(完璧に説明出来はしない)してPytorchのサンプルコード使って画像分類してるくらいなんだけど
ちな新卒
2019/04/14(日) 11:58:50.62ID:AIBmgQB+p
>>692
就活する企業による

既にバリバリ使っていう企業ならもう一歩踏み込んで、どんなモデルで何をやっていたか、ハードウェアはどうしていたのか、なぜPyTorchを選んだのか、など機械学習そのものよりも、どう応用したのかが問われる

一方で全く使っていない企業ではそのレベルでも充分だが、やはり機械学習を使って何をしたのかは問われると思う

ただ、正直新人と機械学習にそこまで期待していないので、インターンとかアルバイトで感触と経験を積むほうが余程良いアピールになる

参考までに自社に機械学習できますで入ってきた新人は
・海外の論文を読んで自分で実装できる
・実際に機械学習で役に立つ何かを作った
・フレームワークの違いを熱く語れる
・FPGAで分類アルゴリズムを実装しました
とレベルは高かったが、入社して活用できているかは疑問
選ぶ会社間違えてないか？と心配になるレベル
2019/04/14(日) 12:20:56.98ID:lLZ1UKZVM
割と真面目に新卒は学歴が全て
2019/04/14(日) 12:52:17.65ID:TgcjO3vq0
普通、企業では体系的に教育受けてるやつしか機械学習枠では求めてないよ。
ただ現在は需要のほうが大きくなってるからガバガバな求人もある
2019/04/14(日) 13:38:23.05ID:gRIWJu2f0
機械学習ブームは後２、３年は持つそうだ
ttps://www.sankei.com/premium/news/190414/prm1904140009-n2.html
2019/04/14(日) 14:03:00.79ID:Vh/9Tlira
入門書レベルの機械学習分かります、チュートリアルレベルなら自力でやれます、程度の人は仮に採用されてもその内に仕事の大半が自動化されて単なる作業員に成り下がるのがオチだと思う
2019/04/14(日) 14:04:26.57ID:AVvjfIV70
>>696
AI とかは、なんか胡散臭いとどうしても思ってしまっていましたが（そんな人は多いのですかそれとも少ないのですか？）、この記事をみて認識を改めました、まだまだ可能性があると踏んでいる人はいるのですね
699デフォルトの名無しさん (ﾜｯﾁｮｲ 067c-grM/ [113.32.86.138])
垢版 |
2019/04/14(日) 14:11:43.04ID:mqiCDUBh0
「頭の良い人」ほど意外と気付いていないことが多いが
世の中には「AI」より劣る人は大量に存在する
そういうのが一巡して一掃されるまでは続くだろ
2019/04/14(日) 14:16:59.66ID:AVvjfIV70
>>699
現在の AI がやっていることよりも少ないことしか考えない人はすくなからずいるってことですか？
たとえば「原発再稼動反対」とか「自衛隊は違憲」の人たちだというのなら、少しだけわかるような気もします
でも私も彼らと似たり寄ったりなのかもしれない、という気もします、なぜなら彼らより考えているという証拠がないから
2019/04/14(日) 15:12:47.32ID:6yfChbyvd
東ロボが技術的には保守的なのに偏差値50越えてるってことはそういうことだろう
東ロボ以下の人間が半分以上いる
2019/04/14(日) 15:15:40.40ID:H5Vbi4SHH
正解データつくる業者が盛り上がってるよな（）
2019/04/14(日) 15:52:30.18ID:2oedoA+a0
>>700 なんなんだこのバカは、只のアラシなのか？
2019/04/14(日) 16:00:27.45ID:YQLb8Tsj0
理研は機械学習に全振りしちゃってるからそらオワコンとは言えんわな。
705デフォルトの名無しさん (ｽｯﾌﾟ Sd12-iXRD [1.75.0.243])
垢版 |
2019/04/14(日) 16:09:25.55ID:Yn4gqCEld
>>696
見れない。
2019/04/14(日) 17:13:40.96ID:Vh/9Tlira
>>701
京大ならともかく東大入試は一通りの参考書を丸暗記すればほぼ合格できる
つまり完璧な読解力さえ身につけられればコンピュータでも合格は容易
2019/04/14(日) 17:45:50.21ID:Y5zkdmyW0
>>705
おま環
2019/04/14(日) 18:37:00.59ID:uOQPFqgEd
>>706
まるで「完璧な読解力」を実現するのが容易みたいな言い回しだな
2019/04/14(日) 19:27:38.81ID:Ot8/NUB60
He runs the shop.
2019/04/14(日) 19:58:08.96ID:eKs7JEmk0
学歴高い人多いのね
学歴低いから萎縮しちゃう
2019/04/14(日) 20:04:24.66ID:AVvjfIV70
>>710
すごい人がいっぱいですね…
底辺高卒だから…いろいろとしんどいですね…
2019/04/14(日) 20:26:52.90ID:ICPBpjQ10
教師ありと教師なしだと教師ありの方が精度良いの？
2019/04/14(日) 20:34:12.62ID:7SYJtYmD0
はい
2019/04/14(日) 20:38:59.50ID:YhnOXq5E0
精度がいい悪いじゃなくて、基本的にタスクが違うと思うんだけど
2019/04/14(日) 20:46:53.17ID:ICPBpjQ10
>>714
画像分類なんだけど教師ありと教師なし上司がどっちが良いかも含めて検討しろって言ってた
俺知識が浅いから？？？ってなったんだけど教師なしで画像分類とかやろうとするとオートエンコーダとか使うんだよね？
多分それのことかなぁ…
2019/04/14(日) 21:06:17.07ID:YhnOXq5E0
>>715
教師ありならラベルの推定をするのが目的だし、教師なしならデータの分布自体を学習したりクラスタリングするのが目的になると思うけど
画像分類っていってるんだからラベルの推定をしたいってことなんだろうね

訓練データに全部ラベルがついているなら教師ありで学習するべきだろうし、
ラベルの付いたデータが少なくてたくさんのラベル無しデータがあるなら
半教師あり学習、PU learningや能動学習を検討すべきじゃないかなと思う
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。
ニューススポーツなんでも実況