【統計分析】機械学習・データマイニング26

■ このスレッドは過去ログ倉庫に格納されています
2019/09/15(日) 09:23:06.34ID:bjsiNRs40

機械学習とデータマイニングについて語れ若人

＊機械学習に意識・知能は存在しません。
人の意識に触れたい方はスレ違いです

■関連サイト
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/
Machine Learningを用いた論文一覧2018
https://shiropen.com/seamless/machine-learning/2018
2017年のディープラーニング論文100選
https://qiita.com/sakaiakira/items/f225b670bea6d851c7ea
DeepLearning研究 2016年のまとめ
http://qiita.com/eve_yk/items/f4b274da7042cba1ba76

■前スレ
【統計分析】機械学習・データマイニング23
https://mevius.5ch.net/test/read.cgi/tech/1551352040/
-
【統計分析】機械学習・データマイニング25
https://mevius.5ch.net/test/read.cgi/tech/1561568018/

【統計分析】機械学習・データマイニング24
https://mevius.5ch.net/test/read.cgi/tech/1556674785/
-
VIPQ2_EXTDAT: checked:vvvvvv:1000:512:----: EXT was configured
VIPQ2_EXTDAT: checked:vvvvvv:1000:512:: EXT was configured
2019/12/12(木) 21:49:18.95ID:x0loQ0xU0
違う話になってない？
2019/12/12(木) 22:07:40.49ID:SSYYfvrk0
損失関数を変えるってより真の目的は特定のデータ範囲だけ重み付けしたいということだと解釈したけど、違ってたらすまん
2019/12/12(木) 23:49:42.64ID:2XjPPOkCd
>>702はあほか
ただステップ関数だけやん
2019/12/12(木) 23:50:24.59ID:2XjPPOkCd
訂正
>>702はあほか
ただステップ関数かけるだけやん
2019/12/12(木) 23:52:33.17ID:2XjPPOkCd
>>702はうんこにも負けるお馬鹿さん
2019/12/12(木) 23:58:44.94ID:2XjPPOkCd
>>702の方法を詳しく聞きたいです。
どのレベルのものが出てくるのかな？
2019/12/13(金) 00:03:20.51ID:YzIzcvdhd
>>698
＞やり方は主に2通りある
一つはサンプルをいじる方法、もう一つは関数をいじる方法だけどもっと詳しく聞きたい？

聞きたいです。
どのくらい短いコードになりますか？
2019/12/13(金) 00:07:11.37ID:ztjeN6RTD
>>702
ありがとうございます。私が阿保でした…。色々と難しいことを考えていましたが、普通に分類問題における不均衡データの扱いと同じように考えれば良いのですね…。
2019/12/13(金) 00:10:21.56ID:XxZjyVfOd
>>698いわく方法は２つあるらしいけど、僕ちん一番始めに思い付かなかったな。長過ぎて。
2019/12/13(金) 00:21:47.33ID:XxZjyVfOd
>>698のどや顔のわりに出題者の意図を組んだ回答になってなくて笑うわ
2019/12/13(金) 00:28:36.82ID:XxZjyVfOd
>>699は>>695の始め四行を理解できましたか？

おそらく意図に沿った最適解ですよ？
2019/12/13(金) 00:52:32.77ID:XxZjyVfOd
ところでさ、>>690は>>695の最後の一行だけで解決できたって認識はある？
2019/12/13(金) 08:26:43.93ID:4f9XcAird
>>710
ID変わっちゃってるけど

>>698は俺で、>>702で回答したつもり
そうそう不均衡データ知ってるなら話は早い。それと同じに考えればいいんじゃないかな
2019/12/13(金) 08:47:13.93ID:zOMzCfb1a
オライリーのPythonによるデータ分析とデータサイエンスハンドブックってどっちがおすすめですかね？
717デフォルトの名無しさん (ｱｳｳｨﾌ FFc7-EbeN [106.171.69.81])
垢版 |
2019/12/13(金) 11:10:40.03ID:V90d9jYdF
前者
2019/12/15(日) 11:25:39.35ID:NsMHdX+Qd
オライリー本の機械学習本大杉
俺にも初心者向けのお勧め教えてほすぃ
趣味でやる程度で、プログラムは問題なくて数学はソコソコ程度でやんす
719デフォルトの名無しさん (ﾜｯﾁｮｲ 5b54-OFkf [180.235.0.69])
垢版 |
2019/12/15(日) 11:27:48.03ID:qAhsyicK0
どうせ無理
2019/12/15(日) 16:36:37.82ID:IJ9lyMvCr
夢見る機械学習
夢見る深層学習

あたり
721デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MM86-OFkf [123.216.161.18])
垢版 |
2019/12/17(火) 17:57:23.97ID:IOLSzPnMM
neuripsは、にゅうりっぷす、でいいの？
2019/12/17(火) 21:22:33.32ID:TP04XND70
夢見るって何だよw
2019/12/18(水) 08:37:06.46ID:AGv/bbi+0
アンドロイドは電気羊の夢を見るか?　フィリップKディック
2019/12/19(木) 16:18:27.57ID:687/ZJ6rM
>>723
この板では常識みたいな本のタイトルだよな
725デフォルトの名無しさん (ﾜﾝﾄﾝｷﾝ MMab-BqQa [123.216.161.18])
垢版 |
2019/12/19(木) 19:13:19.10ID:7bTJNhmPM
攻殻機動隊は？
2019/12/19(木) 20:08:23.64ID:Gv7/QyPZ0
>>725
アニメという時点でダメですね、紙の本を読みなよ
727デフォルトの名無しさん (ﾜｯﾁｮｲ 2154-BqQa [180.235.0.69])
垢版 |
2019/12/19(木) 20:36:41.48ID:2pi3DA5F0
コミックです。。。
2019/12/22(日) 12:35:04.23ID:Ens8Pa2w0
pythonの入門書を終えてtensorFlowとかkerasとか学びたいんだけど、
よい入門書教えろください。 orz
2019/12/22(日) 13:30:25.72ID:AF24n/5l0
>>728
いきなり深層学習フレームワーク触るより深層学習の基礎勉強しなさいよ
つ　ゼロから始める〜
2019/12/22(日) 13:47:20.09ID:QqTXpvNUM
せんせー、pythonの文法知ってるだけの人がいきなりゼロからはじめるやって分かるんですかー
2019/12/22(日) 13:50:53.01ID:AF24n/5l0
tensorflow触ったって理屈何も分からんでしょ
2019/12/22(日) 14:19:38.73ID:sLfMPx200
tensorflowに触ってごらん、AIだよ
2019/12/22(日) 14:24:41.20ID:Ens8Pa2w0
>>729
説明不足でした。
ニューラルネットで修士号とってますが、
全然関係ない分野で働いてたので、
プログラムのリハビリ状態。

統計学と昔の機械学習は理解しているので、
新しいトピックと実際の動かし方を学びたい。
2019/12/22(日) 14:32:55.35ID:fEmGBg4L0
統計学は応用数学だが
機械学習に数学はいらない
2019/12/22(日) 14:38:25.43ID:D2xqHNpK0
>>734がｲｲ（・∀・）こといった！
2019/12/22(日) 14:54:20.51ID:jKm3tCWya
何をどう調べてどこまで身につければ十分なのかを自力で把握できなければダメ
何も知らない中学生・高校生ならまだしも、大学出た社会人が「何から学べばいいか？」とか聞くこと自体がアウト
2019/12/22(日) 15:02:08.75ID:Ens8Pa2w0
いや、Tensorflowの全体像を知るための定番の入門書を知りたかっただけなんですが・・・。
2019/12/22(日) 15:13:24.42ID:MAO/zmGQ0
>>733
「scikit-learnとTensorflowによる実践機械学習」などどう？
2019/12/22(日) 15:40:47.34ID:tyzf2bxBa
>>737
TensorFlow2.0やりたいなら本はほとんどない
これから2.0しか使わなくなるから今ある1.0の本を読むべきかと言うと微妙
2019/12/22(日) 15:55:54.03ID:Ens8Pa2w0
>>738
ありがとうございます。チェックしてみます。
2019/12/22(日) 15:58:04.45ID:Ens8Pa2w0
>>739
なるほど。
現在2.0を学ぶんなら洋書ということになるのでしょうか？
ひょっとして、洋書もまだ出てなくて、ネットで情報を漁るしかないのかな・・・。
2019/12/22(日) 16:15:13.33ID:kqUBoQ4ga
pytorch開発入門が良い
2019/12/22(日) 16:35:38.25ID:Ens8Pa2w0
>>742
pytorchなんてものもあるんですね・・・。

Scikit-learn
Tensorflow
dlib
PyTorch

どれから手をつけるのがいいんでしょう？
2019/12/22(日) 16:36:54.74ID:Ens8Pa2w0
修士のときはアルゴリズム系の研究をしていて、
あの頃は、みんな一からC言語でコード書いていたから、
完全に浦島太郎状態だなぁ。
2019/12/22(日) 18:28:11.78ID:AF24n/5l0
>>743
sklearnでいいんじゃない？
仕事内容にもよるけど
2019/12/22(日) 18:45:14.82ID:Ens8Pa2w0
>>745
入門書ではsklearn使ってましたね。
とりあえず直近の回帰分析とかレベルだとこれで十分なんですよね。

ただ、流行りのDeepLeariningとかも学んでみたいという欲が出ているのが抑えがたい。
2019/12/22(日) 21:16:41.90ID:tA8JsD2t0
使い物にならない頭の固い浦島太郎
2019/12/22(日) 22:11:05.54ID:Ens8Pa2w0
ライブラリ比較サイトで勉強してきました。
直近のしごとはsklearnで事足りそうだし、
Deep　Learningとかの勉強はPytorch使ってみようかと思います。
Tensorflow＋Kerasも気になるけど、Tensorflow2.0の情報が出てから勉強したほうが、
効率良さそうな気がしてきました。
2019/12/23(月) 00:31:24.07ID:Aom+GboU0
>>741
洋書もほとんどないと思うよ
公式のドキュメント読み込むのが良いと思う
750デフォルトの名無しさん (ﾜｯﾁｮｲ 1302-4eo+ [27.81.114.231])
垢版 |
2019/12/23(月) 01:08:38.23ID:VfWxGDyD0
修士持ってて5ちゃんで入門書の情報収集かよ
てかネタだよな？
751デフォルトの名無しさん (ﾜｯﾁｮｲ 2154-SJkM [180.235.0.69])
垢版 |
2019/12/23(月) 07:02:49.05ID:C376Wcca0
neural machine translationを試してるけど
ユーザー辞書を指定する方法が分からない

誰か教えて
752デフォルトの名無しさん (ﾜｯﾁｮｲ c101-Rp4x [126.243.47.200])
垢版 |
2019/12/23(月) 07:57:44.83ID:OGRagDqQ0
print('Hello World')
2019/12/25(水) 20:19:54.82ID:1fTZ/ZaM0
>>748
普通にtensorflowやっとけ。
どうせ2.0でても1. 系統との違いみたいな説明しかされんから。
2019/12/25(水) 20:56:16.29ID:aaAP7ysf0
やるならkerasがいいよ
モデル構築部分はほぼkerasと同じ感じに書けるようになった
1.0の計算グラフはユーザーから意識することはなくなったし
それを覚えても意味はないと思う
755デフォルトの名無しさん (ﾜｯﾁｮｲ 4f54-ieRt [180.235.0.69])
垢版 |
2019/12/29(日) 10:57:12.10ID:qpN3wIzL0
NICTはなぜオープンソースで公開しないんだろう

MSやGoogleやFacebookはGitHubにアカウントを持っていて
研究成果を公開しているのに

NICTもそれらのオープンソースを利用しているくせに公開しない
756デフォルトの名無しさん (ﾜｯﾁｮｲ df10-YTym [153.131.102.129])
垢版 |
2019/12/29(日) 11:57:05.52ID:qLN9wlkm0
企業は収益を得る手段がほかにあるけど
研究機関は違うのも関係あるように思う
2019/12/29(日) 12:16:45.48ID:ji21HRv6M
NASAもジャンル違うけど公開してるし、税金投入してるなら国民に見せた方がいいはずだけど
日本の研究機関は遅れてるんかね
情報漏洩と公開範囲を定義して運用出来る頭脳はよ
2019/12/29(日) 13:53:29.86ID:TN/x0Ru2a
現代のIT企業は研究成果をオープンにすることで世界中からフィードバックを貰うことで超速で進化しているんだけど
日本の古典的大企業や研究機関は研究成果を隠すことで他と差別化できると思い込んでいる
GAFA躍進前の時代なら日本式もそれなりに良い方針だったかもしれないが
今の時代ならその隠した研究成果と同等かそれ以上のものがその内GAFAから生まれるだろうから無意味
研究機関がGAFAのようにオープンにした成果を利用した金儲けができないことが問題なのであれば
金儲けできるように日本のローカルルールを変更すればいいだけ
2019/12/29(日) 15:38:02.27ID:Dx5kC0NRM
研究機関はどうかは知らないけど少なくとも世界的に大学は公開してるしな
2019/12/29(日) 15:42:26.10ID:ji21HRv6M
横並びで公開しない暗黙のルールか忖度ありそうね
東大やら普通にイントラにgitlabサーバ建てたりしてた記憶
あの先生より上層部の意識がどうかやねえ
2019/12/29(日) 20:25:01.95ID:by75XqYfM
研究スピードがどうしても海外より劣るから、モノを公開しちゃうと置いてかれるんだよ。
日本の研究機関の風土の問題じゃなくて、研究以外もこなさなきゃいけない人達が合間を縫って研究するしかない
日本の科学技術に対する制度設計の問題。
2019/12/29(日) 20:42:28.27ID:BQX6608C0
国立の研究所が情報隠すのって
NHKが受信料で作った番組を子会社でDVDで商売してるようなもんだね
2019/12/29(日) 21:52:42.26ID:rpIpsCsdM
論文優先で手が廻らないってとこか
ソース公開も楽じゃないすな
2019/12/29(日) 23:28:34.15ID:XnQ2dClWa
論文で十分に公開していると思うが
ソースも欲しいのか
テクニカルレポートが欲しいのか?
765デフォルトの名無しさん (ﾜｯﾁｮｲ 4f54-2tmj [180.235.0.69])
垢版 |
2019/12/29(日) 23:56:49.13ID:qpN3wIzL0
実装公開するのが世界標準
2019/12/30(月) 00:20:35.01ID:KJuDSflP0
Pythonライブラリの公開とかね
日本も大学はしてるとこあるし
767デフォルトの名無しさん (ﾜｲｰﾜ2 FFdf-v1fK [103.5.142.234])
垢版 |
2019/12/30(月) 12:19:39.72ID:WAqdspciF
>>762
国民の財産で私服を肥やすNHKはもっと悪質
2019/12/30(月) 12:43:25.39ID:cr0/Lsx50
公開出来るレベルのソース書けてるか、ライブラリ設計する能力があるか、も問題になりそうだけど、その辺も磨くと、ワイのような暇してる野良開発者もOSSなら協力出来るという特典はあるね
正直、研究系のITの仕事はパートタイムの30年前のサーバ管理みたいなのが多くて手伝えん
769デフォルトの名無しさん (ﾜｲｰﾜ2 FFdf-v1fK [103.5.142.234])
垢版 |
2019/12/30(月) 13:41:37.17ID:WAqdspciF
>>768
ほんそれ
https://megalodon.jp/2019-1225-1001-08/https://qiita.com:443/unico/items/76499d1e20042d929aa1
2019/12/30(月) 15:40:35.39ID:H7m/k27K0
研究者なら本来ソースが見やすいかとか関係ないからなあ
大事なのは数式の理論だし
日本人はごちゃごちゃどうでもいいことでなんくせつけるし
771デフォルトの名無しさん (ﾜｯﾁｮｲ 77dd-2tmj [122.249.73.11])
垢版 |
2019/12/30(月) 15:54:00.51ID:iq/klXJD0
古い日本人の陰湿さだよな結局
2019/12/30(月) 16:12:34.46ID:EbY28/9f0
もう日本は終わりだよ
どうしようもない
773デフォルトの名無しさん (ﾜｯﾁｮｲ 77dd-2tmj [122.249.73.11])
垢版 |
2019/12/30(月) 16:21:10.72ID:iq/klXJD0
産総研、JST、NICT、理研あたりは実装公開しろ
774デフォルトの名無しさん (ｵｯﾍﾟｹ Sr1f-6GiO [126.255.57.149])
垢版 |
2019/12/30(月) 17:47:06.43ID:hVGBluVVr
>>770
んなこたーない
スパゲッティなコード書かれたら検証も追実験もやりにくくなる
機械学習の論文の再現性がないのは大きな問題になっている
2019/12/30(月) 17:47:44.68ID:8pRHoXtUa
研究報告の本質は再現性の有無を確認してもらうことだ
機械学習分野で言えば都合のいい学習データ、テストデータを使っていて実用上そんな状況あり得ないとか、ハイパーパラメータどう決めたのかとか疑おうと思えばいくらでも疑える点は出てくる
それを払拭する唯一の方法は実際に書いたソースそのものを出すこと
そのソースは最早論文の一部なのだから書いた人にしか分からない滅茶苦茶なものを公開して「公開したのだからこれでいいだろ」などというのはあり得ない
776デフォルトの名無しさん (ﾜｯﾁｮｲ df10-YTym [153.131.102.129])
垢版 |
2019/12/30(月) 17:58:08.77ID:U5SCa4jH0
>>775
ソースコード出しても他のデータでの
汎化誤差が小さいかどうか判らなくね？
2019/12/30(月) 18:04:19.52ID:cr0/Lsx50
STAP細胞はありまーす
2019/12/30(月) 19:15:55.84ID:tmdGEa4Zd
stap細胞はありました。
2019/12/30(月) 22:05:07.58ID:lxiCJ2Yf0
企業もIT云々と言われた時代から金を掛けないし人を育てようともして無かったんで伸びないだろ
AIについてソフトバンクの孫が日本は遅れていると吠えてたけどまともな人材すら流れて来てないんじゃないか
企業にとっては若者をいかに騙して利益を吸い取るかっていう分野だろう
日本ではIT土方より土方の方が将来性ある
780デフォルトの名無しさん (ﾜｯﾁｮｲ ef1d-uaPE [143.189.31.12])
垢版 |
2019/12/30(月) 23:34:55.91ID:HsGQHO6z0
stanとかPyMCって明らかに統計解析向きでシステムに組み込みづらいけど、
明らかにNNよりベイズの枠組みで変数間の関係を記述する方が優れているので、数学弱者でも自力でアルゴリズムを導出する事なく、kerasみたいにシステムに組み込めるようになる日は来るんだろうか。
2019/12/31(火) 03:09:29.79ID:nxNHwLJH0
研究者のコードは糞で見てられない。
R&D何年かやってたけど、もう関わりたくないなぁ
2019/12/31(火) 04:10:23.19ID:RM1+Cid30
人に読ませることは重要ではない。
読めない奴は置いていけばよい
確固たる結果が付属する理屈があること。それさえあれば自然と読む人が必ずいる。
2019/12/31(火) 05:43:20.17ID:nxNHwLJH0
情報系の研究はソースコード公開してても読むやつほぼいないよ
バグとかそのまんまで放置されてる
動くかどうかすら怪しいから研究の副産物触るのは嫌い
2019/12/31(火) 08:04:33.96ID:NUJAOpc70
動かなかったら研究を追試できないと文句を言えばいいし
ぐちゃぐちゃコードで動けば追試できるしリファクタリングもできる
785デフォルトの名無しさん (ｵｯﾍﾟｹ Sr1f-6GiO [126.255.57.149])
垢版 |
2019/12/31(火) 09:51:08.49ID:rB5IKPkdr
>>782
そして誰もいなくなった
786デフォルトの名無しさん (ｵｯﾍﾟｹ Sr1f-6GiO [126.255.57.149])
垢版 |
2019/12/31(火) 09:52:45.34ID:rB5IKPkdr
>>783

> 情報系の研究はソースコード公開してても読むやつほぼいないよ

どうやって調べたの
2019/12/31(火) 11:11:19.86ID:9r6RBOcwM
たしかに酷いコード見るなあ
1関数1ファイルで何百行もあってif
文が大半のとか
リファクタリングしてあげたいけど、作者が読めなくなりそうで躊躇
2019/12/31(火) 12:51:42.15ID:cUwK5JbL0
ソフトバンクの損って節税（脱税）と投資失敗で話題の人か
2019/12/31(火) 13:10:46.49ID:K5ePzvxLa
>>782
その真逆でとことん人に読んでもらう・理解してもらう環境を整えることを追求した結果が今の世界的IT企業の躍進に繋がっているんだけど
2019/12/31(火) 13:20:30.79ID:RM1+Cid30
読む奴は存在すると言ってるだけ。
有益ならばちゃんと拾う
791デフォルトの名無しさん (ﾜｯﾁｮｲ 4f54-2tmj [180.235.0.69])
垢版 |
2019/12/31(火) 13:56:00.88ID:NUJAOpc70
日本の論文だけなんだよ実装がないのって
海外のは下の脚注にgithubで公開してるぜとある
2019/12/31(火) 15:39:29.45ID:K5ePzvxLa
機械学習分野なんて玉石混交の論文が日々大量に出回っているのに読みやすさを無視して「有益なら読む人はいるだろ」
という態度で書いたものを読んでもらえるのなんて既に実績上げているごく一部の人だけなんだよな
2019/12/31(火) 21:47:08.95ID:+hXuYToDd
くっだらないね
だから読むっての
2019/12/31(火) 23:51:33.77ID:a+xjNkxx0
>>782
人が読めないのは１００歩譲っても自分でも読めないとか言い出す馬鹿が多いからな。
それ根本的にソースが糞ってことだから。
2020/01/01(水) 00:51:57.38ID:EAfwe2HZM
論文読まないけどソース読むよ
2020/01/01(水) 03:50:18.57ID:Bw/I0Y2Fa
ソース公開しないのは発展性がない論文だからだよ
要は書き逃げ。そこから次々に論文が出てくるようなら
否応ざるにコードもちゃんと書かなければいけなくなる
それをしないということはその論文はゴミ、あるいは捏造
2020/01/01(水) 08:35:14.27ID:2Yvb+gk50
その判断は読者がするので
とにかく公開すればいい
798デフォルトの名無しさん (ﾜｯﾁｮｲ 6b54-hZl1 [180.235.0.69])
垢版 |
2020/01/01(水) 11:06:21.99ID:2Yvb+gk50
ハーバード大のテキストは公開されてる
https://drive.google.com/file/d/1VmkAAGOYCTORq1wxSQqy255qLJjTNvBI/view
2020/01/01(水) 12:49:32.22ID:Bw/I0Y2Fa
まず、ソース公開は、業績にならないからな
次に、公開しない論文は自らゴミと認めていることでもある
どうせ使う人はいないだろうという意味合いもある
2020/01/01(水) 13:02:33.72ID:R7AcXQfB0
ソースより醤油
2020/01/01(水) 15:35:59.56ID:R/r7VkS4M
論文書いてる人はソース公開されないと実行できないとかいうレベルの人向けに書いてるわけじゃないんだぞ
2020/01/01(水) 15:44:55.51ID:EAfwe2HZM
追試しやすくなるから、やましいことがないならソースも公開した方がモテると思うよ
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。