【統計分析】機械学習・データマイニング19


機械学習とデータマイニングについて何でもいいので語れ若人

※ワッチョイだよん

次スレ立ての際は、一行目冒頭に
!extend:on:vvvvv:1000:512つけてね

■関連サイト
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/
DeepLearning研究 2016年のまとめ
http://qiita.com/eve_yk/items/f4b274da7042cba1ba76

■前スレ
【統計分析】機械学習・データマイニング17
http://mevius.5ch.net/test/read.cgi/tech/1502032926/
【統計分析】機械学習・データマイニング18
http://mevius.5ch.net/test/read.cgi/tech/1507807291/
VIPQ2_EXTDAT: default:vvvvv:1000:512:----: EXT was configured

日本の大企業で機械学習やってますと言ってるところはどういう環境で開発してるんだろう?

490デフォルトの名無しさん (ワッチョイ 2ed3-BmB+)2018/06/14(木) 21:04:58.22ID:/560Bghv0
一口に機械学習といってもいっぱいあるけどね。

491デフォルトの名無しさん (マクド FF29-4dYe)2018/06/14(木) 21:55:19.69ID:IoiZhxx5F
自動制御システムを機械学習という人たちもいるからな

492デフォルトの名無しさん (マクド FF29-4dYe)2018/06/14(木) 22:08:55.21ID:IoiZhxx5F
>>485
マセマみたいな簡単な参考書で、線形代数、微分積分、統計学の知識を大学一年生レベルまで習得
これなら分かる最適化数学、言語処理のための機械学習入門、はじパタ本を読む
プログラミングは、書籍だけで勉強する場合、pythonの参考書を最低五冊
また、英語を勉強して、論文を読めるようにするように

DB、クラウドの知識もほしいし、前処理についても独学しておいた方が採用されやすいだろう
カグルにもチャレンジした方がいいかなあ
あと絶対むずかしい参考書に手を出すな! 絶対だぞ!

493デフォルトの名無しさん (ワッチョイ 711e-/RsH)2018/06/15(金) 06:16:57.25ID:HyyLdHNN0
日本語の情報乏しいのって出版不況と関係あるよな

むかしから日本は共有知を軽視してきただろ
今更なに言ってんだ

495デフォルトの名無しさん (ワッチョイ c68a-m0US)2018/06/15(金) 10:14:10.38ID:Tnyfgv4M0
C言語入門ならいっぱいあるだろうw

496デフォルトの名無しさん (アウアウカー Sa69-vNYU)2018/06/15(金) 10:19:15.58ID:bwzthQROa
>>492
ご丁寧にありがとうございます
自宅学習がまるでできないのでまずは基本情報を取って自信をつけてみます

「〇〇入門」は山ほどあるのにその先を教えるものになると日本語の情報は激減するよな

498デフォルトの名無しさん (ワッチョイ c2dc-/RsH)2018/06/15(金) 14:10:20.02ID:qvV6yliS0
どうせ、価値ある一次情報は国外からしか出ないから、まず、英語で良い。

新井女史が人工知能の最高峰な国、Japan。
https://booklive.jp/review/list/title_id/493315/vol_no/001

499デフォルトの名無しさん (ワッチョイ e58a-m0US)2018/06/15(金) 14:36:03.53ID:jtdMvlsO0
新井女史w

500デフォルトの名無しさん (アウウィフ FFa5-kbLG)2018/06/15(金) 16:50:32.46ID:OdSPYtBqF
ステマ乙

501デフォルトの名無しさん (ワッチョイ 45cb-PCgz)2018/06/15(金) 20:40:24.15ID:qwB/4bSI0
アナリストの履歴書、シティが高く評価する言語は「Python」
https://www.bloomberg.co.jp/news/articles/2018-06-14/PABKZ66K50XU01

今はやりの言語

502デフォルトの名無しさん (ワッチョイ 3123-93VN)2018/06/15(金) 21:30:14.68ID:6pyG9v6n0
>>469
同意。そこらへんのことを本当に知らない人多すぎ。

503デフォルトの名無しさん (ワッチョイ 861b-ehQV)2018/06/15(金) 21:46:10.67ID:NNc+3MLQ0
で、そういう人は具体的に誰?

504デフォルトの名無しさん (スッップ Sd62-LJYG)2018/06/15(金) 23:05:51.25ID:CTrwO2f2d
まあぶっちゃけ、自分が思い浮かぶ程度の手法は、エクセル先生でできちゃうし、実務上はそれをわざわざRやらPythonやらでやるインセンティブもないわけで。
ロジスティック回帰とかそこら辺になりゃ意味あるがあまり機会がない。やらんでなんとなく過ごしてる自分が悪いだけ疑惑はあるけどw

https://twitter.com/ikasanma/status/1007588876251160582

流石にEXCELとPythonは使い道が違いすぎる

506デフォルトの名無しさん (アウアウエー Sa4a-kbLG)2018/06/16(土) 06:02:56.78ID:xpvZKcICa
>>501
背景の緑のマトリックスみたいな画像がpython関係なくてダサすぎる

507デフォルトの名無しさん (ワッチョイ 427f-gP5V)2018/06/17(日) 12:29:43.65ID:eEWfV0tw0
Excelは昔から統計分析でも使われてきたし変ではない。

今更と言われるくらいにパイソンも昔から存在したが、注目されるほどではなかった。
パイソンがデータ処理に向いているというのは最近流布されるステマの一種だろう。
インタプリタだからパイソンはデータセットが肥大化すると遅くなるよ。

シティー銀行がデータ分析や人工知能しようが、世界は常に変わるからエキスパート
システムのようなアプリケーションは成功しなかったし、株価予測は原理的にランダムであり
予測不可能なのでAIなどやるだけ無駄。

データ量肥大化でpython処理が重くなるというならEXCELの場合重くなるどころか開くことすらできなくなるけどね
むしろEXCELとの比較だけで言えばpython使うなら元データを分割して読み込みなど工夫すれば原理的には元データ量に関する限界はなく処理時間もデータ量に比例するだけ

Excel推しの人ってみんな言ってることがどこかズレてる印象

510デフォルトの名無しさん (ワッチョイ 42ff-l11B)2018/06/17(日) 14:50:00.70ID:vO1yzD/10
無理矢理EXCELでやろうとする奴ほんとアホ

というか、EXCELしか使えないからそれしか選択肢ないんだろう

512デフォルトの名無しさん (ワッチョイ 2e8a-4dYe)2018/06/17(日) 18:22:10.11ID:G56WHeGt0
まず、エキスパートシステムは部分的には成功しているぞ
成果が世の目に触れにくいだけだ

そして、パイソンの株式予測は、データが増えれば増えるほど成功する
あんなの最適化数学の延長で十分

513 ◆QZaw55cn4c (ワッチョイ 2260-m0US)2018/06/17(日) 22:16:10.89ID:mtjEdwIk0
>>512
>株式予測は、データが増えれば増えるほど成功する
株価が上昇するか、それともアンダーウェートか、それだけでも判定できるのなら大いに役に立ちます!
勝率はどれくらいですか?

株価予測は簡単じゃねえわ
当たり前の話なんだが過去は幾らでも説明できるんだけど
未来は「まだおきていない」ので分からんのだ

515デフォルトの名無しさん (ワッチョイ 2e81-O6T7)2018/06/18(月) 02:51:16.57ID:3J8E5iEa0
株価は、あらゆる情報を用いたとしても、日経平均などの平均値を超えられないという、予想が信じられてるんだろ。
日経平均を上回る圧倒的パフォーマンスをだしたとしても、一時的であってたとえば100年、1000年とか長期で測れば平均値に落ち着くといった。

516デフォルトの名無しさん (ワッチョイ 2e81-O6T7)2018/06/18(月) 03:03:16.56ID:3J8E5iEa0
株価予測が可能かどうかに関する理論・仮説はこれだ。


効率的市場仮説 - Wikipedia

金融経済学における効率的市場仮説とは、市場は常に完全に情報的に効率的であるとする仮説。
効率的市場仮説に従えば、株式取引は株式を常に公正な価格で取り引きしていて、投資家が株式を安く買うことも高く売ることもできないということになる。
すると、銘柄の選定や市場のタイミングから市場の平均以上の実績を得るのは不可能である。

チリジ・マルワラは、市場に人工知能を搭載したコンピューターのトレーダーが増えるほど市場は効率的になっていくため、
人工知能が効率的経済仮説の理論の適用可能性に影響を与えるのではないかと推論した。

ウォーレン・バフェットは効率的経済仮説に反論していて、特に注目に値する1984年のプレゼン「The Supervisers of Graham-and-Doddsville」において、
世界最高レベルの運用投資会社で働く株式投資家の圧倒的多数は、投資家の成功は運で決まるという効率的経済仮説の主張に反論していると述べた。

マルキールは、プロのポートフォリオマネージャーの3分の2が(1996年までの)30年間にわたってS&P 500指数を越える実績を出せていない
(しかも、ある年に実績が高い人とその次の年に実績が高い人の間の相関は殆どない)ことを示している。

517デフォルトの名無しさん (ワッチョイ 2e81-O6T7)2018/06/18(月) 03:14:04.36ID:3J8E5iEa0
自分の考えは、株価予測は不可能という効率的市場仮説はほぼ正しいとおもっていて。
ビル・ゲイツとか、孫正義など個人・組織とかの勝手な思い、欲求で大金が動いたとき、
市場の効率性が崩れ、その瞬間だけはチャンスありという理解。
個人の思いは普通は予測できない。本人自身なら分かってるが・・・
しかしそうすると金持ちは大金動かせて、その正確な予測も自身はできてるので常に稼げることになるがどうか。

518デフォルトの名無しさん (ワッチョイ 711e-/RsH)2018/06/18(月) 04:10:47.56ID:KFMsWwLA0
株価に影響を与える全てのパラメータがあればできる

519デフォルトの名無しさん (ワッチョイ 9d7f-zq67)2018/06/18(月) 04:43:25.86ID:Wq9Wtbin0
すまんスレチだが助けてくれ
JavaやろうとJDKをダウンロードしたんだが
インストールパッケージを開くことが出来ませんでした。
パッケージがアクセスできることを確認してください。
またはアプリケーションベンダーに問い合わせ、このパッケージが
有効なwindowsインストラーパッケージであることを確認してくださいと
書いてある。
どうすればJDKを起動できるんや?

520デフォルトの名無しさん (ワッチョイ 42b0-3yTJ)2018/06/18(月) 08:54:34.52ID:VHeWlkm20
>>519
オラクルのサポート契約結べばすぐ解決するよ!

521デフォルトの名無しさん (アウアウウー Saa5-Kcuf)2018/06/18(月) 11:29:19.22ID:nG54PYo6a
>>495
pythonも増えているぞ。

522デフォルトの名無しさん (アウアウウー Saa5-Kcuf)2018/06/18(月) 11:39:09.39ID:nG54PYo6a
>>501
FRBのモデルはJuliaで作られているのにな。日銀はmaltab。pythonすらでない。

523デフォルトの名無しさん (ワッチョイ 428a-m0US)2018/06/18(月) 12:36:49.05ID:RS0NJmBy0
>>519
まず正確な情報を書く

524デフォルトの名無しさん (ワッチョイ 428a-m0US)2018/06/18(月) 12:37:22.66ID:RS0NJmBy0
スレチかw

525デフォルトの名無しさん (ワッチョイ 2e81-O6T7)2018/06/18(月) 13:02:49.40ID:3J8E5iEa0
>>516
考えてみたところ、日経平均やNYダウや為替レートなどいろいろな要素が多く入ってる程、予測できない一方で。
これに反対してるウォーレン・バフェットの理屈も理解できるな。
特に社長個人に注目して、信念とか哲学とか聞いてみるとか、会社見学して社員教育や社員の熱意、やる気を確認するなどすれば、
いずれ(平均以上に)成長できる会社を発見するのはできそうだからな。
そうなると株価予測というより成功者を見つける事になってくるが、これは同一でいいのか。

526デフォルトの名無しさん (ワッチョイ c68a-m0US)2018/06/18(月) 13:50:29.40ID:gjMrKsaC0
>>525
専スレ立ててそこでやれよ

527デフォルトの名無しさん (ワッチョイ c2dc-/RsH)2018/06/18(月) 15:08:02.72ID:f9z9lWG50
これが、全てな気がする。
>>株価に影響を与える全てのパラメータがあればできる

株の予測に限らず、必要なデータの種類や指標が解らないと、AIは作れない。
対象ジャンルにAIエンジニアが、逐次精通していくのは無理ゲー。

528デフォルトの名無しさん (ワッチョイ ad8a-m0US)2018/06/18(月) 15:13:26.33ID:HpHTLryq0
アメリカのインフレとその後の崩壊に既に仕込んであるのだろうな大手は

529デフォルトの名無しさん (ワッチョイ 711e-/RsH)2018/06/18(月) 17:28:18.09ID:KFMsWwLA0
データの性質をよく知ってるほど強い
どんな前処理したらいいかわからんし

530デフォルトの名無しさん (ワッチョイ c28a-m0US)2018/06/18(月) 17:43:33.58ID:3XXtW2fu0
上海市場なら儲かるかな

株価に影響を与える全てのパラメータがあればって
それあなたインサイダーですわ

確かに、原理的にあらゆる情報があれば予測できるとしても、現実的にはオープンにされたデータのみから予測できなければ合法に使えないな

533デフォルトの名無しさん (マクド FF29-4dYe)2018/06/18(月) 20:41:34.22ID:qM6KyGSOF
株価予想、デイトレード的なものに機械学習を導入するだけなら
本当か嘘かまでは分からないけどアメリカの方で既に浸透しているらしいな
ネットニュースでちょくちょくそういう話が流れてくる
まだ無理なのは長期の予想の方だろう

534デフォルトの名無しさん (ワッチョイ 825d-m0US)2018/06/18(月) 21:14:47.28ID:K8OG2zS60
「こういうデータがこう動いたら株価はこうなる」みたいに明示できるなら機械学習なんて不要だろ
そうじゃなくて、全部AIに任せて「理由は分からんけど色んなデータからこれが買いだ」みたいな
説明するとアホみたいな活用が本来の機械学習の強みだろ
「理解」は放棄して「活用」だけするのが正しい姿だ
「株価の上下」という出力を変えて、「株価の変動にどういった要素が組み合わさったか」という部分を
分析するのは可能かもしれんが、それは経済学に寄与することはあっても株取引には不要な要素

535デフォルトの名無しさん (ワッチョイ 457f-zq67)2018/06/18(月) 22:25:42.04ID:KBSMs3cJ0
>>519だがwindows10でJDKをダウンロード、ダウンロード後保存されたJDKを
開こうとしても上記のような文が出てきて開けない
ちなみにウィルソフトは一旦OFFにしたり、オフラインでのダウンロードもしたし
Edge以外でfirefoxを使ったりしてもダメだった

536デフォルトの名無しさん (ワッチョイ ddc3-/RsH)2018/06/18(月) 22:29:14.34ID:t1Z/cGuQ0
パターン認識と機械学習(PRML)の輪読資料を公開
2018年06月18日 soneoka education, news, readings
C.M.ビショップ他著「パターン認識と機械学習」の輪読資料の一覧を当サイトで公開しました。
詳細はこちらから

http://deeplearning.jp/deep-learning-day18-2/

537デフォルトの名無しさん (ワッチョイ ddc3-/RsH)2018/06/18(月) 22:34:16.76ID:t1Z/cGuQ0
実データで学ぶ人工知能講座(AIデータフロンティアコース)
http://learn-ai.org/about

2018-06-18
平成30年度後期の募集につきましては講座について(応募方法)に掲載しました。
募集期間は7/1(日)〜31(火)となっています。

538デフォルトの名無しさん (スプッッ Sdc2-o9di)2018/06/19(火) 05:43:37.34ID:xRFDeg/gd
宣伝乙

539デフォルトの名無しさん (スップ Sdc2-LJYG)2018/06/19(火) 06:44:01.96ID:FfuFPZscd
>>536
いいやん、これ

新着レスの表示
レスを投稿する