【統計分析】機械学習・データマイニング29

2020/08/20(木) 09:16:43.41

!extend:on:vvvvvv:1000:512
!extend:on:vvvvvv:1000:512
↑すれたてる毎に１行ずつ減るので、減ってたら３回に増やしてたてること。

機械学習とデータマイニングについて語れ若人

＊機械学習に意識・知能は存在しません。
　　人の意識に触れたい方はスレ違いです。

■前スレ
【統計分析】機械学習・データマイニング28
https://mevius.5ch.net/test/read.cgi/tech/1588293154/
-EOF-

VIPQ2_EXTDAT: default:vvvvvv:1000:512:: EXT was configured

2020/10/29(木) 18:38:15.90

ニューロファジーブームの頃かな？

2020/10/29(木) 20:03:12.16

新しい発見がないからでは？

2020/10/29(木) 20:28:54.26

誤差逆伝播法とか無理やりですやん

2020/10/29(木) 20:46:40.34

漢字は一文字の情報量が多いからTwitterでは欧米より有利
メリットはそれぐらいかな

2020/10/29(木) 22:48:53.78

笑

2020/10/30(金) 00:48:24.98

Pythonではじめる機械学習購入してみた
この本って写経した方が良いのかな
どちらかと言うとコードよりは内容の方が重要？

2020/10/30(金) 07:06:29.72

好きにしろ

2020/10/30(金) 10:46:52.83

>>443
仕組みとしてはアルゴリズムであるから
C++でもJavaでもどの様な言語でも移植して書けるという目を持って読み進めると良い

2020/10/31(土) 23:53:14.25

誰かガウス過程詳しい人いないんか？

2020/10/31(土) 23:57:56.55

ピップエレキバン

2020/11/01(日) 07:47:19.90

いる

2020/11/01(日) 10:41:46.29

はい

2020/11/01(日) 13:33:39.40

>>446
これが出来たら凄いぞ為替予測をガウス過程でやってるんだがお勧めのカーネルある？ガウスカーネル+ホワイトカーネルマターンカーネルいろいろ試したんだが１分置きに予測がころころ変わるちなみに１分足で予測したいまあ無理を承知で効いてるんだが Alでランダムウォークを予測するのはいろいろ検証したが無理だったガウス過程は内挿は得意だが外層は苦手っぽい印象

2020/11/01(日) 13:50:40.42

AIにテクニカル分析をさせる意味ってあるの？

なんか相場に影響のあるニュースを入力にするなら意味あるんだろうけど。

2020/11/01(日) 13:53:15.56

それ出来たらGSやgoogleあたりがウハウハしてるはずだもんな

2020/11/01(日) 13:56:19.82

外挿の妥当性が保証できないのは統計の基本だね

2020/11/01(日) 13:59:02.30

>>451
自動売買だよ
まあAl単独では無理で移動平均やオシレーターでAlに判断させるアルゴリズムでやってる
それなら勝てる
ランダムウォークに強いガウス過程なら勝てるかもって思ってたけ難しいね

2020/11/01(日) 14:00:49.89

勝てるということは、テクニカル分析には意味があるということですか。

2020/11/01(日) 14:35:40.84

現実は高速回転で計算してるだけで
時間差で勝ってるだけの気がします

2020/11/01(日) 15:03:21.62

ちなみに相場全般ランダムウォークじゃないらしいぞ

2020/11/01(日) 16:00:00.22

>>455
意味が有ります
1分足のテクニカルで勝てますから

2020/11/01(日) 16:01:54.82

>>457
相場は時系列ではランダムウォークではないですが時系列を無視するとランダムウォークで間違いないですブルックシェールズ方程式を見てみなさい

2020/11/01(日) 16:05:46.46

>>459
ちなみに移動平均ーcloseの価格で見てみなさい
ランダムウォークになっています

2020/11/01(日) 16:07:15.52

>>459
それ間違ってたわー論文なかったかい

2020/11/01(日) 16:08:54.37

>>459
ブラック?ショールズ方程式だろ

2020/11/01(日) 16:12:21.70

>>462
どうでもいいだろそんなん
酒に酔ってるから勘弁して

2020/11/01(日) 16:12:29.06

10位の利益を5回くらい続けて
200位の損失を出したら
トータルでは150位の損失になるよな

2020/11/01(日) 16:15:41.15

価格には全ての情報が反映される説と
そうじゃない説があったような

反映されないなら反映されるまでの間に適切な取引をできたら反映された時の価格変化で利益を得られるはず

具体的にはインサイダー情報を知っていて売り買いする
インサイダー取引はルールで禁止されているけどな

2020/11/01(日) 16:17:00.08

>>465
それはダウ理論ねランダムウォークには意味ないから

2020/11/01(日) 16:51:55.13

ランダムウォークを極めたヤツいないの？
為替相場なんてブラウン運動だぞ

カーネルを教えてくれ！！！

2020/11/01(日) 17:22:02.61

今日は寝なさい

2020/11/01(日) 18:44:15.86

お前ら自称かいしょっぺーの
俺はデータさいえンチストだから解はもってっるがなショッペー奴らやな分かってはいたが

2020/11/01(日) 18:47:30.61

えらそうな事語んなゴミ屑ども

2020/11/01(日) 18:48:40.41

わーすごい

2020/11/01(日) 18:51:09.07

>>463
お金はいくら用意できる？

2020/11/01(日) 18:58:42.19

まあいいお前らがゴミ屑だと分かっただけでも意義はあった

2020/11/01(日) 19:37:16.12

ごめんねー

2020/11/01(日) 20:57:57.21

酔っ払いの愚痴でした、解散

2020/11/01(日) 22:25:20.34

>>466
企業の業務提携とか資本提携とか明らかにランダムウォークではないだろうけどね
ランダムウォークでちょこちょこ稼いでも大きな変化で大損したら利益は無くなってしまう

2020/11/01(日) 22:28:32.86

本当にランダムウォークなら時間を決めて売り買いすると損益ゼロになるんじゃないか？
取引手数料分だけ損するだろ

買った時点の価格から等しい確率で価格が上下するだろうから損失も利益も多数回繰り返して足し合わせたらゼロになるんじゃないか？

何度も測定して誤差を小さくするみたいな感じ

2020/11/02(月) 20:08:16.17

デルタヘッジで分散でかい時に利益出るようなポジション取るってのが一応の解なわけだが。

2020/11/03(火) 07:40:03.78

ポートフォリオ理論はある
組合せて同じリスクでも期待リターンが大きくなるようにする方法

2020/11/03(火) 07:42:51.09

>>466
効率的市場仮説と言われている事

2020/11/03(火) 12:21:45.28

〇株価変動はランダムウォークである
Ｘ株価変動をランダムウォークと見做している人もいる

2020/11/03(火) 12:22:15.45

間違えた、〇Ｘが逆でした orz

2020/11/03(火) 13:34:36.67

株やってる人って個人でやってる人？それとも仕事で？

2020/11/03(火) 19:28:47.96

ファットテイルを覚えとけよ

2020/11/03(火) 20:22:27.75

もういいお前ら機械学習なんて子供のおもちゃにすぎないだろ俺が十分分かってる
為替の未来すら予測できない事なんてな

2020/11/03(火) 20:28:50.86

経済の予測は地震予知とは段違いに難しい

2020/11/03(火) 20:56:20.40

ハァァお前がデータの頼り過ぎた人間の末路だわ
俺は解を持っているwww
ばかえの一つ覚えのLSTMだの Bertだのあほの極みだな

2020/11/03(火) 21:23:14.71

肥えたしっぽ

2020/11/03(火) 22:41:03.27

久々にオライリーの本読んでるけど
ついにまともな訳になって来たんだな
「出たー！！意味不明！！」とか実況しながら読むのが醍醐味なのに
この分野の発展がいろんなところに浸透している

2020/11/04(水) 00:21:28.84

機械学習というのはあくまで何らかの仮定をした上でその仮定の枠内で最も妥当な結果を推測しているに過ぎない
仮定が間違っていればどれだけデータを突っ込んでもまともな結果は出ない
そして為替変動の予測にどんな仮定を置けばいいかなど誰にも分かっていない

2020/11/04(水) 01:40:10.28

>>490
画像でも音声でもその仮定は誰にもわかっていないが
それなりの性能を出している

2020/11/04(水) 02:10:17.46

>>489
なってないよ
機械翻訳使って手直ししてるだけ

2020/11/04(水) 02:47:16.07

>>491
それは流石にディープラーニング以前の画像認識や音声認識手法を無視しすぎでは

2020/11/04(水) 05:56:57.08

>>490
感想じゃん

2020/11/04(水) 10:24:01.98

売電おめ
株全力売り
さようなら

2020/11/04(水) 10:26:09.16

>>493
仮定を置けるんならディープラーニング以前の画像認識や音声認識手法が圧勝だよな

2020/11/04(水) 10:32:35.95

頑張って株価の一定期間のチャートをローソク足も含めて辞書型にして
この期間の前にこんな変動してたら買
い
既に株を持っているなら、この変動をしてたら売り

とかでクラス分けか
これだけだとバイオプになっちゃうな
上昇する確率に購入額を相関付ける

後はBERTでも何でもいいが、FRBや各国首脳や大臣の発言で株価に繋がるものがあったら
とりあえずアラートをPC画面に表示する
将来的にはそれも売買に繋げる

>>454はそういうのやりたいのか

でも大統領選とかなら自動売買よりとりあえずニュースとチャート見てたほうがいいかな

2020/11/04(水) 10:49:12.87

相談風技術自慢

2020/11/04(水) 12:03:02.68

今度からスレタイ確認してからレスしような

2020/11/04(水) 14:20:11.13

対象の各標本を識別できる空間での位置によって分類する
その境界線を見つけることが分類の学習だと思う

2020/11/04(水) 14:42:36.45

理想的なコインの場合はどう考えるの？
P(head) = P(tail) = 0.5
で、どんなに頑張って条件付けしても変わらないけど

2020/11/04(水) 15:03:56.06

>>501
何をする目的かで変わる
出た結果を分類するのと
結果を予測するのとで違う

2020/11/04(水) 16:21:57.25

>>502
期待値は0.5で固定なわけだけど、目的によって変わるというのはどういうこと？

2020/11/04(水) 17:50:03.02

>>503
目的は何をしたいのかという意味
コインの裏表が0.5の確率で出るという事実や仮定があって
それで？

2020/11/04(水) 18:07:37.80

>>501
目の前にあるのが理想的なコインだと分かっているならそもそもデータを取って何かする必要などない

2020/11/04(水) 18:15:26.39

>>505
計算手法の妥当性を検証するために、既知のパラメータに収束するかといったシミュレーションはよくやるよ。

2020/11/04(水) 18:31:00.49

>>504
目的とは無関係に予測モデルは P=0.5 に収束するよね。
目的によって変わるというのは何がどう変わるのかなと思って。

2020/11/04(水) 19:13:19.35

>>492
いやいや2～3年前発行された本より随分良くなってるわ
機械翻訳の精度が上がったんだろう
昔の奴は英文をDeepLに突っ込んだ方がいいぐらいだが
今出てる奴は内容はともかくまともな日本語になってるわ

2020/11/04(水) 19:18:44.44

>>508
コインの出る目を予測するのか
出たコインの表裏を画像などをもとに分類するのか
など
コインで何をしたいのか

2020/11/04(水) 19:19:53.28

0.5の確率で表裏が出るなら予測は難しいんじゃないかな

2020/11/04(水) 19:21:26.49

分類するなら表だけにある特徴を見つけたら分類できる

2020/11/04(水) 19:54:00.67

>>509
問題設定そのものが変わるって話ですね。理解できました。

2020/11/06(金) 10:37:26.86

機械学習で株や競馬に勝てるわけ無くない？
結果を決定する要因が毎回同じとは限らないし
そういうところもベイズで扱えるの？

2020/11/06(金) 10:42:12.47

株は機関投資家がコンピュータを使って売買している
競馬は独自の方法で利益を上げて税金計算の時に外れ馬券が費用になるか裁判になったのが複数ある

2020/11/06(金) 10:49:41.50

機械学習は過去のデータから何か規則性を見つけて予測を行おうとする
見つけた法則が未来の予測に役立つかは問題による
競馬だといけそうな気もするがFXなんかは無理と言われてる
とにかくあてずっぽうより精度が良いなら何か役立つ法則を見つけられていることになる
あとは損益分岐点を超えられるかどうかだ

2020/11/06(金) 10:56:01.04

売電が勝ったら上がるのか下がるのかさえ嫁んわω

2020/11/06(金) 12:39:21.69

つまり競馬は八百長じゃないってこと？

2020/11/06(金) 12:46:09.68

>>513
ベイズって何か理解してる？
ベイズ統計の枠組みでの機械学習では何らかの考えに基づいて確率モデルを設定し、実測データを最も良く説明するようにモデル内パラメータを調整する
なのでモデル自体が妥当なものでなければまともな結果はでない
要因すら分かっていない事象を上手く説明できそうな確率モデルを設計するのは容易ではない

2020/11/06(金) 13:09:03.54

>>517
八百長があるかどうかは関係しない
単純に過去のできごとと未来との間に相関があるかどうかで予測可能かどうかが決まる
八百長があった方がむしろ予測しやすい可能性もある

2020/11/06(金) 16:24:38.74

競馬予測って馬のデータ（走行回数）少ないのに成り立つものなのかな？
中央だと生涯の出場回数が10回以下の馬がほとんどだろうに

2020/11/06(金) 16:31:35.89

馬の顔認識させてオッズ予測するんだよ（）

2020/11/06(金) 16:38:19.07

ちんこ立ち具合を認識して予測

2020/11/06(金) 17:37:33.30

雌は？

2020/11/07(土) 10:20:43.78

照応解析の精度を上げたっていうけど
64.08 → 64.89 とほとんど変わらなくて草

https://arxiv.org/pdf/2011.00948.pdf

2020/11/07(土) 11:33:14.41

>>523
糞

2020/11/09(月) 13:05:07.34

>>415
情報サンクス
今買って読んでるけど胸が熱くなってきた
興奮して今夜は眠れそうにない

2020/11/09(月) 14:17:55.61

数学好きっ子だねえ

2020/11/12(木) 00:56:31.66

>>518
お前カスだなベイズ統計学なんて何年前の話だよ
今はガウス過程がすべて NNなんてパラメータ解析したところで意味なし
カスがベイズ統計学を語んなよw

2020/11/12(木) 01:00:10.14

>>518
それがガウス過程なんだよ

2020/11/12(木) 01:05:47.07

LSTMやAtenntionは言語予測しか通用しない
bertもだまあ俺はMI専門だから勝手にやってろって感じだな

2020/11/12(木) 01:17:07.78

ちなみに機械学習で株予測をする奴がいるがあれはカスだ移動平均とオシレーターのパラスタで勝てる
負ける奴はプログラム能力が無いだけ

2020/11/12(木) 07:35:50.93

>>528がどう間違っているか説明しておくと、
・ガウス過程では誤差分布が正規分布に固定され、各点の相関は自分で決めた分散共分散行列に従う多次元正規分布の範囲内でしか動けないので「ガウス過程がすべて」などとは言えない
・ガウス過程はベイズ統計の枠組みで生成された確率分布の1つでしかなく、ベイズが時代遅れと言いながらガウス過程がすべてというのはおかしい

2020/11/12(木) 07:47:42.40

普段ROMってるけど
喧嘩を止めてもっと優しく教えてくれるといいなぁ

色々と参考にしてます。

2020/11/12(木) 08:59:52.29

miてなに？
mutual information なの?

2020/11/12(木) 11:57:25.78

研究目的のと金目的のが同居してるからな
金目的のは他人を叩くし手の内は垢さんさろ

2020/11/12(木) 11:57:25.78

研究目的のと金目的のが同居してるからな
金目的のは他人を叩くし手の内は垢さんさろ

2020/11/12(木) 11:58:35.46

あれ？変なタイミングでenterしたら
奇蹟の投稿になったっぽい