【統計分析】機械学習・データマイニング29

■ このスレッドは過去ログ倉庫に格納されています
2020/08/20(木) 09:16:43.41ID:Av1Lrhjm0
!extend:on:vvvvvv:1000:512
!extend:on:vvvvvv:1000:512
↑すれたてる毎に１行ずつ減るので、減ってたら３回に増やしてたてること。

機械学習とデータマイニングについて語れ若人

＊機械学習に意識・知能は存在しません。
　　人の意識に触れたい方はスレ違いです。

■前スレ
【統計分析】機械学習・データマイニング28
https://mevius.5ch.net/test/read.cgi/tech/1588293154/
-EOF-
VIPQ2_EXTDAT: default:vvvvvv:1000:512:: EXT was configured
2020/09/15(火) 13:51:33.66ID:QmZZ3OnlM
実際には外的要因があるにしても、モデル上で厳密に論理的に100%は可能
モデルの時点で99.99なら1万人のうち1人は死ぬわけで、それをごっちゃにしたらダメ
2020/09/15(火) 14:41:53.58ID:WdCfMOQya
>>236
いうて前処理はそれなりにキツいだろ
2020/09/15(火) 16:09:14.88ID:RbhxceNU0
>>238
予算は？
2020/09/15(火) 17:13:31.60ID:3cjw9APL0
前処理は営業の能力ないと無理
事業部を横断して調整して
データ分析で必要だからアクセス権くれとインフラや総務系に頼み込んで
プレゼンしてようやく許可得たと思ったら
現場のエンジニアに仕事の邪魔にならないレベルで
スキーマやそれぞれのカラムの使い方教えてもらって
ようやく必要なデータがわかり
その後負荷のかからないSQLを考えて作って
取得してデータ暗号化してクラウドに上げるバッチ作って
それを反感買わないように運用の中で仕込んでもらって
ようやく分析の準備ができる
2020/09/15(火) 17:31:35.43ID:ajW3uGaEM
それはキツイなｗ
2020/09/15(火) 17:50:59.21ID:cXwT1usRa
100％正解出さなきゃ死人が出るような用途に機械学習モデルからの出力をそのまま使おうとするのが間違いなんだよ
2020/09/15(火) 19:12:54.75ID:QmZZ3OnlM
そのまま使わなきゃいいだろ
最悪でも人が死なないようにルールを適用すりゃモデル上は100%死なない
人間にだって法律があるように、最終的にはルールベースの制御は必要
2020/09/15(火) 19:33:26.63ID:4edZO2oiM
AIをAIで制御するんか
250デフォルトの名無しさん (ｱｳｱｳｳｰ Sa9d-3UIE [106.154.137.9])
垢版 |
2020/09/15(火) 19:39:10.79ID:AJWku+Zba
>>241
品質保証=100%だけじゃないでしょ
3σとかあるじゃん
2020/09/15(火) 19:40:51.20ID:WdCfMOQya
結局法律とかルールとか超えなきゃいけない壁が多いからなあ
無難ところだけ実用化というか
252デフォルトの名無しさん (ｱｳｱｳｳｰ Sa9d-3UIE [106.154.137.9])
垢版 |
2020/09/15(火) 19:40:55.07ID:AJWku+Zba
>>248
ルールでも100%はないわ
当てはまらない例外は起こり得る
2020/09/15(火) 21:17:45.73ID:StkEdfN00
人の組織でも監視システムはある
国の三権分立もそう
立法、行政、司法
今のAIシステムは自分で判断して自分で実行してチェック無し
2020/09/15(火) 21:20:05.21ID:RbhxceNU0
ルールに愛でもあるんかｗ
2020/09/15(火) 21:36:46.61ID:kzcgnk9JM
韓非子の霊でも降りてきとるとか
2020/09/15(火) 21:44:03.78ID:vIYZWAt90
昨日品質保証について質問した者です。色々どうもありがとう。
製品は、人命に直接関わらないけど、間接的の間接的にくらいのレベルでは関わる笑

ソフトの品証に掛けれる予算は外注費基本的にゼロ、社内リソース３人月くらい。

皆さんの意見頂いて
製品で実現できるサービスを、誤検知があってはならない順にレベル分けして、上位のものに冗長性というか、フェイルセーフ機能・仕組みを追加する
→その安全性への取り組みを謳った上で、下位のもの含めてサービス全体機能はどしたって100%にはなり得ませんよと説明するくらいかなぁと思ってます

私は営業の立場なんで、「どしたって100%なんてならないんだから！そんくらいわかれよ！しょーがねーだろ！」
みたいな技術の投げやりな姿勢に腹が立って。そんなもんこっちもわかっとるっちゅーねん
2020/09/15(火) 21:56:29.57ID:5uVwOM3u0
品質保証は、予算次第

たいていは予算がないから、品質は悪い。
サービス残業してまで改善する人は、滅多にいない
2020/09/15(火) 22:18:18.65ID:StkEdfN00
>>256
誤りが起きたとして誤りを検出できるのかな？
AIで判定したものが誤りである事を検出するには正解がわからないと誤りであると検出できなそうだけど
正解は不明だけど誤りは分かる？
通信とかでのチェックサムみたいな誤り検出は送る側が正解を知っているから可能だし
2020/09/15(火) 22:19:18.20ID:vIYZWAt90
>>257
そだよね、技術もコスト掛けられないジレンマから投げやりな感じで言ってるだけなのかもね

保証レベルが下がれば、お客様へのサービス紹介内容も変わるから沢山コスト掛けて欲しいとこなんだけど

ちなaiプロダクトの品質保証に金かけるってどういう感じなの？テスト用のサンプルデータ収集＆テスト時間？
ハードウェアならバラつきサンプル山ほど作るとか加速試験やりまくるとかイメージつくんだけども
2020/09/15(火) 22:30:10.15ID:vIYZWAt90
>>258
あんま詳細に言えないから申し訳ないんだけども
誤りをトリガにするんではなくて
正誤関係なく作動するフェイルセーフ機能を入れるようなイメージ
ただそれを入れると明確にコストに跳ね返るから一部機能のみ＆入れたとしても100%安全性の担保はできない

というイメージ。イメージで申し訳ない
2020/09/16(水) 01:13:47.93ID:Pp1qtDsSa
>>252
その指摘はズレてる
モデルに当てはまらない事象ならモデル自体の欠陥だろう
100%当てはまるモデルを作ることは不可能だが、モデル上で100%を実現することは普通に可能
2020/09/16(水) 07:10:52.63ID:9UY6saq80
>>254-255
ちょｗｗｗおまいらｗｗｗｗｗわろっしゅｗｗｗｗｗｗｗ
263デフォルトの名無しさん (ｱｳｱｳｳｰ Sac9-IVsE [106.154.137.9])
垢版 |
2020/09/16(水) 08:54:18.70ID:q/nN4382a
>>261
「モデル上で100%」とは「モデルが確実に判定可能なデータしか入力しない」ということか？
その判別モデルすら100%は不可能だから「モデル上で100%」も不可能だぞ
2020/09/16(水) 09:45:57.58ID:HmmKsU1fM
>>263
時速120kmに達した瞬間に自爆するルールをモデルに組み込んであれば、前段階のAIがどんなに馬鹿な判断をしようが時速120kmを超えることはない
モデル上はな
2020/09/16(水) 11:22:54.31ID:CAH+mA2va
>>263は時速を100％正確に計測できる保証などなく誤計測は避けられないのだから120kmを超えることも完全には避けられないということを言っているわけで
2020/09/16(水) 11:24:32.85ID:CAH+mA2va
で、時速計測器が正確だと保証するために新たな装置を用意してもその装置がまた不正確かもしれず無限ループになる
2020/09/16(水) 12:19:37.96ID:r+pMiHhhM
>>265
それはモデルが測定装置の誤差を考慮していないからで、その必要があるならモデルに組み込んだ上で適切な閾値を設定すればよい
モデル上既に重大事故を起こす可能性があることがわかっているのと、モデルに組み入れられていない要因により事故を起こす可能性があるのは別次元の話だ
2020/09/16(水) 12:41:36.92ID:+RWHEIx3a
現実世界で発生する誤差は有限の範囲に収まることが保証できないのでどれだけ余裕を持って閾値を設定しても漏れることは避けられないよ
2020/09/16(水) 14:23:42.73ID:wp4ODtzTa
法律でも予見可能性が問題になるからな
予見可能な問題には対応できるようにしないと
2020/09/16(水) 20:11:42.22ID:Q+B5uLQSa
じゃあ何も作るな
問題が起きるのは必ず予見できるし
2020/09/16(水) 20:13:39.45ID:Ovu3Y9RiH
問題を必ず予見できるなんてわけがない
予見可能なのはあくまで予め想定している問題だけ
想定していない問題はそもそも予見しようとすらしないのだから
2020/09/16(水) 20:24:53.72ID:GlK1F1yx0
FAQ 想定外です
2020/09/16(水) 21:10:37.45ID:vNrPpmGC0
リスクを負わないとリターンは得られない
何かしようとするとリスクはある
それをどの程度減らしたり対策したり許容するかのバランスになると思う
下手すると事業継続できなくなる
また別の仕事してもいいんだけどね
2020/09/16(水) 21:12:22.35ID:vNrPpmGC0
>>271
その分野の多くの専門家が予見できるようなものは当然対応していないと能力を疑われることになるけどね

白黒つけるのは難しいと思う
2020/09/16(水) 23:22:49.22ID:Q+B5uLQSa
多くの専門家がよそくできないものがやっかい
福島の堤防の高さとか。もう少し高くすればメルトダウンしなかった
これは誰の責任? 東京電力? 予測しないことを認めた国? あるいは
運が悪かっただけ?
2020/09/16(水) 23:28:01.20ID:vNrPpmGC0
>>275
個別に違うから詳しく事実を調べて判断する事になるんだろう
その高さに決めた経緯とかその時に知られていた科学的な知識とか
見直しで高くするべきと言われていて放置していたとかなら放置していた所に責任があるんだろうし
その決定過程などに問題がなければ責任を問えないんだろう

責任を負わせても元には戻らないから
次に同じ事が起きないように改善するしかない
2020/09/17(木) 11:02:41.49ID:fVBLI+mG0
不特定の人が使う製品で機械学習モデルの外的妥当性を保証するのは無理だろうね
2020/09/17(木) 11:09:47.93ID:1wIcRPgfa
だからあんまり影響ない無難なところしか使えなくなるんだよなあ
なかなか難しいね
2020/09/17(木) 11:38:47.31ID:+JQ55m17M
害獣駆除で人間も駆除していいんやで
2020/09/17(木) 15:44:33.27ID:tVGbSN880
>>275
東電、他にも初期の発電機を廃止する、非常用電源車を高台に用意するとか
１０億ケチってあのざま
2020/09/17(木) 16:16:42.08ID:aKlBqSg/0
あれだけの人災を起こしおいて誰も逮捕されてない不思議
2020/09/17(木) 17:07:59.12ID:+JQ55m17M
コロナより被害ないじゃろ
2020/09/17(木) 17:41:28.15ID:ZbH9ip+70
みんなで汚染されればこわくない！の発想なのでは
核実験しまくった連中もだれもつかまってないじゃろ
2020/09/17(木) 19:45:02.53ID:+AujTTfU0
>>275
そんなことより非常電源設備を地下に設置したことの方が問題でしょう
電気設備を地下に設置するなんて普通に非常識
そっちを問題にするべきで、堤防の高さなんかどうでもいい…
2020/09/17(木) 20:51:23.21ID:CoKPDbQG0
福島の原発は予備電源は分散して保管する規則になっていたのに
一か所にまとめて保管してた運用上の問題

だいたい、あの辺って過去100年の間に3回も大津波にあってるのに、
とことんデータを活かせない国
2020/09/17(木) 22:02:34.99ID:1jKgqqaQM
東電は原子力のシロートなのだ
2020/09/17(木) 22:12:45.54ID:QCk9Kn1T0
スパースモデリングって既存の技術に名前をつけてあたかも新技術のように言ってるよね
そういうのキライ
2020/09/17(木) 22:14:19.46ID:1jKgqqaQM
AIの悪口はそこまでよ
2020/09/18(金) 00:26:00.78ID:RxBVY9gc0
福島の原発か、、、、
京大反対派の連中が警告し続けているのに対し
東大推進派の教授なんかが
「君は馬鹿かね！原発は日本で一番安全な場所なんだよ！」
「ｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗｗ」
って大笑いしてなかったか？

多数派のボスって怖いよね
金や人の絡みでそうなっているんだろうけど、、、
あれぐらいの勢いがAIにあればな、、、
野心的な人達が減って来てるんだろうな
2020/09/18(金) 02:46:27.15ID:EujZ72380
医療だとパロチンという事件があってな
丸山ワクチンの認証がなかなかされなかったり、今回のコロナの話も。

まぁ儒教の悪影響が残っているなぁ
291デフォルトの名無しさん (ｴﾑｿﾞﾈ FF43-SP/v [49.106.188.1])
垢版 |
2020/09/18(金) 10:07:12.08ID:6n8VMUNiF
>>289
原発推進派を擁護するつもりは無いが
女川の住民で女川の原発のおかげで助かった人も多い
危険な原発と安全だった原発と両方の例を挙げないと不公平

福島が女川と正反対の結果になったのは
どこで間違えたのかを検証するのが大事
2020/09/18(金) 10:19:47.50ID:QgmmGLVL0
>>284
シナの覇権主義についてどう思う？南シナ海はすべてシナの領土？
2020/09/18(金) 10:21:09.32ID:fPJAaojZM
なんでそんな話してんの？
関係ないのに
2020/09/18(金) 16:52:29.96ID:96Ydhnp8M
バブル崩壊して話題が無くなってもーたんや
2020/09/18(金) 17:46:58.40ID:lU2ghFJ/0
せやな
2020/09/18(金) 18:01:54.74ID:fPJAaojZM
言うほど崩壊してる？
新規参入が難しくなっただけじゃないの？
2020/09/18(金) 20:08:45.95ID:RxBVY9gc0
>>291
助かったって
「安全です！」って言わす為に周辺住民に金をばら撒いたり
いろいろ免除して優遇していた奴のことか？
そういう意味だと資金援助、天下り先とか推進派は全員助かったんだろうけどね
原発は国と会社と大学が結託してやっていたんで
どこぞの事情で福島に原発を立てることになり
そのフォローに東大教授が「安全です！」と言い張る展開になったんだろうけど
平気で嘘付いて大笑い出来るのがあのクラスだよなーと思ったけど
2020/09/18(金) 20:14:55.72ID:fPJAaojZM
妄想じゃん。。。
2020/09/18(金) 22:03:48.42ID:4PEPZ6FF0
>>292
チャイナの主張を武力で潰すことができなければ、チャイナの主張は正しいことになるでしょう
チャイナを叩くことができなければ、チャイナの覇権主義は黙認されたことになりますね
2020/09/19(土) 06:14:26.72ID:7Yv1N6Gb0
スパースコーディングって1996年に発表されたやつじゃん
2020/09/19(土) 07:24:42.73ID:ndkIK1Zfa
>>288
節子、それAIじゃない、インチキや。
2020/09/19(土) 11:06:57.39ID:yYyVWoOq0
AIは何時だって仕方なく壊れいくけど
騙されて棄てられた訳じゃない
2020/09/19(土) 15:58:10.38ID:Iurz6o440
>>299
戦争が必要だってことね
2020/09/20(日) 01:12:41.22ID:sD69NUu00
どこの最年少退職特任准教授だよw
2020/09/20(日) 12:28:38.64ID:KKLaA63U0
>>303
それはあなたの意見であって、私の意見ではありませんね
2020/09/20(日) 13:36:54.44ID:L3kHEmVh0
>>305
核戦争が始まるといってんじゃないのか？
2020/09/22(火) 10:45:19.81ID:C50Ev79m0
自分の意見としたくないんだろ。わかりやすい小心者だわ。
こういうやつって「客観的意見」てやつを主観的に使い出すからたちが悪い。
2020/09/22(火) 12:08:58.67ID:NEXSrWNK0
こういう利用は良くね？

誰が裁判の前に刑務所に残るのか？誰が自由になるのか？アルゴリズムが決定することもある
https://www.jsonline.com/story/news/solutions/2019/02/18/controversial-algorithms-help-decide-who-stays-jail-goes-free/2863797002/
2020/09/22(火) 12:14:25.90ID:EwzeVKsQ0
シビュラシステムか。
2020/09/22(火) 13:34:56.96ID:TieFIiIU0
データの集め方で結果をいくらでも操作できそう
2020/09/22(火) 15:40:07.90ID:mSqk8jbs0
>>308
日本の裁判は検察が確実に有罪になると考えるものを起訴するから
起訴されたら99.9%有罪になる

手当たり次第に起訴されたら迷惑だからそれでいいけどね
ただ裁判所が形式的に有罪判決を出すのはダメだけど
2020/09/22(火) 15:41:36.96ID:mSqk8jbs0
>>310
それは人間が判断する時でも同様の問題が起きる

事実と法に基づいて判断するけど
事実となる証拠が不適切な場合は判決も変わる
2020/09/22(火) 17:11:14.87ID:nwm7i/gwa
人がやるのと同等かそれ以上の品質で過程を記録できていてそれが人間に読解可能なら構わない
2020/09/22(火) 17:24:08.17ID:/p9llvmia
「過程」これがいるのかいらないのかが今の争点
深層学習では多分過程は説明できない
2020/09/22(火) 17:50:08.44ID:NEXSrWNK0
過程は生成すればいいんじゃない
2020/09/22(火) 19:46:47.89ID:0/sdxB3B0
深層学習は家庭不介入
2020/09/22(火) 20:10:02.25ID:SQp6xgxy0
>>316
だれうまｗｗｗ
2020/09/23(水) 20:41:58.47ID:wsuhqGJa0
「過程」がどうしても必要なシステムなら「過程」を出力する機械学習になるだけだろ。
まあ現段階では多分そういうのはうまく学習できないとは思うけど。
2020/09/23(水) 20:56:28.42ID:ZBJWLgO10
いやーやがてできるんじゃない？
いま 言語モデルにロジックを取り入れようとしているみたいだから
2020/09/23(水) 21:59:30.10ID:wsuhqGJa0
それがほとんど過大評価だっつー話なんだが。
gpt-3 のスケールで学習してあの程度だぞ。
2020/09/23(水) 22:22:39.09ID:DxHvLkCL0
U-NetGANって試した人いる？
2020/09/24(木) 14:19:25.94ID:qOdWmPW30
GANって教師ありに分類されるの？
それとも教師ありでも教師無しでも、どちらでもないの？
323デフォルトの名無しさん (ﾜｯﾁｮｲ 8e2d-KK5Q [39.110.153.109])
垢版 |
2020/09/24(木) 23:25:49.03ID:ekw+d8Yk0
無し
2020/09/25(金) 10:20:50.62ID:H9HAVUCp0
ガーン
2020/09/25(金) 19:30:57.78ID:62tG58VZ0
敵対的コメント自動生成bot
2020/09/26(土) 00:10:30.20ID:RuvRtzCF0
機械学習ブームが落ち着いたらMLOpsのような話題も消えるのだろうか。
よほどの規模のビジネスじゃないとシステム投資のROIが合わないよね。
2020/09/26(土) 04:34:32.98ID:Jy/kksq40
そしたら別のopsに飛びつくだけだろ
2020/09/26(土) 12:51:20.43ID:/Z44To7Y0
>>318
単体では上手くいかなくてもアンサンブルで良くなる事もある
コンピュータの計算力が高くなるともっと良い結果を得られる可能性もある
2020/09/26(土) 13:17:49.59ID:HElYVyZMM
そういう問題じゃないような
実際のビジネスでのデータ活用においては、予測ではなく特定の指標を最適化することが目的となる場合が多いんだよ
理解できないモデルじゃ目的変数を望む方向に変化させるためにどういう施策を打てばいいか分からないでしょ
2020/09/26(土) 13:26:38.71ID:HElYVyZMM
あと、最適化問題といっても現実に実行できる施策というのは定性的なものに限られる場合が多いわけ
だからモデルには定量的な精度はそれほど重要じゃないの
2020/09/26(土) 13:46:16.85ID:PHjC7Izu0
>>329
具体的には？
2020/09/26(土) 14:13:58.79ID:/Z44To7Y0
>>329
説明変数がわかる方法でアンサンブルしたらいいのでは？
2020/09/26(土) 14:14:41.98ID:/Z44To7Y0
>>330
定性的でも有無の違いはある
2020/09/26(土) 17:26:53.22ID:ScboO6V3r
機械学習で競馬予想をしてみたいのですが
教師あり学習の回帰をすればよいのでしょうか
まだ本読んでる最中で初歩的な質問ですいません
2020/09/26(土) 17:37:10.75ID:MPuNNsZr0
予算は？
2020/09/26(土) 18:12:39.32ID:/Z44To7Y0
>>334
予想をするのはできるだろうけど利益が出るかどうかは別問題だよなぁ
2020/09/26(土) 18:16:48.38ID:PHjC7Izu0
>>334
はい
2020/09/26(土) 19:33:42.31ID:XsM81KTQ0
>>336
>>337
ありがとうございます

>>335
普通のパソコンやGoogleのクラウドのものだと難しいのでしょうか
Pythonの本を読んでいるのですが必要なマシンパワーとか全然わかっておらず
2020/09/26(土) 21:36:04.21ID:MPuNNsZr0
>>338
ただで競馬の予想ソフトを教えてもらおうとしてるのかと聞いてるんだよ、馬鹿か
2020/09/26(土) 21:56:10.53ID:/Z44To7Y0
明らかに自分で機械学習を使って予想するって意味だろう
予想ソフトを使うという解釈にはならないと思うけどな
2020/09/26(土) 22:34:25.46ID:2J3SMnL8r
>>339
文盲か？お前が馬鹿だぞ
どこに予想ソフトとか書いてるんだ
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。
ニューススポーツなんでも実況