【統計分析】機械学習・データマイニング22
■ このスレッドは過去ログ倉庫に格納されています
機械学習とデータマイニングについて語れ若人
■関連サイト
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/
DeepLearning研究 2016年のまとめ
http://qiita.com/eve_yk/items/f4b274da7042cba1ba76
■前スレ
【統計分析】機械学習・データマイニング21
https://mevius.5ch.net/test/read.cgi/tech/1541309676/
VIPQ2_EXTDAT: default:vvvvv:1000:512:----: EXT was configured ※ワッチョイです
次スレ立ての際は、一行目冒頭に
!extend:on:vvvvv:1000:512 ColaboratoryでTPU使おうと思うけどうまくいかない
なんだこれ >>993
>キューピーみたいにAI使えばいいのに、普及しないな
してるよ。
もう何個か納品しているが、予算が変わるわけではないので何も変化がない。
特に言うべき事がない感じ。客もへーとしか言わん。 Colorless green ideas sleep furiously. 日本のIT産業はITドカタが多すぎるせいで工数でしか料金を評価しない風習が強いのが問題だな
何十億も稼げるシステムなら1人月しかかからなくても100人月分ぐらい取ればいい >>8
企業の購買担当者が文系なので
人月計算しかできないんだよ
ひとり100万と決まったら、
もうそれしかダメなんだよ ワイも200万で受けてたけど、系列子会社は100万なのに、資本関係のないワイ社が高くなる根拠を示すのが大変みたい。 安い・うまい・速いで、うまいだけは数値化できない。
価格は数値だけど、品質は数値化できない
だから、ドイツ車みたいに、排気ガスの数値をだます奴が出てくる。
品質だけは、簡単に判別できない >>13
機械学習向けの問題だと思うわ
If 画像 == りんご
のように
If 品質 == 良好
とできたらね
画像がりんごは誰が見ても分かるけど、品質が良好ってどうやって教師作るんだろうね >>14
プロが５段階評価とかで付けるしかないんじゃないかなあ
もちろん個人差が出るから複数人で平均取るとかして 5つの味覚を取って美味しさを数値化ってのは既にされてるよ 果物や野菜は普通に等級が付けられてるんだから等級を正解データにして写真・糖度・水分その他特徴的な量を使って学習させるだけだろ 工場なんかの画像処理の工程で画像によってカメラのパラメータを変える必要があるんだけど新しい画像が入力された時に自動的に最適なカメラのパラメータに合わせるような事って実現可能？ >>19
それって機械学習じゃなくて制御工学で扱われている課題じゃね？ >>22
どういう分類かはどうでもよくて
制御工学のキーワードで探したら
解決策が見つかるんじゃねって事 >>23 の言うとおりだと思う。
解決策を考えるべきの話。
手法などが先にありきはナンセンスな話だが
AIを学ぶもののほとんどが、そこを勘違いしているのが実際。
そのアプローチだとあらたな発想の手法すら生まれてこなくなる。 AIでやるにしたって既存の方法と比較するのは重要だろ、ただAIでできますというのはアホ >>27
研究や業務をやっていないと、そうなってしまうでしょうね。
そうすると新たなAI技術が生まれなくなる。
日本の大学からAIや機械学習が生まれて来ないのはそういったことが
原因かもしれない。 みんなどんなPC使ってるの
メモリ8G、SSD128、i5みたいな大学生用PC使ってるんだけど流石に買い換えようかなと思ってる 流れ者になるといかに予算とるかが目的になってることがある >>30
CPU使いたいのかGPU使いたいのか
好きなほう選んでハイスペック品買えよ 学習以外のとこでCPUが役立つなんてほんと少ないぞ
めちゃくちゃ重いエクセルファイルを開くとか、バカでかい圧縮ファイルを開閉するとか、ベンチマークで自己満足するとか
グラボ、そしてSSDの恩恵がデカイ
>>30
i5 2400
メモリ16GB
SSD crucialの1TB
GTX1070
マザボは一回壊れたので中古の2000円の物
という構成だけど、機械学習ぶん回してる時は特に問題無い
グラボが8割、メモリが2割ぐらい
CPUはこのレベルで十分だけど、多分このレベルの方が高くつく。とにかくマザボが無い データががたりない、データが多くなれば・・・・・
そういうのはやめましょう。
いつもデータは足りないもの。
知ってはいけないデータもある。
足りない中で考える力を養いましょう。 >>35
画像処理とかやってるとCPU高性能なほうがいいんだよ >>35
そこまで古いCPUだと対応MBのPCI Expressバスが遅そう
GPU内で完結する処理なら問題ないだろうけど >>37
最近は足りなくても学習しきれるようになってきたね
画像データを水増しするライブラリなんかも出てきた
>>38
どんな画像処理してるの？
こないだ学習用に1000ファイルを処理したけど
1000*2000の200kbのjpg→100*200、50hbに再圧縮
5分もかからなかった
フォトショップやイラレもレイヤー50ぐらいなら全く問題ない。
プログラムの立ち上げは数秒かかるけどね
レイヤー1000とか超えると重くなったりする？今の所、そういう本格的なファイルは熱かったことがない
>>39
そこはボトルネック担ってるとは思う
ただ、リソース見る限りはGPUで完結してると思うので、これで良いと思っておくよ >>40
なんでもだよ。
画像検査なんかは相変わらず処理時間がネックになるから早いに越したことがない。
何でもGPUで書くわけにいかんし。 >>41
そりゃまぁ早ければ早い方が良いのは1005間違いない。
具体的にどういう画像検査で遅くなったりするの？
SSD、メモリが十分な状態で、i5 2400と最新のCPUでどれぐらい差が出るの？
何か例があれば教えてほしい
個人的には、学習前の画像処理が1時間ぐらい変わった所で特に意味は無いかな、と思う
一回だけなら許容範囲だ >>42
前処理を暗中模索するときはCPUが役にたつよ
決まったアルゴリズム、型にハマったデータセットばかり使うにはCPUはしょぼくても構わないだろうが i7 の最新版など、高いCPU では、動画などの最新のコーデックも、ハードウェアで処理できる
3D 処理とか、コンパイルも速くなる。
ゲーム製作のモデラーが使う >>37
データって量より、質と前処理とクレンジングの方が大事だなと実感した
画像ですら、量を増やすより選定した方が結果に繋がる >>45
その通りと思います。現在客先で見ている限りでは、データなんたらリストの方々
一様に前分析がおろそかになっています。おそらくやり方をご存知ないのかなと
思い始めました。
データが綺麗にそろうことははないので、今あるものからいかに見つけ出すか、
それがないと、じゃ次に綺麗なデータを取るために、どういうデータ収集の
仕組みにしたらいいかにたどり着かないですから。 とりあえずgoogle cloud で初期3万円分使ったらいいさ。
それで多分飽きるから。 GCPで無料で使えるのはかなりショボいスペックだから機械学習ぶん回すのには向いてないよ
手元にノートPCでもあれば大抵そっちの方が高スペック >>50
TCP使えるなら最強だけどそれが無理だと 機械学習ってユーザーじゃ学習させられないから売り逃げできないのが難点だな >>55
そりゃユーザーのレベルと、教える方の力量次第だよ。 >>55
SI的な売り方では分析や画像認識が限界だろう。
データ収集ひとつとってもコアな業務知識が必要になるから提案のハードルも高い 工場の検品ぐらいならかなり有用だと思う
ただそれ以上になると一気にハードルが上がるね バグを産まない一番の方法はコードを書かないこと。っていう格言があったような。全消しはある意味正解なのか ハゲタカ学会横行だそうだ。
金さえ払えば海外発表論文になると。
そういえば情報処理学会、今は論文として
カウントしてもらえてるんかな？ >>68
妥当な判断でしょうね。
といっても、この辺りのことは審議会からの意見が通った結果と思う >>68
数年後には今の腐った法案みたいに枷になるんだろうな AIは万能では無いけどそこらの町医者より的確な判断を下せる可能性は非常に高い
にもかかわらず、AIの判断ミスが使う医者の責任なら、使わないという医者も出てくる >>71
責任を医者に求めるなら、医者はAIにも精通していないといけない
あのクソ忙しい医者が更に機械学習を学ぶとか、非現実的すぎる
命にかかわるような手術だと、提案を効くにしても使わないだろう。
歯医者や耳鼻科、皮膚科など、基本的に命にかかわらないような所は大幅に楽になるかも AI側に責任もたせたら、開発者が手を引いちゃうよ
責任取れるわけないし、説明できる手法に変えないと理由づけもできない。
進歩が止まるよ。 >>73
AIに精通の必要はないでしょう。AIからの結果を補助として自分で判断するだけ。
そこにAI知識がといったら、AIの意味自体がない。 >>74
選択肢を患者に任せればいい
ヤブ医者判断より世界の名医クラスのAIがいいわ >>74
患者への説明できないというAI最大の弱点 ＡＩはあくまでもパターン認識に基づくリコメンドをして、
それの医学的妥当性の判断は医者がすると考えれば何もおかしくはない。
まあ、町医者なんかだとパターン認識レベルしかできないヤブもいそうだが。 >>73>>75
その辺りが現実的か
何かちょっと勿体無い気もするけど お前ら知らんと思うけど命に関わる外科医はほとんどがサイコパスだよ
サイコパスは人体実験と最新技術が大好きだからAIも使う >>72
>>76
ん〜〜
あまりに的外れなこと言ってるとおもうぞ >>78
どの医者にも得意分野、不得意分野がある
パターン認識くらいしかできないAIでも、実用上、診断は人間ではかなわないレベルに来てる
それを使ったら医者の責任って言われてもね
患者ガチャだわな >>82
それは、話が違う方向になってるよ。
病気かどうかが医師の責任という話ではなく
それは判断材料の一つにつかうだけで、
治療方針などについて患者との間で決定していかないといけない
それについて、なにを判断材料に好かった場合でも医師に責任が
あるという話だから。 google翻訳みたいに使われるということか
誤訳があっても使う人の責任だ >>84
99%以上信頼のおける判別機をもつAIがレントゲンみて胸部に癌ありますと診断したとする
開胸したら正常でした
これは使った医師の責任だという
なんだかなぁってことだよ 診断は投薬や処置などの治療方針につながる。
投薬にはどんなものでも少なくともアレルギーの可能性があり、
単なる点滴でも針の穿刺など傷を付けるなど、医療は基本的に
加害行為になります。
加害行為となり得る医療行為が医師などに許されているのは、
その医療行為によるメリットとデメリットを判断するための
最低限の知識などが、国家試験・国家資格などを通して国に
より一定の基準が保証されていることによります。
そのため、診断を補助する機器に対しても薬機方など様々な
規制が有り、安易に提供できません。
その為、下記の様なソフトでも指摘を受ける場合があります。
（現在は再度公開しているみたいです）
「糖尿病リスク予測ソフト、公開翌日に厚労省「未承認の医療機器」指摘で中止に」
ttps://yomidr.yomiuri.co.jp/article/20181105-OYTET50009/
現在のAIのレベルは特徴量を主体とする単なるパターンマッチングに過ぎず、
遺伝子異常など特定の限定された診断基準に基づくだけでできる診断には有効ですが、
「息苦しい」などの複数の原因が考えられる内容の診断はできません。
「息苦しい」には肺が原因の場合もあれば、喉などの気道の狭窄、心機能の低下、
貧血、疲労、低酸素環境など様々な原因がありますが、これらの全てをパターンとして
学習させるのは無理で、診断の成績も報告の限りでは相当に悪く実用に耐えません。
恐らく現在のAI技術は、診断基準が明確な分野のみに特化して一部使用されることが
今のところ期待されています。 >>86
要は、そういう使われ方しないという話ですよ。
他の検査などをやったうえでしか行わない。
今のAIはそこまで進歩もしていないし、患者との対話もできない。 >>86
そんなもん医者でもあるんだろ。
AIの言いなりの医者なんて意味ないから責任があるのは当然。
分からなかったら他の医者と相談しろ。
そのための病院組織ってことだ。
至極真当では 医師の負担が軽くなって、かつ精度も数値としてきちんと提示できれば、需要はあるんじゃない
ただ医療に関することだから責任の所在をはっきりさせないと、それはね
AI診断で医療ミスが起きて訴訟になったら、やっぱAIベンダーにも責任は問われるかと 実際に治療を行うのは医者だよ
だから結果がどうなっても責任は医者にしかない
文献を元に治療したけど実は今回の患者は文献で考慮されてなかった例外で本当は真逆の対処をしなければならなかった、間違ったのは文献著者のせいだから責任とれ、なんてあり得ない AIが診療行為として認められ診療報酬が決められば実用化される、それだけの話 >>86
誤診なしで100%の診断ができるAIは存在しないから、AI診断を鵜呑みにして処置をするのはあり得ないよね
それで医療が成り立つなら人間の医者の存在意義がなくなる
AIが癌があると言うなら医者もレントゲンを目で見てその上で判断を下すべき だいたい、AIで出た結果自体をAI専門家でさえ、なぜそうなるか理由がわからないのが
今のAIだから、それで最終判断しそのまま処置なんてありえない。 自動運転の車と違って考える時間あるからツールの一つってことで、まあよろぴこ >>96
ニューラルネットワークだけ考えるとそうかもしれないが、決定木は既存のモデルから確率的に理由付けが可能だよね
定石によって解決可能な病気はコンピュータが医師となって医療行為のGO判断をできるようになると思うんだよね
そういう時代はまだ先ってのは分かるけど、薬の販売が段階的に規制緩和されていったところを見ると、徐々に適用範囲が広がっていくことを見据えて、法律は整備するもんじゃないの？ >>98
話しの流れを見てもらえばわかるけど、ここでは決定木とは違う世界の
話を想定した。自動化に近いものの話になっているので、ちと違うので
それとは別ね。
決定木を用いた自動化は金融などでは長く行われているけどね。
どうもそういう話とは違いそうなので。 決定木なら解釈可能って言うけどニューラルネットも決定木と解釈可能度合いは変わらないよ ■ このスレッドは過去ログ倉庫に格納されています
