【統計分析】機械学習・データマイニング32

2022/08/01(月) 01:56:45.77

!extend:on:vvvvvv:1000:512
!extend:on:vvvvvv:1000:512
↑すれたてる毎に１つずつ減るので、減ってたら３回に増やしてたてること。

機械学習とデータマイニングについて語れ若人

＊機械学習に意識・知能は存在しません。
　　人の意識に触れたい方はスレ違いです。

■前スレ
【統計分析】機械学習・データマイニング29
https://mevius.5ch.net/test/read.cgi/tech/1597882603/
-EOF-
【統計分析】機械学習・データマイニング30
https://mevius.5ch.net/test/read.cgi/tech/1609459855/
【統計分析】機械学習・データマイニング31
https://mevius.5ch.net/test/read.cgi/tech/1632587566/

VIPQ2_EXTDAT: default:vvvvvv:1000:512:: EXT was configured

2022/09/15(木) 09:39:07.36

colabで昨日まで動いてたコードが今日はoutofmemoryになるのマジでなんなの？
同じGPU引いてるんだけど？？？

2022/09/15(木) 10:45:28.28

ニュートリノがPCに当ったんだよｗ

2022/09/15(木) 12:08:51.27

JupyterでGPUを動かすとブラウザのタブを閉じた後もプロセスメモリ消費されたまま

spyderだとアプリ閉じたら全部消えるか

じゃあJupyterでもブラウザ丸ごと閉じれば良いのかな
他に見てるタブとかあったら厄介だな

2022/09/15(木) 12:16:53.50

>>361
使用してないときはプロセス止めたいなら明示的にkillすれば止めれるよ
https://faboplatform.github.io/JetracerDocs/08.%E5%AD%A6%E7%BF%92/01.jupyter/

2022/09/15(木) 13:05:11.88

ありがとうございます

2022/09/15(木) 13:12:17.87

kill -KILL 1

2022/09/15(木) 15:51:49.22

くっ、殺せ！

2022/09/16(金) 08:39:34.21

pytorchがメタからlinux foundationに移管

2022/09/16(金) 10:32:04.73

>>359
Colabは単純な仮想化環境ではなくダイナミックリソースアロケーションという方式を用いてる。
この場合、メモリなどのリソースは使用者間のリソース使用状況に応じて均等になるように配分される。
つまり、リソースは毎回同じ分が配分されるわけではなく、過去の使用状況が大きいと
新たにセッションのリソース配分は減らされる。
浮いたリソースはその利用状況の少ない利用者に回される。
ダイナミックリソースアロケーションが原因でアウトオブメモリーエラーが発生した場合は
バッチサイズを前回動作時よりも少なくするか、リソース配分の優先順位が戻るよう時間を空ける。
もしくはメモリ割り当てが元から多い有料版に切り替えることが必要。

2022/09/16(金) 11:41:44.30

>>366
自分はPytorch使ってるんだけど今後何か影響出てくる？

2022/09/16(金) 14:44:22.25

Linux使えばpytorchの継続使用は問題無いだろ
C/C++だとnvidiaのセットアップが面倒くさいけど

2022/09/16(金) 14:55:35.07

さらばpytorch

2022/09/16(金) 16:25:33.78

winのひとはtensorflowで

2022/09/16(金) 16:46:58.13

っぱTFよ

2022/09/16(金) 16:59:17.42

基本Linuxだから問題なさそうですね

2022/09/16(金) 18:19:43.71

Linux Foundationに移管するからってLinuxじゃないと使えなくなるわけではないだろ？
そもそもWinで機械学習するやつが居るのかは知らんけど

2022/09/16(金) 18:47:01.57

マカーが多い印象

2022/09/16(金) 19:01:00.27

linux foundationの支援を受けてwinバイナリ作るのも変じゃん

2022/09/16(金) 19:05:14.14

そもそもまともに支援されるか怪しいよ

2022/09/16(金) 19:16:32.32

Winでやってるけど、Update関係が動いたときにエラーで止まることが多い
Win糞だなと思いつつなぜか使い続けてるバカです

2022/09/17(土) 03:54:50.15

Windows使ってる人はTensorFlowへ移行しましょう。

2022/09/17(土) 06:49:56.39

chainer復活しないかなあ

2022/09/17(土) 12:14:22.92

いらんでしょ日本じゃ無理だったってこと
海外勢が使ってくれないと無意味なんだは

2022/09/17(土) 13:56:46.37

wslでええやん

2022/09/17(土) 14:10:28.20

pytorchの移管先はLinux FoundationじゃなくってMetaが作ったPytorch Foundationだよ。
既にPytorch FoundationにはGoogle, Nvidia, Microsoft, AWS, AMDが参加を決定してる。
論文発表件数の比率では既にPytorchが優勢になってるが、今回、Facebook色が薄れたことにより
今後はPytorchが優勢になる可能性はある。

2022/09/17(土) 15:39:55.58

Pytorchユーザーとしてはありがたいところ

https://gihyo.jp/article/2022/09/pytorch_foundation

2022/09/17(土) 15:47:57.78

>>379
WindowsでTensorflow使ってんだけど、移行って何？

2022/09/17(土) 19:00:46.34

>>385
知ったかぶってしまいました。

2022/09/18(日) 14:55:16.75

勢いあるのはpytorchでは？

2022/09/18(日) 15:15:14.26

>>351
頭悪い人はやめとけ
得意なことをやれ

2022/09/18(日) 17:15:38.52

社会実装
独立行政法人科学技術振興機構（ＪＳＴ）の社会技術という概念から生まれた言葉である。社会
技術とは人間や社会のための科学技術という意味であるが、社会実装とは得られた研究成果を社
会問題解決のために応用、展開することをいう

2022/09/18(日) 17:39:18.04

社会人とかもそうだけど、とかく日本って社会〇〇って概念作るの好きだよな
もう失われた20年どころか30年って言われてるんだから、社会〇〇とな社会と紐付けた概念逮作って、日本人を縛り付けるの止めた方がいいと思う
結局社会人って概念は資本主義経済では30年以上も通用することが無かったのだからさ
特にこれからは個の時代、もっと欧米みたいにシンプルにして社会概念や通念で国民を縛り付けるのやめようぜ
資本主義経済を取り入れてるのに、中身は社会主義や共産主義の概念だと整合性ないしおかしいだろ？だから綺麗サッパリと切り捨てるべきなんだは

2022/09/18(日) 23:01:36.17

日銀が株券を買って企業をコントロールし、個人にも金融を薦める。
アベノミクスはそんなことをやってた。

技術者的な論理思考で注視すると、彼らがやろうとしたことは国家社会主義の樹立ではないか？

個人が金融をやって株を持つということは、結局のところ、労働者が企業を所有するということで、それを政府が推進するということは、まさに国家社会主義。

パヨクの皆さんが安倍ナチスと言っていたのは、そういうことではないか？
つまり「奴は労働者の味方だぞ」と。
もしそうなら、国家社会主義日本労働党を作る気だったのかも。
改憲にこだわったのは、ナチスに倣ったのかも。

2022/09/18(日) 23:04:06.94

ほとんどの日本国民はアメリカを味方だと思っているけど、実際にはただのジャイアンでしかない。
いつかはジャイアンからの解放を目指さなければいけない。

2022/09/18(日) 23:13:48.74

東大・財務省が中国のスパイで、
日本の借金が1千兆円あるとか、マスゴミと結託してデマを流して、
30年間も緊縮財政を続けて、軍事費を減らして、中国に攻めさせる

池上とか、御用学者の浜田・伊藤、岸田ロボットを操作している木原などの東大系。
日テレの経営者も、官僚ばっかり

財務事務次官も、緊縮財政しないと財政破綻すると言いふらしている

2022/09/18(日) 23:19:17.80

>>393
中国はそこまで日本を重視していないのでは？
世界550か所の孔子学院中、14か所が日本にある。
国の規模、中国との距離を考えると、明らかに少ない。
中国は日本を軽視する傾向に見える。

中国以外の孔子学院第一号はソウルに出来た。

日本の国政を最もコントロールしてるのは、朝鮮だと思う。
ナショナルスクール、朝鮮学校の数は、孔子学園の比でない。

2022/09/18(日) 23:28:19.17

流石に話逸れすぎたな

2022/09/18(日) 23:29:34.61

財政再建でよく参照されるのがデンマークだけど、財務省もデンマークの財政再建過程について資料を出してるので、検討している可能性がある。

2022/09/18(日) 23:41:29.31

政治に熱心な人間にろくなのは居ない。

2022/09/19(月) 00:10:22.62

ただのイタチｗ

**393** (ﾜｯﾁｮｲ 232c-ret5 [219.162.235.49]) · 2022/09/19(月) 00:59:42.98

日本の借金が1千兆円あるのは嘘とか、YouTube の動画に一杯ある

高橋洋一・三橋・中田敦彦とか

2022/09/19(月) 01:08:30.30

おそらく朝鮮の息がかかった人たちだろな。
借金をチャラにする方法があったとしても、チャラにすれば信用を失う。
日本に残ってるのは信用だけなので、これを崩せば、あとはどうにでもできる。

2022/09/19(月) 01:10:02.02

いい年した大人が勉強の情報源はYouTubeとか結構イタいからあまり言わない方がいいぞ

2022/09/19(月) 01:15:09.35

これはどうもご親切に。

2022/09/19(月) 03:22:12.21

大凡この系統の先々は見えてきた感じがする。残念ですがこの国は主導権を握る側ではないようです。
それでも開拓に勤しむ方々には頑張っていただきたいと思います。

2022/09/19(月) 08:25:21.63

素直でよろしいｗ
>知ったかぶってしまいました。

2022/09/19(月) 10:29:56.04

プログラミングの仕事の経験はないのですが、プログラミングはかなりできます
機械学習の仕事でフリーランスしようと思うのですが、どうやって仕事をとってきたらいいでしょうか？

2022/09/19(月) 10:53:37.35

こんなところで質問するしかないなら無理だろ

2022/09/19(月) 10:55:23.52

>>405
とりあえずクラウドワークでも漁ったら良いんじゃないですかね。

2022/09/19(月) 11:27:03.88

クラウドワークスにmlの仕事なんてあんのか?

2022/09/19(月) 11:40:05.57

フリーランスって営業も自分でやるってことだから営業能力ないなら無理だよ

2022/09/19(月) 11:42:19.39

経験なし、コネなし、潔よしｗ

2022/09/19(月) 12:08:58.95

意識高いですね

2022/09/19(月) 12:11:50.38

mlだと、コーディングはできて当たり前。ちゃんとレポートを仕上げられるかどうかだしな

2022/09/19(月) 12:16:56.27

機械学習案件は重要機密を扱ったり新規事業に深く絡んだりすることが多くオープンなクラウドソーシングサイトにはほぼ流れてこない
フリーランスなら複数案件をこなした実績や新規案件が出た時に話が貰えるコネが最低限必要だと思う
未経験なら取り得る方法は以下の2つ
[正攻法]機械学習案件をメインに扱う企業に所属して実績とコネを作る
[近道(だたし有能に限る)]個人開発の成果をブログや専門メディアの記事で公開することで実績とし、業界関係者の集まりに積極的に参加するなどしてコネを作る

2022/09/19(月) 13:34:32.20

最近は現場レベルでもML使えるようになってきてるよね
自分の周りも実験やシミュレーション結果の解析に、深層学習含めて機械学習を普通に使ってる
SOTAの即適用が求められてるわけでもないし

2022/09/19(月) 14:00:26.44

なんとかdiffusionの作者さんも前職は金融だったのに自作のAIプログラムを公開したことがきっかけで
ベンチャーキャピタルから出資の話が舞い込んだらしいよ

2022/09/19(月) 14:02:12.19

もはや現場ではデータサイエンススキルを習得者が増えすぎてMLドカタ状態になりつつある
やっぱいつの時代もクリエイターが一番重宝されるわ
誰でも習得できるスキルに価値は無いって事かね

2022/09/19(月) 14:11:32.70

苦理エイター爺さん

2022/09/19(月) 16:45:29.36

クリエイターって、具体的にはどのようなことをする人？

2022/09/19(月) 16:53:07.60

わいは3DCGクリエイターやな
ゲーム業界なんやけどゲームグラフィック全般(モデリングからアニメーションまで)を担いゲーム内の世界観を創造しとる
ゲームではグラフィックの出来栄えが売上に直接影響及ぼすからやり甲斐はあるで
まあゲームに限らず漫画アニメ映画すべてのコンテンツの可否判断はまず見た目から入るしな
鬼滅があそこまでヒットして流行ったのも2Dと3Dをセンス良く織り合わせた圧倒的な表現力のアニメの力なのは言うまでもなく

2022/09/19(月) 16:56:14.31

元はプログラマーやったんやけど余りにもつまらなさ過ぎて、専門に入り直してクリエイターデビューした
そしたらまあ毎日楽しくてしょうがないって感じ
人間は遺伝子レベルでお絵描きなどのクリエイティブな事が本当に好きなんだなと実感した瞬間だったわ

2022/09/19(月) 16:57:13.12

で、年収いくらなの？

2022/09/19(月) 17:21:03.39

ディレクションとTA的な立ち位置も兼ねてるから去年は1200くらいだったかな
コロナ禍になって需要が急激に上がってスマホ・PC・専用機問わずバブリーな雰囲気

2022/09/19(月) 17:22:41.64

良かったな

2022/09/19(月) 18:09:37.52

これ何かのコピペ？w

2022/09/19(月) 21:00:41.52

>>420
アニメで言うと動画マン？モデリングからだと原画担当より下流側かな。動画マンは年収300万円ほどだから、ゲームやったほうが良さそうやね。

2022/09/19(月) 21:04:33.62

>>422
ゲーム業界の3DCG専門のTAは機械学習をどの部分で使ってるんですか？

2022/09/20(火) 00:04:55.52

>>16
クリエーター爺さん

2022/09/20(火) 00:20:28.33

名称なんてどうでもいい

2022/09/20(火) 00:30:04.12

>>425
いな何やってるか書いたやんけw
普通にジェネラリストだよ
>>426
パイプラインとかテクスチャ生成とかアニメーションかな
あとフェイスキャプチャも今取り組んでる

2022/09/20(火) 00:32:49.41

>>429
なるほど、確かに機械学習が強い分野ですね。

2022/09/20(火) 01:12:28.49

悪いけど、そこはクリエーターとは言わないな。
キャラデさんの作ったキャラを打ち込みしてるだけじゃない。

2022/09/20(火) 01:40:33.98

打ち込み？wそんな事一言も言ってねえけど>>425の発言にしろ君は何かと自分の想像の範囲内で勝手に他人を定義する癖があるみたいだね
何を言われようと俺は3DCGクリエイターとしての矜持がある

2022/09/20(火) 01:55:52.42

>>432
名称などどうでもいい

2022/09/20(火) 01:58:36.74

敢えて言えばここは機械学習の発展事項を書き込んでほしいかな。
個別の企業案件はどうでもいい。

2022/09/20(火) 02:03:28.58

ここで言うクリエイティブ(創造性)とは新しい技術をいう。
ただ絵を突っ込んでるだけではクリエイティブとは言えない。

2022/09/20(火) 02:09:24.05

クリエイターに彼女でも寝取られたの？

2022/09/20(火) 07:18:56.02

>>432
悪いけど、貴方のような作業をする人のことはCADオペレーターと呼ぶんじゃないか？
クリエーターじゃなくてオペレーター。

2022/09/20(火) 07:48:02.23

そうだねクリエイターじゃない感じだね
メーカーだと一般職が行うオペレーターに近いね

2022/09/20(火) 09:10:39.21

1200も貰えるのか

2022/09/20(火) 10:26:44.01

これからはクリエイターだね（鼻糞ホジホジ）

2022/09/20(火) 11:15:04.18

クリエイター、て言い方にむず痒いものを感じてしまう

2022/09/20(火) 11:24:17.43

>>439
ポリフォニー・デジタルとか３D系の大手ゲームスタジオだったらあると思うな
この辺りのゲームスタジオとかだろおそらく３Dゲームエンジンから自作してると思うし
１本の開発費は50億とか100億くらいかけてるから給与水準は相当高いはず
最近もレーシングゲームのAIで人間に勝利したとか記事になっていた位で
内部でやってる取り組みはひょっとしたらプリファードを超えてるかもしれない

2022/09/20(火) 11:25:00.28

呼び方で言えば、エンジニアというとITエンジニアを指してることが多いのはどうかと思う

2022/09/20(火) 11:50:40.83

だから>>16のネタだってｗ

2022/09/20(火) 16:28:49.39

3DCGのTAはクリエイティブを要求される割合と論理的思考を要求される割合が丁度良くミックスされて面白そうな仕事ではあるとは思う。
ゲームや映像への愛が強いなら楽しいと思うな。

2022/09/20(火) 16:48:13.66

食えればね

2022/09/20(火) 16:49:05.07

taてなに？

2022/09/20(火) 16:51:33.96

テーチングアシスタント、補助教員じゃね、知らんけど

2022/09/20(火) 18:29:31.24

TechnicalArtistとかの略ですね。

ゲームや映画業界でグラフィックス関係の基幹技術を扱う人ですね。
エンジニアとの境界は曖昧ですが、アート分野の知識が必要なのでそちら出身者が多く比重もそちらよりだったかと。

2022/09/20(火) 19:10:53.78

へー

2022/09/20(火) 21:35:19.17

それでここでそれを提示して何のメリットがあるのか。。

三次元連続変換という意味でリー群の話でもしてくれるのか。
あるいは自己満か何か。

2022/09/20(火) 22:45:26.57

誤差逆伝搬ですがXの更新量(ΔX)を考えるときにXの勾配(ΔW^T)にはηをかけないのはなぜですか？
EをWとXとBの全微分の式で書き下すとすべてにηをかけないといけない？と思ったのですが。

2022/09/22(木) 10:26:05.51

RTX4000番台発売か
来月から手に入るようになる、という

しかし3000番台ではPyTorchが使えるようになったのが発売3ヶ月くらい後
tensorflowは発売から半年くらい後

この分だと来年2～4月くらいにそれらが使えるようになるか
あるいは即使えたり？

2000番台の時もちょっとトラブルがあったらしいな

2022/09/22(木) 12:38:02.36

機械学習に詳しい諸君に聞きたい。
今12世代Celeron &内蔵グラフィックでプログラミングをしている。
ただ、機械学習をやりたくなり、グレードアップを試みている。
そこで
i7 12700 + GTX1660Super (中古)
i5 12400 + RTX3060Ti (中古)
のどちらかで迷っている。
CPUクーラー、マザボ、メモリ、電源等は流用で上記に耐えうる性能はある。
平たく言えば、機械学習用マシンとして、CPUとGPUのどちらに重きを置くべきか、ご教授いただきたい。

2022/09/22(木) 12:43:48.56

ただでか？

2022/09/22(木) 12:47:49.34

>>452
ηてなに

2022/09/22(木) 13:07:16.17

>>454
それなら絶対GPU重視

2022/09/22(木) 13:12:26.20

>>454
何十時間も掛かる重い学習しないならGoogle Colab Proで十分

2022/09/22(木) 14:59:14.30

>>454
でぃーぷらーにんぐするならGPU
それ以外ならCPU