探検
ふらっと C#,C♯,C#(初心者用) Part129 [無断転載禁止]©2ch.net
レス数が1000を超えています。これ以上書き込みはできません。
1デフォルトの名無しさん 転載ダメ©2ch.net (ワキゲー MMff-S7v4)
2017/06/09(金) 18:36:01.72ID:lNiKtgPwM「どんなにくだらないC#プログラミングやVisual C#の使い方に関する質問でも誰かが優しくレスをしてくれるスレッド」です。
他のスレッドでは書き込めないような低レベルな質問、
質問者自身なんだか意味がよく分からない質問、
ググろうにもキーワードが分からないなど、勇気をもって書き込んでください。
内容に応じて他スレ・他板へ行くことを勧められることがあります。ご了承下さい。
なお、テンプレが読めない回答者は邪魔なので後述のC#相談室に移動して下さい。
C#に関係の無い話題や荒らしの相手や罵倒レスはやめてください
>>980を踏んだ人は新スレを建てて下さい。
>>980が無理な場合、話し合って新スレを建てる人を決めて下さい。
■前スレ
ふらっと C#,C♯,C#(初心者用) Part128
http://mevius.2ch.net/test/read.cgi/tech/1493730340/
■関連スレ
C#, C♯, C#相談室 Part94 [無断転載禁止]©2ch.net
http://echo.2ch.net/test/read.cgi/tech/1492843013/
■コードを貼る場合は↓を使いましょう。
http://ideone.com/
https://dotnetfiddle.net/
■情報源
https://msdn.microsoft.com/en-us/library/gg145045.aspx
http://referencesource.microsoft.com/
---
VIPQ2_EXTDAT: checked:vvvvv:1000:512:----: EXT was configured
982479 (ワッチョイ 8ee3-S4qQ)
2017/07/17(月) 12:55:32.89ID:tm+LZBsa0983デフォルトの名無しさん (アウアウウー Sa08-1CH6)
2017/07/17(月) 12:57:07.69ID:50vkYHara ただのアップデートしただけじゃ4.7は使えない
インストーラーから個別のコンポーネント選んでインストール
インストーラーから個別のコンポーネント選んでインストール
984979 (ワッチョイ 8ee3-S4qQ)
2017/07/17(月) 13:13:20.69ID:tm+LZBsa0 解決しました ありがとうございます
個別のコンポーネントを選択していませんでした。
個別のコンポーネントを選択していませんでした。
985デフォルトの名無しさん (ワッチョイ 4128-NvYO)
2017/07/17(月) 13:59:58.84ID:T9aCvdZt0 複数の読み込みタスクと一つの書き込みタスクを並列で動かすとき、
書き込みタスクを優先させて動かしたいんだけど、どうするのが正解?
タスクのプライオリティ上げるのかと思ったけど、調べるとどうも違いそうで。
ConcurrentExclusiveSchedulerPairとかのスケジューラをうまく使うのかな?
書き込みタスクを優先させて動かしたいんだけど、どうするのが正解?
タスクのプライオリティ上げるのかと思ったけど、調べるとどうも違いそうで。
ConcurrentExclusiveSchedulerPairとかのスケジューラをうまく使うのかな?
986デフォルトの名無しさん (ワッチョイ c469-zKZC)
2017/07/17(月) 14:19:08.39ID:hqPHwZli0 実際何やるの?
並列で動かすよりPC買えよ
並列で動かすよりPC買えよ
987985 (ワッチョイ 4128-NvYO)
2017/07/17(月) 17:22:16.54ID:T9aCvdZt0 ・複数サーバからネットワーク経由でファイルDL
・ファイル数が閾値を超える毎にDB書き込み(シリアル)
DLタスクの並列数を増やすと、書き込みタスク1つあたりの処理時間が伸びて困ってる・・
・ファイル数が閾値を超える毎にDB書き込み(シリアル)
DLタスクの並列数を増やすと、書き込みタスク1つあたりの処理時間が伸びて困ってる・・
988デフォルトの名無しさん (ワッチョイ e9c0-S4qQ)
2017/07/17(月) 17:27:24.08ID:aUy3ijYs0 それタスクの優先度じゃなくて単にファイルIOの問題じゃないの
ファイルDLの書き込みとDLしたファイルの読み込みとDB書き込みを同じストレージに対して行っているなら処理時間伸びるのは当然に思えるが
ファイルDLの書き込みとDLしたファイルの読み込みとDB書き込みを同じストレージに対して行っているなら処理時間伸びるのは当然に思えるが
989985 (ワッチョイ 4128-NvYO)
2017/07/17(月) 17:41:44.40ID:T9aCvdZt0990デフォルトの名無しさん (ワッチョイ 7666-S4qQ)
2017/07/17(月) 18:38:09.74ID:DedzLYOT0 >>989
System.Threading.Thread.CurrentThread.Priorityで、優先度弄れるらしいが、実際に使ったこと無いから何とも・・・
スレッドのメソッドの上の方で指定すればOK
System.Threading.Thread.CurrentThread.Priorityで、優先度弄れるらしいが、実際に使ったこと無いから何とも・・・
スレッドのメソッドの上の方で指定すればOK
991デフォルトの名無しさん (ワンミングク MM3e-roJc)
2017/07/17(月) 19:05:43.77ID:GUuZ6Fu+M スケジューラを実装するといいよ
優先度の設定があるけどそれをどう解釈するかはスケジューラの実装によるからね
優先度の設定があるけどそれをどう解釈するかはスケジューラの実装によるからね
992デフォルトの名無しさん (ワッチョイ c469-zKZC)
2017/07/17(月) 19:20:13.04ID:hqPHwZli0 並列にするメリットが全くわからないのだけれど?
分析能力の欠如っていうか脳がやられたの?
分析能力の欠如っていうか脳がやられたの?
993デフォルトの名無しさん (ワッチョイ 3cc4-WfmG)
2017/07/17(月) 20:49:23.39ID:NQ4+oaEv0 謎行為やってるなとは思うが
謎行為をする動機を語ってないからそう見えるだけだろ
と好意的に解釈してやる
謎行為をする動機を語ってないからそう見えるだけだろ
と好意的に解釈してやる
994デフォルトの名無しさん (ワントンキン MM88-roJc)
2017/07/17(月) 21:19:25.73ID:c9FD5MjOM とりあえずダウンロードしたファイルはさっさとローカルに保存しなよ
ネットワークに余裕がある時にDBにストアすればいい
ネットワークに余裕がある時にDBにストアすればいい
995デフォルトの名無しさん (ワッチョイ ce19-MRQN)
2017/07/18(火) 00:41:32.31ID:SlyZJJmU0 現役PGの頃に宇宙仮面のサイトみてたけど
2014年で更新止まってるんだよね。
あの人生きてる???
2014年で更新止まってるんだよね。
あの人生きてる???
996デフォルトの名無しさん (ワッチョイ c469-zKZC)
2017/07/18(火) 00:46:21.86ID:y43ZtB+J0 >>995
そういうのここでやんないでくんない?
そういうのここでやんないでくんない?
997985 (ワッチョイ 4128-NvYO)
2017/07/18(火) 01:08:53.19ID:4C5Wl6we0 >>990,991
ありがとう。スケジューラの方向で色々やってみる
>>992,993
ありがとう。動機を説明してみるので、おかしな実装だったら指摘してもらえると嬉しい。
わりと見たことある実装だと思ってるんだけど・・
どこの部分に対する指摘かわからなかったので3点で書いてみる
1.なんでファイルDLしてるの
→空いた時間にダウンロードして、日時の決まった時間にDBを更新するようなバッチじゃないから
2.DLタスクが並列な理由
DLタスクでは数kbのファイルを読み込んで、それをパースしてDBに格納するデータに変換してる。
ファイルは10数個のサーバ毎に日時で1万個くらい生成される。
→各サーバに対して並列で一斉(ないし数台)にリクエストを送る方が、サーバ*ファイル数分、直列でやるより速いと思ってる
3.DLタスクとDBへの書き込みが並列な理由
DLタスクが終了してからDB書き込みしてももちろん動作はする
(実際はメモリの関係で、何度かに分割するだろうけど)
DLタスクはネットワークがボトルネック
DBタスクはDBでの処理がボトルネック*1
→だったらDLタスクが一部終わる毎にDBに書き込ませていった方が、全体のパフォーマンスとして効率的だと思ってる
(本当にpriorityが問題なのかとか、*1が正いかとか、スケールの話は実装とか環境によると思うので省いてほしい。パースはDBタスクの方じゃってのも)
ありがとう。スケジューラの方向で色々やってみる
>>992,993
ありがとう。動機を説明してみるので、おかしな実装だったら指摘してもらえると嬉しい。
わりと見たことある実装だと思ってるんだけど・・
どこの部分に対する指摘かわからなかったので3点で書いてみる
1.なんでファイルDLしてるの
→空いた時間にダウンロードして、日時の決まった時間にDBを更新するようなバッチじゃないから
2.DLタスクが並列な理由
DLタスクでは数kbのファイルを読み込んで、それをパースしてDBに格納するデータに変換してる。
ファイルは10数個のサーバ毎に日時で1万個くらい生成される。
→各サーバに対して並列で一斉(ないし数台)にリクエストを送る方が、サーバ*ファイル数分、直列でやるより速いと思ってる
3.DLタスクとDBへの書き込みが並列な理由
DLタスクが終了してからDB書き込みしてももちろん動作はする
(実際はメモリの関係で、何度かに分割するだろうけど)
DLタスクはネットワークがボトルネック
DBタスクはDBでの処理がボトルネック*1
→だったらDLタスクが一部終わる毎にDBに書き込ませていった方が、全体のパフォーマンスとして効率的だと思ってる
(本当にpriorityが問題なのかとか、*1が正いかとか、スケールの話は実装とか環境によると思うので省いてほしい。パースはDBタスクの方じゃってのも)
998985 (ワッチョイ 4128-NvYO)
2017/07/18(火) 01:13:35.64ID:4C5Wl6we0 訂正
誤)1.なんでファイルDLしてるの
正)1.なんでファイルDLして保存しないの
誤)1.なんでファイルDLしてるの
正)1.なんでファイルDLして保存しないの
999デフォルトの名無しさん (ワッチョイ 1e6e-5eCk)
2017/07/18(火) 02:18:02.65ID:tovqy0R70 書き込みタスクもファイル毎に別なのか?
どうせシリアルなら書き込みはBlockingQueue使って単一コンテキストでループさせ続けるのが無難だと思うが
どうせシリアルなら書き込みはBlockingQueue使って単一コンテキストでループさせ続けるのが無難だと思うが
1000999 (ワッチョイ 1e6e-5eCk)
2017/07/18(火) 02:23:36.02ID:tovqy0R70 訂正
ConcurrentQueueを使ったBlockingCollectionだな
BlockingCollectionなら上限数を指定しとけばコンシューマの処理が追いつかないときにプロデューサをブロックすることもできるよ
ConcurrentQueueを使ったBlockingCollectionだな
BlockingCollectionなら上限数を指定しとけばコンシューマの処理が追いつかないときにプロデューサをブロックすることもできるよ
10011001
Over 1000Thread このスレッドは1000を超えました。
もう書けないので、新しいスレッドを立ててくださいです。。。
life time: 38日 7時間 47分 35秒
もう書けないので、新しいスレッドを立ててくださいです。。。
life time: 38日 7時間 47分 35秒
レス数が1000を超えています。これ以上書き込みはできません。
ニュース
- 高市首相、トランプ米大統領に「早期に会いたい」 日中関係悪化受け… ★3 [BFU★]
- 「これいいじゃん!!!」 セブン-イレブンの1620円で買える“1人用クリスマスケーキ”🎂に注目殺到「天才すぎる」 [パンナ・コッタ★]
- 【コメ】卸売業者「簡単に安売りできない」「大暴落起きれば大赤字に」 JA「新米の販売進度が近年になく遅い。コメの回転が悪い」 ★5 [Hitzeschleier★]
- 高市早苗首相が天理教系企業に“巨額発注” 総額5000万円 本人は「政治団体の活動に必要な支出」と回答 ★2 [Hitzeschleier★]
- 【サッカー】日本代表、FIFAランキング“4位”の強豪イングランドとの対戦が正式決定! 来年3月に聖地ウェンブリーで激突へ [久太郎★]
- 「残クレ」でマイホーム、国が銀行向け保険 新型住宅ローン普及促す -日経 ★3 [少考さん★]
- 高市早苗「長期金利なんかよりも日本が成長することのほうが大事」 [834922174]
- 【悲報】高市「マクロンさあ!近平G7に呼ばずハミゴにしちゃってよ!😡」【小学生内閣】 [359965264]
- 結局手を出さなければ緊張することもなかった、高市早苗の外交力はゼロどころかマイナス [245325974]
- 近所にびっくりドンキーがないんだけど!!!
- 【安倍晋三】中国船4隻が領海侵入 [828897501]
- 【実況】博衣こよりのえちえちスーパーダンガンロンパ4🧪
