10GBのCSVファイルのソートが遅いのはなぜですか？

**デフォルトの名無しさん** · 2023/06/12(月) 21:20:45.91

CSVファイルは検索が速いって聞きました
ではなぜソートが遅いのでしょうか？

**デフォルトの名無しさん** · 2023/06/13(火) 08:52:56.97

べ、べつに遅くないし！

**デフォルトの名無しさん** · 2023/06/13(火) 09:49:32.67

>>1君がバカなのは何故ですか

って言われて答えられないでしょうそれと同じ

**デフォルトの名無しさん** · 2023/06/13(火) 09:53:59.11

マジレスしとくと
スレタイの "10GB" と >>1 の質問が無関係だな

**デフォルトの名無しさん** · 2023/06/13(火) 13:36:34.95

さっき霊魂を見たんですが、どうしたらいいですか

**デフォルトの名無しさん** · 2023/06/13(火) 16:18:52.30

「…見なかったことにしといてやる！」と宣言すればおけ

**デフォルトの名無しさん** · 2023/06/13(火) 19:37:20.82

よかろう、ならばビットマップファイルだ

**デフォルトの名無しさん** · 2023/06/22(木) 06:41:18.88

>>1
それは　ヒ・ミ・ツ。
ﾌﾌﾌｯ…

**デフォルトの名無しさん** · 2023/06/29(木) 13:51:47.41

10GBだから

**デフォルトの名無しさん** · 2023/06/30(金) 03:16:09.95

昭∞！！！！
大∞！！！！！
昇∞！！！！！！
漠∞！！！！！！！

**デフォルトの名無しさん** · 2023/08/09(水) 07:21:27.86

>>1
速いと感じるか遅いと感じるかは個人の感覚の問題
何秒なら速いのか、何と比較して速いのか
他人が遅いというから遅いとか小学生かよ

**デフォルトの名無しさん** · 2023/08/09(水) 07:46:15.85

>>11
じゃあ君は速いとでも？ｗ

**デフォルトの名無しさん** · 2023/08/09(水) 07:47:25.44

CSVのソートが遅いのは社会的共同体の中で自然に共有されうる普遍的事実である

**デフォルトの名無しさん** · 2023/08/09(水) 10:35:23.16

まぁRDBMS使った方がいいわな

**デフォルトの名無しさん** · 2023/08/09(水) 11:06:02.05

何をつかっても遅いものは遅いw

**デフォルトの名無しさん** · 2023/08/09(水) 15:27:00.04

実装次第で遅くなりそうなケースだな
フレームワークとコピペだけで戦ってきたやつには荷が重いだろう

**デフォルトの名無しさん** · 2023/08/09(水) 16:22:02.52

jsonやmessagepackよりは速いかも知れないな

**デフォルトの名無しさん** · 2023/08/10(木) 00:02:20.56

10GBはファイルの大きさであって、データの件数ではないんだよな

**デフォルトの名無しさん** · 2023/08/10(木) 01:18:52.99

10GB のデータをソートするには、
並べ替えた途中経過のデータも持っておく必要があるから、
100GBぐらいのメモリが必要なのでは？

メモリが少ないと、途中経過のデータをハードディスクに保存して、
メモリを空けないといけない。スワップ

**デフォルトの名無しさん** · 2023/08/10(木) 01:20:23.88

>>18
レコード数を3とする、ソートせよ

**デフォルトの名無しさん** · 2023/08/10(木) 02:07:49.13

ソートのキーだけでいい

**デフォルトの名無しさん** · 2023/08/10(木) 10:55:32.60

メモリーに乗りそうな大きさに分割してソートして
それをマージソートするのが一番早いんじゃね？

**デフォルトの名無しさん** · 2023/08/10(木) 11:29:41.03

>>20
レコード数が1でソートの必要がないかも知れない。

**デフォルトの名無しさん** · 2023/08/10(木) 11:33:16.87

>>1
検索早くないのでは？要するにただのテキストの塊なので grep コマンドとか使って検索できるってだけのことで、その状態ではインデックスなしの全検索だから遅くなると思う。

**デフォルトの名無しさん** · 2023/08/10(木) 20:54:16.43

10GBのファイルを書き換えながらソートしているのかな？