10GBのCSVファイルのソートが遅いのはなぜですか? (49レス)
10GBのCSVファイルのソートが遅いのはなぜですか? http://mevius.5ch.net/test/read.cgi/tech/1686572445/
上
下
前次
1-
新
通常表示
512バイト分割
レス栞
抽出解除
レス栞
23: デフォルトの名無しさん [] 2023/08/10(木) 11:29:41.03 ID:YYBOmFjO >>20 レコード数が1でソートの必要がないかも知れない。 http://mevius.5ch.net/test/read.cgi/tech/1686572445/23
45: デフォルトの名無しさん [sage] 2024/11/08(金) 00:13:58.03 ID:0/QV09gu csvだから遅いとかはない、デシリアライズして云々するよりそのままテキスト(あるいはその部分文字列、フィールド)として比較するならむしろ有利 単にサイズの問題、メモリより十分小さいサイズに分割(今どきなら数GBなんで100MBあたり)して個別にソート、マージ むしろテキストにシリアライズされたデータにおいて、最も実用的な類のフォーマットに入る http://mevius.5ch.net/test/read.cgi/tech/1686572445/45
メモ帳
(0/65535文字)
上
下
前次
1-
新
書
関
写
板
覧
索
設
栞
歴
スレ情報
赤レス抽出
画像レス抽出
歴の未読スレ
AAサムネイル
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.295s*