10GBのCSVファイルのソートが遅いのはなぜですか? (49レス)
10GBのCSVファイルのソートが遅いのはなぜですか? http://mevius.5ch.net/test/read.cgi/tech/1686572445/
上
下
前
次
1-
新
通常表示
512バイト分割
レス栞
45: デフォルトの名無しさん [sage] 2024/11/08(金) 00:13:58.03 ID:0/QV09gu csvだから遅いとかはない、デシリアライズして云々するよりそのままテキスト(あるいはその部分文字列、フィールド)として比較するならむしろ有利 単にサイズの問題、メモリより十分小さいサイズに分割(今どきなら数GBなんで100MBあたり)して個別にソート、マージ むしろテキストにシリアライズされたデータにおいて、最も実用的な類のフォーマットに入る http://mevius.5ch.net/test/read.cgi/tech/1686572445/45
メモ帳
(0/65535文字)
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 4 レスあります
スレ情報
赤レス抽出
画像レス抽出
歴の未読スレ
AAサムネイル
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.010s