問題描述

已經(jīng)增加虛擬機(jī)內(nèi)存至2g，依然無法導(dǎo)出。

問題解答

一般是分文件導(dǎo)出的，如果一個單位的數(shù)據(jù)大約是1M的話，就分成1024個文件。

另外，合成1G的csv也是不合實際的，因為1G的csv幾乎是打不開的。如果實在是要合成1G的話，把導(dǎo)出的一千多個文件再合成為一份CSV即可，文件合成python很容易實現(xiàn)。

1G的數(shù)據(jù)月CSV處理本身就不太合理了。試試看sqlite3。

8G一樣不夠，建議選擇數(shù)據(jù)庫作為存儲方案，1G規(guī)模的CSV是沒有存在的意義的。

用ftp內(nèi)網(wǎng)下載飛快.我前兩天傳8個g.感覺就是幾分鐘就下載好了