使用Pandas创建带有Seri​​es的DataFrame,导致内存错误

我正在使用Pandas库进行遥感时间序列分析。最终,我想通过使用块大小将DataFrame保存到csv,但是遇到一个小问题。我的代码生成了6个NumPy数组,我将它们转换为Pandas Series。每个系列都包含很多项目


>>> prcpSeries.shape

(12626172,)

我想将Series添加到Pandas DataFrame(df)中,以便可以将它们逐块保存到csv文件中。


d = {'prcp': pd.Series(prcpSeries),

     'tmax': pd.Series(tmaxSeries),

     'tmin': pd.Series(tminSeries),

     'ndvi': pd.Series(ndviSeries),

     'lstm': pd.Series(lstmSeries),

     'evtm': pd.Series(evtmSeries)}


df = pd.DataFrame(d)

outFile ='F:/data/output/run1/_'+str(i)+'.out'

df.to_csv(outFile, header = False, chunksize = 1000)

d = None

df = None

但是我的代码卡在了下面的行中,给出了内存错误


df = pd.DataFrame(d)

有什么建议?是否可以逐块填充Pandas DataFrame?


慕虎7371278
浏览 133回答 2
2回答
打开App,查看更多内容
随时随地看视频慕课网APP

相关分类

Python