我正在使用Pandas库进行遥感时间序列分析。最终,我想通过使用块大小将DataFrame保存到csv,但是遇到一个小问题。我的代码生成了6个NumPy数组,我将它们转换为Pandas Series。每个系列都包含很多项目
>>> prcpSeries.shape
(12626172,)
我想将Series添加到Pandas DataFrame(df)中,以便可以将它们逐块保存到csv文件中。
d = {'prcp': pd.Series(prcpSeries),
'tmax': pd.Series(tmaxSeries),
'tmin': pd.Series(tminSeries),
'ndvi': pd.Series(ndviSeries),
'lstm': pd.Series(lstmSeries),
'evtm': pd.Series(evtmSeries)}
df = pd.DataFrame(d)
outFile ='F:/data/output/run1/_'+str(i)+'.out'
df.to_csv(outFile, header = False, chunksize = 1000)
d = None
df = None
但是我的代码卡在了下面的行中,给出了内存错误
df = pd.DataFrame(d)
有什么建议?是否可以逐块填充Pandas DataFrame?
相关分类