1. PTT
  2. Python

[问题]pandas memory error

楼主: asd3456722 (sofia)   2016-07-15 15:47:36
由于小弟在处理一份相当大的data
但是在用pandas读取时就出现memory error
想请问高手怎么解决
感恩～～～
作者: kenduest (小州)   2016-07-15 15:54:00
资料多大？系统内存多少？虚拟内存有多少？可不可以批次分量处理？
楼主: asd3456722 (sofia)   2016-07-15 16:11:00
data 1.1G csv.filehttp://i.imgur.com/XHjgMtd.jpg
作者: gozule (好冷啊~~)   2016-07-15 17:38:00
试着用iterator分批处理
作者: kevinkung (Jaguar)   2016-07-17 00:21:00
应该是你处理的方式有 我试过用pandas处理过大量的资料 没发生memory error处理资料的方式有问题
继续阅读
[问题] Leetcode 88. Merge Sorted Arrayxxx30165Re: [资讯] pyclub! Taipei.py 每月 sprint 活动keitheis[问题]以subprocess呼叫nosetests执行测试的问题jonney211[问题] 新手解leetcode遇到performance问题darkhcv[问题] raspberry pi 温湿度定时器daniel098962[问题] py2exe 执行后只有显示running py2exePHONm[问题] Django admin的问题toswitch[问题] 请问有办法在网页内汇入python模组吗？andrew5106[问题] 对ArduinoUNO的serial写入资料benbo[问题] Udacity - cs101(初学者)gonjay

Links booklink

Contact Us: admin [ a t ] ucptt.com