作者steve55987 (大家都叫我吠蚊)
看板Python
标题[问题] 两百万笔资料中拉出固定频率的笔数
时间Wed Oct 9 10:42:07 2019
想请问一下各位大神
目前遇到一个困难
目前研究拿到一笔总数蛮大的data 是 CSV档
但当初在蒐集资料时是每一秒蒐集一次
在蒐完之後才发现笔数过大很大软体都没办法一次汇整
是否有办法取出其中固定频率的资料呢
像是原本是一秒一笔资料想从里面大概每五分钟拿一次资料这样 其他的删除 (假设其资料
变动幅度不大，这样删除无其他问题)
谢谢!!
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 39.10.229.92 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1570588929.A.7F0.html
1F：→ outshaker: for i in range(0,len(list),300): 10/09 11:32
2F：推 TitanEric: 用pandas的 pd.read_csv(档名, chunk=一次读几笔) 10/09 11:55
3F：→ TitanEric: 详情可以找官网来看 10/09 11:55
4F：→ steve55987: 谢谢两位大大，我再研究看看!! 10/09 12:31
5F：→ jiyu520: pandas resample也可以看看 10/09 13:40