作者hankerafter (憧憬)
看板Python
标题[问题] 新手请教有关股票爬虫
时间Wed May 26 22:46:12 2021
大家好,小弟完全没学过程式,目前有用google sheets 的一些指令(IMPORTXML)去抓
某些股票的股价,然後做一些运算。
目前遇到的问题是:
1.如果太多储存格有importxml指令就会出现正在载入中(被网站限制爬虫)。
2.因第一个问题,所以想用分流方式解决,但某些网站用chrome抓xpath,
会抓不到真实路径。
3.如果想学python应该从哪里着手,有无推荐的书。
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 180.217.58.117 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1622040374.A.EEA.html
1F:→ hankerafter: 补充:希望可学到抓取网站任何一栏位数据05/26 23:06
2F:推 penut85420: google看看「铁人赛 股票」,it邦上面蛮多教学的05/27 05:31
3F:→ penut85420: 一些串接券商行情之类的,我也是在那边学的05/27 05:32
4F:→ penut85420: 如果是股票行情的话,基本爬虫加证交所API应该就行05/27 05:33
6F:→ penut85420: 虽然这个专案很久没更新了,但可以替你的研究起个头05/27 05:35
7F:→ penut85420: 至於Python的语法学习则推荐这个网站05/27 05:36
9F:→ penut85420: 也有电子书版本可以购买05/27 05:36
谢谢85420提供好多资讯,可来好好研究了。
10F:→ Virness: 你没说要即时还是历史资料05/27 07:35
回virness大,是即时
※ 编辑: hankerafter (36.238.138.93 台湾), 05/27/2021 08:53:45
※ 编辑: hankerafter (36.238.138.93 台湾), 05/27/2021 08:57:44
11F:推 abr810416: FinMind GitHub 有提供资料可以使用 05/29 07:38
好喔,来试看看,感谢
12F:推 Virness: 直接串券商api05/29 11:18
哈,完全不懂怎麽串,谢谢大大给方向
13F:→ liton: 你是想用即时股价还想学爬虫?一次抓全部的还是抓名单里面05/29 14:07
14F:→ liton: 的?是抓当时的一个股价还是开盘到抓的当时的全部股价?05/29 14:07
我想要自选股的及时股价,加入基本面、筹码面等,再加入自己的公式做运算,然後做到
价提醒
※ 编辑: hankerafter (116.89.141.236 台湾), 05/29/2021 15:21:14
16F:→ liton: tml 参考一下你要学多少东西才行 05/30 01:16
17F:→ liton: 别耗在爬虫了 网页稍微调整一下就够你忙不完了 05/30 01:18
18F:→ liton: 上面跟你说的券商api和FinMind,你得自己有能力去搜 05/30 01:28
19F:→ liton: 另外补充一下,FinMind要日中数据得是交钱会员了。目前Fin 05/30 01:33
20F:→ liton: Mind的日中交易数据是整天一次下,也就是你13:25查,会把 05/30 01:33
21F:→ liton: 这支股票9点的数据全传给你 05/30 01:33
好的,我也知道要从头学需花很多时间,如果能套用现成最好,
不过这些现成的就够我忙了,还在学怎麽使用。
真的谢谢提供这些资讯,让我好好思考方向。
22F:→ alvinlin: 先定义你的需求开始才得到比较明确的答案 05/30 16:55
需求就是抓大数据推测下支飙股,这样会不会太奢侈,呵呵
*[1;37m推
mickyang: https://reurl.cc/eE8vGW 05/30 17:26
谢谢大大,让我少一点时间去搜寻这些范例
24F:推 mickyang: 抱歉,补充一下,因上面的程式有用到 Line Notify. 05/30 23:05
25F:→ mickyang: 若您没有用 Line Notify ,可以把档案最下面的 05/30 23:05
26F:→ mickyang: Line Notify 的程式码给他去掉。 05/30 23:06
恩恩,LINE连动有时还蛮好用的
28F:→ liton: 最大的问题是要将日中数据和跨日数据融合在一起。一般来说 05/31 01:08
29F:→ liton: 日中数据跟跨日数据是不同数据源,你盘中得要有整合在一起 05/31 01:08
30F:→ liton: 立刻重新算指标的能力 05/31 01:08
31F:→ liton: 很容易出现依据昨天之前的跨日数据进场,结果今天的数据一 05/31 01:11
32F:→ liton: 算结果方向错了 05/31 01:11
※ 编辑: hankerafter (36.238.137.102 台湾), 05/31/2021 12:43:58
※ 编辑: hankerafter (36.238.137.102 台湾), 05/31/2021 14:37:09
34F:→ liton: 盘中即时抓数据 算指标 做图标 05/31 18:32
35F:→ liton: 台股就不放了,功能跟陆股差不多 05/31 18:33
恩恩,感觉好多功能应该可以用
37F:推 qwer11324: 可参考 用Python 理财:打造小资族选股策略 06/01 08:32
※ 编辑: hankerafter (36.238.137.102 台湾), 06/01/2021 10:57:11
对於新手的我,真是受益多多,感谢liton大大整理
※ 编辑: hankerafter (36.238.137.102 台湾), 06/03/2021 18:43:44