[问题] 新手请教有关股票爬虫

楼主: hankerafter (憧憬)   2021-05-26 22:46:12
大家好,小弟完全没学过程式,目前有用google sheets 的一些指令(IMPORTXML)去抓
某些股票的股价,然后做一些运算。
目前遇到的问题是:
1.如果太多储存格有importxml指令就会出现正在加载中(被网站限制爬虫)。
2.因第一个问题,所以想用分流方式解决,但某些网站用chrome抓xpath,
会抓不到真实路径。
3.如果想学python应该从哪里着手,有无推荐的书。
楼主: hankerafter (憧憬)   2021-05-26 23:06:00
补充:希望可学到抓取网站任何一字段数据
作者: penut85420 (PenutGGorz)   2021-05-27 05:31:00
google看看“铁人赛 股票”,it邦上面蛮多教学的一些串接券商行情之类的,我也是在那边学的如果是股票行情的话,基本爬虫加证交所API应该就行可以参考的GitHub专案 https://git.io/JGkYU虽然这个专案很久没更新了,但可以替你的研究起个头至于Python的语法学习则推荐这个网站https://openhome.cc/Gossip/Python/也有电子书版本可以购买
作者: Virness   2021-05-27 07:35:00
你没说要即时还是历史资料
作者: abr810416 (无敌铁金刚)   2021-05-29 07:38:00
FinMind GitHub 有提供资料可以使用
作者: Virness   2021-05-29 11:18:00
直接串券商api
作者: liton (欧吉桑留学生)   2021-05-29 14:07:00
你是想用即时股价还想学爬虫?一次抓全部的还是抓名单里面的?是抓当时的一个股价还是开盘到抓的当时的全部股价?
作者: alvinlin (林矜业)   2021-05-30 16:55:00
先定义你的需求开始才得到比较明确的答案
作者: mickyang (mick)   2021-05-30 17:47:00
https://reurl.cc/eE8v2M抱歉,补充一下,因上面的程式有用到 Line Notify.若您没有用 Line Notify ,可以把档案最下面的Line Notify 的程式码给他去掉。Line Notify 教学 https://reurl.cc/R010o9
作者: liton (欧吉桑留学生)   2021-05-31 01:08:00
最大的问题是要将日中数据和跨日数据融合在一起。一般来说日中数据跟跨日数据是不同数据源,你盘中得要有整合在一起立刻重新算指标的能力很容易出现依据昨天之前的跨日数据进场,结果今天的数据一算结果方向错了https://youtu.be/H5aKmfyag1U
作者: fj520 (fj520)   2021-06-01 07:56:00
推荐这频道 蛮多教学的 https://youtube.com/c/Largitdata
作者: qwer11324 (DS)   2021-06-01 08:32:00
可参考 用Python 理财:打造小资族选股策略
作者: liton (欧吉桑留学生)   2021-06-02 18:20:00
整理了一下台股的数据源 https://reurl.cc/YOWbqL

Links booklink

Contact Us: admin [ a t ] ucptt.com