[问题] 爬虫下载表格

楼主: k5209630 (安安)   2019-04-05 19:51:24
大家好
我想利用爬虫把网页上的表格下载下来
前一天还可以下载
但是今天一样的程式却无法执行
问题出现在select_one抓不到标签
我回头看网页的原始码但找不到错误
希望有高手可以解答一下
谢谢
程式码:
from selenium import webdriver
from bs4 import BeautifulSoup
import pandas as pd
driver = webdriver.Chrome("./chromedriver")
driver.implicitly_wait(10)
driver.get("http://rdc28.cwb.gov.tw/TDB/ntdb/pageControl/typhoon")
soup = BeautifulSoup(driver.page_source, "lxml")
table = soup.select_one(
"body > div#wrapper_ex > div#wrapper > div#main > div.content2 > div.tyde
> table")
print(table)
df = pd.read_html(str(table))
df[0].to_csv("typhoon.csv")
print("储存页面ing")
driver.quit()

Links booklink

Contact Us: admin [ a t ] ucptt.com