https://www.mittw.org.tw/products/manufacturer.aspx
想要将这个网页的公司名称爬虫下来,但发现有翻页问题
已经在stackoverflow等等网站找寻资讯,还是无法解决,
想请问各位py神有没有方法可以解决这个问题。
以下是程式码
from bs4 import BeautifulSoup
import requests
url = 'https://www.mittw.org.tw/products/manufacturer.aspx'
url_get = requests.get(url)
soup = BeautifulSoup(url_get.content, 'lxml')
col = soup.find_all('div',{'class': "name"})
for ix in col:
print(ix.get_text())