問題
使用VSC寫爬蟲會遇到一個問題是Print出來的內容無法完整印出來,寫入一個HTML檔案就可以方便看結果。
程式碼
import requests
from bs4 import BeautifulSoup
url = "https://google.com"
res = requests.get(url)
soup = BeautifulSoup(res.text, 'html.parser')
law = soup.select('.law-content div')
#寫入my.html
with open('my.html', 'w', encoding='UTF-8') as f:
f.write(str(law))