Moo*_*dra 7 python web-scraping python-requests
import requests
import webbrowser
from bs4 import BeautifulSoup
url = 'https://www.gamefaqs.com'
#headers={'User-Agent': 'Mozilla/5.0'}
headers ={'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.115 Safari/537.36'}
response = requests.get(url, headers)
Run Code Online (Sandbox Code Playgroud)
response.status_code 返回403。我可以使用firefox/chrome浏览网站,所以这似乎是一个编码错误。
我无法弄清楚我犯了什么错误。
谢谢你。
如果您通过Session对象发出请求,这会起作用。
import requests
session = requests.Session()
response = session.get('https://www.gamefaqs.com', headers={'User-Agent': 'Mozilla/5.0'})
print(response.status_code)
Run Code Online (Sandbox Code Playgroud)
输出:
200
Run Code Online (Sandbox Code Playgroud)
| 归档时间: |
|
| 查看次数: |
10046 次 |
| 最近记录: |