我想从 mobile.de 中抓取一些供个人使用的广告。
我正在使用带有请求库的 python 3.6,但我面临一些机器人检查的问题。我怎么能从他们的网站通过这个网关?
import requests
from bs4 import BeautifulSoup
r = requests.get("https://www.mobile.de/?lang=en")
bs = BeautifulSoup(r.content, 'lxml')
print(bs)
这部分代码向我显示以下内容:
<p>To continue your browser has to accept cookies and has to have JavaScript enabled.</p>
我在哪里可以找到我需要解决的逻辑才能通过这个?
相关分类