猿问

如何抓取使用 django 的网站

我想创建一个机器人来抓取具有以下地址的网站:


https://1xxpers100.mobi/en/line/


但问题是,当我想从该网站获取数据时,我意识到该网站正在使用 django,因为他们使用了 {{if group_name}} 等短语


有一个用这种方法创建的循环,它创建表行,我想要的信息就在那里。


当我使用 python 并下载 html 代码时,除了“{{code}}”之外,我找不到任何内容,但是当我使用 chrome 开发人员工具(检查)以及使用控制台时,我可以看到我想要的表格里面的内容


如何获取包含该表内容的 html 代码(如 chrome 工具)以从该网站获取我想要的信息?


我获取代码的方法是使用 python :


import urllib.request


fp = urllib.request.urlopen("https://1xxpers100.mobi/en/line/")

mybytes = fp.read()


mystr = mybytes.decode("utf8")

fp.close()


海绵宝宝撒
浏览 132回答 1
1回答
随时随地看视频慕课网APP

相关分类

Python
我要回答