无法抓取此特定 div 类

Question

我很好奇为什么我不能按如下方式获得这个类的 div 元素（以前在不同的站点上工作过）。可能是这个网站的问题？

from urllib.request import urlopen

from bs4 import BeautifulSoup

import requests

url = "https://www.docmorris.de/produkte/abnehmen"

page=requests.get(url, headers=headers)

soup = BeautifulSoup(page.content, features="lxml")

divs=soup.find_all("div",attrs={"class": "l-product mod-standard product 

list-item ff-slider"})

print(divs)

打印一个空数组。我想要所有具有类'l-product mod-standard product list-item ff-slider'的div元素

Answer 1

您只需要一个单类的多值，这将不那么脆弱。此外，删除标题。from bs4 import BeautifulSoupimport requestsurl = "https://www.docmorris.de/produkte/abnehmen"page = requests.get(url)  soup = BeautifulSoup(page.content, features="lxml")divs = soup.select('.l-product')print(divs)多值（更脆弱）将是：divs = soup.select('.l-product.mod-standard.product.list-item.ff-slider')或者（如评论中 - 确保在一行）：divs = soup.find_all("div",attrs={"class": "l-product mod-standard product list-item ff-slider"})