BeautifulSoup не может найти необходимый div

Question

Я пытаюсь получить вложенные div и его содержимое, но не могу. Я хочу получить доступ к div с классом: «box coursebox».

response = res.read() 
soup = BeautifulSoup(response, "html.parser")  
div = soup.find_all('div', attrs={'class':'box coursebox'}) 

Приведенный выше код дает DIV с 0 элементами, когда должно быть 8. find_all вызовы до этой линии работы отлично.

Спасибо за помощь!

Answer 1

В случае атрибутов, имеющих более одного значения, Beautiful Soup помещает все значения в список. В вашем коде вам нужно учитывать это, когда вы выполняете поиск.

Возможно, что-то вроде этого?

div = soup.find_all('div', class_="box coursebox"}) 

Обратитесь к this section документации Beautiful Soup для получения более подробной информации о многозначных атрибутах и ​​this section для деталей на поиск элементов вверх по классу.

Также , пожалуйста, не размещать исходный код как изображение.

Answer 2

изменение:

soup = BeautifulSoup(response, "html.parser") 

к:

soup = BeautifulSoup(response, "lxml") 

html.parser не является стабильным, вы можете изменить его на lxml