====== BeautifulSoup ======

Doc: [[https://www.crummy.com/software/BeautifulSoup/bs4/doc/]]

===== Installer BeautifulSoup =====

<code bash>
pip install beautifulsoup4
</code>

===== Lecture d'une page web =====

Récupérer le code HTML de la page :

<code python>
import urllib.request

url  = "https://my.website.com/page.html"
page = urllib.request.urlopen(url)
html = page.read()
</code>

===== Création de l'objet BeautifulSoup =====

Parser le code HTML pour produire un objet BeautifulSoup :

<code python>
from bs4 import BeautifulSoup

soup = BeautifulSoup(html)
</code>

===== Extraire les données de l'objet BeautifulSoup =====

Extraire le code HTML remise en forme :

<code python>
soup.prettify()
</code>

Extraire le texte brut :

<code python>
soup.get_text()
</code>

Parcourir tous les éléments :

<code python>
for element in soup:
    print(type(element))
</code>

Parcourir tous les élements de type DIV :

<code python>
for element in soup.find_all('div'):
    print(element)
</code>

Parcourir tous les élements de type DIV ayant la classe "exemple" :

<code python>
for element in soup.find_all('div', class_='exemple'):
    print(element)
</code>