Extraire des images d'un site web en Python

Dans cet article, nous explorons comment extraire différents types d’images à partir de sites web en utilisant la bibliothèque Aspose.HTML for Python via .NET. En tirant parti de la bibliothèque Python, vous pouvez télécharger efficacement des images à partir d’un site web sans avoir à effectuer de recherche manuelle. Découvrez comment automatiser le processus d’extraction d’images et rationaliser votre flux de travail en toute simplicité. Commençons à extraire des images par programme !

Extraire des images d’un site Web

La plupart des images d’un document HTML sont représentées par l’élément <img>. Voici un exemple d’utilisation de Aspose.HTML for Python via .NET pour trouver les images spécifiées par cet élément. Ainsi, pour télécharger des images à partir d’un site web, vous devez suivre les étapes suivantes :

1. Initialiser un objet HTMLDocument en utilisant le constructeur HTMLDocument(Url) et fournir l’URL de la page web à partir de laquelle vous voulez extraire les images.
2. Appelez la méthode get_elements_by_tag_name(“img”) sur le document pour récupérer tous les éléments <img>. Cette méthode renvoie une collection de tous les éléments <img> trouvés dans le document HTML.
3. Extraire les URL uniques des images en parcourant les éléments <img> collectés et en accédant à leur attribut src à l’aide de la méthode get_attribute(“src”). Stockez ces URL dans un ensemble pour vous assurer qu’il n’y a pas de doublons.
4. Créez des URL d’images absolues en utilisant la classe Url et la propriété base_uri de la classe HTMLDocument pour vous assurer qu’elles sont correctement formatées pour les requêtes.
5. Pour chaque URL d’image absolue, créez un objet RequestMessage et utilisez-le pour envoyer une requête réseau afin de récupérer l’image.
6. Utilisez la méthode context.network.send(request) du document pour envoyer la demande. La réponse est vérifiée pour s’assurer qu’elle a été envoyée avec succès.
7. Analyse l’URL de l’image pour obtenir le nom du fichier, puis enregistre l’image sur votre système de fichiers local en écrivant le contenu de l’image dans un fichier situé dans le répertoire de sortie désigné.

import os
from aspose.html import *
from aspose.html.net import *

# Prepare the output directory
output_dir = "output/"
os.makedirs(output_dir, exist_ok=True)

# Open a document you want to extract images from
with HTMLDocument("https://docs.aspose.com/svg/net/drawing-basics/svg-shapes/") as document:
    # Collect all <img> elements
    images = document.get_elements_by_tag_name("img")

    # Create a distinct collection of relative image URLs
    urls = set(element.get_attribute("src") for element in images)

    # Create absolute image URLs
    abs_urls = [Url(url, document.base_uri) for url in urls]

    for url in abs_urls:
        # Create an image request message
        request = RequestMessage(url)

        # Extract image
        response = document.context.network.send(request)

        # Check whether a response is successful
        if response.is_success:
            # Parse the URL to get the file name
            file_name = os.path.basename(url.pathname)

            # Save image to the local file system
            with open(os.path.join(output_dir, file_name), 'wb') as file:
                file.write(response.content.read_as_byte_array())

Note: Il est essentiel de respecter les lois sur les droits d’auteur et d’obtenir l’autorisation appropriée avant d’utiliser les images sauvegardées à des fins commerciales. Nous ne sommes pas favorables à l’extraction de données et à l’utilisation de fichiers d’autres personnes à des fins commerciales sans leur autorisation.

Extraire des icônes

Les icônes sont une sorte d’image dans les documents HTML qui sont spécifiés en utilisant des éléments <link> avec l’attribut rel fixé à icon. Voyons comment extraire des icônes d’un site Web en utilisant Aspose.HTML for Python via .NET :

1. Utilisez le constructeur HTMLDocument(Url) pour créer une instance de la classe HTMLDocument et transmettez-lui l’URL du site web dont vous voulez extraire les icônes.
2. Utilisez la méthode get_elements_by_tag_name(“link”) pour collecter tous les éléments <link>.
3. Utilisez la méthode get_attribute(“rel”) pour récupérer la valeur de l’attribut rel d’un élément HTML. Filtrez ces éléments pour ne garder que ceux dont l’attribut rel est égal à icon, qui sont typiquement utilisés pour définir des icônes.
4. Extraire l’attribut href de chaque lien iconique pour obtenir les URL relatives. Convertir ces URL relatives en URL absolues en utilisant l’URI de base du document.
5. Pour chaque URL d’image absolue, créez un objet RequestMessage et utilisez-le pour envoyer une requête réseau afin de récupérer l’image.
6. Utilisez la méthode context.network.send(request) du document pour envoyer la demande. La réponse est vérifiée pour s’assurer qu’elle a été envoyée avec succès.
7. Si la réponse indique un succès, enregistrez le fichier d’icônes localement dans le répertoire de sortie prédéfini.

import os
from aspose.html import *
from aspose.html.net import *

# Define output directory
output_dir = "output/icons/"
os.makedirs(output_dir, exist_ok=True)

# Open a document you want to extract icons from
document = HTMLDocument("https://docs.aspose.com/html/python-net/message-handlers/")

# Collect all <link> elements
links = document.get_elements_by_tag_name("link")

# Leave only "icon" elements
icons = [link for link in links if link.get_attribute("rel") == "icon"]

# Create a distinct collection of relative icon URLs
urls = {icon.get_attribute("href") for icon in icons}

# Create absolute icon URLs
abs_urls = [Url(url, document.base_uri) for url in urls]

for url in abs_urls:
    # Create a request message
    request = RequestMessage(url)

    # Extract icon
    response = document.context.network.send(request)

    # Check whether the response is successful
    if response.is_success:
        # Save icon to a local file system
        file_path = os.path.join(output_dir, os.path.basename(url.pathname))
        with open(file_path, 'wb') as file:
            file.write(response.content.read_as_byte_array())

Vous pouvez utiliser ces exemples Python pour automatiser l’extraction de toutes les images d’un site web. Cela est utile pour diverses tâches telles que l’archivage, la recherche, l’analyse de contenu web ou toute autre application à usage personnel. C’est également très utile pour les concepteurs et les développeurs de sites web qui souhaitent extraire des images de ces sites.

Téléchargez la bibliothèque Aspose.HTML for Python via .NET pour manipuler avec succès, rapidement et facilement vos documents HTML. La bibliothèque Python peut créer, modifier, extraire des données, convertir et rendre des documents HTML sans nécessiter de logiciel externe. Elle prend en charge les formats de fichiers les plus courants tels que EPUB, MHTML, XML, SVG et Markdown et peut convertir les documents en formats PDF, DOCX, XPS et Image.

Aspose.HTML propose des applications Web HTML, qui sont une collection en ligne de convertisseurs gratuits, de fusionneurs, d’outils SEO, de générateurs de code HTML, d’outils URL, de vérificateurs d’accessibilité Web, et bien plus encore. Les applications fonctionnent sur tout système d’exploitation doté d’un navigateur web et ne nécessitent aucune installation de logiciel supplémentaire. Convertissez, fusionnez, encodez, générez facilement du code HTML, extrayez des données du web ou analysez des pages web pour le référencement, où que vous soyez. Utilisez notre collection d’applications web HTML pour effectuer des tâches quotidiennes et rendre votre flux de travail impeccable !