Извлечь изображения с веб-сайта – примеры C#

Предположим, вы веб-разработчик, графический дизайнер, исследователь, журналист или студент, одним словом, человек, работающий над собственным проектом. В этом случае вам, очевидно, понадобятся изображения для вашего проекта в процессе разработки. Чтобы скачать изображения по ссылке вручную, вы потратите очень много времени. Вам нужно будет скопировать URL-адрес каждого изображения, а затем загрузить изображение, но вы можете использовать библиотеку Aspose.HTML for .NET для извлечения изображений с веб-сайта программно.

В этой статье мы рассмотрим, как извлекать с веб-сайта различные типы изображений с помощью Aspose.HTML for .NET API. Использование нашей библиотеки C# поможет вам найти и сохранить изображение по ссылке на веб-страницу. Это лучше, чем копаться и искать вручную. Давайте попробуем! Извлекайте изображения с сайта программно!

Извлечь изображения с веб-сайта – код C#

Большинство изображений в HTML-документе представлены с помощью элемента <img>. Вот пример того, как использовать Aspose.HTML для извлечения изображений с веб-сайта, указанных в <img> элементе. Итак, чтобы скачать изображения по ссылке, вам нужно сделать несколько следующих шагов:

  1. Используйте конструктор HTMLDocument(Url) для создания экземпляра класса HTMLDocument и передайте ему URL-адрес веб-сайта, с которого вы хотите загрузить изображения.
  2. Используйте метод GetElementsByTagName(“img”) для сбора всех элементов <img> . Метод возвращает список элементов <img> HTML-документа.
  3. Используйте метод Select() для создания отдельной коллекции относительных URL-адресов изображений и GetAttribute(“src”) для извлечения атрибута src каждого элемента <img>.
  4. Создайте абсолютные URL-адреса изображений, используя класс Url и BaseURI класса HTMLDocument.
  5. Для каждого абсолютного URL-адреса создайте запрос с помощью конструктора RequestMessage(url).
  6. Используйте метод документа Context.Network.Send(request) для отправки запроса. Ответ проверяется, чтобы убедиться, что он был успешным.
  7. Наконец, если ответ был успешным, используйте метод File.WriteAllBytes(), чтобы сохранить каждое изображение в локальный файл.
 1// Extract images from website using C#
 2
 3// Load a webpage that contains <img> elements
 4using HTMLDocument document = new HTMLDocument("https://docs.aspose.com/html/net/tutorial/html-colors/");
 5
 6// Collect all <img> elements
 7HTMLCollection images = document.GetElementsByTagName("img");
 8
 9// Extract distinct src values and skip empty and data URI sources
10IEnumerable<string> sources = images
11    .Select(image => image.GetAttribute("src"))
12    .Where(src => !string.IsNullOrWhiteSpace(src) &&
13        !src.StartsWith("data:", StringComparison.OrdinalIgnoreCase))
14    .Distinct();
15
16foreach (string src in sources)
17{
18    // Resolve the image URL against the document base URI
19    Url imageUrl = new Url(src, document.BaseURI);
20
21    using RequestMessage request = new RequestMessage(imageUrl);
22    using ResponseMessage response = document.Context.Network.Send(request);
23
24    if (!response.IsSuccess)
25        continue;
26
27    string fileName = Path.GetFileName(imageUrl.Pathname);
28
29    if (string.IsNullOrWhiteSpace(fileName))
30        continue;
31
32    File.WriteAllBytes(Path.Combine(OutputDir, fileName), response.Content.ReadAsByteArray());
33}

Примечание. Важно соблюдать законы об авторском праве и получать надлежащее разрешение или лицензию перед использованием сохраненных изображений в коммерческих целях. Мы не поддерживаем извлечение данных и использование файлов других людей в коммерческих целях без их разрешения.

Извлечь иконки с веб-сайта – код C#

Иконки – это разновидность изображений в документах HTML, которые указываются с помощью элементов <link> с атрибутом rel, установленным на icon. Давайте посмотрим, как загрузить иконки с веб-сайта с помощью библиотеки Aspose.HTML for .NET:

  1. Используйте конструктор HTMLDocument(Url) для создания экземпляра класса HTMLDocument и передайте ему URL-адрес веб-сайта, с которого вы хотите загрузить значки.
  2. Используйте метод GetElementsByTagName("link") для сбора всех элементов <link>.
  3. Чтобы отфильтровать изображения без значков, используйте метод Where(), который фильтрует коллекцию на основе выражения link => link.GetAttribute("rel") == "icon". Таким образом, коллекция icons будет содержать только links с атрибутом rel со значением icon.
  4. Используйте метод Select() для создания отдельной коллекции относительных URL-адресов значков и GetAttribute("href") для извлечения атрибута href каждого элемента <link>.
  5. Создайте абсолютные URL-адреса значков, используя класс Url и BaseURI класса HTMLDocument.
  6. Затем для каждого абсолютного URL создайте запрос с помощью класса RequestMessage.
  7. Используйте метод документа Context.Network.Send(request) для отправки запроса. Ответ проверяется, чтобы убедиться, что он был успешным.
  8. Если ответ был успешным, используйте метод File.WriteAllBytes() для сохранения значков в локальный файл. В результате у вас будет коллекция иконок с веб-сайта в вашей локальной папке.
 1// Download icons from website using C#
 2
 3using HTMLDocument document = new HTMLDocument("https://docs.aspose.com/html/net/message-handlers/");
 4
 5// Collect all <link> elements
 6HTMLCollection links = document.GetElementsByTagName("link");
 7
 8string[] iconTypes =
 9{
10    "icon",
11    "apple-touch-icon",
12    "apple-touch-icon-precomposed",
13    "mask-icon"
14};
15
16// Select links whose rel attribute contains an icon-related token
17IEnumerable<Element> icons = links.Where(link =>
18    link.GetAttribute("rel")
19        .Split()
20        .Any(token => iconTypes.Contains(
21            token,
22            StringComparer.OrdinalIgnoreCase)));
23
24// Extract distinct href values and skip empty and data URI sources
25IEnumerable<string> sources = icons
26    .Select(icon => icon.GetAttribute("href"))
27    .Where(href => !string.IsNullOrWhiteSpace(href) &&
28        !href.StartsWith("data:", StringComparison.OrdinalIgnoreCase))
29    .Distinct();
30
31foreach (string src in sources)
32{
33    // Resolve the icon URL against the document base URI
34    Url iconUrl = new Url(src, document.BaseURI);
35
36    using RequestMessage request = new RequestMessage(iconUrl);
37    using ResponseMessage response = document.Context.Network.Send(request);
38
39    if (!response.IsSuccess)
40        continue;
41
42    string fileName = Path.GetFileName(iconUrl.Pathname);
43
44    if (string.IsNullOrWhiteSpace(fileName))
45        continue;
46
47    File.WriteAllBytes(Path.Combine(OutputDir, fileName), response.Content.ReadAsByteArray());
48}

Вы можете использовать эти примеры C# для автоматизации извлечения всех изображений с веб-сайта, что может быть полезно для таких задач, как архивирование, исследование, анализ веб-контента или любого другого приложения для личного использования. Кроме того, это отлично подходит для веб-дизайнеров и разработчиков, желающих получать изображения с сайтов, не углубляясь в исходный код.

Вы можете скачать полные примеры C# и файлы данных с GitHub.

Aspose.HTML предлагает бесплатные Приложения HTML, которые представляют собой онлайн-коллекцию конвертеров, слияний, загрузчиков, инструментов SEO, генераторов HTML-кода, инструментов URL и многое другое. Приложения работают в любой операционной системе с веб-браузером и не требуют установки дополнительного программного обеспечения. Легко конвертируйте, объединяйте, кодируйте, генерируйте HTML-код, извлекайте данные из Интернета или анализируйте веб-страницы с точки зрения SEO, где бы вы ни находились. Используйте нашу коллекцию веб-приложений HTML, чтобы выполнять повседневные дела и сделать свой рабочий процесс безупречным!

Text “Баннер веб-приложений HTML”