HTML-навигация – С#

Используя библиотеку классов Aspose.HTML, вы можете легко создать собственное приложение, поскольку наш API предоставляет мощный набор инструментов для анализа и сбора информации из HTML-документов.

В этой статье содержится информация о том, как программно извлекать данные из HTML-документов с помощью Aspose.HTML API. Вы узнаете:

• как перемещаться по HTML-документу и выполнять детальную проверку его элементов с помощью API;
• об использовании пользовательских фильтров для перебора элементов документа;
• как перемещаться по документу с помощью CSS Selector или XPath Query.

HTML-навигация

Пространство имен Aspose.HtmlDom (объектная модель документа) предоставляет API, который представляет и взаимодействует с любыми документами HTML, XML или SVG и полностью основан на поддерживаемой спецификации WHATWG DOM. во многих современных браузерах. DOM – это модель документа, загруженная в браузер и представляющая документ в виде дерева узлов, где каждый узел представляет часть документа (например, элемент, текстовую строку или комментарий).

We consider how the DOM represents an HTML document in memory and how to use API for navigation through HTML files. Many ways can be used to make HTML navigation. The following shortlist shows the simplest way to access all DOM elements:

Property	Description
FirstChild	Accessing this property of an element must return a reference to the first child node.
LastChild	Accessing this property of an element must return a reference to the last child node
NextSibling	Accessing this property of an element must return a reference to the sibling node of that element which most immediately follows that element.
PreviousSibling	Accessing this property of an element must return a reference to the sibling node of that element which most immediately precedes that element.
ChildNodes	Returns a list that contains all children of that element.

Четыре свойства класса Node – FirstChild, LastChild, NextSibling и PreviousSibling, каждое из которых предоставляет живую ссылку на другой элемент. с определенной связью с текущим элементом, если связанный элемент существует. Полный список классов и методов, представленных в пространстве имен Aspose.Html.Dom, вы найдете в Справочнике API.

Используя упомянутые свойства, вы можете перемещаться по HTML-документу следующим образом:

// For complete examples and data files, please go to https://github.com/aspose-html/Aspose.HTML-for-.NET
// Prepare HTML code
var html_code = "<span>Hello</span> <span>World!</span>";

// Initialize a document from the prepared code
using (var document = new Aspose.Html.HTMLDocument(html_code, "."))
{
    // Get the reference to the first child (first SPAN) of the BODY
    var element = document.Body.FirstChild;
    Console.WriteLine(element.TextContent); // output: Hello

    // Get the reference to the whitespace between html elements
    element = element.NextSibling;
    Console.WriteLine(element.TextContent); // output: ' '

    // Get the reference to the second SPAN element
    element = element.NextSibling;
    Console.WriteLine(element.TextContent); // output: World!
}

Проверка HTML-документа и его элементов

Aspose.HTML содержит список методов, основанных на Спецификациях обхода элементов. Вы можете выполнить детальную проверку документа и его элементов с помощью API. В следующем примере кода показано обобщенное использование функций обхода элементов.

//Load a document from a file
string documentPath = System.IO.Path.Combine(DataDir, "html_file.html");
using (var document = new Aspose.Html.HTMLDocument(documentPath))
{
    // Get the html element of the document
    var element = document.DocumentElement;                
    Console.WriteLine(element.TagName); // HTML
    
    // Get the last element of the html element
    element = element.LastElementChild;
    Console.WriteLine(element.TagName); // BODY
    
    // Get the first element of the body element
    element = element.FirstElementChild;
    Console.WriteLine(element.TagName); // H1
    Console.WriteLine(element.TextContent); // Header 1     
}

Note: You need to specify the path to the source HTML file in your local file system (documentPath).

Свойство DocumentElement класса Document дает прямой доступ к элементу <html> документа ( html_file.html). Свойство LastElementChild класса Document возвращает последний дочерний элемент элемента <html>. Это элемент <body>. Согласно приведенному выше фрагменту кода, переменная element снова перегружается, и свойство FirstElementChild возвращает первый дочерний элемент элемента <body>. Это элемент <h1>.

Использование пользовательского фильтра

Для более сложных сценариев, когда вам нужно найти узел по определенному шаблону (например, получить список заголовков, ссылок и т. д.), вы можете использовать специализированный TreeWalker или объект NodeIterator с реализация пользовательского Filter.

В следующем примере показано, как реализовать собственный NodeFilter, чтобы пропустить все элементы, кроме изображений:

// For complete examples and data files, please go to https://github.com/aspose-html/Aspose.HTML-for-.NET
class OnlyImageFilter : Aspose.Html.Dom.Traversal.Filters.NodeFilter
{
    public override short AcceptNode(Aspose.Html.Dom.Node n)
    {
        // The current filter skips all elements, except IMG elements.
        return string.Equals("img", n.LocalName)
            ? FILTER_ACCEPT
            : FILTER_SKIP;
    }
}

Once you implement a filter, you can use HTML navigation as it follows:

// For complete examples and data files, please go to https://github.com/aspose-html/Aspose.HTML-for-.NET
// Prepare HTML code
var code = @"
    <p>Hello</p>
    <img src='image1.png'>
    <img src='image2.png'>
    <p>World!</p>";

// Initialize a document based on the prepared code
using (var document = new Aspose.Html.HTMLDocument(code, "."))
{
    // To start HTML navigation we need to create an instance of TreeWalker.
    // The specified parameters mean that it starts walking from the root of the document, iterating all nodes and use our custom implementation of the filter
    using (var iterator = document.CreateTreeWalker(document, Aspose.Html.Dom.Traversal.Filters.NodeFilter.SHOW_ALL, new OnlyImageFilter()))
    {         
        while (iterator.NextNode() != null)
        {
            // Since we are using our own filter, the current node will always be an instance of the HTMLImageElement.
            // So, we don't need the additional validations here.
            var image = (Aspose.Html.HTMLImageElement)iterator.CurrentNode;

            System.Console.WriteLine(image.Src);
            // output: image1.png
            // output: image2.png
        }
    }
}

XPath-запрос

Альтернативой HTML-навигации является XPath Query ( XML Path Language), который часто называют просто XPath. Это язык запросов, который можно использовать для запроса данных из HTML-документов. Он основан на DOM-представлении HTML-документа и выбирает узлы по различным критериям. Синтаксис выражений XPath довольно прост, и, что более важно, его легко читать и поддерживать.

В следующем примере показано, как использовать запросы XPath в Aspose.HTML API:

// For complete examples and data files, please go to https://github.com/aspose-html/Aspose.HTML-for-.NET
// Prepare HTML code
var code = @"
    <div class='happy'>
        <div>
            <span>Hello!</span>
        </div>
    </div>
    <p class='happy'>
        <span>World</span>
    </p>
";

// Initialize a document based on the prepared code
using (var document = new Aspose.Html.HTMLDocument(code, "."))
{
    // Here we evaluate the XPath expression where we select all child SPAN elements from elements whose 'class' attribute equals to 'happy':
    var result = document.Evaluate("//*[@class='happy']//span",
        document,
        null,
        Aspose.Html.Dom.XPath.XPathResultType.Any,
        null);

    // Iterate over the resulted nodes
    for (Aspose.Html.Dom.Node node; (node = result.IterateNext()) != null;)
    {
        System.Console.WriteLine(node.TextContent);
        // output: Hello
        // output: World!
    }
}

Селектор CSS

Наряду с HTML Navigation и XPath вы ​​можете использовать API селектора CSS, который также поддерживается нашей библиотекой. Этот API предназначен для создания шаблона поиска для сопоставления элементов в дереве документов на основе синтаксиса CSS Selectors.

В следующем примере мы используем метод QuerySelectorAll() для навигации по HTML-документу и поиска необходимых элементы. Этот метод принимает в качестве параметра селектор запроса и возвращает NodeList всех элементов, соответствующих указанному селектору.

// For complete examples and data files, please go to https://github.com/aspose-html/Aspose.HTML-for-.NET
// Prepare HTML code
var code = @"
    <div class='happy'>
        <div>
            <span>Hello</span>
        </div>
    </div>
    <p class='happy'>
        <span>World!</span>
    </p>
";

// Initialize a document based on the prepared code
using (var document = new Aspose.Html.HTMLDocument(code, "."))
{
    // Here we create a CSS Selector that extract all elements whose 'class' attribute equals to 'happy' and their child SPAN elements
    var elements = document.QuerySelectorAll(".happy span");

    // Iterate over the resulted list of elements
    foreach (Aspose.Html.HTMLElement element in elements)
    {
        System.Console.WriteLine(element.InnerHTML);
        // output: Hello
        // output: World!
    }
}

Aspose.HTML предлагает бесплатные Веб-приложения HTML, которые представляют собой онлайн-коллекцию конвертеров, слияний, загрузчиков, инструментов SEO, генераторов HTML-кода, инструментов URL и многое другое. Приложения работают в любой операционной системе с веб-браузером и не требуют установки дополнительного программного обеспечения. Легко конвертируйте, объединяйте, кодируйте, генерируйте HTML-код, извлекайте данные из Интернета или анализируйте веб-страницы с точки зрения SEO, где бы вы ни находились. Используйте нашу коллекцию веб-приложений HTML, чтобы выполнять повседневные дела и сделать свой рабочий процесс безупречным!