Парсинг HTML в C#: выбор библиотеки и примеры

Обновлено: 31.10.2026 · 3 мин чтения

Понимание HTML и необходимость его разбора

HTML (HyperText Markup Language) - это язык разметки, используемый для создания веб-страниц. Он состоит из ряда тегов, которые указывают браузерам, как отображать содержимое. При разборе HTML важно правильно интерпретировать эти теги, чтобы извлекать текст, ссылки, изображения и другие данные.

Разбор HTML требуется в ситуациях, когда необходимо автоматизировать процессы работы с веб-страницами, например, при веб-скрапинге - извлечении данных с сайтов, когда API отсутствует или его использование ограничено.

Выбор библиотеки для разбора HTML

В C# существует несколько популярных библиотек для разбора HTML, включая Html Agility Pack, AngleSharp и CsQuery. Выбор зависит от множества факторов, таких как:

• Сложность HTML-кода, с которым предстоит работать.
• Необходимость поддержки CSS селекторов.
• Требования к производительности и скорости работы.
• Личные предпочтения в API и документации.

Html Agility Pack: Превосходный выбор для большинства задач

Html Agility Pack (HAP) - это мощная и гибкая библиотека, которая позволяет разработчикам выполнять комплексный разбор HTML и работать с HTML-документами как с объектной моделью. HAP хорошо подходит для обработки “грязного” HTML, так как он способен исправлять некоторые ошибки в коде веб-страницы.

Пример использования Html Agility Pack

using HtmlAgilityPack;

var htmlDoc = new HtmlDocument();
htmlDoc.LoadHtml(yourHtmlString);

foreach (HtmlNode link in htmlDoc.DocumentNode.SelectNodes("//a[@href]"))
{
    string hrefValue = link.GetAttributeValue("href", string.Empty);
    Console.WriteLine(hrefValue);
}

Среди современных библиотек стоит выделить AngleSharp.

AngleSharp: Современный и быстрый парсер

AngleSharp - это относительно новый парсер, который предоставляет API, схожий с API браузеров. Он поддерживает последние стандарты веба, включая DOM, CSSOM и даже JavaScript. Если вам нужна поддержка CSS селекторов и вы работаете с современными веб-страницами, AngleSharp может быть лучшим выбором.

Пример использования AngleSharp

using AngleSharp;
using AngleSharp.Html.Parser;

var parser = new HtmlParser();
var document = parser.ParseDocument(yourHtmlString);

foreach (var element in document.QuerySelectorAll("a[href]"))
{
    string hrefValue = element.GetAttribute("href");
    Console.WriteLine(hrefValue);
}

Тем, кто знаком с jQuery, может подойти другая библиотека.

CsQuery: jQuery-подобный синтаксис для C#

CsQuery предлагает разработчикам синтаксис, похожий на jQuery, что делает его удобным для тех, кто уже знаком с этой библиотекой JavaScript. Однако CsQuery не получал обновлений в течение длительного времени, что может стать проблемой при работе с современными веб-технологиями.

Пример использования CsQuery

using CsQuery;

CQ dom = CQ.Create(yourHtmlString);

foreach (var link in dom["a[href]"])
{
    string hrefValue = link.GetAttribute("href");
    Console.WriteLine(hrefValue);
}

Не всякую страницу можно разобрать по готовому HTML, и такие случаи требуют отдельного подхода.

Работа с сложным и динамически генерируемым HTML

Иногда веб-страницы используют JavaScript для динамической генерации содержимого, что делает невозможным извлечение данных только с помощью статического HTML-парсера. В таких случаях может потребоваться использование инструментов, таких как Selenium WebDriver, который позволяет управлять браузером и извлекать данные после выполнения JavaScript.

Лучшие практики при работе с HTML-парсерами

• Всегда уважайте правила robots.txt сайтов, с которых вы извлекаете данные.
• Избегайте чрезмерных запросов и нагрузки на веб-сервера.
• Кэшируйте страницы, если это возможно, чтобы сократить количество запросов.
• Обрабатывайте исключения и ошибки разбора, чтобы ваше приложение оставалось устойчивым.

Разбор HTML в C# - это задача, для которой существует множество инструментов. Выбор “лучшего” способа зависит от конкретных требований проекта и предпочтений разработчика. Html Agility Pack, AngleSharp и CsQuery - все это отличные библиотеки, которые способны помочь вам в решении задач по разбору HTML.