DataForSEO
SEO, search-engine results, keyword research, backlinks and AI visibility data.
Парсинг контента OnPage API
Разбирает один просканированный url в структурированный контент, с markdown_view для Markdown-рендеринга. Читает завершённое сканирование, поэтому нужен id из post_dataforseo_on_page_submit, и возвращает crawl_progress и crawl_status со значениями max_crawl_pages, pages_in_queue и pages_crawled — проверяйте их, прежде чем доверять небольшому результату: у ещё идущего сканирования просто меньше данных. Отдельный двойник post_dataforseo_on_page_content_parsing_live разбирает любой URL без сканирования — предпочитайте его, если страница ещё не входит в сканирование.
Справочная информация о ценах
- Тарификация: заявленная стоимость ответа.
- Справочная оценка запроса: USD 0.012.
- Справочный множитель для клиента: 1.0. Не применяйте его повторно к уже рассчитанной сумме клиента.
Только справочные метаданные, а не котировка для аккаунта, гарантированная цена или лимит расходов. Кредиты ресурсов — не кредиты Felo. Итоговые списания определяются записями биллинга Felo.
- Тип: array (object | null)[]
- idТип: string
- markdownТип: boolean | null
_view возвращать содержимое страницы в формате markdown
необязательное поле
если заданоtrue, содержимое страницы в формате markdown будет возвращено в полеpage_as_markdownответа;
значение по умолчанию:false - urlТип: string
URL контента для парсинга
обязательное поле
URL страницы для парсинга
пример:https://dataforseo.com/blog/a-versatile-alternative-to-google-trends-exploring-the-power-of-dataforseo-trends-api
- Тип: object | null · Response36Afe1097B20_OnPageContentParsingResponseInfo200
- Тип: number | null Формат: doublecost
общая стоимость задач, USD
- Тип: integer | nullstatus
_code общий код состояния. Полный список кодов ответа можно найти здесь.
- Тип: string | nullstatus
_message общее информационное сообщение. Полный список общих информационных сообщений можно найти здесь.
- Тип: array (object | null)[] | nulltasks
массив задач
- Тип: object | null · Response36Afe1097B20_OnPageContentParsingTaskInfo
- costТип: number | null Формат: double
общая стоимость задач, USD
- dataТип: object | null
содержит те же параметры, что вы указали в POST-запросе
- propertyТип: object | null
Name
- idТип: string | null
идентификатор задачи уникальный идентификатор задачи в нашей системе в формате UUID
- pathТип: array (string | null)[] | null
путь URL
- resultТип: array (object | null)[] | null
массив результатов
- crawlТип: string | null
_progress статус сеанса сканирования
возможные значения:in_progress,finished - crawlТип: object | null · Response36Afe1097B20_CrawlStatusInfo
_status сведения о сеансе сканирования
- maxТип: integer | null Формат: int64
_crawl _pages максимальное количество страниц для обхода указывает заданный при постановке задачи лимит max_crawl_pages
- pagesТип: integer | null Формат: int64
_crawled количество просканированных страниц
- pagesТип: integer | null Формат: int64
_in _queue количество страниц, которые сейчас находятся в очереди на сканирование
- itemsТип: array (object | null)[] | null
массив элементов
- fetchТип: string | null
_time дата и время получения контента
пример:"2022-11-01 10:02:52 +00:00" - pageТип: string | null
_as _markdown - pageТип: object | null · Response36Afe1097B20_PageContentInfo
_content разобранное содержимое страницы
- commentsТип: array (object | null)[] | null
массив комментариев, отображаемых на странице
содержит объекты с информацией о комментариях к отображаемым товарам- authorТип: string | null
автор комментария
- haveТип: boolean | null
_form - primaryТип: array (object | null)[] | null
_content основной контент на странице Подробнее о расчёте приоритета контента — в этой статье справочного центра
- textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- publishТип: string | null
_date дата публикации комментария
- ratingТип: object | null · Response36Afe1097B20_ContententRatingInfo
рейтинг продукта содержит информацию о рейтинге, который клиент поставил продукту
- maxТип: number | null Формат: double
_rating _value максимальное значение для названия рейтинга
- nameТип: string | null
название рейтинга здесь можно найти следующие элементы: Max5, Percents, CustomMax
- ratingТип: integer | null Формат: int64
_count количество голосов
- ratingТип: number | null Формат: double
_value значение рейтинга
- relativeТип: number | null Формат: double
_rating относительный рейтинг
- titleТип: string | null
заголовок комментария клиента
- contactsТип: object | null · Response36Afe1097B20_Contacts
контактная информация
содержит контактную информацию, отображаемую на странице- emailsТип: array (string | null)[] | null
массив адресов электронной почты
- telephonesТип: array (string | null)[] | null
массив номеров телефонов
- footerТип: object | null · Response36Afe1097B20_PageSectionContentInfo
содержимое нижнего колонтитула таблицы
- primaryТип: array (object | null)[] | null
_content - textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- secondaryТип: array (object | null)[] | null
_content - textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- tableТип: array (object | null)[] | null
_content содержимое таблицы на странице
- bodyТип: array (object | null)[] | null
содержимое тела таблицы
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- footerТип: array (object | null)[] | null
содержимое нижнего колонтитула таблицы
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- headerТип: array (object | null)[] | null
разобранное содержимое заголовка
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- headerТип: object | null · Response36Afe1097B20_PageSectionContentInfo
разобранное содержимое заголовка
- primaryТип: array (object | null)[] | null
_content - textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- secondaryТип: array (object | null)[] | null
_content - textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- tableТип: array (object | null)[] | null
_content содержимое таблицы на странице
- bodyТип: array (object | null)[] | null
содержимое тела таблицы
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- footerТип: array (object | null)[] | null
содержимое нижнего колонтитула таблицы
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- headerТип: array (object | null)[] | null
разобранное содержимое заголовка
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- mainТип: array (object | null)[] | null
_topic - authorТип: string | null
имя автора контента
- hТип: string | null
_title метазаголовок
- languageТип: string | null
язык контента
- levelТип: integer | null
уровень HTML
- mainТип: string | null
_title основной заголовок блока
- primaryТип: array (object | null)[] | null
_content - textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- secondaryТип: array (object | null)[] | null
_content - textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- tableТип: array (object | null)[] | null
_content содержимое таблицы на странице
- bodyТип: array (object | null)[] | null
содержимое тела таблицы
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- footerТип: array (object | null)[] | null
содержимое нижнего колонтитула таблицы
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- headerТип: array (object | null)[] | null
разобранное содержимое заголовка
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- offersТип: array (object | null)[] | null
массив товаров, отображаемых на странице
содержит объекты с информацией о товарах, отображаемых на странице- nameТип: string | null
название продукта
- priceТип: number | null Формат: double
цена продукта
- priceТип: string | null
_currency валюта цены
- priceТип: string | null
_valid _until отображает дату и время, до которых цена действительна в формате UTC: “yyyy-mm-dd hh-mm-ss +00:00” пример: "2022-11-01 10:02:52 +00:00"
- ratingsТип: array (object | null)[] | null
содержит объекты с информацией о рейтинге товаров, отображаемых на странице
- maxТип: number | null Формат: double
_rating _value максимальное значение для названия рейтинга
- nameТип: string | null
название рейтинга здесь можно найти следующие элементы: Max5, Percents, CustomMax
- ratingТип: integer | null Формат: int64
_count количество голосов
- ratingТип: number | null Формат: double
_value значение рейтинга
- relativeТип: number | null Формат: double
_rating относительный рейтинг
- secondaryТип: array (object | null)[] | null
_topic - authorТип: string | null
имя автора контента
- hТип: string | null
_title метазаголовок
- languageТип: string | null
язык контента
- levelТип: integer | null
уровень HTML
- mainТип: string | null
_title основной заголовок блока
- primaryТип: array (object | null)[] | null
_content - textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- secondaryТип: array (object | null)[] | null
_content - textТип: string | null
вторичный контент на странице подробнее о расчёте приоритета контента читайте в этой статье справочного центра
- urlТип: string | null
URL страницы. отображается, если текст является якорем ссылки
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- tableТип: array (object | null)[] | null
_content содержимое таблицы на странице
- bodyТип: array (object | null)[] | null
содержимое тела таблицы
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- footerТип: array (object | null)[] | null
содержимое нижнего колонтитула таблицы
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- headerТип: array (object | null)[] | null
разобранное содержимое заголовка
- rowТип: array (object | null)[] | null
_cells содержимое ячеек строки заголовка
- isТип: boolean | null
_header содержимое ячеек строки заголовка
- textТип: string | null
содержимое ячеек строки заголовка
- urlsТип: array (object | null)[] | null
содержит другие URL и якоря, найденные в элементе контента
- anchorТип: string | null
_text текст якоря URL
- urlТип: string | null
содержит другие URL и якоря, найденные в элементе контента
- statusТип: integer | null
_code общий код состояния
полный список кодов ответа можно найти здесь
Примечание: мы настоятельно рекомендуем предусмотреть систему обработки связанных исключительных ситуаций и ошибок - typeТип: string | null
тип элемента
- itemsТип: integer | null Формат: int64
_count количество элементов в массиве результатов
- resultТип: integer | null Формат: int64
_count число элементов в массиве result
- statusТип: integer | null
_code код состояния задачи формируется DataForSEO, может находиться в диапазоне 10000-60000 Полный список кодов ответа можно найти здесь.
- statusТип: string | null
_message информационное сообщение задачи Полный список общих информационных сообщений можно найти здесь.
- timeТип: string | null
время выполнения, секунды
- Тип: integer | null Формат: int64tasks
_count число задач в массиве tasks
- Тип: integer | null Формат: int64tasks
_error число задач в массиве tasks, возвращённых с ошибкой
- Тип: string | nulltime
общее время выполнения, секунды
- Тип: string | nullversion
текущая версия API
application/json - 400
Запрос не удалось обработать. Проверьте параметры запроса.
- 401
Требуется действительный API-ключ Felo.
- 402
Запрос не может быть выполнен: не выполнено требование биллинга.
- 403
Аккаунту не разрешено выполнять эту операцию.
- 429
Достигнут лимит запросов или расходов.
- 502
Сервис не смог выполнить запрос.
- 503
API или сервис биллинга временно недоступны.
- 504
Истекло время ожидания обработки запроса.
- default
Ответ с ошибкой; сквозные ответы upstream могут использовать форматы провайдера
application/json
curl https://openapi.felo.ai/v1/beta/dataforseo/on_page/content_parsing \
--request POST \
--header 'Content-Type: application/json' \
--header 'Authorization: Bearer YOUR_SECRET_TOKEN' \
--data '[
{
"url": "https://dataforseo.com/blog/a-versatile-alternative-to-google-trends-exploring-the-power-of-dataforseo-trends-api",
"id": "11161551-1535-0216-0000-500b3f307f92"
}
]'
{
"version": null,
"status_code": null,
"status_message": null,
"time": null,
"cost": null,
"tasks_count": null,
"tasks_error": null,
"tasks": [
{
"id": null,
"status_code": null,
"status_message": null,
"time": null,
"cost": null,
"result_count": null,
"path": [
null
],
"data": null,
"result": [
{
"crawl_progress": null,
"crawl_status": {
"max_crawl_pages": null,
"pages_in_queue": null,
"pages_crawled": null
},
"items_count": null,
"items": [
{
"type": null,
"fetch_time": null,
"status_code": null,
"page_content": "[Max Depth Exceeded]",
"page_as_markdown": null
}
]
}
]
}
]
}