Felo API PlatformFelo API Platform
Все эндпоинты DataForSEO
v0.2.0-beta
OpenAPI 3.1.0

Ресурсы, недоступные для обхода

Сервер:https://openapi.felo.ai
Клиентские библиотеки

DataForSEO

​

SEO, search-engine results, keyword research, backlinks and AI visibility data.

Ресурсы, недоступные для обхода

​

Ресурсы, которые обход не смог загрузить, и причины. Возвращает total_items_count, items_count и items. Читает завершённый обход, поэтому нужен id из post_dataforseo_on_page_submit, и возвращает crawl_progress и crawl_status со значениями max_crawl_pages, pages_in_queue и pages_crawled — проверяйте их, прежде чем доверять небольшому результату: у ещё идущего обхода просто меньше данных. Это те самые битые ссылки, которые владелец сайта захочет увидеть первыми; загрузившиеся ресурсы есть в post_dataforseo_on_page_resources. 💰 Бесплатно на стороне upstream: запрос к завершённому обходу ничего не стоит, платить нужно только за сам обход.

Справочные цены

  • Тарификация: стоимость ответа по данным провайдера.
  • Справочная оценка запроса: USD 0.012.
  • Справочный множитель для клиента: 1.0. Не применяйте его повторно к уже рассчитанной сумме клиента.

Справочные метаданные, а не коммерческое предложение для аккаунта, гарантированная цена или лимит расходов. Кредиты ресурсов — не кредиты Felo. Итоговые списания определяются записями биллинга Felo.

Тело
application/json
  • Тип: array (object | null)[]
    • filters
      Тип: array (object | null)[] | null

      массив параметров фильтрации результатов
      необязательное поле
      можно добавить несколько фильтров сразу (не более 8)
      между условиями нужно задать логический оператор and или or
      поддерживаются следующие операторы:
      regex, not_regex, <, <=, >, >=, =, <>, in, not_in, like, not_like
      оператор % можно использовать с like и not_like для совпадения с любой строкой из нуля или более символов
      пример:
      [["meta.content_type","=","image/jpeg"],
      "and",
      ["url","not_like","%/help-center/%"]]

      Полный список возможных фильтров доступен по этой ссылке.

      Пустой объект
    • id
      Тип: string

      ID задачи
      обязательное поле
      этот ID можно получить в ответе эндпоинта Task POST
      пример:
      "07131248-1535-0216-1000-17384017ad04"

    • limit
      Тип: integer | null

      максимальное количество возвращаемых недоступных для обхода ресурсов
      необязательное поле
      значение по умолчанию: 100
      максимальное значение: 1000

    • offset
      Тип: integer | null

      смещение в массиве результатов возвращаемых недоступных для обхода ресурсов
      необязательное поле
      значение по умолчанию: 0
      максимальное значение: 2000000
      если указать значение 10, первые десять недопустимых ресурсов в массиве результатов будут пропущены, а данные будут предоставлены по последующим недопустимым ресурсам

    • order_by
      Тип: array string[] | null

      правила сортировки результатов
      необязательное поле
      для сортировки результатов можно использовать те же значения, что и в массиве filters
      возможные типы сортировки:
      asc - результаты сортируются по возрастанию
      desc - результаты сортируются по убыванию
      для задания типа сортировки используется запятая
      пример:
      ["meta.content_type,desc"]
      учтите, что в одном запросе можно задать не более трёх правил сортировки
      несколько правил сортировки разделяются запятой
      пример:
      ["meta.content_type,asc","fetch_time,desc"]

Ответы
  • 200
    Тип: object | null · Response36Afe1097B20_OnPageUncrawlableResourcesResponseInfo
    • cost
      Тип: number | null Формат: double

      общая стоимость задач, USD

    • status_code
      Тип: integer | null

      общий код состояния. Полный список кодов ответа можно найти здесь.

    • status_message
      Тип: string | null

      общее информационное сообщение. Полный список общих информационных сообщений можно найти здесь.

    • tasks
      Тип: array (object | null)[] | null

      массив задач

      • Тип: object | null · Response36Afe1097B20_OnPageUncrawlableResourcesTaskInfo
        • cost
          Тип: number | null Формат: double

          общая стоимость задач, USD

        • data
          Тип: object | null

          содержит те же параметры, что вы указали в POST-запросе

          • propertyName
            Тип: object | null
        • id
          Тип: string | null

          идентификатор задачи уникальный идентификатор задачи в нашей системе в формате UUID

        • path
          Тип: array (string | null)[] | null

          путь URL

        • result
          Тип: array (object | null)[] | null

          массив результатов

          • crawl_progress
            Тип: string | null

            статус сеанса сканирования
            возможные значения: in_progress, finished

          • crawl_status
            Тип: object | null · Response36Afe1097B20_CrawlStatusInfo

            сведения о сеансе сканирования

            • max_crawl_pages
              Тип: integer | null Формат: int64

              максимальное количество страниц для обхода указывает заданный при постановке задачи лимит max_crawl_pages

            • pages_crawled
              Тип: integer | null Формат: int64

              количество просканированных страниц

            • pages_in_queue
              Тип: integer | null Формат: int64

              количество страниц, которые сейчас находятся в очереди на сканирование

          • current_offset
            Тип: integer | null

            Integer numbers.

          • items
            Тип: array (object | null)[] | null

            массив ресурсов, которые не удалось просканировать

            • fetch_time
              Тип: string | null

              дата и время получения ресурса
              в формате UTC: “yyyy-mm-dd hh-mm-ss +00:00”
              пример:
              2026-03-09 18:20:32 +00:00

            • meta
              Тип: object | null · Response36Afe1097B20_UncrawlableResourcesMeta

              метаданные ресурса, который не удалось просканировать

              • content_type
                Тип: string | null

                фактический тип содержимого ресурса

              • expected_content_types
                Тип: array (string | null)[] | null

                ожидаемые типы содержимого для ресурса
                список типов содержимого, которые ожидал краулер с учётом того, как ресурс указан на странице

            • reason
              Тип: string | null

              причина, по которой ресурс не удаётся просканировать
              может принимать следующее значение: content_type_inconsistency

            • status_code
              Тип: integer | null

              общий код состояния
              полный список кодов ответа приведён здесь
              Примечание: настоятельно рекомендуем предусмотреть систему обработки соответствующих исключительных и ошибочных ситуаций

            • url
              Тип: string | null

              URL ресурса, который не удаётся просканировать

          • items_count
            Тип: integer | null Формат: int64

            количество ресурсов, которые не удалось просканировать, в массиве items

          • total_items_count
            Тип: integer | null Формат: int64

            общее количество найденных ресурсов, которые не удалось просканировать
            общее количество ресурсов, которые не удалось просканировать при сканировании целевого домена

        • result_count
          Тип: integer | null Формат: int64

          число элементов в массиве result

        • status_code
          Тип: integer | null

          код состояния задачи формируется DataForSEO, может находиться в диапазоне 10000-60000 Полный список кодов ответа можно найти здесь.

        • status_message
          Тип: string | null

          информационное сообщение задачи Полный список общих информационных сообщений можно найти здесь.

        • time
          Тип: string | null

          время выполнения, секунды

    • tasks_count
      Тип: integer | null Формат: int64

      число задач в массиве tasks

    • tasks_error
      Тип: integer | null Формат: int64

      число задач в массиве tasks, возвращённых с ошибкой

    • time
      Тип: string | null

      общее время выполнения, секунды

    • version
      Тип: string | null

      текущая версия API

    application/json
  • 400

    Запрос не удалось обработать. Проверьте параметры запроса.

  • 401

    Требуется действительный API-ключ Felo.

  • 402

    Запрос не может быть выполнен: не выполнено требование биллинга.

  • 403

    Аккаунту не разрешено выполнять эту операцию.

  • 429

    Достигнут лимит запросов или расходов.

  • 502

    Сервис не смог выполнить запрос.

  • 503

    API или сервис биллинга временно недоступны.

  • 504

    Истекло время ожидания обработки запроса.

  • default

    Ответ с ошибкой; сквозные ответы upstream могут использовать форматы провайдера

    application/json
Request Example for post/v1/beta/dataforseo/on_page/uncrawlable_resources
curl https://openapi.felo.ai/v1/beta/dataforseo/on_page/uncrawlable_resources \
  --request POST \
  --header 'Content-Type: application/json' \
  --header 'Authorization: Bearer YOUR_SECRET_TOKEN' \
  --data '[
  {
    "id": "07281559-0695-0216-0000-c269be8b7592",
    "filters": [
      [
        "meta.content_type",
        "=",
        "image/jpeg"
      ],
      "and",
      [
        "url",
        "like",
        "%go%"
      ]
    ],
    "limit": 10
  }
]'
{
  "version": null,
  "status_code": null,
  "status_message": null,
  "time": null,
  "cost": null,
  "tasks_count": null,
  "tasks_error": null,
  "tasks": [
    {
      "id": null,
      "status_code": null,
      "status_message": null,
      "time": null,
      "cost": null,
      "result_count": null,
      "path": [
        null
      ],
      "data": null,
      "result": [
        {
          "crawl_progress": null,
          "crawl_status": {
            "max_crawl_pages": null,
            "pages_in_queue": null,
            "pages_crawled": null
          },
          "current_offset": null,
          "total_items_count": null,
          "items_count": null,
          "items": [
            {
              "url": null,
              "reason": null,
              "status_code": null,
              "fetch_time": null,
              "meta": "[Max Depth Exceeded]"
            }
          ]
        }
      ]
    }
  ]
}
Uncrawlable Resources

Нужна помощь?