v0.2.0-beta

OpenAPI 3.1.0

Tài nguyên không thể crawl

Felo API Support

MIT

Máy chủ

https://openapi.felo.ai

Thư viện client

Shell Curl

DataForSEO

SEO, search-engine results, keyword research, backlinks and AI visibility data.

DataForSEO Thao tác

post/v1/beta/dataforseo/on_page/uncrawlable_resources

Tài nguyên không thể crawl

Các tài nguyên mà lượt crawl không thể tải, và lý do. Trả về total_items_count, items_count và items. Đọc một lượt crawl đã hoàn tất, nên cần id từ post_dataforseo_on_page_submit và trả về crawl_progress cùng crawl_status gồm max_crawl_pages, pages_in_queue và pages_crawled - hãy kiểm tra các giá trị này trước khi tin vào một kết quả nhỏ, vì lượt crawl còn đang chạy đơn giản là có ít thứ để báo cáo hơn. Đây là những tham chiếu hỏng mà chủ trang muốn thấy trước tiên; những tài nguyên tải được nằm trong post_dataforseo_on_page_resources. 💰 Miễn phí ở phía upstream: truy vấn một lượt crawl đã hoàn tất không tốn phí, chỉ bản thân lượt crawl mới tốn phí.

Tham chiếu giá

Đo lường: Chi phí phản hồi được báo cáo.
Ước tính tham chiếu cho mỗi yêu cầu: USD 0.012.
Hệ số khách hàng tham chiếu: 1.0. Không áp dụng lại cho số tiền khách hàng đã quyết toán.

Chỉ là siêu dữ liệu tham chiếu, không phải báo giá cho tài khoản, mức giá được bảo đảm hay hạn mức chi tiêu. Tín dụng tài nguyên không phải tín dụng Felo. Khoản phí cuối cùng tuân theo bản ghi thanh toán của Felo.

Phần thân

application/json

Kiểu: array (object | null)[]
- filters
  Kiểu: array (object | null)[] | null
  
  mảng tham số lọc kết quả
  trường tùy chọn
  bạn có thể thêm nhiều bộ lọc cùng lúc (tối đa 8 bộ lọc)
  bạn phải đặt toán tử logic and, or giữa các điều kiện
  các toán tử sau được hỗ trợ:
  regex, not_regex, <, <=, >, >=, =, <>, in, not_in, like, not_like
  bạn có thể dùng toán tử % với like và not_like để khớp với bất kỳ chuỗi nào có 0 ký tự trở lên
  ví dụ:
  [["meta.content_type","=","image/jpeg"], "and", ["url","not_like","%/help-center/%"]]
  
  Danh sách đầy đủ các bộ lọc khả dụng có tại liên kết này.
  
  Đối tượng rỗng
- id
  Kiểu: string
  
  ID của tác vụ
  trường bắt buộc
  bạn có thể lấy ID này trong phản hồi của endpoint Task POST
  ví dụ:
  "07131248-1535-0216-1000-17384017ad04"
- limit
  Kiểu: integer | null
  
  số lượng tài nguyên không thể thu thập được trả về tối đa
  trường tùy chọn
  giá trị mặc định: 100
  giá trị tối đa: 1000
- offset
  Kiểu: integer | null
  
  độ lệch trong mảng kết quả của các tài nguyên không thể thu thập được trả về
  trường tùy chọn
  giá trị mặc định: 0
  giá trị tối đa: 2000000
  nếu bạn chỉ định giá trị 10, mười tài nguyên không hợp lệ đầu tiên trong mảng kết quả sẽ bị bỏ qua và dữ liệu sẽ được cung cấp cho các tài nguyên không hợp lệ tiếp theo
- order_by
  Kiểu: array string[] | null
  
  quy tắc sắp xếp kết quả
  trường tùy chọn
  bạn có thể dùng các giá trị giống như trong mảng filters để sắp xếp kết quả
  các kiểu sắp xếp khả dụng:
  asc - kết quả sẽ được sắp xếp theo thứ tự tăng dần
  desc - kết quả sẽ được sắp xếp theo thứ tự giảm dần
  bạn phải dùng dấu phẩy để thiết lập kiểu sắp xếp
  ví dụ:
  ["meta.content_type,desc"]
  lưu ý rằng bạn chỉ có thể đặt tối đa ba quy tắc sắp xếp trong một yêu cầu
  bạn phải dùng dấu phẩy để phân tách nhiều quy tắc sắp xếp
  ví dụ:
  ["meta.content_type,asc","fetch_time,desc"]

Phản hồi

200
Kiểu: object | null · Response36Afe1097B20_OnPageUncrawlableResourcesResponseInfo
cost
Kiểu: number | null Định dạng: double

tổng chi phí tác vụ, USD

status_code
Kiểu: integer | null

mã trạng thái chung; bạn có thể tìm danh sách đầy đủ các mã phản hồi tại đây

status_message
Kiểu: string | null

thông điệp thông tin chung; bạn có thể tìm danh sách đầy đủ các thông điệp thông tin chung tại đây

tasks
Kiểu: array (object | null)[] | null

mảng tác vụ

Kiểu: object | null · Response36Afe1097B20_OnPageUncrawlableResourcesTaskInfo
cost
Kiểu: number | null Định dạng: double

tổng chi phí tác vụ, USD

data
Kiểu: object | null

chứa các tham số giống như bạn đã chỉ định trong yêu cầu POST

propertyName
Kiểu: object | null
id
Kiểu: string | null

mã định danh tác vụ; mã định danh tác vụ duy nhất trong hệ thống của chúng tôi ở định dạng UUID

path
Kiểu: array (string | null)[] | null

Đường dẫn URL

result
Kiểu: array (object | null)[] | null

mảng kết quả

crawl_progress
Kiểu: string | null

trạng thái của phiên crawl
giá trị khả dụng: in_progress, finished

crawl_status
Kiểu: object | null · Response36Afe1097B20_CrawlStatusInfo

chi tiết của phiên crawl

max_crawl_pages
Kiểu: integer | null Định dạng: int64

số trang tối đa được thu thập cho biết giới hạn max_crawl_pages bạn đã chỉ định khi tạo tác vụ

pages_crawled
Kiểu: integer | null Định dạng: int64

số trang đã thu thập

pages_in_queue
Kiểu: integer | null Định dạng: int64

số trang hiện đang trong hàng đợi thu thập

current_offset
Kiểu: integer | null

Integer numbers.

items
Kiểu: array (object | null)[] | null

mảng tài nguyên không thể crawl

fetch_time
Kiểu: string | null

ngày và giờ tài nguyên được thu thập
theo định dạng UTC: “yyyy-mm-dd hh-mm-ss +00:00”
ví dụ:
2026-03-09 18:20:32 +00:00

meta
Kiểu: object | null · Response36Afe1097B20_UncrawlableResourcesMeta

siêu dữ liệu của tài nguyên không thể crawl

content_type
Kiểu: string | null

loại nội dung thực tế của tài nguyên

expected_content_types
Kiểu: array (string | null)[] | null

các loại nội dung mong đợi cho tài nguyên
danh sách các loại nội dung mà trình thu thập dữ liệu mong đợi dựa trên cách tài nguyên được tham chiếu trên trang

reason
Kiểu: string | null

lý do tài nguyên không thể crawl
có thể nhận giá trị sau: content_type_inconsistency

status_code
Kiểu: integer | null

mã trạng thái chung
bạn có thể tìm danh sách đầy đủ các mã phản hồi tại đây
Lưu ý: chúng tôi đặc biệt khuyến nghị thiết kế hệ thống cần thiết để xử lý các tình huống ngoại lệ hoặc lỗi liên quan

url
Kiểu: string | null

URL của tài nguyên không thể crawl

items_count
Kiểu: integer | null Định dạng: int64

số tài nguyên không thể crawl trong mảng items

total_items_count
Kiểu: integer | null Định dạng: int64

tổng số tài nguyên không thể crawl được tìm thấy
tổng số tài nguyên không thể crawl được tìm thấy trong quá trình crawl tên miền mục tiêu

result_count
Kiểu: integer | null Định dạng: int64

số phần tử trong mảng kết quả

status_code
Kiểu: integer | null

mã trạng thái của tác vụ do DataForSEO tạo; có thể nằm trong khoảng sau: 10000-60000; bạn có thể tìm danh sách đầy đủ các mã phản hồi tại đây

status_message
Kiểu: string | null

thông điệp thông tin của tác vụ; bạn có thể tìm danh sách đầy đủ các thông điệp thông tin chung tại đây

time
Kiểu: string | null

thời gian thực thi, giây

tasks_count
Kiểu: integer | null Định dạng: int64

số lượng tác vụ trong mảng tasks

tasks_error
Kiểu: integer | null Định dạng: int64

số lượng tác vụ trong mảng tasks được trả về kèm lỗi

time
Kiểu: string | null

tổng thời gian thực thi, giây

version
Kiểu: string | null

phiên bản hiện tại của API
application/json
400

Không thể xử lý yêu cầu. Hãy kiểm tra các tham số yêu cầu.
401

Cần có khóa API Felo hợp lệ.
402

Không thể tiếp tục yêu cầu vì chưa đáp ứng yêu cầu thanh toán.
403

Tài khoản không được phép thực hiện thao tác này.
429

Đã đạt giới hạn yêu cầu hoặc giới hạn chi tiêu.
502

Dịch vụ không thể hoàn tất yêu cầu.
503

API hoặc dịch vụ thanh toán tạm thời không khả dụng.
504

Dịch vụ đã hết thời gian chờ khi xử lý yêu cầu.
default

Phản hồi lỗi; phản hồi chuyển tiếp từ thượng nguồn có thể dùng định dạng của nhà cung cấp

application/json

post/v1/beta/dataforseo/on_page/uncrawlable_resources

curl https://openapi.felo.ai/v1/beta/dataforseo/on_page/uncrawlable_resources \
  --request POST \
  --header 'Content-Type: application/json' \
  --header 'Authorization: Bearer YOUR_SECRET_TOKEN' \
  --data '[
  {
    "id": "07281559-0695-0216-0000-c269be8b7592",
    "filters": [
      [
        "meta.content_type",
        "=",
        "image/jpeg"
      ],
      "and",
      [
        "url",
        "like",
        "%go%"
      ]
    ],
    "limit": 10
  }
]'

Hiện schema

{
  "version": null,
  "status_code": null,
  "status_message": null,
  "time": null,
  "cost": null,
  "tasks_count": null,
  "tasks_error": null,
  "tasks": [
    {
      "id": null,
      "status_code": null,
      "status_message": null,
      "time": null,
      "cost": null,
      "result_count": null,
      "path": [
        null
      ],
      "data": null,
      "result": [
        {
          "crawl_progress": null,
          "crawl_status": {
            "max_crawl_pages": null,
            "pages_in_queue": null,
            "pages_crawled": null
          },
          "current_offset": null,
          "total_items_count": null,
          "items_count": null,
          "items": [
            {
              "url": null,
              "reason": null,
              "status_code": null,
              "fetch_time": null,
              "meta": "[Max Depth Exceeded]"
            }
          ]
        }
      ]
    }
  ]
}

Thao tác thành công

Tài nguyên không thể crawl

Xác thựcRequired

DataForSEO

Tài nguyên không thể crawl

Tham chiếu giá