Парсер Crawlability & AI Access Auditor
Збираємо дані з Crawlability & AI Access Auditor у категорії «інші сайти». Разово або за розкладом у CSV, Excel, Google Sheets чи через API.
- Регіон
- Увесь світ
- Захист сайту
- високий попередня оцінка
- Частота оновлення
- від разового до щогодинного
- Формати
- CSV, Excel, JSON, Google Sheets, API, webhook
- Статус
- Під замовлення · 2–5 днів
- Запуск
- 2–5 днів після тесту
- Ціна
- від $439
Які дані ми збираємо
| Поле | Ключ в експорті |
|---|---|
| Домен корисного навантаження | payload.domain |
| Вердикт корисного навантаження | payload.verdict |
| Блокування доступу AI до навчання | payload.aiAccess.trainingBlocked |
| Блокування доступу AI до пошуку | payload.aiAccess.searchBlocked |
| Рівень TDM | payload.tdm.level |
| Сервіси захисту від ботів | payload.antiBot.services |
| Виклик захисту від ботів | payload.antiBot.challenged |
| Наявність llms.txt | payload.llmsTxt.present |
| Карти сайту: загальна кількість URL | payload.sitemaps.totalUrls |
| Карти сайту: максимальний lastmod | payload.sitemaps.lastmodMax |
| Підсумок корисного навантаження | payload.summary |
| Тип зміни | changeType |
| Короткий опис | summary |
| URL джерела | sourceUrl |
Як можна налаштувати запуск
- Домени
- Режим
- Сторінок для вибірки
- Максимум файлів sitemap
- Сканувати умови та юридичні сторінки на TDM-застереження
- Додаткові токени user-agent
- Ключ стану
Для чого це використовують команди
- Регулярне вивантаження даних у таблиці або API
- Моніторинг змін на сайтах
- Дані для аналітики та AI
Отримайте безкоштовну вибірку даних
Напишіть, які сторінки та поля Crawlability & AI Access Auditor вам потрібні, і ми надішлемо 50–100 реальних записів до оплати.
або напишіть напряму
Написати @kodrana в TelegramЧасті запитання
Скільки коштує парсинг Crawlability & AI Access Auditor?
Разове вивантаження до 10 000 записів коштує $439. Регулярні дані за підпискою — від $309 на місяць за щотижневого оновлення або від $1 090 за щоденного, плюс разове налаштування. Точну ціну підтверджуємо після безкоштовного тесту.
Як працює підписка?
Підписка охоплює одне джерело: Crawlability & AI Access Auditor з обраною вами частотою оновлення та місячним лімітом записів. Оплата — за місяць наперед. Якщо платіж не надійшов, збір призупиняється; відновити його можна протягом 30 днів без повторного налаштування.
Як швидко ви можете запустити?
Зазвичай за 2–5 робочих днів. До оплати ми надсилаємо безкоштовну вибірку на 50–100 записів, щоб ви перевірили поля та формат.
Що буде, якщо Crawlability & AI Access Auditor змінить сайт?
Ми щодня стежимо за роботою парсера. Якщо сайт зміниться і збір зупиниться, виправимо все протягом 48 годин — це входить у підписку.
У якому форматі надходять дані?
CSV, Excel, JSON, Google Sheets, API або webhook — як вам зручно. Також можемо передавати дані напряму у вашу CRM чи базу даних.
Чи це законно?
Ми збираємо лише загальнодоступну інформацію, не входимо в чужі акаунти, не збираємо персональні дані й створюємо на сайт помірне навантаження. Щодо того, як ви можете використовувати дані у своїй країні та галузі, проконсультуйтеся з юристом.
Як оплатити?
В USDT (TRC20/ERC20). Компанії можуть запросити рахунок.