Скрейпър за Crawlability & AI Access Auditor
Събираме данни от Crawlability & AI Access Auditor (категория „други сайтове“). Еднократно или по график, в CSV, Excel, Google Sheets или през API.
- Регион
- Целият свят
- Защита на сайта
- високо предварителна оценка
- Честота на обновяване
- от еднократно до всеки час
- Формати
- CSV, Excel, JSON, Google Sheets, API, webhook
- Статус
- По поръчка · 2–5 дни
- Стартиране
- 2–5 дни след теста
- Цена
- от 409 €
Какви данни събираме
| Поле | Ключ в експорта |
|---|---|
| Домейн на данни | payload.domain |
| Вердикт за данни | payload.verdict |
| Блокиран достъп AI за обучение | payload.aiAccess.trainingBlocked |
| Блокиран достъп AI за търсене | payload.aiAccess.searchBlocked |
| Ниво на TDM | payload.tdm.level |
| Услуги против ботове | payload.antiBot.services |
| Предизвикан от защита против ботове | payload.antiBot.challenged |
| Наличен llms txt | payload.llmsTxt.present |
| Общо URL адреси в Sitemaps | payload.sitemaps.totalUrls |
| Максимална дата на последна промяна в Sitemaps | payload.sitemaps.lastmodMax |
| Резюме на payload | payload.summary |
| Тип промяна | changeType |
| Резюме | summary |
| URL на източника | sourceUrl |
Как можете да настроите изпълнението
- Домейни
- Режим
- Страници за извадка
- Максимален брой sitemap файлове
- Сканиране на условия и правни страници за TDM клаузи
- Допълнителни user-agent токени
- Ключ на състоянието
За какво го използват екипите
- Редовен експорт на данни в таблици или API
- Мониторинг на промени в сайтове
- Данни за анализи и AI
Получете безплатна мостра с данни
Кажете ни кои страници и полета от Crawlability & AI Access Auditor ви трябват и ще ви изпратим 50–100 реални записа, преди да платите.
или пишете директно
Пишете на @kodrana в TelegramЧесто задавани въпроси
Колко струва скрейпингът на Crawlability & AI Access Auditor?
Еднократен експорт до 10 000 записа струва 409 €. Редовните данни по абонамент започват от 289 € на месец при седмично обновяване или 1 090 € при ежедневно, плюс еднократна настройка. Точната цена потвърждаваме след безплатен тест.
Как работи абонаментът?
Един абонамент покрива един източник: Crawlability & AI Access Auditor с избраната от вас честота на обновяване и месечен лимит на записите. Плащате един месец предварително. Ако плащането не пристигне, събирането спира; можете да го възобновите в рамките на 30 дни без нова настройка.
Колко бързо можете да стартирате?
Обикновено за 2–5 работни дни. Преди да платите, ви изпращаме безплатна мостра от 50–100 записа, за да проверите полетата и формата.
Какво става, ако Crawlability & AI Access Auditor промени сайта си?
Следим скрейпъра всеки ден. Ако сайтът се промени и събирането спре, го поправяме до 48 часа — това е включено в абонамента.
В какъв формат се доставят данните?
CSV, Excel, JSON, Google Sheets, API или webhook — както ви е удобно. Можем да изпращаме данните и директно във вашата CRM или база данни.
Законно ли е това?
Събираме само публично достъпна информация, без вход в чужди акаунти и без лични данни, и поддържаме щадящо натоварване на сайта. Как можете да използвате данните във вашата държава и отрасъл, проверете с юрист.
Как да платя?
В USDT (TRC20/ERC20). Фирмите могат да поискат фактура.