RankforBot
Краулер вебаналізу Rankfor.AI
Що таке RankforBot?
RankforBot є офіційним вебкраулером Rankfor.AI, платформи аналізу територій ШІ. Наш бот допомагає бізнесам зрозуміти, як системи ШІ сприймають і представляють їхній контент у вебі.
RankforBot аналізує публічно доступний вебконтент, щоб надати інсайти про території контенту, конкурентне позиціонування та можливості оптимізації видимості у ШІ.
Технічні деталі
Рядок User Agent:
Частота сканування:
Ми застосовуємо адаптивну частоту сканування, щоб мінімізувати навантаження на ваші сервери. Ми поважаємо стандартні crawl-delay директиви в robots.txt.
Що ми аналізуємо
- Структуровані даніJSON-LD, розмітка Schema.org, теги Open Graph та інші машиночитані метадані, що допомагають системам ШІ зрозуміти ваш контент.
- Території контентуТеми, ключові слова й семантичні кластери, що визначають ваш контентний ландшафт і конкурентне позиціонування.
- Навігація та структура сайтуЯк організовано й пов'язано ваш контент, що впливає на те, як системи ШІ визначають пріоритетність ваших сторінок і посилаються на них.
- Файли для LLMМи перевіряємо наявність файлів llm.txt та llms.txt, які дають ШІ-асистентам контекст про ваш бренд і послуги.
Конфіденційність та використання даних
Ми аналізуємо лише публічно доступний контент. RankforBot не:
- Отримувати доступ до захищених паролем або приватних зон
- Надсилати форми або POST-дані
- Виконувати JavaScript або взаємодіяти з динамічним контентом поза початковим завантаженням сторінки
- Зберігати персональні дані користувачів або PII (персональну ідентифікаційну інформацію)
- Передавати ваш контент третім сторонам
Проаналізовані дані використовуються виключно для надання інсайтів AI Brand DNA користувачам нашої платформи. Ми поважаємо ваше право власності на контент і дотримуємося всіх застосовних норм захисту даних.
Як керувати RankforBot
Щоб повністю заблокувати RankforBot:
User-agent: RankforBot Disallow: /
Щоб дозволити доступ лише до певних розділів:
User-agent: RankforBot Allow: /blog/ Disallow: /
Щоб задати власну затримку сканування:
User-agent: RankforBot Crawl-delay: 10
Контакти та підтримка
Якщо у вас є запитання про RankforBot, потрібно повідомити про проблему або надіслати запит щодо певної поведінки сканування для вашого домену, зв'яжіться з нами: