LeadsSEOПроверить сайт ↗

Термин

robots.txt

Файл в корне сайта с правилами для поисковых и AI-роботов: что можно обходить, а что нет.

Ошибка в robots.txt может закрыть от поиска весь сайт. Для GEO важно не закрыть в нём AI-ботов.

Связанные термины

Статьи, где встречается термин