База ответов ИНТУИТ

Web-технологии

<<- Назад к вопросам

Как будет вести себя поисковый робот, если не обнаружит файл robots.txt?

(Отметьте один правильный вариант ответа.)

Варианты ответа
исключит сайт из выдачи
оставит результаты прошлого обхода
обходить все страницы сайта по внутренним ссылкам(Верный ответ)
Похожие вопросы
Чем можно управлять с помощью файла robots.txt?
Что такое поисковый спам?
Результатом выполнения операции "3.14" + 5 будет
Результатом выполнения операции "3.14" - 0 + 5 будет
Результатом выполнения операции "3.14" + parseInt("5.2") будет
На странице используется подключение к WebSocket по адресу "". Такое подключение не будет работать, потому что
Значения какого мета-тега страниц мы обязательно увидим в SERP Яндекс и Google, если он есть в коде страницы и не пустой?
Объект { a: "123", toJSON: function() { return a; } } при сериализации в json вызовом JSON.stringify будет представлен строкой
Значения какого мета-тега страницы мы не увидим в SERP Яндекс и Google, если он есть в коде страницы и не пустой?