robots.txt отвечает 200
Опций нет.
robots:expected-disallow
ожидания из robots.expect выполняются
robots:sitemap-declared
Sitemap-директива объявлена
На этой странице