Некоторое время назад Google понадобилось 5 дней, чтобы снова просканировать сайт после того, как я случайно неправильно настроил маршрутизацию путей Traefik и вернул Disallow: / в своём robots.txt .