Специалист отдела качества поиска Google по работе с вебмастерами Джон Мюллер (John Mueller) отметил, что не следует закрывать страницу в robots.txt, если на ней уже есть атрибут noindex.
Макс Прин (Max Prin) опубликовал в Twitter сообщение: «Протестировано: нет необходимости использовать директиву disallow, если noindex уже содержится в файле robots.txt»:
TESTED: no need for disallow if using noindex in robots.txt. As long as @google supports it... @deepcrawl @JohnMu https://t.co/CtALatZhhB
— Max Prin (@...