Может ли URL индексироваться, если страница закрыта noindex или файлом robots.txt?

Западные SEO-специалисты обсуждают, может ли URL индексироваться, если страница закрыта noindex или файлом robots.txt. Мнения разделились, но Мэтт Каттс заметил, что Google не обходит закрытую страни…