Часто вебмастера используют тег robots «noindex, follow», чтобы исключить страницу из индекса, но чтобы робот гулял по ссылкам с этой страницы и учитывал вес. Для продвижения в Google такой вариант не стоит использовать!
Если у страницы появляется тег robots noindex и длительное время не меняется — страница превращается в soft-404, затем исключается из индекса и исключается из учета алгоритма все, что находится или связано с этой страницей.
Поэтому категорически не рекомендуется ставить такой тег на страницах, например, пагинации!