Google может пропускать и не сканировать те URL, в которых один и тот же элемент пути повторяется много раз. Об этом рассказал представитель поиска Джон Мюллер в обсуждении на форуме Google Webmaster Help.

Вопрос на форуме касался динамического сайта wandelingen.nl, контент которого не индексировался Google. При переходе на этот сайт URL мгновенно меняется на такой: wandelingen.nl/_/_/1/_/_/_/_/_/_/_/_/_. При перемещении по ресурсу к адресу добавляется всё больше элементов типа «_/_/_/_/_/_/». По словам Мюллера, при добавлении нескольких повторяющихся элементов в путь, URL-ы могут выглядеть для Google как невалидные. Поэтому система может их пропускать.

Таким образом, при наличии динамического сайта следует избегать ситуации, при которой один и тот же элемент будет многократно повторяться в разных URL. В противном случае, можно получить проблемы с индексацией.