если у вас уже натянул гугл эти страницы, то сначала надо выкинуть их из индекса, для этого добавьте <meta name="robots" content="noindex" />. А как из индекса уйдут, тогда уже запрет боту ходить. Если вы просто в роботсе поставите запрет, то страницы зависнут в индексе, а бот туда не пойдет больше.