Ваш робот берет много ненужных страниц для проверки, те страницы, которые не будут участвовать в продвижении. Зачем переплачивать за ненужные страницы.
При индексации роботы поисковых систем будут заходить не только на продвигаемые страницы. Для полноты информации наш робот обходит весь сайт подобно поисковому чтобы показать всю картину сайта.