Проблема: С использованиемPrerender.ioдля индексации/сохранения страниц одного сайта я постоянно получаю запросы путей, которые существуют только на моем старом сайте
Пример: при предварительном рендеринге я увижу, что Googlebot запросилhttp://www.new-site.com/old/site/path
У меня есть старый сайт old-website.comи новый ( new-site.com).
Оба веб-сайта находятся на разных серверах с разными IP-адресами (хотя old-websiteраньше они располагались на сервере, на котором new-siteсейчас находятся). new-siteНи в одной из карт сайта нет этих старых URL-адресов, кроме того, эти страницы возвращают ошибку 404.
Я не уверен, где сказать google, чтобы он перестал запрашивать эти страницы. Для быстрого решения я добавил их в свой robots.txt, но это похоже на краткосрочный хак. Новый сайт — это одностраничное приложение, а старый сайт — WordPress.
решение1
Вот несколько вещей, которые могут вам здесь помочь.
Вы установили 301 редирект на сайте? Если нет, сделайте это немедленно, а также любые соответствующие страницы, которые необходимо перенаправить.
Вы обновили карты сайта через поисковую консоль?
Пробовали ли вы вручную переключать ссылки?
решение2
Задайте этот вопрос вФорум веб-мастеров Google, за которым следят не только старшие пользователи, имеющие прямой доступ к Google, но и сотрудники Google.