10 инструментов, которые помогут найти удалённую страницу или сайт
Если, открыв нужную страницу, вы видите ошибку или сообщение о том, что её больше нет, ещё не всё потеряно. Мы собрали сервисы, которые сохраняют копии общедоступных страниц и даже целых сайтов. Возможно, в одном из них вы найдёте весь пропавший контент.
Поисковые системы
Поисковики автоматически помещают копии найденных веб‑страниц в специальный облачный резервуар — кеш. Система часто обновляет данные: каждая новая копия перезаписывает предыдущую. Поэтому в кеше отображаются хоть и не актуальные, но, как правило, довольно свежие версии страниц.
1. Кеш Google
Чтобы открыть копию страницы в кеше Google, сначала найдите ссылку на эту страницу в поисковике с помощью ключевых слов. Затем кликните на стрелку рядом с результатом поиска и выберите «Сохранённая копия».
Есть и альтернативный способ. Введите в браузерную строку следующий URL: http://webcache.googleusercontent.com/search?q=cache:lifehacker.ru . Замените lifehacker.ru на адрес нужной страницы и нажмите Enter.
2. Кеш «Яндекса»
Введите в поисковую строку адрес страницы или соответствующие ей ключевые слова. После этого кликните по стрелке рядом с результатом поиска и выберите «Сохранённая копия».
3. Кеш Bing
В поисковике Microsoft тоже можно просматривать резервные копии. Наберите в строке поиска адрес нужной страницы или соответствующие ей ключевые слова. Нажмите на стрелку рядом с результатом поиска и выберите «Кешировано».
4. Кеш Yahoo
Если вышеупомянутые поисковики вам не помогут, проверьте кеш Yahoo. Хоть эта система не очень известна в Рунете, она тоже сохраняет копии русскоязычных страниц. Процесс почти такой же, как в других поисковиках. Введите в строке Yahoo адрес страницы или ключевые слова. Затем кликните по стрелке рядом с найденным ресурсом и выберите Cached.
Специальные архивные сервисы
Указав адрес нужной веб‑страницы в любом из этих сервисов, вы можете увидеть одну или даже несколько её архивных копий, сохранённых в разное время. Таким образом вы можете просмотреть, как менялось содержимое той или иной страницы. В то же время архивные сервисы создают новые копии гораздо реже, чем поисковики, из‑за чего зачастую содержат устаревшие данные.
Чтобы проверить наличие копий в одном из этих архивов, перейдите на его сайт. Введите URL нужной страницы в текстовое поле и нажмите на кнопку поиска.
1. Wayback Machine (Web Archive)
Сервис Wayback Machine, также известный как Web Archive, является частью проекта Internet Archive. Здесь хранятся копии веб‑страниц, книг, изображений, видеофайлов и другого контента, опубликованного на открытых интернет‑ресурсах. Таким образом основатели проекта хотят сберечь культурное наследие цифровой среды.
2. Arhive.Today
Arhive.Today — аналог предыдущего сервиса. Но в его базе явно меньше ресурсов, чем у Wayback Machine. Да и отображаются сохранённые версии не всегда корректно. Зато Arhive.Today может выручить, если вдруг в Wayback Machine не окажется копий необходимой вам страницы.
3. WebCite
Ещё один архивный сервис, но довольно нишевый. В базе WebCite преобладают научные и публицистические статьи. Если вдруг вы процитируете чей‑нибудь текст, а потом обнаружите, что первоисточник исчез, можете поискать его резервные копии на этом ресурсе.
Другие полезные инструменты
Каждый из этих плагинов и сервисов позволяет искать старые копии страниц в нескольких источниках.
1. CachedView
Сервис CachedView ищет копии в базе данных Wayback Machine или кеше Google — на выбор пользователя.
2. CachedPage
Альтернатива CachedView. Выполняет поиск резервных копий по хранилищам Wayback Machine, Google и WebCite.
Как убрать страницу из кэша yandex'а
Yandex проиндексировал страницу с данными которые никто видеть не должен. инфу со страницы удалили, но она осталась в копии поисковика и в снипите отображается как раз информация которую видеть никто не должен.
Вопрос: Как можно «повлиять» на Yandex, что бы он обновил копию этой страницы как можно скорее или выкинул ее из индекса вообще?
Вероятно, спрятать страницу можно так же как и загнать ее в индекс. Ссылками. Логично, что если робот пройдет по ссылку на страницу, а там уже не тот контент (или страница уже отсутствует), то он изменит и содержимое в базе. По логике чем больше количество таких ссылок с наиболее авторитетных ресурсов, тем быстрее данные должны исчезнуть с кеша. (ИМХО. Предположение, не имеющее практических оснований. )… но это противоречит понятию секретности, т.к. таким образом вы сами покажите информацию «которую никто не должен видеть» не только Яндексу, но и куче случайных зевак.
Возможно, еще написать в суппорт Яндекса, но они вероятнее всего скажут “закройте нужный Вам контент от индексации и в момент следующей проверки и обновления базы он исчезнет с кеша”
Или, самый оптимальный для Вас способ, удалить страницу через правило robot.txt, но тут скорость выкидывания будет зависеть от того, насколько часто робот посещает Ваш сайт. Если сайт большой и робот его любит, страница исчезнет быстро.
Вообще на эту тему можно говорить много, но точно сказать что сработает быстрее – сложно.
Можно ли удалить сохраненную копию сайта у Яндекса, если сайт уже удален?
Есть несколько способов, но они работают не всегда (в большинстве случаев) и на большинство сайтов (не на все).
Это кеш интернет страниц — вводишь адрес сайта и, возможно, получишь его вид до удаление. Не работает?
2)Тогда в Яндексе в поисковой строке вводишь ссылку на сайт (если он удален, то есть шанс, что яндекс сохранил его). Далее жмешь на сайт правой кнопкой мышки — сохраненная копия.
3) Сайты http://cachedview.com/ ; cachedpages.com — все аналогично, что и с первым сайтом.
Если не помогает, то остается искать кеши, сохранившиеся с последнего ВАШЕГО посещения сайта.
Удаление страниц из индекса поисковых систем
Здравствуйте! Сегодня пост о наболевшем для большинства из начинающих сайтостроителей. Мне приходилось очень часто в комментариях отвечать на один и тот же вопрос — как удалить страницы из поиска, которые были проиндексированы ранее, но в силу сложившихся обстоятельств были удалены и больше не существуют, но по-прежнему находятся в индексе поисковых систем. Или же в поиске находятся страницы запрещенные к индексации.
В комментариях особо не развернешься, поэтому после очередного вопроса решил уделить данной теме отдельное внимание. Для начала давайте разберемся, каким образом такие страницы могли оказаться в поиске. Примеры буду приводить исходя из собственного опыта, так что если я что-то забуду, то прошу дополнить.
Почему закрытые и удаленные страницы есть в поиске
Причин может быть несколько и некоторые из них я постараюсь выделить в виде небольшого списка с пояснениями. Перед началом дам пояснение что подразумеваю под «лишними» (закрытыми) страницами: служебные или иные страницы, запрещенные к индексации правилами файла robots.txt или мета-тегом.
Несуществующие страницы находятся в поиске по следующим причинам:
- Самое банальное — страница удалена и больше не существует.
- Ручное редактирование адреса web-страницы, вследствие чего документ который уже находится в поиске становится не доступным для просмотра. Особое внимание этому моменту нужно уделить новичкам, которые в силу своих небольших знаний пренебрежительно относятся к функционированию ресурса.
- Продолжая мысль о структуре напомню, что по-умолчанию после установки WordPress на хостинг она не удовлетворяет требованиям внутренней оптимизации и состоит из буквенно-цифровых идентификаторов. Приходится менять структуру страниц на ЧПУ, при этом появляется масса нерабочих адресов, которые еще долго будут оставаться в индексе поисковых систем. Поэтому применяйте основное правило: надумали менять структуру — используйте 301 редирект со старых адресов на новые. Идеальный вариант — выполнить все настройки сайта ДО его открытия, в этом может пригодиться локальный сервер.
- Не правильно настроена работа сервера. Несуществующая страница должна отдавать код ошибки 404 или редирект с кодом 3хх.
Лишние страницы появляются в индексе при следующих условиях:
- Страницы, как Вам кажется, закрыты, но на самом деле они открыты для поисковых роботов и находятся в поиске без ограничений (или не правильно написан robots.txt). Для проверки прав доступа ПС к страницам воспользуйтесь соответствующими инструментами для вебмастеров.
- Они были проиндексированы до того как были закрыты доступными способа.
- На данные страницы ссылаются другие сайты или внутренние страницы в пределах одного домена.
Итак, с причинами разобрались. Стоит отметить, что после устранения причины несуществующие или лишние страницы еще долгое время могут оставаться в поисковой базе — все зависит от апдейтов или частоты посещения сайта роботом.
Как удалить страницу из поисковой системы Яндекс
Для удаления URL из Яндекс достаточно пройти по ссылке и в текстовое поле формы вставить адрес страницы, которую нужно удалить из поисковой выдачи.
Главное условие успешного запроса на удаление:
- страница должна быть закрыта от индексации правилами robots или мета-тегом noindex на данной странице — в том случае если страница существует, но не должна участвовать в выдаче;
- при попытке обращения к странице сервер должен возвращать ошибку 404 — если страница удалена и более не существует.
При следующем обходе сайта роботом запросы на удаление будут выполнены, а страницы исчезнут из результатов поиска.
Как удалить страницу из поисковой системы Google
Для удаления страниц из Гугла поступаем аналогичным образом. Открываем инструменты для веб-мастеров и находим в раскрывающемся списке Оптимизация пункт Удалить URL-адреса и переходим по ссылке.
Перед нами специальная форма с помощью которой создаем новый запрос на удаление:
Нажимаем продолжить и следуя дальнейшим указаниям выбираем причину удаления. По-моему мнению слово «причина» не совсем подходит для этого, но это не суть…
Из представленных вариантов нам доступно:
- удаление страницы страницы из результатов поиска Google и из кэша поисковой системы;
- удаление только страницы из кэша;
- удаление каталога со всеми входящими в него адресами.
Очень удобная функция удаления целого каталога, когда приходится удалять по несколько страниц, например из одной рубрики. Следить за статусом запроса на удаление можно на этой же странице инструментов с возможностью отмены. Для успешного удаления страниц из Google необходимы те же условия, что и для Яндекса. Запрос обычно выполняется в кратчайшие сроки и страница тут же исчезает из результатов поиска.
- 5
- 4
- 3
- 2
- 1
А эти несуществующие страницы обязательно удалять из поисковых систем? Это разве на что-то влияет?
Спасибо Вам за прекрасный блог.
Извините за вопрос не по теме поста — считается что поисковики любят когда сайт обновляется с определенной периодичностью статьями. НО, допустим, если сайт — это интернет-магазин по продаже декоративных контактных линз, возможно ли в качестве регулярного обновления использовать только статьи в rss ленте?
Сергей, со временем ПС могут и сами их выкинуть, но на это может уйти очень много времени. Все ведь делается на добровольной основе, никто ни к чему не принуждает. Если в выдаче присутствует много дублей (они закрыты от индексации, но по каким-то причинам все равно в поиске) — это вряд ли хорошо, так и на фильтры можно нарваться. Мне лично нравится когда везде порядок — не только за рабочим столом, но и на блоге, поэтому придерживаюсь принципа: от всего лишнего нужно избавляться.
Антон, естественно, на таких ресурсах товары часто не меняются, поэтому проследите чтобы к ним были обязательно уникальные описания, а для повышения авторитетности добавляйте тематические статьи с некой периодичностью. Организуйте внутреннюю перелинковку, например, поставьте ссылки со страницы товара на статьи про него.
Какая прелесть! А я и не знала, что страницы можно удалять. Вот что значит лень читать — а ведь в Яндексе вебмастер эта функция предусмотрена, стоило только все прочитать)))
Особой нужды, конечно, нет, но занесу себе эту статью в закладки, чтобы в случае чего было куда подглядеть. Не люблю, когда на моем блоге есть несуществующие страницы.
Удалением пока не пользовался. Но случай когда я накосячил с адресом страницы, которая уже проиндексирована у меня был. Поправил одну букву в урле, а потом понял что сделал ��
Нужды удалять страницы у меня еще нет, но если вдруг появится то панель вебмастера мне в помощь ��
Вот спасибо за гугл, я и не заметил, что можно удалять каталоги, а то у меня 600 с лишним в индексации при реальных 30-ти страницах, по одной удалять — это с ума сойдешь, а каталогами — рубрики, архивы и т.д. не так страшно ��
Спасибо за подробное описание. Есть две страницы, которые надо удалить с поисковиков.
Кристина, зачастую не замечаем тот или иной функционал, до тех пор пока он не понадобится. Так что, берите на вооружение, в случае чего — пригодится ��
Лысенко Евгений, URL конечно лучше не менять, если страница уже имеет входящие на нее ссылки. Если такое имеются внутри своего домена, то еще ладно — дело поправимое, а вот если с других сайтов — то в логах инструментов вебмастера могут «висеть» ошибки.
Юрий, удалять каталоги действительно удобно. У меня на блоге иногда ни с того ни с сего категории оказываются в выдаче, хотя закрыты — так что удаляю целиком /category/
Андрей, пожалуйста, пользуйтесь во благо ��
А мне как раз это и нужно. Перепрофилирую сайт, а он уже полностью проиндексировался. Хоть там и не много страниц, а все удалять придется.
Юрий, будьте осторожны, смена тематики и удаление страниц в этом случае может отрицательно повлиять на ситуацию. Я бы рекомендовал оставить старые записи до поры до времени, поместив их в отдельную рубрику, без смены URL, а тем временем наполнять новыми статьями.
А уж со временем, когда сформируется новое семантическое ядро, удалить эти страницы при желании.
Подскажите, пожалуйста. Если мне нужно удалить с Гугла не каталог вида site/catalog , а набор страниц с параметром, к примеру вида site/230?skip=575 , в роботсе понятно, пишем:
А как удалить такое из гугл через вебмастер? Заранее спасибо.
Денис, большое спасибо! А я жду-мучаюсь уже неделю…
Создал наконец-то свой блог на отдельном домене, решил перетащить статьи со старого блога на worpress и … узнал, что так делать нельзя! Потом узнал, что если статьи удалить со старого сайта, они через какое-то время выпадут из индекса и можно будет опубликовать их уже на новом сайте.
Но вот ждал неделю и думал: а сколько же ещё так ждать? Неужели нет способа ускорить процесс? И тут Ваша статья нашлась. Огромное спасибо! Вот уж правду говорят: век живи — век учись ��
Андрей, в таком случае удалять каждую страницу по-отдельности. Если их много, то придется потратить немного времени, ничего не поделать ��
Павел, Вам нужно было поставить 301 редирект со старого домена — тогда бы и посетителей не потеряли, приходящих с поиска, и страницы бы переиндексировались по новому адресу быстрее. Соответственно и вручную удалять ничего не пришлось бы.
И еще, если Вы просто скопировали статьи со старого домена на новый, то получается дублирование, за что и на санкции ПС велика вероятность нарваться. Повторюсь — использовать редирект было бы правильнее.
Спасибо за ответ!
Ну, во-первых, я не умею ставить редирект. Думаю, научился бы, найдя в интернете, но уже поздно. Статьи на старом месте почиканы, запросы на удаление в Яндекс и Гугл отправлены. Так что теперь только один вариант — дождаться, когда они из поиска пропадут…
А во-вторых, посетителей я потерял немного — на блоге было всего около 300 просмотров за почти год его существования — я никак не раскручивал блог, ничего такого не делал. Так что тут жалеть нечего.
Нет, я не копировал статьи. К счастью, вовремя узнал, что так делать нельзя. Я собирался подождать, пока они пропадут из индекса, и тогда уже опубликовать на новом месте.
Павел, ну тогда время решает всё) Страницы обычно быстро удаляются из основной выдачи, но еще некоторое время хранятся в сохраненной копии. Если будете статьи публиковать на новом домене, то подождите когда и в сохраненке они удалятся.
Webliberty, именно этого я теперь и жду) Спасибо за советы!
Привет всем! Я хочу узнать одно.. У меня раньше были примерно 3000 страниц которые сейчас не существуют, я поставил 301 редирект на главную страницу, хочу узнать это хороший способ или нет? И еще это заставит ли это ПС удалить старые страницы из индекса.. Заранее спасибо!
Karo, привет! Если страница более не существует, то предпочтительнее чтобы сервер давал 404 ответ. Тогда страницы сами выпадут со временем. Если не хотите терять пользователей приходящих на такие страницы, то сделайте 404 страницу более информативной. Т.е. предложите пользователям перейти в какой либо раздел сайта, поставьте блок с последними записями или самыми популярными.
Использование редиректа допустимо, но нужно учитывать, что поисковые системы не очень любят когда их слишком часто перекидывают со страницы на страницу…
Спасибо большое за совет! Так и буду делать.
С новом годом и с наступающим, пусть 2013 будет успешный и доходный год! Удачи!
Здравствуйте, Денис! Очень рада, что попала на Ваш блог! Я далека от технических вопросов. Но раз уж блоггер, то приходится хотя бы немного что-то делать. В связи с этим, у меня просьба, поясните пожалуйста на языке «чайника» следующую ситуацию. Я так же , как и Юрий, год назад сменила тему, поэтому часть статей пометила в «личные», т.к. побоялась их удалять. Мне их нужно удалить из поисковых систем, так как это описано в Вашей данной статье? И еще, если этого не сделать, то это влияет на показатели блога, правильно ли я понимаю?
Лилия, здравствуйте! Да, конечно их можно удалить таким способом, хотя если с тех пор прошел целый год, то думаю их и так уже нет в индексе ПС �� На основные показатели блога это никак не влияет.
Приветствую. У меня такая проблема. В поиске фото по запросу имени фамилии выдает фото, которое я хочу, чтоб исчезло.
Его удалили с фотохостинга. И в яндексе оно осталось только в виде маленького размера фоточки на общей странице выдачи поиска по запросу. Если на него нажать, то пишет, что фото не может быть открыто, т.к. его не существует.
В общем у меня вопрос, как долго вообще это несуществующее уже месяц фото будет выдаваться в поиске этой маленькой копией? По урл ничего не удаляется. Яндекс пишет, что у него такой URL и не проиндексирован.
Улитка, сейчас наверно отображается сохраненная копия изображения. Индекс сохраненки может долго содержать сведения об удаленных страницах или файтах, но со временем все удалится.
Классная статья. Не могу найти в инструментах вебмастера на Google ни одну из вкладок, ни оптимизации, ни файлы sitemap, ни Удаление URL адреса. Одно из двух: либо то что у меня аккаунт в Google на моем домене, либо Google интерфейс урезали. Есть только «Главная страница», «Все сообщения», «Настройки», «Лаборатория», и «Другие ресурсы» При нажатии на эти ссылки подпункты описанные в статье не появляются. Что же делать? ��
У меня с дублями полный п..ц. Накосячил с сайтом, пришлось удалять и заново устанавливать. Как следствие, каждая статья по новому адресу и по старому, более ста статей. ЧТО можете посоветовать?
А как относиться к этому замечанию гугла?
Роман, для начала необходимо добавить свой сайт в Google Webmaster Tools, подтвердить на него свои права и уж затем, появится возможность применять все выше описанные действия, в том числе появятся все перечисленные Вами пункты, которые не смогли найти.
А сейчас видимо сайт у Вас не добавлен и видите вот такую картину:
После добавления сайта он появится в списке и им можно будет управлять.
Олег, при переустановке меняли URL адреса или в чем причина? Страницы с 404 ошибкой можно и даже нужно смело удалять.
Роман, можно подождать конечно пока Гугл и сам выкинет страницы, но эта процедура может затянуться слишком долго. Ждать когда из-за дублей сайт уйдет под фильтр или опасаясь «негативных последствий» все же избавиться от них? Я предпочитаю второй вариант, кроме того если это действительно никому ненужны дубли, то последствий быть не может, все на пользу ��
Спасибо за ответ! Понятно. Просто напугала фраза «может привести к негативным последствиям для вашего сайта». Каким еще последствиям?! опять еще какой-нибудь фильтр наложат.
Подскажите еще пожалуйста. Изменил названия ссылок с кириллических на латиницу. Редирект поставил. Но все равно в индексе теперь дубли. Вот уже в течении месяца ни одна страница не добавляется в основной индекс, а попадает сразу в дополнительный, несмотря на уникальный контент.
Что делать: удалить в вебмастере все кириллические ссылки и несколько месяцев ждать, пока гугл перенесет страницы в основной индекс (если перенесет еще) или удалить все страницы, которые находятся в доп.индексе и ждать их новой индексации?
Webliberty, чуть позже с этим разобрался, всё было добавлено, просто нужно было сперва выбрать сайт кликнув на него, потом конечно всё появилось… Теперь в другом проблема. Делал вообще изночально портал для школ, и подумывал сделать на одном домене всё, только сайт каждой школы выглядел бы так:
школа.в/населенный_пункт/
Оказался такой вариант не востребованным, и сайт с такой конфигурацией имел бы очень длинный адрес… В общем оставил один сайт на этом домене, а слеш удалил, теперь вот удаляю все старые адреса из гугла, но они не удаляются, удалял и каталоги, ошибки всё равно появляются через некоторое время… А в яндексе вообще не пойму как удалять…
Роман, а страницы закрыли в роботсе? Гугл воспринимает этот файл как рекомендацию и может иногда игнорировать. Были у меня такие страницы, которые вновь и вновь появлялись, через месяц или два. В Яндексе тоже все просто, переходите по указанной в статье ссылке, вводите адрес и нажимаете кнопку удалить, вот и все.
Такой вопрос, хочу свалить с Ucoz, сейчас на этой CMS прикреплён домен второго уровня. Сначала я хочу заблокировать сайт, и тут же начну удалять страницы из индекса Яши и Гугла, как указано выше в Вашей статье.
Потом откреплю домен и повешу его на другой новый сайт, после этого (разумеется спустя какое-то время, например с месяц спустя) я могу по новой тем же контентом наполнить мой новый сайт или за это будет что-то нехорошее?
Влад, ситуация с переездом с бесплатных платформ тем и усложнена, что нет полного контроля над сайтом и нет возможности настроить 301 редирект, что в данном случае разумнее всего.
Дело в том, что даже после ручного удаления страниц из индекса ПС они «запоминают» историю контента, где он раньше был, на каком домене и хранят эту информацию в своем кэше в виде копий сохраненных страниц.
В Гугле можно удалить страницу вместе с сохраненкой, в Яндексе такой возможности нет. Если учесть, что Google более лоялен к дублированному контенту, то со стороны Яндекса нет уверенности что не будут применены санкции. Сохраненные копии страниц в Яндексе могут храниться довольно большой срок, вплоть до полугода.
Но переезд на платный хостинг — благое дело и я бы рискнул, Ваша задумка вполне осуществима, искренне желаю удачи ��
Здравствуйте, Webliberty. А как долго Яндекс хранит информацию об удаленном сайте/домене?
Доброе утро! Набираю в ГУГЛЕ запрос по своей фамилии и читаю среди прочей информации старую и тенденциозную (на разных страницах списка), связанную с моим отношением к Правлению Садоводства. К нему давно не имею никакого отношения! Как ее удалить?
У плагина all in one seo pack есть функция удаления дубликатов. Можно им воспользоваться, либо прописать noindex.
Александр, здравствуйте! Об этом знает только сам Яндекс)
Юрий, приветствую! Если страница на которой написано про Вас существует (открывается), то следует обратиться к владельцу сайта с просьбой исправить или удалить упоминание о себе. Если сейчас отношения не имеете, то это уже история, ее нельзя переписать заново.
Степан, речь не совсем про дубликаты, но функции полезные, можно воспользоваться.
Всё никак не получается удалить данные моей старой страницы ВК из поисковика. То есть страницы этой уже давно нет, а вот в поисковике она есть и мои детские фото тоже можно найти там… Пробовала в яндексе через вебмастер удалить, но он мне пишет, что Указанный URL не проиндексирован. Что это значит? ��
Caroline, не совсем понятно — по факту страница существует если пройти по ссылке? Перейдите на страницу social.yandex.ru и отключите свой профиль Вконтакте в графе «Использовать на сервисах» или вовсе удалите:
Webliberty, такая ситуация. На портале по поиску работы при вводе моего номера телефона видна вся моя трудовая деятельность и все контакты. Страница удалена, а копия имеется. Google говорит, что информация перестанет появляться, когда будет произведено переиндексирование. А когда — не ясно. А что насчет других поисковиков? Как мне ускорить удаление старой информации?
Спасибо за статейку, у меня дублирование контента в Гугле, попробую, отпишусь, спс.
Игорь, все верно, потребуется время, прежде чем информация будет полностью будет удалена из сохраненной копии страницы. Если сайт содержит конфиденциальную информацию, которая, на Ваш взгляд, не должна находиться в поиске, стоит обратиться за помощью: удаление информации из Google
Здравствуйте, у меня именно эта ситуация, о которой вы здесь пишите: я изменила постоянные ссылки на ЧПУ. Редирект 301 есть, но вначале он не работал и был ответ 500. Потом я заменила тему и стала ошибка 404, это все же лучше, чем 500. Очень долго держатся ошибки 404, я их удаляю ежедневно, а на другой день их столько же или больше, причем одни и те же, это какая-то бесконечность.
Можно ли это как-то ускорить, другим способом, чем это ручное ежедневное удаление? Или другого способа нет? ��
Денис смотри, а если мне надо удалить /attachment/, если я выберу «удалить каталог», то какие адреса еще удалятся?
Ксенья Юрьевна, редирект скорее всего не работал по той простой причине, что страницы находились в кэше браузера. Простите, а где держаться ошибки? На блоге или в поиске? В принципе, при ответе сервера 404 страницы сами со временем исчезнут из выдачи — изнурять себя ежедневным удалением не стоит.
Александр, никакие, т.к. этот адрес не является каталогом. Если планируется исключить из индексации подобные ссылки — нужно добавить в robots.txt следующее правило:
Подскажите пожалуйста, как мне удалить свое фото с данными с Яндекса (people.yandex.ru)? В строке запроса просто набираю свое имя и фамилию и сразу мое старое фото с данными. Поменяла уже фото в ВК (там раньше было это фото), а как удалить в Яндексе не понимаю. Нужно страницу в ВК удалить? В Вебмастере пробовала, не получается! Помогите «чайнику» (реально дело жизни и смерти)
Ольга, Яндекс подгружает фотографии из социальных сетей. Если фото изменили, то и в поиске в скором времени оно изменится. К сожалению, как-то повлиять и ускорить процесс не получится.
Пишет что Указанный URL не проиндексирован. Как это? Тут уже не отвечают?
Василий, если не проиндексирован, значит страница не присутствует в результатах поиска, следовательно и удалять нечего. Отвечают, извиняюсь за задержку ��
Как одним махом удалить все файлы каталога с гугла?
Открываете инструмент «Удалить URL-адреса», создаете новый запрос на удаление и вводите название каталога таким образом:
Обратите внимание, полный путь вводить не нужно, только название каталога. Затем в качестве причины в выпадающем списке выбираете «Удалить каталог» и нажимаете «Отправить запрос»:
Подскажите, пожалуйста, давно по незнанию меняла названия записей. В панели яндекс вебмастер в исключенных страницах находятся эти урлы. Если на них нажать, сообщает error 404 ничего не найдено. Переходя по ссылке для удаления, подставляю несуществующий урл, сообщает, что он не проиндексирован. Непонятно, мне остается ждать или как быть с тем, чтобы из панели урлы исчезли? В robots запрет не напишешь ведь все эти несуществующие страницы. Поэтому пока не поняла, что предпринять?
Людмила, все верно, только ждать. Эти страницы уже не участвуют в поиске, т.к. удалены роботом при очередном сканировании и ответе сервера 404. Поэтому удалять ничего не требуется.
В панели ЯВ данные обновляются с задержкой и в данном случае наличие в отчетах этих страниц не оказывает никакого влияния.
Спасибо, буду ждать тогда. Правда, жду уже почти два года, понимаю, что не оказывают они ни на что влияние, но вот глаза точно мозолят! ��
Здравствуйте, помогите пожалуйста, проблема с поисковиком гугл. Когда вставлю в поле «URL-адреса которые нужно удалить» появляется окошко с надписью:
Потом я нажимаю removal request. И через некоторые время появляется надпись «отказано». Мне срочно нужно удалить эту страницу кэша. Она как назло появляется в первых рядах поисковика гугл когда набираю свое имя, что мне посоветуйте делать? Надеюсь на Вашу помощь ��
Здравствуйте, к сожалению, ничем помочь не смогу, о причинах отказа могу лишь догадываться. Попробуйте повторить запрос чуть позже. Да и не принимайте близко к сердцу, мало ли одинаковых имен встречается.
Информация с сайта удалена и копия страницы обновилась но при запросе этой информации в поисковике результат показывает ссылку на этот сайт. Посоветуйте помогите в чем причина?
А в чем проблема? Ссылка же осталась, просто сменилось содержание. Возможно на эту страницу ведут другие внешние ссылки, тогда в результатах поиска обычно отображается: «найдено по ссылке».
Здравствуйте! Webliberty да, но дело в том что информацией является моя Фамилия и я не хотел бы чтобы она выводила этот сайт в результатах поиска. На самом сайте ее нет.
Алексей, в таком случае остается только ждать когда поисковики обновят свой индекс. При желании можете отписаться на мою почту и указать адрес сайта + запрос по которому он находится в результатах поиска — посмотрю детальнее в чем может крыться причина.
Нет оснований для удаления. Сервер не возвращает код 404, индексирование не запрещено ни в robots.txt, ни метатегом noindex — что делать?
В Яндаксе если указанный URL не проиндексирован странице или категории, то вы просто так не удалите, а это часто бывает.
Айгуль, если сайт принадлежит Вам — выполнить одно из требований, позволяющих получить основание. Если это сторонний сайт — связаться с администрацией и попросить пойти навстречу.
А как убрать страницу не нужную на сайте вордпресс?
Саид, имеете в виду как удалить страницу с сайта? Ссылка на удаление есть в админке, как в списке всех страниц, так и в режиме редактирования.
Добрый день! А как быть, если надо удалить из Яндекса несколько сотен страниц? Попробовал через сайт/labels/ — не работает. Не уж то нет ещё в Яндексе такого механизма?
Сам файл robots.txt изменил давно, робот сайт посещает, но лишнее не удаляет из поиска по
Здравствуйте! Группового удаления страниц по каталогу у Яндекса нет. Выход только один — удалять вручную каждую страницу или ждать. Как правило страницы с 404 ошибкой выпадают из поиска через 2-3 апдейта поисковой базы.
А если страницы с товарами были в индексе их удалили с помощью 404, потом добавили под новыми урлами, может ли из за этого товары не попадать в индекс? Если да, то как решить эту проблему не имея старых урлов товаров?
Антон, это может являться причиной. Поисковые системы стараются не индексировать страницы с не уникальным содержанием. После того как страницы выпали из основного индекса, в течение продолжительного времени (до полугода) они могут находиться в сохраненной версии и ПС знаю об этом контенте, считая его появление на других страницах дубликатом. Вам было необходимо использовать 301 редирект для смены URL.
В том случае, если товар был временно исключен из продажи, не стоило удалять страницы. В таких случаях выводят сообщение о его временном отсутствии и приводят список похожих карточек товаров.
Загоняйте страницы в поиск социальными сигналами, ставьте ссылки на эти страницы. Очень важно, чтобы товары имели уникальные описания и желательно отзывы покупателей.
Webliberty, Спасибо большое) Буду пробовать ��
Указанный URL не проиндексирован — пишет мне вебмастер всякий раз, когда я хочу удалить сохраненную копию страницы. Сайт недавно закрылся с концами. Хочется удалить все следы его пребывания в Сети. С гуглом вопрос решился легко, а яндекс коней кидает. Как быть?
Сохраненная копия может храниться очень продолжительное время. И да, она считается не проиндексированной, удалить через Вебмастер не получится, остается только ждать.
Здравствуйте, я новичок в этом деле. Недавно увлёкся созданием сайтов. Создал сайт в ноябре и не знав наполнял его некачественным рерайтом, страницы индексировались. Почти месяц я не занимался сайтом, изучал все что связанно с сайтоСтроением.
В начале января удалил весь некачественный контент с сайта (примерно 180 записей) и уже 6 дней добавляю качественный копирайт, но почему-то не индексируется новые статьи, с чем это может быть связано? И будет ли толк, если дальше наполнять его качественным контентом? ��
Здравствуйте, Влад, ответил на Ваши вопросы по электронной почте. Проблемы с индексированием скорее всего связаны с изменением структуры ссылок. Качественные тексты обязательно приведут к положительному результату, но вначале определитесь со структурой, использовать ЧПУ или нет.
К тому же не забывайте, что в Яндексе текстовые апдейты проходят достаточно редко, примерно раз в две недели.
Здравствуйте! У меня такая ситуация — занимаюсь наполнением, актуализацией информации сайта в фирме. Когда хочу удалить разделы, странички со старой информацией и т.п., мне это делать не дают, говорят:
На этом объяснения заканчиваются. Почему нельзя удалять? Какие минусы, последствия может повлечь за собой удаление страницы? Так же можно «обрасти хламом» и засорить сайт ненужной информацией, которой все равно никто не интересуется.
Marryl, здравствуйте! В этих словах есть доля правды. Если страницы приносят трафик или на них ведут обратные ссылки, то при удалении Вы потеряете и то и другое. Если информация устарела, то ее лучше актуализировать.
На своем блоге я тоже не удаляю старые записи, хотя они давно потеряли всякий интерес со стороны посетителей, а когда есть свободное время — переписываю. И это дает ощутимый эффект!
Подскажите пожалуйста. Перенес интернет-магазин с поддомена: старый.site.com.ua на новое название поддомена: новый.site.com.ua. Сам сайт новый, только проиндексировался гуглом, посетителей практически не было.
Как и что в таком случае лучше сделать со старым поддоменом? Просто удалить все старые файлы и сам поддомен или ставить какие-то перенаправления? Сможет ли Гугл теперь добавить новый поддомен под фильтр одинакового контента (поскольку старый проиндексирован)? ��
Виталий, в Вашем случае следует настроить редиректы со старого поддомена на новый — это исключит возможность наложения санкций за не уникальный контент.
Если сайт новый, то после индексации, которая в среднем занимает около месяца, в поиске должны появиться новые адреса — после этого можно удалить редиректы и поддомен, так как на старый поддомен наверняка не ведут ссылки с других сайтов и держать переадресацию вечно нет необходимости.
Webliberty, Спасибо.
Но насколько я понимаю гугл сам не удалит старые ссылки «старый.site.com.ua»
Возможно через: Вебмастер /Индекс Google / Удалить URL-адреса — добавить к удалению такую ссылку «http://старый.site.com.ua/»?
Или этот способ может задеть новый поддомен, поскольку уже стоит редирект (или сам корневой сайт)?
Виталий, удалить такие ссылки через Вебмастер не получится, потому что страница существующая и не закрыта от индексации — нет основания для удаления.
Если будет проставлен 301 редирект, то старые страницы сами будут исключены из поиска, в то время как новые в нем появятся.
Это хорошо все, а как сделать чтобы страница не попадала в индекс? Чтобы поисковой робот её не видел?
Алексей, настройки индексирования страниц задаются с помощью файла robots.txt, который должен быть расположен в корневом каталоге. Подробнее об этом читайте здесь.
Здравствуйте. У меня такая ситуация — я не успела оплатить хостинг. Хостеры удалили мой аккаунт и сайт — бекапов нет. Если я пересоздам сайт с тем же доменным именем и наполню его тем же контентом, как Яндекс отнесется к этому? Старые ссылки (страницы) из поиска удалю ��
Марина, а зачем удалять из поиска старые страницы, если есть возможность восстановить на них контент? Домен остается тот же, структура URL не меняется и сайт со временем возвращается поиск. А самое главное — не теряются внешние ссылки, ссылающиеся на страницы сайта.
В восстановлении помогут сохраненные версии страниц в поисковых системах, а также Webarchive. Такой вариант более приемлем, нежели восстанавливать контент по другим URL адресам. Яндекс должен нормально отнестись, т.к. даже после удаления страниц они еще долгое время находятся в сохраненной копии и могут участвовать в поиске.
А если взглянуть на эту тему со стороны пользователя, а не администратора сайта. Как же удалить страницу чужого сайта из поисковой выдачи, если на ней информация, которая порочит честь, достоинство, бла-бла…?
Светлана, следует обратиться на прямую к администратору сайта и в вежливой форме попросить удалить информацию. Не все на это пойдут, но попытаться стоит.
Webliberty, мне видимо больше повезло) Я нашла фрилансера, который смог удалить вопреки нежеланию администратора)
Доброго времени суток! Создал блог на блогпосте, подвязало почту, акк в гугл+, блогом должен пользоваться другой человек, не подвязывал ни в серч консоль ни в адсенс, сразу же удалил из меню. Так вот, почему он выдается в поисковой выдаче? И почему при регистрации нового блога адрес удаленного не доступен для регистрации? Гугл сам его удалит или надо куда-то писать с просьбами? Спасибо за ответ.
Здравствуйте, Николай. Мне удалось найти информацию, что при удалении блога появляется сообщение о 3 месяцах — в течение этого срока владелец сможет его восстановить. Затем адрес будет освобожден и доступен для регистрации. Можете задать этот вопрос в поддержку для уточнения.
Здравствуйте. Скажите, если изменил url в настройках, убрал каталог между доменом и названием страницы. Как сделать, чтобы не было дублей страниц? Ведь старые страницы проиндексированы по старым ссылкам и они же будут индексироваться по новым?
Webliberty, добрый вечер! Спасибо огромное за столь интересный контент.
Хочу уточнить следующий момент: дело в том, что у меня на сайте порядка 180 000 страниц представлено в поиске. Я хочу изменить структуру урлов, поскольку в части из них по ошибке оказалась кириллица и в целом по определенным урлам излишне высокий уровень вложенности.
В связи с этим есть 2 вопроса:
1) Если поставить 301 редирект со старых урлов на новые (страницы будут абсолютно те же самые) и при этом треть страниц удалить (ошибка 404) и закрыть роботсом, оба этих действия в совокупности могут негативно сказаться на сайте в плане штрафов/фильтров/потери траста и т.д.?
2) На некоторые узкие специализации хочу сделать поддомен, с переходом с главной страницы, допустим. Как бы Вы посоветовали сделать это? Чтобы не было штрафов за зеркало, перенаправление пользователей и так далее?
Буду очень признателен ответу)
Виктор, поставьте редирект со старых страниц на новые или укажите новый canonical. Со временем страницы будут переиндексированы по новым адресам без дублей.
Артем, если это будет сделано для улучшения сайта и правильно в техническом исполнении, то санкций не должно последовать. Временное снижение позиций не исключено, но должно восстановиться после склейки страниц с новыми URL.
Поддомены я бы не стал использовать вообще в данном случае, т.к. это неизменно приведет к потере ссылочной массы на основной домен. Для поисковых систем это будут разные сайты со всеми вытекающими последствиями.
Добрый день!
Возникла ситуация, когда необходимо сменить домен сайта, но без 301 редиректа.
1. Если я перенесу сайт на новый домен, но при этом заменю весь контент — этого будет достаточно или надо будет менять логотип, дизайн, реквизиты компании также, чтобы поисковики не посчитали сайт копией старого?
2. Смогу ли я использовать старый контент сайта, если удалю все странички по инструкции и подожду пару месяцев (сколько нужно ждать примерно?) чтобы удалились копии страниц?
Елена, предпочтительнее настроить редирект, но если такой возможности нет, тогда Ваш вариант имеет право на жизнь.
1. Менять логотип, дизайн и реквизиты не нужно, новый домен не должен попасть под аффилиат-фильтр, если старый домен будет недоступен.
2. Сколько ждать — достоверно никто не знает, но я предпочитаю ориентироваться на 6-ти месячный период. Главное не забудьте проверить старые тексты на уникальность — их могли растащить.
Добрый день!
Сколько должно пройти времени между тремя действиями для удаления сайта:
1) запрет индексации в robots.txt;
2) удаление файлов сайта с хостинга;
3) удаление URL сайта через Яндекс и Гугл Вэбмастер.
Еще вопросы:
а) если выполнить пункт 2 и 3, то нужно ли выполнять пункт 1?
б) в удалении URL сайта через Яндекс и Гугл Вэбмастер нужно прописывать каждую страницу отдельно или достаточно внести адрес сайта и все его страницы при этом удалятся?
в) перед удалением URL через Яндекс и Гугл Вэбмастер нужно убедиться, что сервер дает ошибку 404?
Заранее спасибо за ответы!
Маргарита, точного ответа на Ваш вопрос не существует, я имею в виду промежутки времени между этими действиями.
Если хотите полностью удалить сайт, то в первую очередь выполните 1 пункт. Затем в панели администрирования удалите все страницы и записи, после чего переходите к 3 пункту. Описанные мною действия можно выполнять сразу, ничего не дожидаясь.
Удаление страниц из поисковой выдачи занимает некоторое время. Google удаляет за короткий промежуток времени, Яндекс за 2-3 апдейта поисковой базы. Для контроля проверяйте количество проиндексированных страниц в обоих поисковых системах.
Когда страницы пропадут из выдачи — можно переходить ко 2 пункту для удаления файлов с хостинга. Важно: даже после этого, страницы долгое время будут находиться в кэше ПС.
Ответы на дополнительные вопросы:
а) Можно не выполнять.
б) В Яндексе отдельно каждую страницу. В Google можно по отдельности или каталогом, например, если в URL есть категории.
в) Да, ошибка 404, запрет на индексацию в robots.txt или мета-тег noindex на всех страницах — обязательное условие.
Разрешите задать встречный вопрос: а зачем такие сложности? Желаете ускорить удаление? Если просто удалить файлы с сервера, то рано или поздно сайт пропадет из поиска самостоятельно.
Денис, спасибо за оперативный ответ. Обнаружила признаки, что сайт признан аффилиатом, поэтому хочу от него поскорее избавиться, чтобы он не тормозил основной сайт. Ответ у вас очень подробный, но я все равно немного запуталась.
Прошу подсказать, правильно ли перечислена последовательность действий:
1) Запрещаем индексацию в robots.txt всех страниц всем поисковикам:
2) Удаляем файлы сайта с хостинга;
3) Перед удалением URL сайта через Яндекс и Гугл Вэбмастер дожидаемся, чтобы сервер выдавал ошибку 404 для всех страниц сайта;
4) Удаляем URL сайта через Яндекс и Гугл Вэбмастер (отдельно каждую страницу в Яндексе и отдельно каждую страницу или каталогом в Гугл).
5) Определенные временные промежутки между этими действиями можно не соблюдать (кроме п.3) и можно выполнять их сразу друг за другом последовательно.
Маргарита, слишком мудрено у Вас получается ��
Поступите следующим образом:
1) Удалить все файлы с хостинга, включая robots.txt (соответственно править его не нужно).
2) Отправить запросы на удаление URL в панелях вебмастера. Ждать не нужно, если файлы удалены, то страницы уже отдают 404 ошибку.
В своем первом ответе я учитывал последовательность действий не полного удаления, а, например, части страниц на сайте. При полном можно поступить иначе и намного проще.