./comments
./contacts icq: 909889;
email: ;

Как удалить свой сайт из веб архива (archive.org) ?

Советы и рекомендации
Недавно в очередной раз копался по веб архиву и задался мыслью... а реально ли вообще удалить от туда какие либо страницы или же сразу всю историю. Валяется у меня один дроп домен с плохой историей, но хорошим именем, решил провести на нём эксперимент.



Что такое веб архив (web.archive.org)?


Wayback Machine или просто вебархив, это сайт который, позволяет смотреть историю сайтов. Конечно, не всех, а только тех которые попали в его базу. Поисковый робот вебархива идексирует интернет сайты и архивирует их.

Как удалить свой сайт из интернет архива?


Самый просто способ предлагают сами разработчики веб архива, а именно добавление инструкций для их робота в robots.txt вашего сайта.
User-agent: ia_archiver
Disallow: /

Благодаря этим строчкам вы сообщите их роботу архива что не нужно индексировать ваш сайт + разработчики уверяют что такой способ способствует удалению всей истории в архиве. (источник)
15.05.2013 02:40:31
stk
3494
13
Комментарии

Arkady
14.12.2013 16:39:44
Автор, прошло полгода - сайт удалился из архива, метод работает?
stk
14.12.2013 18:36:36
Да, конечно, удалился через месяц или два. Потом пробовал еще на паре сайтов, так же, работает.
Alex
16.10.2015 15:14:23
Подскажите, плиз, сколько занимает процесс удаления из архива? Спасибо.
stk
16.10.2015 16:15:21
А черт его знает. Наверно пока бот вебархива (ia_archiver) не зайдет на сайт и не увидит что в robots.txt запрет для этого бота.
Только что пытался как то привлечь бота на свои сайты. Делал запросы с сайта вебархива, но в логах пусто, бот так и не пришел. Я не знаю как можно ускорить его.
Alex
16.10.2015 22:40:11
stk, а вы могли бы посмотреть корректность роботса? вы разбираетесь в этом?
Alex
16.10.2015 22:46:30
Цель — закрыть сайт от индексации любыми поисковиками, ну и удалить из archive.org естесно. Спасибо!

# Generated by pr-cy.ru/

User-agent: *
Disallow: /

User-agent: ia_archiver
Disallow: /
stk
17.10.2015 00:59:16
Всё верно.
Alex
17.10.2015 01:12:59
Благодарю
solt
06.12.2015 20:54:44
Как удалить свои личные данные с архивированного сайта?
stk
06.12.2015 21:08:35
А черт его знает :)
MEGA MASS
24.04.2016 20:47:52
Что за робот? Куда нажимать?
Мне надо удалить частично сохраненные страницы с профилем на одном сайте. Его кто-то сохранял без моего ведома аж 7-8 раз, позже и я сохранил несколько раз. Сохраненное не мной надо бы удалить.
stk
25.04.2016 10:11:06
MEGA MASS, удалить из вебархива можно всё или ничего и только на своём сайте.
Василий
14.07.2017 02:17:23
Пару месяцев это работало,когда поставил,позже сайт начал снова индексироваться,поэтому прочитал что надо ставить так ia_archiver-web.archive.org