Як видалити сайт з пошукача

Як видалити сайт з пошукача

Багато власників інтернет-сайтів стикаються з проблемою заборони індексації ресурсів та їх видалення з пошукових систем. Зазвичай це відбувається тому, що сайт стає застарілим і неактуальним, веб-майстер чи відвідувачі втрачають до сайту інтерес або ж сайт містить особисту і навіть конфіденційну інформацію.

Інструкція

  1. Існує безліч способів видалення сайту з пошукових систем.

    Перший і найпростіший із способів видалення результатів запитів з ПС — видалення сторінки з самого сайту або повне видалення CMS сайту через FTP-з’єднання. Через кілька днів Пошукова система зробить апдейт бази і видалить посилання на ваш ресурс з результатів пошуку.
  2. Найпопулярніший серед веб-майстрів спосіб захистити від індексації сайт, окремі його розділи або сторінки, і тим самим викинути посилання з результатів пошуку — це редагування файлу robots.txt.

    Закрити окрему сторінку від індексації можна, скориставшись кодом:

    User-Agent: *

    Disallow: / page.html (закриття сторінки page.html)

    В інтернеті існує безліч авторських інструкцій щодо використання кодів для файлу robots.txt.
  3. Третій спосіб видалити сторінки сайту з пошукових систем — використовувати мета-тег robots в його сторінках. Тег прописується в HTML-коді приховуваних сторінок між тегами.

    Таким чином, після переіндексації сайту ПС, сторінки з даними мета-тегом випадуть з пошуку. Недолік даного методу в тому, що багато сучасних сайти використовують tpl-шаблони, а це означає, що доведеться змінювати код вручну сотням, а може і тисячам сторінок.

  4. Четвертий спосіб видалення сайтів з пошукових систем — використання заголовків X-Robots-Tag. Суть цього заголовка схожа на використання попереднього мета-тега, проте запис повинен бути розташована в http-заголовках:

    X-Robots-Tag: noindex, nofollow
  5. Найефективніший спосіб видалення сайту (цілком) з пошукових систем — це його видалення з панелі вебмастера. Після апдейта (3-7 днів) сайт буде недоступний для пошукової системи. Панель вебмастера доступна для пошукачів Яндекс (http://webmaster.yandex.ru/delurl.xml) і Google (http://webmaster.yandex.ru/delurl.xml).