Как правильно «закрывать» свой сайт
В январе 2012 года прошли массовые протесты против SOPA и PIPA: многие авторитетные западные сайты прекратили работу на сутки.
У многих вебмастеров возник вопрос: как сделать «blackout», но при этом не навредить сайту? На форуме вебмастеров Google появился пост сотрудника JohnMu с детальными рекомендациями по отключению сайта. Данные рекомендации полезны не только для протестующих американским законам, но и для всех вебмастеров, которым бывает необходимо закрыть временно сайт на обновление, исправление критических ошибок и т.д. В любом случае лучше не выключать сайт, но если без этого не обойтись, то делать это нужно правильно. Вот, что рекомендует сотрудник Google:
Используйте 503 HTTP-статус, но внимательно читая справку.
Самый частый сценарий — вебмастера решают заменить контент на сайте попросту убрав тексты и оставив какое-то «послание». Важно в данном случае сделать так, чтобы возвращался 503 HTTP-статус для всех URL, участвующих в «акции» (конкретных страниц или всего сайта).
Зачем это нужно?
а) это будет значить, что это не «настоящий» контент и он не будет проиндексирован; б) учитывая первый пункт, даже если мы видим тот же контент (сообщение о политическом протесте, к примеру) на всех страницах, проблем и санкций, связанных дублированием контента не будет; в) скорость индексации сайта снизится, если сайт отдает 503 код. Это неизбежно, однако это не повлечет длительных проблем, так как скорость индексации сайта быстро восстановится после того, как сайт начнет отдавать 200-й код. То, насколько быстро восстановится нормальная индексация, зависит от вашего сайта.
Два важных замечания насчет robots.txt
a) Бот Google сейчас настроен так, что он останавливает индексацию сайта, если robots.txt отдает 503 код ответа. Индексация восстанавливается только после того, как робот получит 200 или 404 код ответа сервера при запросе robots.txt. Поэтому, если вы решили заблокировать только часть сайта, убедитесь, что robots.txt не отдает 503 код. В противном случае вы заблокируете сразу весь сайт от робота Google.
б) Некоторые вебмастера решают изменить robots.txt, чтобы остановить индексацию сайта и добавляют директиву «Disallow: /». Никогда не блокируйте бота Google таким образом — это может вызвать проблемы, решение которых займет значительно больше времени, чем несколько дней.
Веб-мастера увидят ошибки в Google Webmaster tools. Пристально следите несколько недель после протеста (или после любого другого планового отключения сайта) за ошибками сканирования в вебмастерке, чтобы убедиться в том, что нет никаких проблем с индексацией сайта.
Общий совет: Не меняйте всё подряд. Не меняйте настройки DNS. Как уже сказано выше, не меняйте содержание robots.txt. Также не стоит менять скорость индексации сайта в GWT. Чем меньше вы делаете изменений, тем больше шансов, что отключение сайта пройдет без нежелательных последствий.
Комментарии:
Обзор четырех самых популярных сервисов для автоматического продвижения сайтов...
01 04 2026 5:27:46
Не Google единым. Нужные и важные знания по Яндекс.Вебмастер....
31 03 2026 17:24:26
Что такое ускоренные мобильные страницы и как их посмотреть в Google ***ytics...
30 03 2026 2:17:52
Дизайн макета сайта должен полностью соответствовать представлениям о готовом ресурсе. Создать его можно с помощью онлайн-сервисов, стационарных программ либо через HTML-код...
29 03 2026 17:12:13
Подборка ненаучных наблюдений и ситуаций, в которых бывал каждый из нас...
28 03 2026 22:24:20
Какие рассылки можно отправить покупателю, если у вас есть только данные из карточки товара...
27 03 2026 2:23:50
Уверены, что аппы в украине не приносят денег? В этом кейсе мы расскажем, как увеличить доход с мобильного приложения, и поделимся результатами продвижения LeBoutique...
26 03 2026 23:54:10
Возможно, вы купили обувь Intertop именно после просмотра нашей рекламы....
25 03 2026 19:34:39
Твиты, реплаи, ретвиты - как сделать правильные выводы из активности в Twitter? Об этом читайте в нашем посте....
24 03 2026 11:23:57
Как заинтересовать инвесторов, сколько времени это займет, а также стратегии поиска....
23 03 2026 1:10:35
SEOmoz создал систему, которая определяет релевантность страницы поисковому запросу....
22 03 2026 12:44:58
На отклонение исходящих ссылок после загрузки файла может уйти достаточно много времени: от нескольких недель до нескольких месяцев...
21 03 2026 20:43:42
Чтобы грамотно анализировать статистику рекламных кампаний, необходимо связать Яндекс.Метрику и Яндекс.Директ. Рассказываем, как это сделать...
20 03 2026 12:31:38
История для заказчиков, которые самостоятельно запускают рекламу...
19 03 2026 9:26:15
Какими бывают формы подписки и как их используют бренды...
18 03 2026 12:19:15
Опыт сотрудника отдела маркетинга Netpeak. Дочке Маше — 10 лет, сыну Егору — почти 4 года. Мы по-прежнему не очень продуктивны в таких условиях, но все же накопили больше опыта, чем те люди, которые сейчас внезапно столкнулись с удаленной работой...
17 03 2026 4:23:29
Деловой этикет в переписке с бизнес-партнерами, сотрудниками, клиентами. Как заручиться доверием, укрепить деловые отношение и мотивировать подчиненных. Узнать!...
16 03 2026 7:43:59
Проверка структурированных данных поисковыми роботами нуждается в нашей поддержке...
15 03 2026 1:22:36
Инструкция с применением языка R. Полезно веб-аналитикам, которые работают с крупными интернет-магазинами. Например, на сайте еженедельно появляется примерно 1000 новых наименований и такое же количество позиций переходит в статус «нет в наличии»....
14 03 2026 22:31:43
И уж если бумага стерпит все, интернет — тем более, а значит онлайн-исповедальне быть! И не только ей......
13 03 2026 14:41:14
Публикуем рецензию на новое издание Брайана Клифтона. Несмотря на узкую специализацию, эта книга стала бестселлером на Amazon и уже переведена на 5 разных языков. Стоит отметить, что две предыдущие редакции «Google ***ytics для профессионалов» успешно ис...
12 03 2026 18:49:43
Качество передаваемых данных напрямую отражается на качестве решений, принимаемых для бизнеса. Как защититься от таких ошибок?...
11 03 2026 4:13:28
Netpeak Checker – это мультифункциональный инструмент для массового анализа и сравнения сайтов, который помогает выполнять самые разнообразные задачи в области интернет-маркетинга....
10 03 2026 8:59:51
Готовы ли вы доверить основные настройки кампании автоматическим алгоритмам?...
09 03 2026 10:38:24
Наличие или отсутствие в карточках отзывов о товарах интернет магазина сказывается на продажах, а также оказывает влияние на SEO. Об этом, а также о пользе автоматизированного сбора отзывов о товарах мы расскажем в этой статье....
08 03 2026 0:29:50
А ещё у нас появилась новая стратегия SEO-продвижения для ниши доставки еды и продуктов....
07 03 2026 1:38:38
Подружим GTM и Метрику с минимальным вовлечением программиста....
06 03 2026 0:52:49
Как зарегистрировать и настроить новый сайт в сервисах веб-аналитики...
05 03 2026 7:29:23
Чтобы обезопасить себя и своих клиентов, используйте технологию 3D Secure. Больше рекомендаций — в статье....
04 03 2026 9:42:33
Оплата покупок в Facebook и Instagram через платежные ссылки...
03 03 2026 13:14:45
Составим его вместе...
02 03 2026 19:45:20
Понятная инструкция для SMM-специалистов для тех, кто экспериментирует с настройками аудиторий в рекламных кампаниях. Вы увидите, как настраивать ремаркетинг на примере Facebook. Существует 10 типов индивидуализированных аудиторий в Facebook, разберем три...
01 03 2026 4:39:33
Дайджест-путеводитель по серии постов о работе с редакторами электронных таблиц для PPC-специалистов....
28 02 2026 4:52:56
Техника безопасности по безукоризненным рекламным кампаниям...
27 02 2026 9:10:45
В 2019 году в цикл зрелости вошли 28 технологий и инструментов...
26 02 2026 15:51:36
Вес страниц — один из факторов ранжирования в поисковых системах Google и Яндекс....
25 02 2026 2:15:27
Виктория Игнатьева опубликовала новый кейс по продвижению интернет-магазина детской одежды, обуви и товаров: ROMI (возврат маркетинговых инвестиций) 319%....
24 02 2026 19:45:35
О построении персональных рекомендаций для интернет-магазина, используя технику со-визитов....
23 02 2026 2:22:38
Снимать скрин нужно красиво и логично, вне зависимости от того, кому вы его покажете: начальнику, другу или многотысячной аудитории блога...
22 02 2026 9:59:54
Улучшайте свой уровень английского. Упражнения для В1 — Intermediate («Средний+»). Узнать больше!...
21 02 2026 5:37:26
Скрипт для распределения бюджета на отстающую семантику, чтобы получать больше трафика по меньшей цене...
20 02 2026 13:22:49
Мария Гoлyб устала отвечать на вопрос «Какие преимущества PPC-отдела в Netpeak?» и решила написать об этом пост....
19 02 2026 5:39:12
Используйте и интерпретируйте карты знаний Netpeak Group, чтобы экономить свои силы и время на создании собственных карт с нуля. Узнать больше!...
18 02 2026 22:42:37
Почему сайт упал в выдаче и какой апдейт алгоритма поисковика на это повлиял...
17 02 2026 6:52:44
Четкая структура полноценного письма с примерами из рассылок крупных компаний: Aviasales, LinguaLeo, Rozetka, Yves Rocher, Pich Shop, Эльдорадо и другие....
16 02 2026 1:22:31
Мониторинг мобильных просмотр статистики Firebase в отчетах Google ***ytics и связь Firebase ***ytics с Google Рекламой...
15 02 2026 13:20:51
Чтобы прекратить споры о том, с какого конца разбивать яйцо, я собрал аргументы за союз SEO и PPC...
14 02 2026 23:10:29
Популярные скрипты Google Рекламы позволяют автоматизировать рутинные и монотонные процессы. Каждый скрипт состоит из функций, переменных, объектов, сущностей, селекторов, итераторов...
13 02 2026 1:28:13
Менеджмент и лидерство: 4 разных типа руководства организацией и нескучные иллюстрации в стиле South park....
12 02 2026 10:39:14
Как сохранить статистику переходов из органики Google, а также автоматизировать отчетность: подробное руководство для технического специалиста....
11 02 2026 10:48:12
Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::
