Как правильно «закрывать» свой сайт
В январе 2012 года прошли массовые протесты против SOPA и PIPA: многие авторитетные западные сайты прекратили работу на сутки.
У многих вебмастеров возник вопрос: как сделать «blackout», но при этом не навредить сайту? На форуме вебмастеров Google появился пост сотрудника JohnMu с детальными рекомендациями по отключению сайта. Данные рекомендации полезны не только для протестующих американским законам, но и для всех вебмастеров, которым бывает необходимо закрыть временно сайт на обновление, исправление критических ошибок и т.д. В любом случае лучше не выключать сайт, но если без этого не обойтись, то делать это нужно правильно. Вот, что рекомендует сотрудник Google:
Используйте 503 HTTP-статус, но внимательно читая справку.
Самый частый сценарий — вебмастера решают заменить контент на сайте попросту убрав тексты и оставив какое-то «послание». Важно в данном случае сделать так, чтобы возвращался 503 HTTP-статус для всех URL, участвующих в «акции» (конкретных страниц или всего сайта).
Зачем это нужно?
а) это будет значить, что это не «настоящий» контент и он не будет проиндексирован; б) учитывая первый пункт, даже если мы видим тот же контент (сообщение о политическом протесте, к примеру) на всех страницах, проблем и санкций, связанных дублированием контента не будет; в) скорость индексации сайта снизится, если сайт отдает 503 код. Это неизбежно, однако это не повлечет длительных проблем, так как скорость индексации сайта быстро восстановится после того, как сайт начнет отдавать 200-й код. То, насколько быстро восстановится нормальная индексация, зависит от вашего сайта.
Два важных замечания насчет robots.txt
a) Бот Google сейчас настроен так, что он останавливает индексацию сайта, если robots.txt отдает 503 код ответа. Индексация восстанавливается только после того, как робот получит 200 или 404 код ответа сервера при запросе robots.txt. Поэтому, если вы решили заблокировать только часть сайта, убедитесь, что robots.txt не отдает 503 код. В противном случае вы заблокируете сразу весь сайт от робота Google.
б) Некоторые вебмастера решают изменить robots.txt, чтобы остановить индексацию сайта и добавляют директиву «Disallow: /». Никогда не блокируйте бота Google таким образом — это может вызвать проблемы, решение которых займет значительно больше времени, чем несколько дней.
Веб-мастера увидят ошибки в Google Webmaster tools. Пристально следите несколько недель после протеста (или после любого другого планового отключения сайта) за ошибками сканирования в вебмастерке, чтобы убедиться в том, что нет никаких проблем с индексацией сайта.
Общий совет: Не меняйте всё подряд. Не меняйте настройки DNS. Как уже сказано выше, не меняйте содержание robots.txt. Также не стоит менять скорость индексации сайта в GWT. Чем меньше вы делаете изменений, тем больше шансов, что отключение сайта пройдет без нежелательных последствий.
Комментарии:
Помогают ли комментарии повысить эффективность рекламных постов? Единственный способ выяснить наверняка — провести A/B-тестирование в Facebook. Спойлер: тональность комментария также имеет значение в Facebook...
08 06 2026 13:40:48
Как создать аккаунт в Google Merchant Center, загрузить и изменить фид с информацией о товарах, — делимся тонкостями настройки кампаний шопинга...
07 06 2026 15:40:41
Как начать продавать и увеличить продажи, наращивая бесплатные ссылки...
06 06 2026 8:58:40
Примеры инновационных проектов. Нескучная рецензия на интересную книгу....
05 06 2026 21:47:24
Как жить с налогом на Google, Facebook и другие международные сервисы — объясняем детали....
04 06 2026 6:44:25
В одной из самых «перегретых» ниш вышли в топ-5 по некоторым высокочастотным запросам. Узнать больше!...
03 06 2026 19:40:57
Неля Серебро рассказывает про внутреннюю кухню блога Netpeak...
02 06 2026 15:48:27
Базовые знания, которые нужны, чтобы ресурс понравился поисковикам и пользователям....
01 06 2026 12:20:41
Создание, установка и оптимизация title и мета-тегов keywords, description у сайта, построенного на системе Drupal...
31 05 2026 18:11:14
Какие регионы и тематики наиболее выгодно продвигать в каждом из представленных рекламных сервисов, где наибольшая доля мобильного трафика, и другая полезная статистика....
30 05 2026 21:47:19
Привыкли к недосыпу и жизни «на кофе»? Вы, конечно же, понимаете, что это не дело. Но осознаете ли насколько? Если нет, почитайте....
29 05 2026 3:15:44
Попасть в топ 3 — ваш предел мечтаний? Почему и когда это не принесет ожидаемых результатов, плюс другие не актуальные убеждения о PPC. Узнать больше!...
28 05 2026 7:54:40
Метод бoмжа в маркетинге. Как разработать позиционирование стартапа при ограниченных ресурсах...
27 05 2026 14:14:52
Учимся выстраивать коммуникацию по специальным сценариям....
26 05 2026 8:41:44
Apple, Google и Samsung — давайте вспомним новинки месяца....
25 05 2026 8:10:48
Крупным брендам не избежать негатива в сети. Но с ним можно и нужно работать. Читайте успешный кейс для DOM.RIA....
24 05 2026 7:45:14
Междугородние перевозки и их реклама. Кейс Павла Верлана...
23 05 2026 19:43:28
Насколько классно продается женская одежда в интернете....
22 05 2026 12:56:54
В основе продвижения любых продуктов фигурирует ЦА и её потребности. Рассказываем, как с ней работать в разрезе Инстаграм и Facebook так, чтобы РК давала максимальный профит...
21 05 2026 8:52:22
Как с помощью Google Tag Manager отслеживать исходящие ссылки на сайте и загрузки файлов с него...
20 05 2026 18:29:32
Продвигаем медицинский проект. Кроме цифр рассказываем, что и как делали...
19 05 2026 22:12:13
Фубольный клуб. Как увеличить ROMI (возврат маркетинговых инвестиций) в рекламных кампаниях — рассказываем на примере киевского интернет-магазина «Динамо»...
18 05 2026 14:29:11
Алексей Селезнев проанализировал, как дорого обходятся рекламодателям клики по объявлениям в 25 тематиках и 92 странах....
17 05 2026 17:38:50
Отрывок из книги «Статистика: базовый курс в комиксах» Грейди Клейн и Алана Дебни...
16 05 2026 20:17:42
Инструкция с применением языка R. Полезно веб-аналитикам, которые работают с крупными интернет-магазинами. Например, на сайте еженедельно появляется примерно 1000 новых наименований и такое же количество позиций переходит в статус «нет в наличии»....
15 05 2026 15:43:45
Расскажем в двух словах о всеми забытой функции «Анализ конкуренции»....
14 05 2026 7:41:34
Академия — набор структурированного контента, интеpaктивных заданий и обучающих курсов, посвященных конкретному продукту или индустрии в целом...
13 05 2026 9:43:46
Опыт, накопленный за более чем 10 лет работы в нише и упакованный в специальные предложения....
12 05 2026 5:19:16
Если вы до сих пор сомневаетесь — прекратите это и делитесь своим опытом с читателями, потенциальными клиентами, инвесторами и партнерами. Узнать больше!...
11 05 2026 3:28:33
Как надолго завоевать доверие покупателя с помощью грамотного email-маркетинга? Примеры обращений к клиенту в рассылках, текст писем для привлечения и благодарности за покупку....
10 05 2026 1:23:33
Direct way. Как вложить 200 у.е. и получить 800 у.е....
09 05 2026 10:50:10
Основные этапы раскрутки сайта. Что такое и как работает поисковая оптимизация, ее виды, особенности, преимущества...
08 05 2026 0:10:31
Решили составить список из семи улучшений. Что нового, Netpeak?...
07 05 2026 15:47:48
Слорварь сленга, без которого к 25-летним не подходи...
06 05 2026 15:34:12
Как специалисту оптимизировать рабочее время, качественно развивать проекты и меньше нервничать...
05 05 2026 14:10:28
Как достучаться до сердца блогера, или Автору звонят дважды...
04 05 2026 20:39:10
Сегодня именно тот день, когда пора решиться и отправить своё резюме в нашу компанию....
03 05 2026 10:59:50
Что делать, если денег нет, но трафик очень нужен: советы по раскрутке бренда в фейсбуке. В бесплатном продвижении главный ресурс — время: часы, дни, недели, месяцы, проведенные на площадке. Как их применить? Читайте!...
02 05 2026 8:59:56
Забавные и полезные штуки от Google и как их найти...
01 05 2026 11:35:49
Как сделать склейку и сохранить трафик, распространенные ошибки при склеивании. Узнать больше!...
30 04 2026 18:31:49
Образец чек-листа по созданию форм заказа на сайте интернет-магазина...
29 04 2026 13:15:13
Как бизнес подстраивается под новые привычки покупателей в стиле фиджитал и O2O2O....
28 04 2026 19:58:38
Виктория Игнатьева рассказала про опыт обучения на наших курсах....
27 04 2026 7:23:49
Решение для поискового продвижения крупных проектов (от 300 000 страниц)....
26 04 2026 7:47:55
Структура обзора, правила написания и важные хаpaктеристики этого формата. Подача информации в обзоре и запрещенные методы, которые отпугнут клиентов. Узнать больше!...
25 04 2026 1:27:26
Языковой закон требует, чтобы общение бизнеса с клиентами шло на украинском языке, если нет просьбы о другом приемлемом варианте. Что это означает для РРС, читайте дальше....
24 04 2026 14:36:16
Private Blog Network для ниши безопасности, доставки цветов, товаров сантехники, туризма и выпекания. Сетки сайтов работают не всегда и это нормально. Узнать больше!...
23 04 2026 12:34:46
Узнай, как бэкофис группы помогает развиваться компаниям, и выиграй iPhone — подбери крутое название для нашей группы....
22 04 2026 21:27:44
Как внедрить Business Intelligence для малого и среднего бизнеса....
21 04 2026 23:31:20
Почему стоит внимательно относиться к выбору библиотеки JavaScript....
20 04 2026 9:50:16
Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::
