что делать если сайт блокируется
Блокировка сайта Роскомнадзором. Что делать и как обойти бан?
Вы здесь
Если Вы занимаетесь сайтами серых и темных ниш, то с проблемой блокировкой сайтов Роскомнадзом на территории РФ думаю уже знакомы. Но меня подобная проблема всегда обходила стороной, так как сайты которые я веду в основном белые и пушистые, иногда с оттенками серого. Но даже на белые сайты могут прилетать абузы и блокировки от РКН. Так, в начале декабря, на один из моих проектов тоже прилетел предновогодний сюрприз и трафик в один из дней упал в разы.
Предыстория
Коротко о сайте:
На сайт часто приходили жалобы, верней не на сайт в целом, а на отдельные объявления (те же сигареты, копии брендов). Иногда это были предупреждения на почту указанную на сайте, но чаще жалобы летели хостеру, а они уже писали мне, я в свою очередь всегда их тут же удалял.
Беда в том, что в этот раз никаких предупреждений не было (как мне казалось), поэтому причину резкого падения я понял не сразу. Что делает сеошник когда видит такую картину?
Сначала я просрался, потом собрался и начал гонять сайт по сервисам анализа в поисках проблемы, проверять ответы кодов, доступность, позиции, апдейты и.т.д. Но все показывало норм. Позиции просесть не успели, апдейтов не было, сайт технически исправен. В процессе анализа понял что трафик порезало именно с России. Было как-то у меня что Cloud Flare по IP резал страну, поэтому думал на него, и убили сутки на настройку сервера.
Не забыл и на сайт Роскомнадзора заглянуть и проверить нет ли сайта в базе (https://blocklist.rkn.gov.ru/). Сайт был, но ограничение было наложено на страницу, а не на домен. Причем об этом ограничении я знал и ранее, оно было наложено еще с лета (более 5 месяцев), а сайт не доступен стал только сейчас. Страницу не удалял, так как это была категория, причем она сидела в топе по жирным запросам что давало хороший траф на нее (даже с учетом блокировки) и конверсию по монетизации сайта. Ну в блоке и в блоке, сайт же не заблочен был, поэтому этот вариант тоже отложил в сторону.
Многие наверное уже думают:
Бля, как ты мог не заметить? Ведь при блокировке сайта РКН выводится заглушка с сообщением что оный ресурс наказан?
Главная загвоздка моей слепоты была в том, что я живу в Украине (ага, не «на», а «в»), в рунет хожу через VPN от Hideme, а зайдя на сайт под VPN никакой заглушки как оказалось позже не видно, даже если у тебя российские IP установлены. Блокировка происходит на уровне DNS сети в регионах. Когда попросил знакомых с России посмотреть на сайт, сразу все стало на свои места. Прислали такой скрин:
Почему тогда не было предупреждений по email или от хостера? Как оказалось были, вот только в СПАМ все письма от РКН попадали от того я их и не видел. Стоит отдать должное они старались, неоднократно предупреждали, терпели и ждали пока же я исправлюсь.
Вот пример одного из таких писем:
Роскомнадзор информирует/the Roscomnadzor is informing
В случае непринятия провайдером хостинга и (или) владельцем сайта мер по удалению запрещенной информации и (или) ограничению доступа к сайту в сети «Интернет», будет принято решение о включении в единый реестр сетевого адреса, позволяющего идентифицировать сайт в сети «Интернет», содержащий информацию, распространение которой в Российской Федерации запрещено, а доступ к нему будет ограничен.
С уважением,
ФЕДЕРАЛЬНАЯ СЛУЖБА ПО НАДЗОРУ В СФЕРЕ СВЯЗИ, ИНФОРМАЦИОННЫХ ТЕХНОЛОГИЙ И МАССОВЫХ КОММУНИКАЦИЙ.
Последнее такое письмо было 09.12.19, а уже 11.12.19 сайт приуныл.
Что стоит знать о блокировке Роскомнадзором?
Шаги для разблокировки сайта РКН?
Зная нюансы указанные выше стоит начать с ответа на вопрос: можем ли мы устранить причину нарушения (контент который стал причиной блокировки), или наш сайт сплошное нарушение))?
В моем варианте сайт белый, только отдельные страницы серые, поэтому опишу шаги для этого случая. В случае если такой контент удалить не возможно, шаги будут отличаться.
Минимизируем потери трафика
Первоочередная задача при блокировке сайта Роскомнадзором конечно же минимизировать потери посещаемости на время, пока идет процесс разблокировки сайта. Для этого:
Здравствуйте. Сайт https:// адрес был внесен в реестр запрещенных. Сообщаю Вам, что я устранил причину внесения сайта в реестр, все страницы нарушающие правила удалены с портала. В связи с этим прошу Вас удалить сайт из https://адрес данного реестра и возобновить доступ. Сообщите пожалуйста о статусе заявки, о том нет ли более проблем с сайтом которые могут повлечь его блокировку, и сроки когда можно ожидать восстановления работоспособности сайта.
С уважением, Зинченко А.А
Все. Дальше остается только ждать ответа от них.
Сколько времени проходит на разблокировку сайта от Роскомнадзора?
Письмо мной было написано им 13.12.19, и уже (или аж) 24.12.19 я получил ответ:
С уважением,
ФЕДЕРАЛЬНАЯ СЛУЖБА ПО НАДЗОРУ В СФЕРЕ СВЯЗИ, ИНФОРМАЦИОННЫХ ТЕХНОЛОГИЙ И МАССОВЫХ КОММУНИКАЦИЙ.
В среднем ответ приходит в промежутке от 7 до 10 дней.
25.12.19 трафик на сайт заметно улучшился, но так как Новый год на носу трафик всегда к этому времени проседал, поэтому оценить реальные потери сложно.
Действия после разблокировки
Последствия блокировки и парадоксы
Позиции
Самым интересным является то, что после блокировки сайта позиции в Яндексе начинают стремительно падать, а вот в Гуле наоборот позиции начали расти.
На сегодняшний день (конец Января) позиции в Яндексе восстановились, за исключением некоторых отдельных запрос
Посещаемость
Конечно же посещаемость на время блокировка значительно просела, практически весь российский трафик ушел. Создание домена зеркала не дало ощутимого эффекта на таких коротких сроках, его польза лишь в том, чтобы предоставить доступ к сайту постоянным посетителям. Новые на него идут в очень малых количествах так как он не успел проиндексироваться и занять позиции вытеснив старый домен.
На сегодня посещаемость восстановлена, можно даже сказать полностью, и даже больше, с учетом корреляции на Январь месяц, который всегда был на сайте хуже Декабря.
Но вот если до блокировки лидером по трафику был Яндекс (хоть и не с большим отрывом), то теперь им стал Google, и отрыв уже заметен. При этом позиции в Яндексе восстановлены полностью.
Здесь я описал историю и шаги для сайта, у которого лишь некоторые из страниц нарушали правила РКН, если же сайт сам по себе из серых и черных ниш, то шаги по выходу с под бана будут различаться. Вернее это будет история не выхода с под блокировки, так как его разблокировать не получится, а о том, как восстановить трафик на новом домене-зеркале. При этом 301 редирект и склейка со старым сайтом, как я говорил ранее, скорее всего снова приведет к новой блокировке. Опыта такого пока нет, как будет может напишу отдельную статью.
Если у вас есть свой опыт вывода сайтов с под блокировки РКН было бы интересно почитать ваше мнение и опыт в комментариях, или на отдельных статьях по теме.
Провайдер блокирует сайты? Вот что нужно делать
Есть ощущение, что ваш интернет-провайдер блокирует веб-сайты?
Доверьтесь своей интуиции. Это случается довольно часто — как в странах с тоталитарными режимами, так и в демократических странах.
В этом руководстве мы расскажем вам все, что нужно знать о том, как провайдеры блокируют сайты: как они это делают, как определить, что это ваш случай, и как избежать блокировки любимых сайтов.
Содержание
Могут ли интернет-провайдеры блокировать веб-сайты?
Да, они правда могут это делать. Если кто-то скажет вам, что нет, то этот человек просто не понимает, как устроено подключение к интернету.
Вот в чем тут дело – когда вы открываете веб-сайт, ваше соединение проходит через вашего провайдера. Это необходимо, так как иначе у вас не было бы доступа в интернет.
То есть вместо такой схемы:
Ваше устройство → веб-сайт
Ваше соединение выглядит следующим образом:
Ваше устройство → сеть интернет-провайдера → веб-сайт
Поэтому провайдер без труда может решать, какими сайтами вам разрешено пользоваться, а какими нет.
Геоблокировка или блокировка сайта провайдером?
Не путайте эти два понятия. Если вы открываете веб-сайт и видите сообщение о том, что контент недоступен в вашем регионе, то это геоблокировка, а не блокировка сайта интернет-провайдером.
Вот пример того, как выглядит такое сообщение:
Чтобы узнать, как обойти геоблокировку, воспользуйтесь нашим универсальным руководством. Там подробно описано, что это такое, как это работает и как это обойти.
Как интернет-провайдеры блокируют сайты?
Насколько мы можем судить, интернет-провайдеры могут использовать три метода:
1. Фаерволы
Фаерволы позволяют провайдерам (и другим администраторам сети) управлять потоками трафика внутри сети. По сути, ваш провайдер устанавливает правила входящего и исходящего трафика, а фаервол обеспечивает их соблюдение.
Если по такому правилу никто в их сети не может открывать Facebook, то все исходящие/входящие соединения с этим сайтом автоматически блокируются фаерволом.
И, как мы показывали чуть выше, все ваши соединения проходят через сеть вашего провайдера. Так что вам придется играть по их правилам.
Кроме того, фаерволы также работают на основе IP. А ваш провайдер – это тот, кто назначает вам IP-адрес. Поэтому, если вы пользуетесь его услугами для посещения интернета, правила трафика фаервола автоматически применяются к вам.
2. Фильтрация DNS
Когда вы вводите название веб-сайта в адресную строку браузера и нажимаете Ввод, все происходит в фоновом режиме:
Если бы не было DNS-сервера провайдера, вам пришлось бы вводить IP-адрес веб-сайта в строке URL. Что просто крайне неудобно, будем честными.
Но, к сожалению, это также дает вашему провайдеру контроль над вашими DNS-запросами. Если он захочет заблокировать сайт, то просто настроит свой DNS-сервер так, чтобы он возвращал некорректный IP-адрес.
Например, допустим, он хочет заблокировать Facebook. Вместо того, чтобы возвращать IP-адрес Facebook (185.60.218.35), DNS-сервер вашего интернет-провайдера вернет IP-адрес, который не обслуживается или ведет на пустую страницу, либо на лендинг с объяснением, почему вы не можете получить доступ к сайту.
В качестве альтернативы можно просто дать DNS-серверу инструкцию игнорировать все запросы, запрашивающие IP-адрес Facebook.
3. DPI (глубокий анализ пакетов)
DPI – это метод сетевого анализа, который позволяет интернет-провайдерам анализировать ваши пакеты данных. Они могли бы использовать утилиты вроде Wireshark. Это означает, что провайдер сможет видеть нечто подобное подобное при проверке вашего трафика:
Однако нельзя полностью уверенно утверждать, что провайдеры будут пользоваться Wireshark. Мы используем эту утилиту как пример, чтобы показать вам, как работает DPI и как ваш сетевой трафик может выглядеть в глазах вашего провайдера.
С помощью DPI ваш интернет-провайдер сможет увидеть:
Благодаря этой информации они могут использовать DNS-фильтрацию и фаерволы для блокировки сайтов, к которым вы пытаетесь получить доступ.
Как проверить, блокирует ли ваш провайдер сайты
Для начала, вы можете видеть подобные сообщения при попытке открыть сайт:
Есть вероятность, что ваш интернет-провайдер просто-напросто блокирует веб-сайты. Однако это не 100% гарантия, поэтому вот что еще можно сделать, чтобы проверить, блокирует ли ваш провайдер сайты:
Почему провайдер может блокировать сайты?
Трудно сказать. Причин может быть сколько угодно. Мы считаем, что провайдеры могут блокировать сайты по следующим причинам:
Если ничего из этого не относится к вашей ситуации, вы всегда можете позвонить в техподдержку и спросить.
Как избежать блокировки сайта провайдером?
Итак, мы выяснили, что ваш провайдер при желании может блокировать веб-сайты. Вы даже знаете, как это возможно с технической точки зрения.
Но что можно сделать, чтобы обойти эти методы блокировки?
Вот что показывают наши исследования и тесты:
Базовые методы
Начнем с довольно простых советов. Вам не придется сильно утруждаться, чтобы опробовать их. И в отличие от всего остального, что мы сегодня обсудим, эти советы не включают сторонние услуги, которые вам потребуется купить и/или установить.
Итак, давайте начнем:
Если эти опции не сработают, переходите к другим нашим рекомендациям.
Используйте VPN
VPN – это онлайн-инструменты, которые скрывают ваш IP-адрес и шифруют ваш трафик. В данном случае вам будет интересен пункт “Скрыть свой IP-адрес”. Это функция, которая позволяет обойти интернет-провайдеров, блокирующих веб-сайты.
Вот как это сделать:
Более того, как правило, VPN имеют свои собственные DNS-серверы. То есть, помимо обхода фаерволов, вы также можете обойти DNS-фильтрацию.
Да, и регулирование DPI и пропускной способности больше не будет проблемой, так как VPN шифруют ваш трафик насквозь. Ваш провайдер не может видеть, какие сайты и страницы вы просматриваете.
Разблокируйте любые желаемые веб-сайты при помощи CactusVPN
Если вам нужен действительно хороший VPN, то предлагаем познакомиться с нашим Сервисом. У нас есть огромный опыт в том, как помочь людям с обходом цензуры и регулированием от интернет-провайдеров. Кроме того, мы также предлагаем поддержку DoH (DNS Over HTTPS, “DNS поверх HTTPS”). С помощью этой технологии вы можете зашифровать свои DNS-запросы и избежать любой формы DNS-фильтрации.
Специальное предложение! Получите CactusVPN за 2.7$ в месяц!
И как только вы станете клиентом CactusVPN, у вас будет 30-дневная гарантия возврата денег.
Используйте прокси
Прокси-сервер работает точно так же, как VPN – он перехватывает и перенаправляет ваши запросы на сайты, скрывая при этом ваш реальный IP-адрес.
Однако прокси-серверы не предоставляют такого сильного шифрования, как VPN. Так что вы остаетесь уязвимы перед DPI. Кроме того, они, как правило, не включают DNS-серверы, поэтому DNS-фильтрация также может быть проблемой.
С другой стороны, слабое шифрование означает, что вы получите лучшую скорость, чем при использовании VPN – конечно, если вы не используете бесплатный онлайн-прокси. Эти службы быстро переполняются и применяют ограничения по пропускной способности, поэтому там часто очень медленные скорости.
Вместо того чтобы платить за автономный прокси-сервер, задумайтесь о подписке на CactusVPN. За эту цену вы получаете не только VPN, но и серверы, которые дополнены прокси-серверами (без каких-либо дополнительных затрат).
Используйте Tor
Tor (The Onion Router) — это анонимный онлайн-инструмент, который скрывает ваш IP-адрес и шифрует трафик. Но делает он это немного иначе, нежели VPN или прокси.
В целом, в случае с Tor ваш трафик переходит по разным серверам (обычно по 3), прежде чем достичь сайта, который вы хотите посетить. Таким образом, Tor скрывает ваш IP-адрес и помогает обойти блокировку сайта провайдером.
Более того, Tor также несколько раз шифрует ваш трафик. Так что, у вас будет сразу несколько уровней защиты.
Однако у Tor есть некоторые недостатки, которые точно не делают его самым безопасным способом добиться конфиденциальности.
Помимо непонятной поддержки и нескольких утечек IP-адресов, также существует проблема скорости: эта сеть слишком медленная. В ней около 6 000 серверов и чуть более двух миллионов пользователей. Так что да, ситуация выглядит не очень хорошо.
Могут ли интернет-провайдеры заблокировать средства разблокировки?
Возможно, вы где-то читали статьи и слышали, что провайдеры якобы не могут этого сделать.
Безусловно, мы не любим приносить плохую весть, но в действительности они это могут. Конечно, для этого им придется вести активное наблюдение за тем, какие инструменты вы используете.
Как правило, провайдеры используют DPI для обнаружения VPN-трафика (особенно OpenVPN) и просто блокируют IP-адрес, к которому вы подключаетесь. Мы не уверены на 100%, работает ли DPI для трафика Tor, но есть и другие сервисы, которые могут вычислить его (например, Plixer или CapLoader).
Они также могут использовать DPI, чтобы узнать, используете ли вы сторонние DNS-серверы, а затем просто оборвать подключение к ним.
Что касается прокси, то большинство из них предлагают слабое шифрование или вообще не используют его. Таким образом, ваш провайдер может без труда анализировать ваши пакеты данных, чтобы узнать, какие сайты вы посещаете.
Интернет-провайдеры также могут работать с компаниями, которые предоставляют информацию об IP-адресах (например, MaxMind и IP2Location). У них есть базы данных, полные IP-адресов VPN-Сервисов и прокси (возможно, Tor тоже там числится, но эти базы пока еще общедоступны), а также доступ к сценариям и инструментам, которые автоматически блокируют эти адреса.
Что тут можно сделать?
Если ваш провайдер блокирует IP-адреса прокси, VPN и Tor, самый простой способ обойти это –подключиться к другому серверу. Таким образом, вы получите новый IP-адрес.
Конечно, если они продолжают блокировать все новые IP-адреса, к которым вы подключаетесь, то вам не повезло.
Если они обрывают ваши DNS-запросы, попробуйте переключиться на другого поставщика DNS. Хотя провайдеру будет нетрудно понять, что вы это сделали, и он начнет обрывать и эти запросы тоже. Лучшее, что вы можете сделать, – это включить DoH для шифрования ваших DNS-запросов. Вот как это делается в большинстве браузеров. А если вы являетесь пользователем CactusVPN, ознакомьтесь с нашими пошаговыми руководствами DoH.
Кроме того, используйте только те VPN-Сервисы, которые предлагают обфускацию. Таким образом, Вы можете скрыть свой трафик OpenVPN при DPI-анализе. В CactusVPN вы можете использовать obfsproxy сразу на нескольких платформах. Вы также можете использовать другие протоколы, но они используют выделенные порты, которые их выдают. Так ваш провайдер узнает, что вы используете VPN.
Приходилось ли вам когда-нибудь иметь дело с провайдером, блокирующим веб-сайты?
Если да, то что вы сделали, чтобы обойти блокировку? Удалось ли вам выяснить причину блокировки?
Не стесняйтесь, и расскажите нам о своем опыте в комментариях. И если вам действительно понравилась эта статья, не забудьте поделиться ею со своими друзьями в соцсетях.
Почему не открывается сайт в браузере и что делать?
Ошибка при загрузке сайта: Pixabay
Вот сидите за компьютером и серфите в интернете, а один из сайтов не открывается. Есть и другая ситуация, когда скролите в браузере, переходите по ссылкам и вдруг перестает открываться нужный сайт. Знакомые случаи? Из статьи узнаете, почему не открывается сайт и что можно предпринять, чтобы исправить проблему.
Почему не открывается сайт: прокси-серверы
В статье опустим банальные проблемы, по которым не открывается сайт: профилактика интернет-провайдера или не работает одна из составляющих, отвечающая за интернет-соединение (кабель или гнездо на компьютере). Углубимся в системные причины возникновения проблемы, когда сайт не работает.
Опытные пользователи первым делом проверяют настройки прокси-серверов. Здесь ничего выдумывать не нужно. Настройки необходимо сбросить. Чтобы разобраться, что делать, если сайт не открывается, важно знать, с чем имеете дело.
Прокси-сервер — связующее звено между веб-сервером, интернет-ресурсом и компьютером. При открытии любого портала на прокси-сервер отправляется соответствующий запрос на обработку, после чего направляется дальше на веб-сервер. Затем сигнал возвращается, благодаря чему сайт загружается в браузере. Почему бы не убрать это звено из схемы? Тогда пользователи будут медленнее получать доступ к требуемому сайту.
Одна из причин отсутствия загрузки портала — неверные настройки proxy-сервера. Исправить это можно, попробовав отключить его. Как это сделать? Следуйте пошаговой инструкции:
Почему не открывается сайт: конфигурация host
Если не работает сайт не из-за proxy-сервера, тогда, возможно, причина — неправильная настройка host-файла. Попробуйте его проверить. Сам файл — уникальный код, состоящий из цифр и соответствующий каждому сайту. Другое его название — IP-адрес интернет-ресурса.
Запрос, который пользователи прописывают в поисковой строке, при помощи DNS-сервера преобразуется в цифровой код. Некоторые вредоносные программы обходят его, переписывая имена сайтов и IP-адреса. В этом случае помогают утилиты, которые исправляют host-файл. Воспользуйтесь Dr.Web Curelt, AVZ или Microsoft Fix It либо сделайте конфигурацию вручную. Настроить его можно следующим образом:
В верхней выделенной части описание и принципы, по которым функционирует файл. Ниже увидите строчку, которая должна быть изначально. Если заметили что-нибудь лишнее, то смело удалите и сохраните.
Не работает сайт: DNS-службы
Я часто не могу зайти на сайт из-за проблем со службой DNS. Это может случиться в любой момент. Вот вроде серфишь в Google, и после очередного поискового запроса доступ к сайту отсутствует. На экране белая страница, а посередине написано: «DNS-сервер не отвечает».
Почему не загружается сайт? Из вышеизложенного пункта понятно, зачем нужен DNS-сервер, который преобразует печатный текст в IP-адрес. Сейчас рассмотрим, с чем связана такая ошибка. О ней еще может свидетельствовать такая надпись: «Параметры компьютера настроены правильно, но устройство или ресурс не отвечает».
Чтобы в этом убедиться, запустите утилиту «Диагностика сетей» — встроенную службу Windows. Она предназначена для проверки состояния сети. Если правой кнопкой мыши нажать на значок интернета в правом нижнем углу, то увидите название утилиты.
Исправить проблему помогает перезагрузка ПК или ноутбука, но не спешите: проблема сама может решиться через некоторое время. Ошибка с DNS-сервером может произойти после установки определенного ПО или смены каких-либо конфигураций. Вспомните, не делали ли чего-нибудь подобного до возникновения ошибки.
Если перезагрузка ПК не исправила положение, тогда проверьте состояние самого DNS-сервера. Делается это следующим образом:
Почему не загружается сайт: проблемы с реестром
Сотрудникам провайдеров и сервисных центров часто звонят клиенты с жалобой: «Не могу зайти на конкретный сайт. Что делать?» Причиной неисправности может быть что угодно, самая вероятная — неполадка в реестре.
Чтобы не терять время, сами исправьте ситуацию. На этот раз сделайте следующее:
Если не получается найти службу, то перезагрузите компьютер.
Почему не открывается сайт: Nur.kz
Не загружается сайт: блокировка
Почему не открываются сайты? Для некоторых интернет-порталов ограничен доступ в определенных местностях или странах. На помощь придут специальные программы или утилиты для браузера, которые меняют IP-адрес, — VPN. Чтобы попасть на заблокированный ресурс, достаточно открыть сайт через ВПН.
Из статьи узнали о распространенных проблемах отсутствия загрузки интернет-порталов. Также блокировать сайты могут антивирусные программы или определенные сбои, которые зачастую решаются простым перезапуском ПК. Если возникла ошибка, не расстраивайтесь и не паникуйте — все решается.
Уникальная подборка новостей от нашего шеф-редактора