Преодолеваем хабраэффект при помощи Coral CDN

[xander_unlim]

ну как по мне то гениально, будем пробовать, спасибо за статью.

[Mithgol]

Поиск по словам «nyud» и «coral» не позволяет обнаружить ни одну прежнюю статью по этому вопросу, поэтому я полагал, что раскрываю эту тему в качестве ещё неведомой.

[Idiff]

Все гениальное просто! Спасибо вам за такой удачный и простой инструмент :)

[ISpy]

Он еще и все ссылки преобразует на странице, получается практически весь сайт переходит в CDN. Очень полезная штука.

[Isis]

Хабровские ссылки не совсем

[Googlus]

преобразуются только относительные ссылки…

[eugenius_nsk]

Относительные ссылки не преобразуются, а, будучи вызванными с другого домена, просто начинают указывать внутри него. Ваш К.О.

[Dreammaker]

habrahabr.ru.nyud.net/robots.txt

User-Agent: *
Disallow: /

Создатели молодцы, что предусмотрели защиту от дублирования контента в глазах поисковиков.

[UUSER]

>http://wiki.coralcdn.org/wiki.php

кажись легло под хабраффектом :)

[Mithgol]

М-да, эту ссылку я не корализировал, а теперь поздно.

Но мог ли я предполагать, что у них не хватит ресурсов для противостояния хабраэффекту?

[el777]

Я думаю еще не позно, чтобы новые читатели не добивали Корал.
Кстати, какие условия использования? Ограничения?
В чем интерес корала?
Опишите, плз, в статье.

[Mithgol]

Боюсь по памяти наврать, а первоисточника и сам уж теперь открыть не могу, да и в CDN загрузить его теперь не выйдет, надо думать.

В общем, там стоит ограничение по объёму (несколько мегабайтов, не помню сколько в точности) и по времени хранения: чтобы система не перегружалась, она не хранит файлы долго (не забивает диски узлов), но не хранит и коротко (не утруждает себя частыми обращениями к первоисточнику).

Вебомастер того первоисточника, который грузят в CDN, может в некоторых пределах управлять сроком хранения, устанавливая заголовки HTTP-отклика вебосервера («Expires», кажись).

Кроме того, описывался метод организации сайта таким образом, чтобы все файлы отдавались через Coral CDN. То есть если «user-agent» не кораловский, то редирект на имяДомена.nyud.net/адресРесурса.

[Mithgol]

Впрочем, можно прочесть основное содержимое вики в кэше Google.

[ChemAli]

А можно говорить «корализовал»? Мне кажется, так звучит и воспринимается много лучше.

[Mithgol]

Да, можно и так.

[alekciy]

Мне кажется это лучший пример антирекламы )) Сервис призванный ликвидировать последствие хаброэффекта сам и упал под ним.

На самом деле данный эффект сильно преувеличен. Это не эффект большой, это хостинги херовые. Я на своей VDS-е хостирую блог друга. Он меня как то раз спрашивает, не ложился ли сервер. Я посмотрел логи, все отлично, все запросы были с 200-ыми статусами. Теперь у меня возникает вопрос, с чего это он меня спрашивал. Оказывается, поглядел он счетчик посещаемости (гугл аналитикс который), а там с хабра хороший такой заход под 1000 входов. И даже при том, что я под него отвел только один форк (и даже backlog нет), мемкэшеда нет и то к падению сайта это не привело.

Поэтому если под хаброэфектом понимать временное, пиковое увеличение посещаемости сайта (а не целенаправленный дос), то все это фигня. Используйте услуги адекватных хостинг-провайдеров, нормально настраивайте сервер и ни какой хаброэфект сайту не страшен.

[corbenov]

у меня не открываются ссылки указанные в статье
я сломал Coral CDN?

[kr1z]

У меня не открываются ссылки, слэшдот-эффект? гг

[Lockdog]

Спасибо, будем пользоваться!

[Pechkin1007]

Кто положил сайт по преодолению хабраэффекта признавайтесь?)

[Roy]

Его же можно как анонимайзер использовать.
Адрес клиента он передает, но как HTTP_X_CODEMUX_CLIENT — кто его такой проверяет?
www.pandora.com.nyud.net/

[garbager]

увы у меня уже на пандору не ходит по такой ссылке 8( по прежнему прийдётся пользоваться Hotspot Shield

[garbager]

о нет надо просто везение 8) все работает 8)

[el777]

По своей сути, это иерархия кешей. То же самое, что умеет делать сквид.
Такая сеть может разгрузить только публичный кешируемый контент. Все, что делается с вашей авторизацией — все равно должно будет идти на сервер.

[Uncle_Sam]

Проверка хабраэффекта на данном сервисе показала — хорошо, что так колбасит не мой сайт.

[as3k]

152кб изображение открывалось секунд 15.

[Marsikus]

Прекрасная штука!

[Somewan]

хорошее решение, но оно бессильно при обращении к сайтам по SSL.
т.е. если злобный админ закрыл вам на работе доступ, к примеру, Gmail (https://mail.google.com), то это решение тут не поможет

[Kicker]

закрыть доступ на gmail это надо быть оооочень злобным админом)))

интереса ради попробовал так зайти на gmail(https разумеется) — просто перебросило на mail.google.com

[Somewan]

да, дома тоже перебросило.
а на работе вылезла ошибка построения туннеля.

[naryl]

ssh туннель с домашней машинкой ещё никто не отменял.

Или ваш злобный админ и все порты позакрывал кроме 80?

[Somewan]

<key-word>к примеру</key-word>

[eugenius_nsk]

Не всегда у домашней машинки есть внешний IP. Хотя, конечно, есть и на этот случай решения.

[sunnybear]

видимо, это уже традиция, что сайты по преодолению Хабра-эффекта ложатся под Хабра-эффектом :)

[spelesto]

В мемориз однозначно! Очень интересное решение

[rgaliull]

хабраэффект?

[deepsweet]

Some web filtering software packages, such as Websense and OpenDNS, block access to the Coral Cache as it is seen as a form of proxy avoidance. Many anti-virus and Internet Security software packages, such as Trend Micro Internet Security block access to the Coral Cache as it is seen as a mask for dangerous URLs.

маленькая ложка дёгтя?

[Roy]

А вот кому еще полезную ссылку?
coralize.net/

[Mithgol]

+1 в карму немедленно

[deniamnet]

nyud.net.nyud.net =)

[eugenius_nsk]

Так вот кто всё сломал!

[deniamnet]

это не я, не бейте! =)

[pred8or]

Порадовало:

Source Code

Our CVS server went down a few months ago, with significant disk corruption. We have yet to bring back a new source repository online.

А ещё оно не смогло попасть на мой домашний сервер. Многовато косяков для CDN.

[DmitryVasiliev]

Спасибо за статью. Идея понравилась, написал Расширение для использования CoralCDN с BlogEngine.NET