Ну вот, поднялся ЖЖ

[dzz]

Интересно, сколько таких постов будет за сутки? :)))

А вообще, мне, в силу специфики работы, история с даунтаймом ЖЖ показывает, что хозяева сервиса не слишком озабачивались вопросами устойчивости к подобным сбоям. Т.е. оно понятно, что такие решения стоят существенно дороже, но после определённого уровня усложнения системы становятся жизненно важными.

Comments

[dzz.livejournal.com]

Ну, в мире нет ничего нереального :)

По-хорошему, такая система должна хотя бы грамотно опускаться при пропадании внешнего питания - с освобождением кэшей и фиксацией состояния. Ещё есть такая наука как "disaster recovery" ;)

[to-the-future.livejournal.com]

Я так понял, что опускаться было не на чем - своих UPSов нету. Вот, как раз в понедельник собираются покупать. :)

[dzz.livejournal.com]

Ну, "типа да" - т.е. при 100+ серверах вопросы питания становятся mission critical. Либо свои покупать - по штуке на стойку, либо унадёживать общие и налаживать автоматический шатдаун.

Архитектурные проблемы, впрочем, имеют и ещё один аспект - насколько я понял, 99% времени даунтайма было потрачено на проверку баз и синхронизацию данных (локальные кэши у них, видимо, на каждом сервере).
Вот от этого нужно уходить - на журналируемые файловые системы и транзакционные БД.

[david-m.livejournal.com]

Вот это правильно. Потому что UPS-ами можно хоть увешаться, но главная проблема всё равно будет не в том, как защититься от сбоя, а в том, как после него быстро и без потерь подняться.

[nine_k]

В мире зато есть слишком дорогое, чтобы оплачивать из денег зарегистрированных юзеров %)

У них ведь отрубились и запасные линии питания тоже. А UPS-ы + дизеля -- это из серии "пока гром не грянет". Ну полежит ЖЖ 2-3 дня даже -- никто особых денег не потеряет. Если, конечно, это не будет происходить слишком часто.