Upgrade Day: два новых сервера

[Diary Spirit]

В ноябре мы писали о том, что наша техника уже не молода, и сейчас расскажем про нее подробнее, потому что день серьёзного апгрейда настал.

В конце марта многие пользователи столкнулись с проблемой доступа к дневникам, избранному, дискуссиям (им выдавался код ошибки: #1:0). Причина была в том, что вышел из строя один из серверов базы данных, потому были недоступны дневники, располагающиеся на этом сервере, а также избранное с этого сервера. Нам удалось в срочном порядке и без потери данных переключиться на резервный сервер (sql-backup), а сам процесс бэкапа данных временно отключить.

На рисунке ниже показана упрощенная архитектурная схема наших серверов. Некоторые узлы здесь не отображены, поскольку в целях нашей общей с вами безопасности полную схему выкладывать нельзя.



Что мы имеем.
У нас четыре сервера баз данных: sql-main, sql-1, sql-2, sql-3 и резервный sql-backup, на котором 1) ежедневно, 2) еженедельно, 3) ежемесячно и 4) один раз в полгода создаются резервные копии базы данных — каждая из этих копий периодически требуется для восстановления базы данных после каких-нибудь сбоев.

Ночью 27 марта из строя вышел совсем старый сервер sql-1 (и сейчас его заменяет sql-backup). Два других сервера базы данных — sql-2 и sql-3 — такие же старые и могут рухнуть в любой момент.

1. Диски в них — древние SCSI, стоят неоправданно дорого, так как производятся малыми партиями.
2. Купить новые диски и вставить в старые сервера нельзя.
3. Покупать дорогие SCSI и вставлять их в старые маломощные сервера, в которых к тому же в любой момент может выйти из строя память, процессор и другие части, не имеет никакого смысла, ибо через полгода-год придется все это выбрасывать и покупать новый сервер.
4. Сервер sql-backup — это, если помните, четырехлетний относительно свежий (бывший сервер "Юга.ру", который мы освободили после переноса Югов в облако) с новыми дисками, которые мы с вами купили осенью.
5. sql-main — еще бодрый сервер с достаточно прочной дисковой системой SAS, мы покупали его для Дайри лет 5-6 назад.

Тщательно взвесив все за и против, в очередной раз рассмотрев дорогой для нас вариант перехода в облако (аренда по нашим запросам стоит ~350 тыс. рублей в месяц), мы пришли к выводу, что оптимальным решением будет покупка двух новых мощных серверов по 250 тыс. руб. каждый, которые с большим запасом заменят нам три старейших сервера базы данных: sql-1, sql-2, sql-3, а если в будущем выйдет из строя sql-main, то и его тоже.

В итоге:
— sql-1 будет лежать на складе, пригодный только на запчасти,
— по sql-2, sql-3 проведем ревизию и будем использовать для разработки и целей системного администратора.

Серверам be-2, be-3, be-4 тоже по 11 лет, be-5, be-6 посвежее (~6 лет). Выход одного из них не остановит работу сайта, его нагрузка перераспределится между остальными, как это было в свое время с умершим be-1.

Сервер userdir (это второй "юговский" сервер с купленными осенью новыми дисками) хранит и выдает "статику" — картинки и стили с адресом static.diary.ru.

Есть еще сервер fe-1 и не показанный в схеме сервер общего назначения. Они также не молоды, но работают надежно, с нагрузкой справляются и... дай бог им здоровья, в общем.

В новые сервера мы ставим не самые производительные процессоры, так как вычислительная мощность для баз данных — не главное, зато важны скорость дисков и размер оперативной памяти. Вот что мы покупаем за 503 тыс. руб,

       

Мы уверены, что после запуска новых серверов Дневники станут работать быстрее и надежнее.

Если у вас есть какие-то вопросы, пожалуйста, задавайте их в комментариях.

Comments

[Сэриэль.]

Если есть деньги, таки почему бы их не потратить на дайрик. Но если будет необходимость в дополнительных сборах, вы уж пишите. )

[Ledi-Alucard]

Спасибо за информацию и разъяснения. Сервера, не болейте!

[Paula]

подумайте о подписке, так что-бы можно было сделать чтоб определенная сумма с карты в месяц сама списывалась))

кстати, да! я тут хоть и все время, но я бы подписалась, пусть себе списывается. хочется, чтобы поступления были равномерные и регулярные, а не раз от разу.

такие возможности в платежных системах есть. Надо разбираться в их API, да, все руки не доходят.

пусть все-таки руки дойдут, было бы крайне удобно!

[_.Schurale._]

нос, Возможно, стоит сделать на Главной уведомление очень короткое, что "дневники покупают новые сервера, деньги есть, но если вы хотите принять участие - можно донатить именно на это вот тут"?
И в платежах позицию, которая была чем-то вроде "Тематическая поддержка". То есть не в целом, не на развитие, а именно на какой-то конкретный апдейт или проект.
Прошу прощения, устала, не могу сформулировать точнее.
Но действительно подобные нужные всем, не текущие, а системные вещи - отличный повод напомнить про пожертвования тем, кто хочет, может, но заматывается в житейской суете. Или хочет именно в это вложить свои копеечки. 8)

[Salamia]

Есть еще сервер fe-1 и не показанный в схеме сервер общего назначения. Они также не молоды, но работают надежно, с нагрузкой справляются и... дай бог им здоровья, в общем.

вай-вай, многие многие лета им! пусть не чихают и не кашляют!

[пока!]

Спасибо, что вы еще работаете над сайтом и что он еще есть <3

[Hissa C.K.]

нос, СПАСИБО!!
Очень люблю дайры

[*JT*]

Платили и платить будем, на дом нужно и важно

[птенец бабочки-крылатки]

Большое спасибо за обновы!
Хотелось бы так же внести на рассмотрение необходимость улучшения кроссбраузерности сайта - сижу с платным дизом через Хром, и это боль, ибо всё едет, непонятно зачем мне тогда вообще оплачивать CSS-дизайны :/ А минус мой оплаченный CSS, это минус стабильная копеечка в дайри, которая капает уже более 7 лет.
Проблема как началась в конце осени, так и сохраняется до сих пор - полгода (даже чуть больше) на решение кроссбразурености для априорно платной фичи - очень обидно -_-

[Flash]

птенец бабочки-крылатки, у вас случайно не антивирус Eset NOD32? У меня с конца осени как раз начали страшно ехать дизайны, я грешила на дайри или вирусы на собственном компьютере, а выяснилось, что это глюк антивируса. Вот здесь разбирали эту проблему.

[heresy]

Спасибо за новости!
Стараюсь соблюдать платежную дисциплину
Дайри живи

[Ishytori]

Спасибо, что продолжаете улучшать дайри) Успешного апгрейда))

[нос]

птенец бабочки-крылатки, почему же вы молчали с конца осени? У нас всех в Хроме все замечательно, иначе давно бы исправили.

[нос]

Спасибо за поддержку. Поскольку никто не высказался против, сообщаем, что сервера мы оплатили. Но надо понимать, что они сразу же не появятся у нас в системе.

Завтра их начнут собирать и тестировать. Это может занять от трех до семи дней. Потом мы их заберем, перевезем, установим в свою стойку в дата-центре, настроим, скопируем на них базу, погоняем... в зависимости от гладкости процесса это займет еще от 10 до 20 дней. Будем стараться включить их в работу как можно быстрее, это в наших общих интересах.

[XSha]

Йоу! Пойду и я раскошелюсь) *тоже мечтаю, чтобы автоматически списывалось)))

[Зело]

Какие приятные новости! Если что, немного сверху задонатим))

[птенец бабочки-крылатки]

Flash, нет, мой антивирус Avira, и проблема моя выглядит иначе. Более того, с тех пор как дизайн перекосило, я несколько раз сидела вообще без антивируса, и ничего не изменилось. Версия Хрома, разумеется, обновлённая до последней, как и всё остальное в компе.

нос, это не правда, я подождала какое-то время, надеясь что это что-то подкручивают в коде сайта, и скоро ситуация поменяется, а потом связалась с поддержкой дайри. Я выслала скрины как ситуация выглядит с моей стороны (со стороны службы поддержки дизайн тоже был неправильным, но иначе), через какое-то время мне прислали ответ "программиста", который ничего не решил, к сожалению. Я полагаю, что дело именно в кроссбраузерности, т.к. мобильная версия того же Хрома отображает всё идеально. И я не понимаю стоит ли мне самой копаться в коде, когда в одной версии браузера всё хорошо, а в другой версии браузера всё плохо - как бы ещё больше дров не наломать. Кроме того, я не думала что больше не было подобных заявок, т.к. только в моей ленте есть как минимум 1 человек с такой же проблемой - поехавший дизайн при сидении из Хрома.

[Tenno Seremel]

нос,

Завтра их начнут собирать и тестировать. Это может занять от трех до семи дней. Потом мы их заберем, перевезем, установим в свою стойку в дата-центре, настроим, скопируем на них базу, погоняем... в зависимости от гладкости процесса это займет еще от 10 до 20 дней. Будем стараться включить их в работу как можно быстрее, это в наших общих интересах.

[Tiamorphis]

Лет 10 назад работал в Тринити и, помнится, тоже собирал сервера для Дайриков. Стабильность... )))

[нос]

птенец бабочки-крылатки, есть пост с вашей проблемой в Техподдержке? Дайте на него ссылку, пожалуйста, или напишите новый, чтобы не писать здесь не по теме записи.

[нос]

Лет 10 назад работал в Тринити и, помнится, тоже собирал сервера для Дайриков. Стабильность... )))

Tiamorphis, спасибо!))

[птенец бабочки-крылатки]

нос, нет, есть моя переписка со службой поддержки. Хорошо, я напишу пост в Техподдержку, спасибо.

[Nyctalus]

Мы думали, вы это знаете, мы же публикуем ежемесячный отчет

нос, у меня давно закрадывается мысль, что множество юзеров, приносящих деньги, и множество юзеров, читающих отчёты, только немного пересекаются.

Глубоко гуманитарный вопрос: а раз теперь появятся три сервера для тех. целей, то за их счёт не получится разгрести завал заказов на архивы? Вопрос чисто теоретический, я архив так и не заказала: пока собиралась - дайри передумали помирать. Но вроде говорили, что проблема есть.

[нос]

раз теперь появятся три сервера для тех. целей, то за их счёт не получится разгрести завал заказов на архивы?

Nyctalus, во-первых, не три, а два — один из трех умер же; во-вторых, главная проблема не в отсутствии сервера, а во времени — систему архивирования нужно полностью переписывать. Если вы не хотите ни поиск по дневнику, ни более современную работу с БИ и картинками, ни адаптивную версию сайта для мобильных устройств... и ничего другого, кроме новой системы архивирования, то можем это все бросить и заняться ею.

[Nyctalus]

нос, не сердитесь, я просто спросила. Я помню, что в идеале надо сперва сделать другую систему архивирования, а потом процесс создания архивов пойдёт быстрее. Я имела в виду, если в рамках имеющейся системы приспособить доп. технику, не улучшит ли это ситуацию?
Чисто теоретически, потому что а) меня лично оно в данный момент не касается никак, б) в силу своей глубокой безграмотности я могу не знать, что это какие-то не те те машины и применить их вообще нельзя.

По поводу поиска Вы убедительно мне доказали, что сделать его будет невозможно, так что я послушно перестала его хотеть. Уже можно опять начинать?

личное

У меня очень большой запас лояльности, доверия и прочих добрых чувств по отношению к Вам. Я не знаю, почему Вы от меня постоянно защищаетесь, у меня и в мыслях нет нападать.

[dar_1313]

Спасибо, что держите в курсе.

[нос]

Nyctalus, нет-нет, вы меня не правильно поняли. Я вовсе не обижаюсь и не сержусь)
Просто отвечал поздней ночью засыпая и забыл поставить смайлики. Все нормально)

[Мы знаем об вашей лояльности. Целых пять смайликов хотели поставить]

[Nyctalus]

нос,

А то скажешь чего неосторожно, а Вы сразу пугать (ночью! ):

[нос]

Nyctalus,

[Гегемон]

Поставьте защищенный сертификат на сайт - https.

Он стоит 3 копейки. Все же тут люди оплату совершают, много личного выкладывают. Как-то не солидно без него.