Переезд картинок на новые сервер и диски. Бэкапы

[Diary Spirit]

Рады сообщить, что так называемая "статика" докопировалась со старых дисков на новые и угрозы потери картинок, стилей CSS, дневников в архивах больше нет. На копирование в фоновом режиме 81 млн файлов ушло примерно 8 дней.

Далее нам необходимо переключить сайт на работу с новой базой картинок. Этот процесс выглядит так:
1. За сутки до переключения запускаем синхронизацию, чтобы доехало то, что вы заливали в эти 10 дней с начала копирования.
2. По завершении переключаем статику на новый сервер.
3. В это время пользователи могут обнаружить, что пропали картинки, которые они заливали за последние сутки (еще на старый сервер).
Вот тут главное — не паниковать, ничего не пропало и не пропадет!
Оно еще просто не скопировано со старых дисков
4. Мы снова запускаем синхронизацию и все пропажи возвращаются к вам примерно за сутки.

Переключение планируется в ночь с понедельника на вторник — в 1:00 час ночи 19 декабря.
"Небольшой даунтайм, на 10-20 минут, всё же потребуется" — это уже закончилось, сайт отсутствовал меньше 5 минут.

* * * * *

А еще мы наладили регулярное создание бэкапа базы данных и программного кода в автоматическом режиме:
— суточный бэкап — выполняется по ночам 1 раз в сутки, и хранится 3 дня;
— месячный бэкап — сделанный, условно говоря, 1 числа каждого месяца, хранится в течение года;
— полугодовой бэкап — 2 бэкапа за каждое полугодие всех предыдущих лет хранятся веки вечные.

запись создана: 15.12.2017 в 17:32

Comments

[Нэко]

_.Shurale._, И это хорошо!©
И вообще админы у нас молодцы

[Olven-old]

[r-ya-m]

А что вы будете делать со старыми дисками?

[Демонесса]

Зачем убивать, если можно в архив дневников?

Хочу функцию где можно было бы самому отправить свой дневник в архивные дневники

[*Bacca*]

Спасибо огромное!

[emercy]

Отличная новость, спасибо!

[Tangerines]

_.Shurale._,

Оки, представим себе, что я лично проверяю живость. Я разослал 35000 умылов и емейлов (пусть у меня есть программка), и жду ответ.

это какие-то методы из категории анахронизма.
Я почти уверена, что для каждого юзера фиксируется время последнего логина на ресурсе. Если человек не заходил n-ное приличное количество времени, то на кой черт хранить его гигабайты?

Судя по тому, что тут часто бывает, человек может и через 5 лет явиться с возмущением "где мое сокровище".

так это проблемы юзера, божемой. Если сокровище — храни, если "такое" сокровище — то и не жалко.

Мне объективно не понять, почему ресурс тратится ради формальной и фиктивной заботы о людях, которым похер.

HarukaTenoh, в моем мире объективные параметры имеют больший вес, чем этические заморочки.

[Tenno Seremel]

Tangerines, объективными параметрами, видимо, предполагаются способы убить контент ресурса, что уменьшит итак небольшую аудиторию и таки убьёт ресурс окончательно ¯\_(ツ_/¯ Для слоупоков: ресурс без контента никому не нужен. Ну как не нужен, есть имаджборды, конечно, где контент регулярно исчезает, но мне казалось, у нас тут немного другого рода сайт. Или вдруг фанфикшн по какому-нибудь Шерлоку Холмсу перестаёт быть актуальным через 7 лет? Различные философствования на тему тоже не нужны? Описание того, как люди жили в те годы? Фото? Какие-нибудь ревью или рекомендации книг? Прошлое ненужно, сядем в горящий поезд! Сохранение контента это не столько забота о тех, кто его написал, сколько о тех, кто его прочитает.

[lady snark]

Отличная новость, спасибо!!!

[Волчица Юлия]

Tangerines,

Я почти уверена, что для каждого юзера фиксируется время последнего логина на ресурсе. Если человек не заходил n-ное приличное количество времени, то на кой черт хранить его гигабайты?

Очень просто. Есть юзеры которые уже, к сожалению, в лучшем мире. А тут память о них. Их контент. Фики, рисунки, просто интересное чем эти хорошие люди делились.
Для их семьи и друзей это напоминание.
Так что извините конечно за грубость - но ваши идеи глубоко не продуманны. Лишь бы все порушить и сломать.

[_.Schurale._]

Tangerines, Думаю что это могут решить только админы. А они уже много раз доказывали свое уважение к нашим файликам, вплоть до картинок.
И хранение доверенного, с вашей точки зрения (иногда и с моей, относительно моего) барахла, это один из тех важных пунктов, которые и делают дайри домом для многих.

Я понимаю ваши мотивы.
Но тогда логичнее было бы предложить ввести галочку "на удаление", которую мог бы проставить каждый юзер сам.

[Snnanagfashtalli]

[Буз]

_.Shurale._, так вот же галочка. Всё уже изобретено до нас)) Сама недавно так удалила соо, которое решила больше не вести.

[_.Schurale._]

Буз, О, сколько нам открытий чудных, готовят прошедшие с 2004 года годы 8))
Спасибо. Вот точно не знал. 8))

[Орландо на каникулах]

в моем мире объективные параметры имеют больший вес, чем этические заморочки

ну в вашем мире был бы какой-то другой дайри. А в здешнем он вот такой
Буз, спасибо, что сказали про галочку. теперь постараюсь сохранять все интересные материалы из разных соо и дневников. А вдруг владельцу надоест и он все нафиг выкинет, страдай потом, что хорошее пропало. Да я и сейчас страдаю)) это сколько хорошего, оказывается, уже пропало, а я и не знал. Лучше б не знал)))

[Буз]

Орландо на каникулах, не за что. Сама на неё наткнулась, пока копалась в настройках в попытках изменить подпись под аватаркой, но не удивилась. Функция удаления профиля есть на многих платформах.

[Демонесса]

Tangerines, знакомы ли вы с такой платформой дайри, как архивы дайри? В свое время с помощью него решили вопрос с подвисанием сайта и хранением давно неактивных дневников. На данный момент он не пополняется. Учитывая отсутствие возможности что-либо менять в дневнике на том сайте, весят они немного. Возможно, это решение можно использовать в указанной вами проблеме?

Настолько я понимаю, проблема дайри не в "недвижимом" имуществе в виде уже созданных дневников, а как раз в активности - новых записях, комментариях, обновлениях страниц. Именно это жрет бОльшую часть ресурсов, требует хорошего объема оперативной (не "железной", "недвижимой" памяти). Но и это же приносит доход от рекламы. Именно быстрота и непрерывность доступа к возможностям дайри и стоят ему основных затрат.

[Salamia]

Команда! вы молодцы!

[Медовая Эстер]

Здравствуйте, есть вопрос, возможно уже прозвучал ранее но все же.
Когда и где можно скачать архив?

[kenig-dragonfly]

Медовая Эстер, тут

[Hokori]

Медовая Эстер, только это будет очень не быстро, увы

Пишет  нос:

18.12.2017 в 17:04

можно включить в доп.сервис - платную услугу по более быстрому получению архива дневника?

steinvor, такой проблемы никогда не было, очередь заявок на создание архивов выполнялась довольно быстро, от 1 до нескольких дней. Но сейчас создалась очередь на два года вперед, наверно. Если мы сделаем платную слугу на создание срочных архивов, мы ее не сможем выполнить, потому что появится очередь из оплативших (и справедливо недовольных).

Чтобы архивы создавались быстро, нужно полностью переделать их механизм, работающий на выделенном сервере и на копии базы данных. Он должен создавать архивы круглосуточно, а не по нескольку часов ночью, как сейчас. Для написания этого модуля мы на месяц должны остановить всю текущую работу, но сделать этого точно не можем.
URL комментария

[Chris Baggins]

Отлично! Спасибо

[Нэко]

Сегодня опять будет отключение Дайриков?

[quirischa]

Нэко, строго говоря, это будет уже завтра.

[shagrin]

Скоро остановка сайта
спасибо, что не конечная :3

[Нэко]

quirischa, ну да((

[quirischa]

shagrin

[*Bacca*]

ахаха эта красная надпись ... бодрит)))
20 - 30 минут можно и подождать.

[kenig-dragonfly]

Bacca.,

ахаха эта красная надпись ... бодрит)))

- вот кстати да, мне очень нравится такой способ выделения срочных новостей)))

ахаха эта красная надпись ... бодрит)))

вот кстати да, мне очень нравится такой способ выделения срочных новостей)))

Присоединяюсь. Чётко, ярко, сразу видно хотя я, признаться, в первый миг перетрухнула