Администратор
23:12
Восстановление картинок
UPD 15 октября, 23:12
Сегодня мы решили осторожно попробовать возможность загрузки картинок. Не стали это объявлять, чтобы не создавать пиковую нагрузку и в надежде на то, что некоторые пользователи сами обнаружат это и попробуют. Так оно и случилось. Сегодня кое-кто загружал картинки в БИ, и наблюдения показывают, что это в принципе возможно, но массовая закачка в том объеме, как это было до падения, не желательна.
Поэтому мы настоятельно (очень!) просим стараться закачивать картинки на сторонние сервисы, а в дневники - только если уж совсем необходимо. Критичные для дизайнов изображения (аватары и фоны) можно заливать без ограничений - они мало весят.
Если наши сервера без выделенного массива не будут тянуть добавляемые вами картинки, то их загрузку снова придется отключить.
Папки 2, 3 и 4 - скопировались полностью. Сейчас копируются 5/5, 6/3 и 7/1.
- - -
UPD 14 октября, 15:00
Папка 2 скопирована полностью.
Сейчас копируется 4/9 и 3/8 — то есть, 4-я и 3-я папки на подходе к завершению.
Запустили копирование 5-й папки.
- - -
В предыдущей записи исчерпан лимит комментариев, а увеличить мы его пока не можем, так как все еще нет полного доступа к скриптам. Поэтому делаем новую запись, в которой продолжим информировать вас о ходе работ после аварии на файловом массиве static.diary.ru.
Сейчас идет постепенное восстановление вашего виртуального имущества. Уже появились счетчики обновлений, дизайны, CSS, RSS дневников и сообществ. Осталось самая объемная часть рухнувшего "Статика" — изображения, числом более 50 млн. штук. Их мы сейчас и копируем в фоновом режиме. Из-за этого сайт тормозит; иногда не работает, так как нам приходится что-то переключать; иногда падает, так как обращение к массиву приходится на его сбойную часть.
Файловая система массива устроена так.
На нем созданы папки верхнего уровня с именами: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из этих папок — еще по 10 папок второго уровня с именами: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из них — еще по 10 третьего уровня: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из них — еще по 10 четвертого уровня: 0 1 2 3 4 5 6 7 8 и 9.
Итого — 10 тысяч папок.
В последних и создаются папки пользователей. Каждый пользователь имеет уникальный номер UserID, который присваивается ему при регистрации и который нельзя изменить. Картинки пользователя хранятся в его папке, путь к которой определяется этим идентификатором. Например, по профилю пользователя Diary Spirit — www.diary.ru/member/?4733 можно вручную написать путь к его папке: http://static.diary.ru/userdir/4/7/3/3/4733/.
И наоборот, по картинке в БИ — http://static.diary.ru/userdir/4/7/3/3/4733/29370653.gif — можно прочитать его UserID=4733.
Другими словами, выше было написано, что
За время копирования выяснилась пока лишь одна проблема — не копируется какая-то часть папки верхнего уровня с номером "1", точнее даже — 1/0. При обращении к ней сайт зависает. Мы пока отложили проблемную папку целиком и займемся ею в последнюю очередь. У всех пользователей, кто в нее попал, картинки появятся в последнюю очередь и, самое неприятное, что может что-то не прочитаться. Но паниковать пока рано.
Папка верхнего уровня с именем "0" скопирована полностью. Папки 2, 3 и 4 — копируются в настоящий момент (пошли вторые сутки). Как только с ними будет закончено, начнется копирование следующих. Всего скопировано около 15 млн. файлов из 50 млн. Но копирование не идет непрерывно. Иногда приходится его искусственно притормаживать или даже совсем останавливать, иначе пользоваться сайтом станет просто невозможно.
Такие дела.
Сегодня мы решили осторожно попробовать возможность загрузки картинок. Не стали это объявлять, чтобы не создавать пиковую нагрузку и в надежде на то, что некоторые пользователи сами обнаружат это и попробуют. Так оно и случилось. Сегодня кое-кто загружал картинки в БИ, и наблюдения показывают, что это в принципе возможно, но массовая закачка в том объеме, как это было до падения, не желательна.
Поэтому мы настоятельно (очень!) просим стараться закачивать картинки на сторонние сервисы, а в дневники - только если уж совсем необходимо. Критичные для дизайнов изображения (аватары и фоны) можно заливать без ограничений - они мало весят.
Если наши сервера без выделенного массива не будут тянуть добавляемые вами картинки, то их загрузку снова придется отключить.
Папки 2, 3 и 4 - скопировались полностью. Сейчас копируются 5/5, 6/3 и 7/1.
- - -
UPD 14 октября, 15:00
Папка 2 скопирована полностью.
Сейчас копируется 4/9 и 3/8 — то есть, 4-я и 3-я папки на подходе к завершению.
Запустили копирование 5-й папки.
- - -
В предыдущей записи исчерпан лимит комментариев, а увеличить мы его пока не можем, так как все еще нет полного доступа к скриптам. Поэтому делаем новую запись, в которой продолжим информировать вас о ходе работ после аварии на файловом массиве static.diary.ru.
Сейчас идет постепенное восстановление вашего виртуального имущества. Уже появились счетчики обновлений, дизайны, CSS, RSS дневников и сообществ. Осталось самая объемная часть рухнувшего "Статика" — изображения, числом более 50 млн. штук. Их мы сейчас и копируем в фоновом режиме. Из-за этого сайт тормозит; иногда не работает, так как нам приходится что-то переключать; иногда падает, так как обращение к массиву приходится на его сбойную часть.
Файловая система массива устроена так.
На нем созданы папки верхнего уровня с именами: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из этих папок — еще по 10 папок второго уровня с именами: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из них — еще по 10 третьего уровня: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из них — еще по 10 четвертого уровня: 0 1 2 3 4 5 6 7 8 и 9.
Итого — 10 тысяч папок.
В последних и создаются папки пользователей. Каждый пользователь имеет уникальный номер UserID, который присваивается ему при регистрации и который нельзя изменить. Картинки пользователя хранятся в его папке, путь к которой определяется этим идентификатором. Например, по профилю пользователя Diary Spirit — www.diary.ru/member/?4733 можно вручную написать путь к его папке: http://static.diary.ru/userdir/4/7/3/3/4733/.
И наоборот, по картинке в БИ — http://static.diary.ru/userdir/4/7/3/3/4733/29370653.gif — можно прочитать его UserID=4733.
Другими словами, выше было написано, что
номер вашей папки — первая цифра числа в ссылке вашего профиля
За время копирования выяснилась пока лишь одна проблема — не копируется какая-то часть папки верхнего уровня с номером "1", точнее даже — 1/0. При обращении к ней сайт зависает. Мы пока отложили проблемную папку целиком и займемся ею в последнюю очередь. У всех пользователей, кто в нее попал, картинки появятся в последнюю очередь и, самое неприятное, что может что-то не прочитаться. Но паниковать пока рано.
Папка верхнего уровня с именем "0" скопирована полностью. Папки 2, 3 и 4 — копируются в настоящий момент (пошли вторые сутки). Как только с ними будет закончено, начнется копирование следующих. Всего скопировано около 15 млн. файлов из 50 млн. Но копирование не идет непрерывно. Иногда приходится его искусственно притормаживать или даже совсем останавливать, иначе пользоваться сайтом станет просто невозможно.
Такие дела.
15.10.2010 в 01:17
15.10.2010 в 01:36
Караидель но Я-То ничего подобного не писала! =__=
15.10.2010 в 02:03
15.10.2010 в 02:33
Ю Нэко, извините, конечно, но Вы не считаете бестактным, толком даже не прочитав основной пост и хотя бы предыдущую страницу комментариев, задавать странные вопросы с несколько грубоватым тоном. Возможно, Вы не хотели придать этой самой грубости, но оно вышло.
И, вообще, это как вломиться в магазин, на двери которого висит табличка "Учет.С часу до двух" и спрашивать, во сколько вы снова откроетесь, а в ответ на предложение прочитать объявление, божиться, что вы его не видели, да и мало ли, чего там пишут.
Вы представьте себе состояние человека, который несколько дней отвечает на Один И Тот Же Вопрос.
И поставьте себя на его место.
Или такой фигней уже в приличном обществе страдать не принято?
15.10.2010 в 02:41
С рабочего компа видел и дизайн, и аватарки.
С домашнего не вижу.
Это не претензия.
Это информация. Вдруг поможет.
15.10.2010 в 02:42
С любовью, счастливый обладатель 4-х дневников, ID 3-х из которых начинаются на 1, потомственный неудачник
15.10.2010 в 02:46
фон у Вас желтый, а картинки отображаются только с радикала.
Но потерпите, Вам не так долго ждать осталось)
15.10.2010 в 02:50
Но могло быть и хуже
Остается терпеливо ждать и надеяться на лучшее (моя подпись сейчас очень в тему).
Удачи вам, админы)
15.10.2010 в 03:03
у меня тоже энное число дневников попало в ту самую папку)) не отчаиваемся )
15.10.2010 в 03:39
но в любом случае, молодцы, держитесь там, берегите нервы и спасибо за предоставление информации)
15.10.2010 в 03:48
15.10.2010 в 04:16
Меррил , а вы тоже с нами кукуете))) У вас 1/5/3.
15.10.2010 в 04:19
15.10.2010 в 05:06
15.10.2010 в 06:05
спасибо господи!!!!!
15.10.2010 в 06:05
спасибо господи!!!!!
15.10.2010 в 06:18
15.10.2010 в 08:22
15.10.2010 в 08:22
15.10.2010 в 08:24
Везет...
Кстати, шестая папка что, битая?
15.10.2010 в 08:25
15.10.2010 в 08:30
потому что восстановительные работы продолжаются и пока что загрузка изображений отключена.
15.10.2010 в 08:40
Пятая, по ощущениям, уже почти-почти, или даже всё. Есть тут кто-нибудь с 5/8 или 5/9, покажитесь - вы с дизайном или нет.
Всё это ИМХО, если я в чём не права - админы, поправьте, пожалуйста
15.10.2010 в 08:41
15.10.2010 в 08:45
вы правы
копирование идет в три потока, в каждом потоке копируются подпапки и файлы одной из папок верхнего уровня.
15.10.2010 в 08:47
необходимо и достаточно было прочитать всего лишь предыдущую запись в дайри-спирите
15.10.2010 в 08:48
Представьте себе состояние людей, которые там зашиваются, пытаясь как можно скорее восстановить для нас полноценную работу дайри. вот им сейчас просто очень радостно отвечать в двадцатый раз одно и то же - они-то всю ветку комментов читают, не ленятся. И да, есть такой гениальный способ - открываете все комментарии одной страницей и нажимаете ctrl+f. В Вашем случае резонно искать CSS, или начало слова "продление". Это не требует много времени и сил, только минуту на раздумья
15.10.2010 в 08:50
15.10.2010 в 08:59
15.10.2010 в 09:00