Администратор
23:12
Восстановление картинок
UPD 15 октября, 23:12
Сегодня мы решили осторожно попробовать возможность загрузки картинок. Не стали это объявлять, чтобы не создавать пиковую нагрузку и в надежде на то, что некоторые пользователи сами обнаружат это и попробуют. Так оно и случилось. Сегодня кое-кто загружал картинки в БИ, и наблюдения показывают, что это в принципе возможно, но массовая закачка в том объеме, как это было до падения, не желательна.
Поэтому мы настоятельно (очень!) просим стараться закачивать картинки на сторонние сервисы, а в дневники - только если уж совсем необходимо. Критичные для дизайнов изображения (аватары и фоны) можно заливать без ограничений - они мало весят.
Если наши сервера без выделенного массива не будут тянуть добавляемые вами картинки, то их загрузку снова придется отключить.
Папки 2, 3 и 4 - скопировались полностью. Сейчас копируются 5/5, 6/3 и 7/1.
- - -
UPD 14 октября, 15:00
Папка 2 скопирована полностью.
Сейчас копируется 4/9 и 3/8 — то есть, 4-я и 3-я папки на подходе к завершению.
Запустили копирование 5-й папки.
- - -
В предыдущей записи исчерпан лимит комментариев, а увеличить мы его пока не можем, так как все еще нет полного доступа к скриптам. Поэтому делаем новую запись, в которой продолжим информировать вас о ходе работ после аварии на файловом массиве static.diary.ru.
Сейчас идет постепенное восстановление вашего виртуального имущества. Уже появились счетчики обновлений, дизайны, CSS, RSS дневников и сообществ. Осталось самая объемная часть рухнувшего "Статика" — изображения, числом более 50 млн. штук. Их мы сейчас и копируем в фоновом режиме. Из-за этого сайт тормозит; иногда не работает, так как нам приходится что-то переключать; иногда падает, так как обращение к массиву приходится на его сбойную часть.
Файловая система массива устроена так.
На нем созданы папки верхнего уровня с именами: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из этих папок — еще по 10 папок второго уровня с именами: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из них — еще по 10 третьего уровня: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из них — еще по 10 четвертого уровня: 0 1 2 3 4 5 6 7 8 и 9.
Итого — 10 тысяч папок.
В последних и создаются папки пользователей. Каждый пользователь имеет уникальный номер UserID, который присваивается ему при регистрации и который нельзя изменить. Картинки пользователя хранятся в его папке, путь к которой определяется этим идентификатором. Например, по профилю пользователя Diary Spirit — www.diary.ru/member/?4733 можно вручную написать путь к его папке: http://static.diary.ru/userdir/4/7/3/3/4733/.
И наоборот, по картинке в БИ — http://static.diary.ru/userdir/4/7/3/3/4733/29370653.gif — можно прочитать его UserID=4733.
Другими словами, выше было написано, что
За время копирования выяснилась пока лишь одна проблема — не копируется какая-то часть папки верхнего уровня с номером "1", точнее даже — 1/0. При обращении к ней сайт зависает. Мы пока отложили проблемную папку целиком и займемся ею в последнюю очередь. У всех пользователей, кто в нее попал, картинки появятся в последнюю очередь и, самое неприятное, что может что-то не прочитаться. Но паниковать пока рано.
Папка верхнего уровня с именем "0" скопирована полностью. Папки 2, 3 и 4 — копируются в настоящий момент (пошли вторые сутки). Как только с ними будет закончено, начнется копирование следующих. Всего скопировано около 15 млн. файлов из 50 млн. Но копирование не идет непрерывно. Иногда приходится его искусственно притормаживать или даже совсем останавливать, иначе пользоваться сайтом станет просто невозможно.
Такие дела.
Сегодня мы решили осторожно попробовать возможность загрузки картинок. Не стали это объявлять, чтобы не создавать пиковую нагрузку и в надежде на то, что некоторые пользователи сами обнаружат это и попробуют. Так оно и случилось. Сегодня кое-кто загружал картинки в БИ, и наблюдения показывают, что это в принципе возможно, но массовая закачка в том объеме, как это было до падения, не желательна.
Поэтому мы настоятельно (очень!) просим стараться закачивать картинки на сторонние сервисы, а в дневники - только если уж совсем необходимо. Критичные для дизайнов изображения (аватары и фоны) можно заливать без ограничений - они мало весят.
Если наши сервера без выделенного массива не будут тянуть добавляемые вами картинки, то их загрузку снова придется отключить.
Папки 2, 3 и 4 - скопировались полностью. Сейчас копируются 5/5, 6/3 и 7/1.
- - -
UPD 14 октября, 15:00
Папка 2 скопирована полностью.
Сейчас копируется 4/9 и 3/8 — то есть, 4-я и 3-я папки на подходе к завершению.
Запустили копирование 5-й папки.
- - -
В предыдущей записи исчерпан лимит комментариев, а увеличить мы его пока не можем, так как все еще нет полного доступа к скриптам. Поэтому делаем новую запись, в которой продолжим информировать вас о ходе работ после аварии на файловом массиве static.diary.ru.
Сейчас идет постепенное восстановление вашего виртуального имущества. Уже появились счетчики обновлений, дизайны, CSS, RSS дневников и сообществ. Осталось самая объемная часть рухнувшего "Статика" — изображения, числом более 50 млн. штук. Их мы сейчас и копируем в фоновом режиме. Из-за этого сайт тормозит; иногда не работает, так как нам приходится что-то переключать; иногда падает, так как обращение к массиву приходится на его сбойную часть.
Файловая система массива устроена так.
На нем созданы папки верхнего уровня с именами: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из этих папок — еще по 10 папок второго уровня с именами: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из них — еще по 10 третьего уровня: 0 1 2 3 4 5 6 7 8 и 9.
В каждой из них — еще по 10 четвертого уровня: 0 1 2 3 4 5 6 7 8 и 9.
Итого — 10 тысяч папок.
В последних и создаются папки пользователей. Каждый пользователь имеет уникальный номер UserID, который присваивается ему при регистрации и который нельзя изменить. Картинки пользователя хранятся в его папке, путь к которой определяется этим идентификатором. Например, по профилю пользователя Diary Spirit — www.diary.ru/member/?4733 можно вручную написать путь к его папке: http://static.diary.ru/userdir/4/7/3/3/4733/.
И наоборот, по картинке в БИ — http://static.diary.ru/userdir/4/7/3/3/4733/29370653.gif — можно прочитать его UserID=4733.
Другими словами, выше было написано, что
номер вашей папки — первая цифра числа в ссылке вашего профиля
За время копирования выяснилась пока лишь одна проблема — не копируется какая-то часть папки верхнего уровня с номером "1", точнее даже — 1/0. При обращении к ней сайт зависает. Мы пока отложили проблемную папку целиком и займемся ею в последнюю очередь. У всех пользователей, кто в нее попал, картинки появятся в последнюю очередь и, самое неприятное, что может что-то не прочитаться. Но паниковать пока рано.
Папка верхнего уровня с именем "0" скопирована полностью. Папки 2, 3 и 4 — копируются в настоящий момент (пошли вторые сутки). Как только с ними будет закончено, начнется копирование следующих. Всего скопировано около 15 млн. файлов из 50 млн. Но копирование не идет непрерывно. Иногда приходится его искусственно притормаживать или даже совсем останавливать, иначе пользоваться сайтом станет просто невозможно.
Такие дела.
15.10.2010 в 23:56
15.10.2010 в 23:59
16.10.2010 в 00:01
16.10.2010 в 00:02
думаю, да. надо подождать. пусть по вам успеют соскучиться!
Я в той же обойме.
16.10.2010 в 00:02
16.10.2010 в 00:03
16.10.2010 в 00:05
Мало того, у меня сообщество стоит. потому что ... 1. Ну, вы понимаете. так что - милости прошу, пока поразвлечёмся вербально, ибо наши дорогие модераторы делают всё, что могут, факт.
16.10.2010 в 00:06
16.10.2010 в 00:06
А старые восстановят? А то у меня до сих пор не видно не ранее загруженных рисунков, ни аватаров (мой ID 980589). А раньше тематические посты я строил в основном с использованием «Библиотеки изображений», жалко терять. Если я правильно понял, то мне надо еще ждать, пока дойдут до восстановления моего каталога? Спасибо.
16.10.2010 в 00:07
16.10.2010 в 00:08
да,сейчас пробую восстановить дизайн,точнее создать новый. вопрос - а это то в нашей папке возможно?
16.10.2010 в 00:09
Спасибо за ответ) Буду ждать своего счастья)
16.10.2010 в 00:11
16.10.2010 в 00:12
а кто-то говорил, что нет?
мне надо еще ждать, пока дойдут до восстановления моего каталога?
да, именно так
16.10.2010 в 00:12
Вряд ли пока... Но не надо зря тратить силы. Я - есть последний универсальный индикатор полного восстановления. Если Вам есть что сказать миру и друзьям - говорите без визуального сопровождения. если нет - терпите! как мы все. Конечно, очень много значит вербатум. Но и визуальность - не менее важна. Понятно...
16.10.2010 в 00:14
16.10.2010 в 00:15
И у меня! есть повод создать сообщество долготерпимых. Как Вы считаете? А ребята разберутся. их подрезали очень круто сейчас...
16.10.2010 в 00:16
да,попробовал - не реально загрузить что то)
16.10.2010 в 00:16
спасибо за уточнение
16.10.2010 в 00:18
Будут ли ???
16.10.2010 в 00:20
16.10.2010 в 00:20
Наверно)
Радует одно - новые изображения загружаются))
16.10.2010 в 00:37
Счастье близко...
Заходите! буду рад вам... В моей таверне всегда тепло!
16.10.2010 в 00:42
Спокойно! выдохнули, подумали. Написали то, что истинно хотели сказать.И... и дальше - непредсказуемо! Но - уверен, лучше ста пустословных созерцателей хоть семь реальных деятелей, виртуального слова там или какого, не важно.
16.10.2010 в 00:46
КТО ЗА ТО, ЧТО БЫ КОПИРОВАНИЕ ПРОИСХОДИЛО БЫСТРЕЕ, ЗА СЧЕТ ЗАКРЫТИЯ САЙТА НА НЕКОТОРОЕ ВРЕМЯ?
и
КТО ЗА ТО, ЧТО БЫ КОПИРОВАНИЕ ПРОИСХОДИЛО С ОСТАНОВКАМИ, МЕДЛЕННО, НО САЙТ БЫЛ ОТКРЫТ?
16.10.2010 в 00:48
Я ЗА ТО, ЧТО БЫ КОПИРОВАНИЕ ПРОИСХОДИЛО С ОСТАНОВКАМИ, МЕДЛЕННО, НО САЙТ БЫЛ ОТКРЫТ
Я не смогу без Дайри!
16.10.2010 в 00:52
Я за остановку - но быстрее.
16.10.2010 в 00:54
16.10.2010 в 00:54
Ага, так мы гораздо быстрее засрем комменты и ждать будем уже без них))))))
16.10.2010 в 01:23