Про архивы — @дневники: асоциальная сеть

22:06 Про архивы

14.03.2018 в 18:32

Про ситуацию с архивами дневников
Администрация сайта получает много обращений пользователей по поводу заказанных ими архивов дневников и сообществ.

Объясняем сложившуюся ситуацию.
Архивы у нас всегда создавались в срок от одного до нескольких дней, потому что в очереди было от 10 до 30 заявок на создание архива дневника — это самый сложный и тяжёлый по нагрузке на сайт вид архива, остальные — архивы u-mail, профилей и цитатников — намного проще.

Мы уже писали, что за первые дни ноября 2017 очередь заявок на создание архивов выросла многократно. Более того, она продолжает расти, так как новые заявки поступают быстрее, чем делаются архивы. Всего с ноября в автоматическом режиме было создано и выдано почти 2 тысячи архивов дневников, однако этого недостаточно, так как в очереди остаются еще 17435 заявок на разные архивы (7783 из них — архивы дневников и сообществ). Это больше, чем было в ноябре. При сохранении потока новых заявок и скорости обработки этот процесс не закончится никогда. Даже если поток новых заявок уменьшится вдвое, то архивирование займет от трех до четырех лет. Разумеется, такая перспектива никого не устраивает, поэтому устаревший механизм системы архивирования, написанный 10 лет назад, будет переделываться, но только после решения запланированных первоочередных задач — скорее всего, ближе к осени или концу 2018 года.

Сейчас архивы формируются на тех же серверах, на которых работает сайт, из данных его рабочей базы. Чтобы серьезная нагрузка от создания архивов была незаметна для пользователей, они формируются в течение нескольких часов по ночам параллельно с бэкапом и десятками других более мелких служебных операций. Для ускорения архивирования дневников будет создана с нуля новая система — круглосуточно работающая с копией базы данных на выделенном сервере.
Аналогично в будущем будет организована система поиска по записям дневников и сообществ. Возможно, нам удастся объединить эти две задачи и решить их на том же сервере (серверах) и базе данных.

Пока приносим искренние извинения, что не сможем в ближайшее время выдать заказанные архивы всем желающим. Призываем вас набраться терпения, а если необходимость в архивах не является столь острой, как в момент заказа (ведь мы с вами решили, что сайт продолжит работать и будет развиваться еще не один год), просим отменить их создание в настройках, тем самым снизив общую нагрузку на сервера.

URL записи

@темы: Новости