Возвращаюсь с информацией о прогрессе. Вчера детали писал здесь
Отчёт по скорости от разработчиков — на скринах.
Осталось ≈1,6 млн фото. Вчера на этом месте было ≈2,6 млн.
Скорость выросла за счёт двух вещей.
Первое — оптимизация обработки. По замерам разработки: за последние 8 часов — 87 028 фото/час в среднем, отдельные часы выше 100 000. Для сравнения: сутки назад среднее было ≈57 900 фото/час, а до этого держалось около 37–40 тыс. То есть темп вырос примерно вдвое.
Второе — перестроили саму логику очереди. Теперь мощность концентрируется на ≈10 таблицах одновременно: они закрываются полностью и быстро, затем система переходит к следующим. Раньше ресурс размазывался маленькими порциями по сотням таблиц сразу. Из-за этого таблиц в очереди сейчас формально больше, чем вчера, но это не замедление — каждая отдельная таблица закрывается заметно быстрее.
При текущем темпе оставшиеся ≈1,6 млн фото закрываются в ближайшие 24 часа. Вчера ориентир был ≈48 часов, до этого — 104. Идём с опережением графика.
Дополнительно с сегодня меняем распределение мощности: ≈30% — тем, кто недавно внёс изменения в объявления, ≈70% — тем, кто ждёт в общей очереди. Цель — чтобы одна группа не блокировала другую: кто вносит изменения сейчас, получает результат быстрее, а основной ресурс продолжает работать на очередь. Как следствие, у поддержки больше времени помогать вручную тем, кто ждёт не отвлекаясь на новые обращения.
Работать начинает с этой минуты.
Горизонтальное масштабирование мощности — в процессе. Оно нужно не только для текущей ситуаци: параллельно ведём превентивную работу, восстанавливаем из исходников контент тех, кого проблема пока не коснулась напрямую, чтобы они не столкнулись с ограничением, когда решат внести изменения.
Масштаб проблемы сейчас — ≈4% пользователей, на 2 пункта меньше, чем вчера.
Коротко по итогам: ожидающих становится меньше, скорость растёт, решения по разгрузке поддержки внедрены, задачи по защите ещё не затронутых клиентов — в работе.
Продолжаем помогать в ручном режиме и стабилизировать ситуацию. Обращайтесь к Вадиму или в поддержку.