Изменения за февраль 2018

Переезд части индексов на Redis показал хорошие результаты. Но не все получается сразу. Была предпринята попытка перевезти на Redis в память историю всех апвоутов и флагов с созданием индексов для каждого пользователя. Это была ошибка.

Переполнение памяти, падение swap, который пытался подхватить 30 Gb данных. Пришлось резко менять ракурс с записи на удаление и обходить все данные снова. Не зря на нодах пишут ограничение по истории аккаунтов. 1000 последних апов или 10 000. Для всех аккаунтов или только из списка. Что же делать нам?

Вполне логичным кажется хранить подробные данные по апам за последние 3-4 месяца. Индексы для пользователей держать тоже за последние 1 месяц, для VIP пользователей — 3-4 месяца.

Такой объем данных вполне объясним, индексы тоже. Голосование за посты или комментарии самая популярная операция в блокчейне. Ограничить их объем только важным срезом в несколько месяц — тоже логично.

Те же проблемы настигнут все популярные операции, на очереди будет и история переводов. Вопрос - когда произойдет та точка X, после которой скорость работы с этими данными будет уже недостаточно для быстрой обработки блоков.

Вполне вероятно, что через полгода-год понадобится вновь менять структуру данных и работу ГолдВойса. Вполне вероятно, что будет изменен принцип работы с пользователями и появления VIP-подписки для расширенной истории индексов пользователя. Если в будущем код GoldVoice будет открыт, вполне вероятно это будет альтернативой запуску своего окна в бч и сборщика по конкретным аккаунтам.

PS Дополнена локализация на Английский язык части сервиса. Исправлены ошибки в JS при сбоях конвертации валют. Внесены изменения в сборщик биржевых категорий. Изменен принцип обработки информации о балансе пользователя, чтобы корректно отображалась информация о понижении Силы Голоса (пример).

С наступлением весны!
Голос стал важной частью всех нас. Зима скоро сдаст свои позиции и наступит время перемен.