Высоконагруженный сервис по парсингу социальных сетей
Разработали высоконагруженную систему аналитики данных, способную обрабатывать до 800 ГБ данных в сутки.
Задача
Требовалось создать инструмент аналитики данных, способный работать при нагрузках более 50 пользователей, и обеспечить его дальнейшее развитие по согласованному плану.
Решение
Провели реверсивный инжиниринг и создали техническую документацию. Разработали новую архитектуру с возможностью неограниченного масштабирования. Осуществили перенос кода, провели бета-тестирование на 100 пользователях. На основе замеров нагрузок подобрали оптимальный парк серверов для 10 000 пользователей. Настроили мониторинг Grafana с более чем 100 метриками и Telegram-уведомлениями. Внедряли новые функциональные модули по плану клиента.
Результат
Система работает на 7 собственных серверах, обрабатывает до 800 ГБ данных в сутки, выполняет 900 статистических анализов в день, обеспечивает горизонтальное масштабирование и отказоустойчивость.
Похожие кейсы
TEAMLY – платформа для совместной работы и управления знаниями, документами, задачами
Разработана платформа TEAMLY для импортозамещения западных систем управления знаниями, используемая более 235 компаниями.
Мокапус — генератор анимированных трехмерных мокапов онлайн
Предоставлена возможность создавать эффектные презентации дизайна с помощью мокапов в браузере для дизайнеров → увеличена свобода в выборе контекста подачи работ
E-commerce платформа Автотаун — редизайн и перезапуск федерального сервиса продажи контрактных автозапчастей
Разработали цифровую экосистему с умным поиском для Автотауна — конверсия выросла на 27%
Разработка Цифровой платформы МСП
Создана цифровая платформа МСП.РФ для предпринимателей — зарегистрировано более 220 тыс. пользователей
Seller Drive by Emex
Обновили систему Seller Drive для Emex DWC — автоматизировали большинство ручных операций
Редизайн email-редактора Letteros
Сделали редизайн интерфейса email-редактора Letteros — он стал более понятным и чистым, внедрили для 20% пользователей