Высоконагруженный сервис парсинга соцсетей для аналитической компании
Разработали высоконагруженный сервис парсинга социальных сетей для аналитической компании: система обрабатывает 500–800 Гб данных в сутки.
Задача
Текущее решение не выдерживало нагрузку более 50 пользователей. Требовалось создать масштабируемую систему аналитики данных, способную работать при высоких нагрузках.
Решение
Провели реверсивный инжиниринг, создали документацию и новую архитектуру с неограниченным горизонтальным масштабированием. Перенесли код, запустили beta-тестирование на 100 пользователях, затем развернули парк серверов и внедрили мониторинг Grafana с Telegram-уведомлениями.
Результат
- 500–800 Гб Обрабатывается данных в сутки
- 900 Статистических анализов в день
- 100+ Метрик мониторинга на сервер
Система работает на 7 серверах, обрабатывает 500–800 Гб данных в сутки и выполняет 900 статистических анализов в день. Обеспечен постоянный мониторинг более 100 метрик на сервер.
Ещё 38 кейсов в категории ИТ-компания → Интеграция CRM/ERP
Похожие кейсы
Платформа управления знаниями TEAMLY: 35 000+ пользователей и 235 компаний
Разработана платформа TEAMLY для управления знаниями, заменившая Confluence и Notion: более 235 компаний и 35 000+ пользователей.
E-commerce платформа Автотаун — редизайн и перезапуск федерального сервиса продажи контрактных автозапчастей
Полный редизайн интернет-магазина Автотаун с умным поиском и новой карточкой товара: конверсия выросла на 27%, глубина просмотра — на 55%.
Мокапус — генератор анимированных трехмерных мокапов онлайн
Создали онлайн-генератор анимированных 3D-мокапов для презентации дизайна.
Цифровая платформа для Самолет Плюс: запуск 1500+ офисов
Разработали цифровую платформу для управления франчайзинговой сетью «Самолет Плюс», что позволило запустить более 1500 офисов и сократить срок открытия нового офиса в 3 раза.
Seller Drive by Emex
Обновили внутреннюю систему Seller Drive для Emex DWC: автоматизировали большинство ручных операций и сократили нагрузку на поддержку.
Adello: 4 нейросети для анализа ТВ-эфира снизили стоимость показа рекламы на 15%
Разработали систему анализа ТВ-эфира на основе четырёх нейросетей для Adello: стоимость показа рекламы снизилась на 15%.