Высоконагруженный сервис парсинга соцсетей для аналитической компании
Разработали высоконагруженный сервис парсинга социальных сетей для аналитической компании: система обрабатывает 500–800 Гб данных в сутки.
Открыть проект Подбор агентства по задаче →
Задача
Текущее решение не выдерживало нагрузку более 50 пользователей. Требовалось создать масштабируемую систему аналитики данных, способную работать при высоких нагрузках.
Решение
Провели реверсивный инжиниринг, создали документацию и новую архитектуру с неограниченным горизонтальным масштабированием. Перенесли код, запустили beta-тестирование на 100 пользователях, затем развернули парк серверов и внедрили мониторинг Grafana с Telegram-уведомлениями.
Результат
- 500–800 Гб Обрабатывается данных в сутки
- 900 Статистических анализов в день
- 100+ Метрик мониторинга на сервер
Система работает на 7 серверах, обрабатывает 500–800 Гб данных в сутки и выполняет 900 статистических анализов в день. Обеспечен постоянный мониторинг более 100 метрик на сервер.
Ещё 67 кейсов в категории ИТ-компания → Интеграция CRM/ERP
Похожие кейсы
Платформа управления знаниями TEAMLY: 35 000+ пользователей и 235 компаний
Разработана платформа TEAMLY для управления знаниями, заменившая Confluence и Notion: более 235 компаний и 35 000+ пользователей.
Мокапус — генератор анимированных трехмерных мокапов онлайн
Создали онлайн-генератор анимированных 3D-мокапов для презентации дизайна.
Seller Drive by Emex
Обновили внутреннюю систему Seller Drive для Emex DWC: автоматизировали большинство ручных операций и сократили нагрузку на поддержку.
E-commerce платформа Автотаун — редизайн и перезапуск федерального сервиса продажи контрактных автозапчастей
Полный редизайн интернет-магазина Автотаун с умным поиском и новой карточкой товара: конверсия выросла на 27%, глубина просмотра — на 55%.
Приоритет: ребрендинг и комплексное сопровождение федеральной программы
Разработали цифровую платформу для программы «Приоритет 2030»: весь процесс от подачи заявок до выдачи грантов переведён в онлайн, а согласование изменений сократилось до недели.
Разработка собственной системы управления тестированием — DoQA
Разработали собственную TMS DoQA для IT Test: 5340 кейсов, 1678 чек-листов и 929 прогонов.