Умный парсинг
С аналитикой и визуализацией
Решение сложных бизнес-задач
по поиску, сбору и обработке данных
Парсинг — автоматизированный сбор и структурирование данных
из интернета и корпоративных источников при помощи программы или сервиса
Содержание
Мы обеспечиваем
Особенности
Как мы работаем
Консалтинг
Выявление потребностей |
● Выявление и формализация тематических потребностей Заказчика |
Определение источников данных |
● Выявление источников, содержащих тематические данные |
Исследование семантики |
● Итерационное изменение семантики (слова и словарные фразы) до получения результата, который будет полностью удовлетворять ожиданиям |
Исследование аналитических гипотез |
● Формирование и исследование аналитических гипотез, как набора единичных и взаимоувязанных алгоритмов обработки данных, в результате работы которых формируется окончательный целевой набор данных |
Настройка и кастомизация |
● Настройка инструментов поиска, сбора, хранения, обработки и визуализации данных в целях подготовки сервиса или системы к эксплуатации |
Обучение персонала |
● Обучение сотрудников Заказчика в соответствии с ролевым составом продукта: администратор, бизнес-аналитик\пользователь, администратор ИБ |
Эксплуатация
Техническая поддержка |
● Поддержка ИТ служб Заказчика на 2-м уровне в случае нарушения работоспособности продукта/сервиса |
Адаптация к изменяющимся условиям |
● Адаптация поисковых роботов-краулеров, алгоритмов обработки, средств обхода блокировок в связи с динамическими изменениями в источниках данных |
Области применения
Отрасли, предусматривающие регулярный сбор и обработку данных из открытых источников
Компетенция: 20 лет на рынке
Кейсы
Федеральные регуляторы: обеспечение безопасности
Задачи |
Результаты |
Противодействие нелегальной деятельности на финансовом и страховом рынке |
● Выявлено более 10500 субъектов за 2022 и 2023 гг |
Обеспечение контроля исполнения Федерального Закона о блокировке незаконного контента |
● Выявлено более 500 запрещенных ресурсов |
Прогнозирование вероятности наступления нестабильного состояния банка |
● Достигнута точность прогнозирования финансового состояния банка от 70% до 90% |
Мониторинг рынка криптовалют |
● Выявлены первоисточники новостей, сформированы цепочки изменений трактовки новостей |
Финансовый сектор: обеспечение безопасности
Задачи |
Результаты |
Поиск аккаунтов и цифровых следов должников в соцсетях |
● Выявлено 4200 должников в соцсетях VK и Одноклассники |
Формирование социально-экономического портрета должников |
Получены следующие данные о должниках: |
Категоризация должников с целью оценки перспективности портфеля должников |
● Сформирована модель категоризации должников по группам: «объём долга» и «сложность поиска» |
Госсектор: цифровой двойник территории
Управление отраслью, городом, регионом, компанией
Задачи |
Результаты |
Управление недвижимостью |
● Уменьшено число учреждений в 3.5 раза |
Нецелевое использование муниципальной недвижимости |
● Выявлено 15% объектов недвижимости нецелевого использования |
Мониторинг финансовой активности |
● Достигнуты финансовые KPI за 2 года |
● Мониторинг благоустройства и комфорта |
● Оптимизация объектов исследования |
Социальный сектор: мониторинг и анализ СМИ и соцсетей
Задачи |
Результаты |
Анализ проводимых активностей |
● Оказана существенная помощь по пресечению деятельности социальной «группы смерти» «Синий кит»
● Снижена эффективность деятельности социальных групп, направленных на подростковый экстремизм и деструктивное поведение (борьба с течением “АУЕ”) ● Приняты меры для борьбы с подрывом государственных устоев и репутации образов национальных героев |
● Выявление лидеров мнений |
|
Анализ и прогноз успешности мероприятий |
|
Консолидация тематической информации – облако слов, ТОП обсуждений и просмотров |
|
Оценка тональности публикаций и комментариев |
Товары широкого потребления
Управление производством и потребительской корзиной
Задачи |
Результаты |
Масштабирование продаж: выявление потенциальных рынков сбыта |
● Обработано ~ 1 500 000 торговых точек по России и Белоруссии |
Расчет потенциала торговых точек для увеличения продаж и расширения ассортимента |
|
Увеличение розничных продаж за счет учета динамики изменения во времени платежеспособного спроса потребителя |
Другие отрасли
Источники парсинга
Производительность
Показатели могут масштабироваться в зависимости от потребностей и целей проекта
Законность парсинга
Как с нами связаться
Поделиться