Big Data в российских IT

• Основные проблемы

  • Неопределённость ответственности

  • Низкое качество данных

  • Отсутствие готовых доступных решений для малого и среднего бизнеса

  • Непонимание важности сбора и обработки данных в среднем и малом бизнесе

  • Нехватка квалифицированных специалистов

  • Скептицизм

  • Сложности интеграции технологий

  • Высокая стоимость ПО

• Участники Big Data проектах

  • Data Science — основной отдел

  • DBA (администраторы БД) 

  • Разработчики 

  • Бизнес / бизнес-аналитики 

  • DevOps - развёртывание+поддержка

  • Data Engineering - построение инфраструктуры

  • Data Governance - качество

• Основные плюсы

  • Увеличение прибыли

  • Сокращение расходов

  • Улучшение сервисов

  • Возможность запуска новых продуктов

  • Оптимизация стабилизировавшихся бизнес-процессов в крупных компаниях

  • Потенциал вклада в ВВП

• Используемые инструменты

  • Hadoop 

  • MongoDB 

  • Apache Spark 

  • Kafka

  • Apache Cassandra

  • ElasticSearch

  • ClickHouse

• Области применения

  • Маркетинг

  • Банковская сфера

  • Аналитика контент

  • Информационная безопасность

  • Интернет вещей

  • Социальные сети