mesimeetup_denreymer_presentation

47
Big Data Денис Реймер http://denreymer.com

Upload: cleverdata

Post on 17-Jul-2015

303 views

Category:

Technology


0 download

TRANSCRIPT

Big DataДенис Реймерhttp://denreymer.com

О чем сегодня будем говорить• О Компании ЛАНИТ• О Компании CleverDATA• Что такое Big Data• Примеры кейсов• Big Data Инфраструктура• Digital бизнес• Клиент в Digital мире• Понимание клиента• Как строим систему внутри• Где берем данные – Биржа Данных• Data Scientist – кто это в современном мире

2000

2006

2011

2013

Денис Реймер

РУДН, прикладная математика, бакалавр

ЛАНИТ, программист

РУДН, Магистратура, Аспирантура

ЛАНИТ, Директор ДепартаментаИнтегрированных Бизнес Решений

LANIT-BPM, Генеральный Директор

http://denreymer.com

РАНХиГС ИБДА, Executive MBA

2014ЛАНИТ, Вице-Президент, Digital Innovation

CleverDATA, Председатель Совета Директоров

ЛИДИРУЮЩАЯзанимает первые позиции в рейтингах ИТ-компаний

ВСЕРОССИЙСКАЯ43 подразделения в России и др. странах

КЛИЕНТООРИЕНТИРОВАННАЯдля 10 тыс. заказчиков реализовано свыше

100 тыс. проектов

ИННОВАЦИОННАЯ20 направлений деятельности, инновационные

разработки

ПРОФЕССИОНАЛЬНАЯболее 5600 сотрудников

ТЕХНОЛОГИЧНАЯсвыше 200 партнеров, наличие высоких статусов

25 лет успешного развития

Рейтинги, награды

Победитель V-го ежегодного всероссийского конкурса Министерства связи и массовых коммуникаций РФ и ComNews «Лучшие 10 ИТ-проектов для госсектора 2013» (типовое решение для автоматизации лицензирования отдельных видов деятельности и Единая медицинская информационно-аналитическая система Москвы).

2013

1-е место в ренкинге крупнейших российских компаний в области информационных и коммуникационных технологий («Эксперт РА»)

Лауреат Национальной премии «Компания года 2013» в номинации «IT-компания» (РБК при поддержке Торгово-промышленной палаты РФ).

Входит в TOP-3 рейтингов:

• крупнейших российских ИТ-компаний («РИА Рейтинг», ИД «Коммерсант»),

• крупнейших консалтинговых групп России (ИД «Коммерсант», «Эксперт РА»).

По итогам деятельности в 2013 г.

• «ЛАНИТ-Красноярск» – 1-е место в рейтинге системных интеграторов Красноярского края,

• «Корус АКС» - 3-е место в рейтинге системных интеграторов Екатеринбурга,

• «ЛАНИТ-Урал» - 3-е место в рейтинге системных интеграторов Челябинска,

• Инженерный центр МИКОМ – 3-е место в рейтинге системных интеграторов Ростова-на-Дону,

• «ЛАНИТ-Поволжье» - 4-е место в рейтинге системных интеграторов Нижнего Новгорода.

Региональные компании ЛАНИТ заняли в рейтингах журнала

«Деловой квартал»:

В 2013 году оборот ЛАНИТ составил более 77 млрд. руб.

Динамика оборота (1995–2013 гг.)

Вселенная ЛАНИТ

ИТ-аутсорсинг(техническая поддержка, управление ПО,

приложениями, ЦОД, серверной и сетевой

инфраструктурой, администрирование СУБД)

Сервис(поставка банковского оборудования и

профессиональные услуги банкам; разработка

программного обеспечения)

Профессиональное обучение

и сертификация

Интеграция(системная, сетевая)

Дистрибуция(широкопрофильная и премиальная дистрибуция

продуктов и решений, электротехнического и

инженерного оборудования)

Инженерные системы(вентиляция, кондиционирование и

холодоснабжение, безопасность и автоматика

объектов, бесперебойное электропитание, АСУ

ТП)

Консалтинг(ИТ-, финансовый и управленческий

консалтинг, внедрение систем ERP, CRM, EPM,

PLM, BPM)

Основные направления деятельности

cleverdata.ru | [email protected]

Make your data clever

Развитие бизнеса на международном рынке с 2012 года

Входит в тройку

лидеров российских ИТ компаний

43 подразделения в России и за

рубежом

Более 5500 сотрудников

100 тыс.проектов для 10 тыс.заказчиков

Инновационная платформа

управления данными

«Биржа» данных

Облачный сервис

Собственная разработка

Создана в 2014 г.

Фокус на работе с «Big Data»

Собственные центры разработки

Партнерство с мировыми лидерами

и научными институтами

Центр экспертизы по технологиям

Big Data и Digital Marketing

cleverdata.ru | [email protected]

Немного о Big Data

ВЫСОКАЯ СКОРОСТЬБОЛЬШОЙ ОБЪЕМЗНАЧИТЕЛЬНАЯ ВАРИАТИВНОСТЬ

Web логи

Финансовые транзакции

Социальные сети

Web контент

Машинные данные

Открытые данные

Hadoop

MPP (Vertica, Exadata, Greenplum,

Teradata)

NoSQL (Key-Value, Document-

oriented, Column-based, Graph-

oriented)

In-memory Data Grids, Calculation

Grids

Data Mining

Machine Learning / Statistics / Natural

Language Processing

Event-Stream Processing

Значимость данных в том, как вы

анализируете и применяете эти данные

для развития своего бизнеса

Понимание клиента и его поведения

Информационная безопасность

Управление рисками

Повышение операционной эффективности

Creative/Business Cases

“Потенциал Big Data раскрывается в полной мере при взаимодействии с другими данными организации.” Билл Фрэнкс.

ОБЪЕМ

Вариативность

Скорость

Как улучшить ваш продукт?

Что ждет ваш бизнес в будущем?

Что предложить вашим клиентам?

Понять поведение и желания клиентов?

Выборы Папы Римского Бенедикта

Выборы Папы Римского Франциска

1 минута в

Интернете

Понимание клиента и его поведения

Современный потребитель

• Живет в Digital мире• Всегда Онлайн & Всегда доступен• Отсутствие фокуса, постоянно переключается• Невосприимчив к рекламе

Что мы знаем о клиенте?Персональные

данные История контактов

Платежи

Карточные транзакции

Продукты

Взгляд 360о на все, что уже БЫЛО!

Web-аналитика

Результаты маркетинговых

кампаний

cleverdata.ru | [email protected]

Вы уверены, что знаете своего клиента?

Считается, что основные жизненные вехи формируют портрет клиента и помогают понять потребности

• Родился в 1958 году в России;

• Живет в Москве;

• Отец двух дочерей;

• Любит рыбалку.

• Родился в 1958 году в России;

• Живет в Москве;

• Отец двух дочерей;

• Любит рыбалку.

Что мы НЕ знаем о клиенте?

Чем он интересуется?Что планирует покупать?Что изучает? Куда планирует поехать?Что планирует делать?

Что может

произойти

Шаг №1

Организуем хранение и обработку данных

Private DMPData Management Platform

Профиль и интересы клиента,

в реальном времени

Не существует DMP из коробки! DMP – это набор правильно подобранных компонентов.

cleverdata.ru | [email protected]

Что происходит с Big Data?!!!!

cleverdata.ru | [email protected]

Что происходит с Big Data?!!!!

Allied Market Research estimates that the “Hadoop-

as-a-Service” market will grow to $50.2 billion by

2020.

Шаг №2

Где еще взять данные о наших клиентах?

Социальныесети

Медийныйконтент

Машинныеданные

Историясерфинга

Offlineданные

Посещение веб-сайтовПоисковые запросыПокупки в интернетеПросматриваемые фильмы

Пол/возраст/ семейноеположениеСписок друзеиLike/Check-inИнтересы/Посты

eCommerce

Мобильные приложенияПокупки в магазинахПарковкиКредитная историяПрограммы лояльности

Какие данные о наших клиентах существуют?

Биржа данных 1DMP.RUПоставщики Потребители

• Web-логи• Соц. Сети• Web-контент• БКИ• Мобильные

операторы• Платежные

системы• eCommerce

• Банки• Ритэйл• eCommerce• Телеком• Госсектор

Облачная сервисная платформа для обмена и хранения больших объемов разнородной информацииМонетизация данных путем использования для решения бизнес-задач в области маркетинга, управления

рисками, формирования программ лояльности и других.

cleverdata.ru | [email protected]

Безопасное хранение данных

Real-time доступ к данным

Big Data хранилище

Мониторинг, статистика и контроль

Депозитарий данных

Биржа данных

Обработка данных

Сервисы активации данных

Различные режимы торгов

Уникальные возможности монетизации

Биллинг операций

Платформа для создания аналитических

сервисов для разных предметных областей

Алгоритмы машинного обучения и статистики

Подключение к сторонним инструментам

анализа данных

Накопление и хранение

Обогащение и монетизация

Анализ и преобразование

Биржа данных 1DMP.RU

Собираем все вместе

Private DMP

Шаг №3

DMP

Marketing RTB Scoring

Сырые данные

CRM и внутренние

транзакционные системы

Аналитические данные

• Профиль клиента

Anti Fraud

Построение единого профиля клиента

Медийныйконтент

Машинныеданные

Историясерфинга

Offlineданные

Социальныесети

eCommerce

Данные web аналитики, campaign management систем

DMP - Центральный хаб данных организации

3D модель Клиента

Внутренние данныеOnline данные

Открытые данные

Данные БКИ

Offline данные партнеров

Шаг№4

Как извлекать из этих данных

прибыль?

СтроимData Competence Center

• «Растим» новую роль Data Scientist

• Вовлекаем бизнес подразделения– Формулируем гипотезы

– Определяем модель совместной работы

• Выстраиваем «в-меру-agile» процесс работы– WAgile, SCRUMfall (выбираем подходящую

вашей организации)

• Экспериментируем

• RTB реклама

• Скоринг физических лиц

• Активная матрица кросс-предложений

• Формирование предложений на события в реальном времени

• Формирование профиля типового потребителя продукта

• Поведение клиента на сайте компании при звонке в call-center

• Гибкое сегментирование клиентов

• Целевые продажи

• Верификация места проведения транзакции

• Идентификация клиента по поведению

• Антифрод и анализ мошенничества

• Адаптация контента и анкеты …

DataScientist

Сегодня Data Scientist может стать

Data Предпринимателем.

Рынок данных

не принадлежит компаниям.

Он открыт для каждого.

IT Predictions 2015

“Now that data scientists can in effect publish algorithms to an ‘app store’, they can monetize

their research, knowledge, and creativity.”

cleverdata.ru | [email protected]

Клиенты

Научное сообщество

1. Определить Цели2. Предоставить данные

1. Подобрать инструменты2. Обеспечить внедрение

1. Сформулировать гипотезы2. Проработать варианты

Денис Реймер

http://denreymer.comhttp://cleverdata.ruhttp://lanit.ru 26.11.2014