Большие данные: как могут навредить и ка могут помочь?
TRANSCRIPT
HWdTech, LLC
Как помогают в обычной жизни и как могут навредить
Большие данные
Что такое Большие данные?
Это не тоже, что нанотехнологии?
102
Опр
едел
ение Большие данные - серия подходов, инструментов и
методов обработки структурированных и неструктурированных данных огромных объёмов и значительного многообразия для получения воспринимаемых человеком результатов …
(Wikipedia)
03
Data MiningКраудсорсингСмешение и интеграция данныхМашинное обучениеНейронные сетиРаспознавание образовИмитационное моделированиеПространственный анализСтатистический анализВизуализация аналитических данных
Какие методы обработки данных существуют? 04
Data MiningКраудсорсингСмешение и интеграция данныхМашинное обучениеНейронные сетиРаспознавание образовИмитационное моделированиеПространственный анализСтатистический анализВизуализация аналитических данных
Поговорим о 05
2 Чего следует опасаться?
Большие данные могут быть использованы для манипуляций
06
е
07
Рекомендую почитать
08
Стоит мальчику дважды попробовать бритву марки Gillette и вероятность, что он будет ею пользоваться в зрелом возрасте, достигнет 92%
09
Потенциальный курильщик обычно сдается на 3 подарке компании Kool
3 Большие данные несут пользу!
Если правильно интерпретировать факты
10
1923 г. AT&TЛамповые усилители сигнала
Количество аварийных бригад и транспорта?
Применяются в различных сферах производства как средство постоянного улучшения качества выпускаемой продукции
Карты Шухарта
Уолтер Шухарт
11
Инструмент больше эмпирический, чем математический
Отношение к картам Шухарта неоднозначное
Применяется на японских предприятиях, например, ToyotaЧтобы применять карты, надо сначала добиться “статистической стабильности”
Карты работают?
Дональд Уиллер
12
Человек, который изменил все
13
Рекомендую посмотреть
Теперь командные видыспорта не могут обойтись без статистики
4 Немного о картах Шухарта
Как считать?
14
Как
обна
руж
иват
ь ош
ибки
? Карты ШухартаВсе процессы подвержены вариабельности. Управляемое явление - используя прошлый опыт можно предсказать, каких его вариаций можно ожидать в будущем.
ГОСТ Р 50779.42-99 (ISO 8258-91)
выявление точек выхода процесса из стабильного состояния для установления причин появившегося отклонения и их устранения.
15
Исп
ольз
оват
ь ка
рты
оче
нь
прос
тоКарты средних и размаха
Множество измерений разбивается на подгруппы. Способ формирования подгрупп влияет на результат!
ГОСТ Р 50779.42-99 (ISO 8258-91)
Для построения карт достаточно простых арифметических действий
16
5 Примеры из своего опыта
Как считать?
17
Акти
внос
ть п
ольз
оват
елей
м
ожно
соз
дава
тьГрамотный троллинг увеличивает рейтингиПостоянные посетители готовы общаться – им нужно только немного помочь. Стоит ли эффект вложенных средств?
18
Не в
се з
авис
ит о
т тех
ноло
гий
Эффективность рекламыРекламная компания в СМИ имела незначительный краткосрочный эффект.
19
Все
ли п
ольз
оват
ели
один
аков
о по
лезн
ы?
Обмен сообщениями между пользователямиАнализ аномальной активности показал, что появился пользователь, который стал активно предлагать другим переходить на ресурс-конкурент.
20
Не в
се к
олле
ги в
едут
себ
я ко
ррек
тно
Аргумент при общении со сторонними разработчикамиОдин из клиентов предъявлял претензии, потому что его разработчики (компания-аутсорсер) говорили, что проблема в нас.
21
