Как отвечать за продакшн / Андрей Сумин (mail.ru)

Как отвечать за продакшнАндрей СуминЗаместитель технического директора почтового сервиса Mail.Ru

Собеседование

СобеседованиеКто отвечает за продакшн?

СобеседованиеКто несет ответственность за продакшн?

Расскажите о последней проблеме.

СобеседованиеПредставьте что нет админов,менеджеров и тестировщиков

СобеседованиеХорошо, теперь вы начальник

С чего начать?

Мониториг

МониторигОшибки!

Ответственность за продакшн — это не отсутствие ошибок, это гарантия

возможности пользоваться сервисом.

МониторингОшибки!

Продуктовые метрики

МониторингОшибки!

Продуктовые метрики

Инструменты

Состояние сервисаСвои графики

Состояние сервисаСвои графики

Дашборд

Состояние сервисаСвои графики

Дашборд

Дашборд дашбордов

Алертинг

АлертингСпособ определения отклонений

АлертингГрафик волнообразный

АлертингМожно нормировать по графику посещаемости

АлертингПревращаем плато в пик

АлертингПревращаем плато в пик

АлертингСчитаем коэффициент корреляции

АлертингСпособ оповещения

Другие каналы оповещенияСаппорт

Другие каналы оповещенияСаппорт

Соц. сети

Другие каналы оповещенияСаппорт

Соц. сети

Бета пользователи

Другие каналы оповещения

Несколько реальных проблемРейз в мемкэшеТормозит написание письмаАнтивирусРазмер пакета

Есть один ответственный за проблему!