Екатерина Войденко "Интранет и синхронизация"

Post on 01-Jul-2015

1.040 Views

Category:

Technology

0 Downloads

Preview:

Click to see full reader

DESCRIPTION

Рассказ в формате «lite», о том, как мы живем с множеством разных технологий внутри, как запускаем новые сервисы, с какими проблемами при синхронизации данных сталкиваемся и как их решаем.

TRANSCRIPT

Войденко ЕкатеринаСистемный администратор

Интранет и синхронизация

Я.Субботник, Санкт-Петербург 30 июня 2012 года

2

О чем речь?

Почему интранет

3

Много разных маленьких сущностей на разных технологиях

У каждого своя история

Почему интранет

4

Сервисы «по наследству», написанные «на коленке» за полтора дня

Встречаем новый сервис — DATING!

А что вообще мы имеем

5

И зачем синхронизировать?

6

● Маленький, но гордый сервис «библиотека» хочет получать данные о логинах сотрудников

● Большая и любимая система деплоя хочет знать кто, что и куда может деплоить

И зачем синхронизировать?

7

● JIRA Wiki→● Коллега создал встречу в календаре и уехал в

отпуск

8

Что синхронизируем

Что синхронизируем

9

● Файлы

Что синхронизируем

10

● События

Что синхронизируем

11

● Структуры данных

12

Как мы это делаем

Файлы

13

● Rsync● Распределенная фс

(elliptics, HDFS, cifs, mulca)● MongoDB (документы)

Данные

14

● Импорты по крону

Данные

15

● API

Данные

16

● Общие базы данных

Данные

17

● Собственные костылики

Данные

18

● Собственные костылики

Данные

19

● Паттерн PubSub

События

20

Отличаются от данных лишь скоростью доставки

PubSub● amqp● Zeromq● pubsubhubbub

21

Как вы понимаете, со всеми этими проблемами мы уже столкнулись...

Уменьшаем энтропию

22

Свозим данные в одно место ● Небезопасно, включаем паранойю!

Уменьшаем количество сущностей

Свозим базы в одно место

23

Идеальный мир

О, дивный новый мир

24

Где сервисы кластеризованы, не падают, продуманы и одинаковы по своей структуре.

Где не так много импортов.

Где есть разработчики.

Мечты мечты...

Системный администратор

katyavoid@yandex-team.rutwitter: @katyavoid

Екатерина Войденко

top related