rakutenとsreと私 yanagimoto koichi

とと私

Oct.28.2017

Koichi Yanagimoto

EC Incubation Development Dept.

Rakuten, Inc.

自己紹介自己紹介

部署について

サービス運用に特化したチーム（今、現在サービス運用中）

運用を”ゼロ“に近づける

改善活動前の状況

※本日の話はすべて弊社内での話です。

5

全体像

6

全体像

7

全体像

LBが落ちたとき気付きにくい…

8

全体像


9

全体像


10

全体像


11

改善したいところ

•環境差どうにかしたい

•管理外のInfraの問題に早く気付きたい

• Log追いかけるの楽にしたい

•負荷調整を楽にしたい

• Rollback楽にしたい

改善活動前の状況最初の改善

13

全体像

14

Before After

• 環境差分どうにかしたい• 管理外のInfraの問題に早く気付きたい• Log追いかけるの楽にしたい• 負荷調整を楽にしたい• Rollback楽にしたい

15

Before After


16

Before After


17

Before After


18

Before After


• BlueとかGreen管理するのめんどくさい

• 負荷調整、楽にする願望

• Logも一元管理するようにしたい

• もっとモロモロ楽にしたい

改善活動前の状況第二の改善

第二の改善

20

全体像

Orchestration Tool

使うのがベスト！

改善活動前の状況最初の改善USE RWASP

常務執行役員ECカンパニー CTO

ディレクター

タリア・マルティヌッセン

23

“リソース管理と環境全体にわたるスケジューリング”

http://mesos.apache.org/

https://mesosphere.github.io/marathon/

“Mesos上で動くオーケストレーションのフレームワーク”

25

HostとPortのつなぐところはおまかせ！

Containerの管理はおまかせ！

Deploy作業

• Jenkins Pipeline使ってDocker Image

持ってくるだけ！

• RollbackもImageのVer.変えるだけ。

Stability

• Marathonが見てくれる！

(No down time)

26

LogDataの見える化

• １箇所で見えるようになった

(No more huge Num of SSH)

32





33





全解決！運用時、ストレスレス。

改善活動前の状況第二の改善

… 今後の展開

35

データ利用しての化

rakutenとsreと私 yanagimoto koichi

Technology