yahoo! japan meetup #8 （インフラ技術カンファレンス）セッション①

Copyrig ht © 2017 Yahoo Japan Corporation. All Rig hts Reserved .

2017年1月30日

1

インフラ技術4部ストレージ上田雅幸

大規模インフラで考える

インフラチームの未来


自己紹介

2

■ストレージ・アプライアンス担当

■業務内容• 構築• 運用・保守• 検証• ツール開発• タスク可視化推進

Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

インフラチームの未来を考える

3


ITへの投資は拡大

4


データは増加の一途

5

(出典)EMC “IDC Digital Universe Study: Big Data, Bigger Digital Shadows and Biggest Growth in the Far East”(2012)


• インフラ機器の拡大

• 利用ユーザーの多様化

6


Software Defined Infrastructure

7

画像：アフロ

Software

Defined

Infrastructure


Infrastructure/Configuration as Code

8

Infrastructure as Code

Configuration as Code

画像：アフロ


インフラそのものに大きな変化が到来

9


今、考えておきたいこと

10


画像：アフロ

インフラチームがどうあるべきか

拡大・変化・多様化する業務に対し

11


自チームの現状

12


弊社のストレージ機器の規模感

13

…

タテに積むと約270m(約6000U)

実効容量：50PB以上


求められていること

14

① 多サービス展開

② 人・機器の変化

③ 安定運用



15



③ 安定運用



16



③ 安定運用


課題

17


「多サービス展開」による課題

• 要求発生タイミング• 求められるスピード感• 導入する構成

19

要望の細分化

• 機器の構成・状態が不統一• タスクの増加

問題

原因

課題


「人・機器の変化」による課題

• 導入コスト発生• 予見不能なリスクの増大• 自動化施策への対応

20

対応負荷

• タスクの増加• 知見が浸透しない

問題

原因

課題


自チームが抱えている課題

①機器の構成・状態不統一②タスクの増加③知見が浸透しない

•多サービス展開•人・機器の変化

要求・要望

課題

21

Copyrig ht © 2017 Yahoo Japan Corporation. All Rig hts Reserved .22

画像：アフロ

現実を受け止め

変化に強いチームへ


課題解決への挑戦

23


弊社の特徴

多数のサービス

ソフトウェア開発の知見24


モダンなスタイルへ

① アジャイル開発手法を模倣

② ChatOps導入

25



• ワークフロー：流れの管理

• バックログ：作業項目管理

• 朝会：情報交換

• メトリクス：状態の数値化

• 振り返り：チームの成長機会

26








27


構築業務のワークフロー

要求要望分析

見積発注設定決定

納品設置

構築確認引き渡し

28

案件カード



29

• チケット駆動• 一人で担当• 進捗不明

従来は



30

• 内容• 依頼番号• 管理番号• 担当者• 納期• 特記ラベル

案件カード








31


バックログによる作業項目管理

32

• 個人管理• 担当が不明瞭• 進捗不明

従来は








33


振り返りによるチームの成長

34

• 月1で1時間

• チームの良い／悪いところを議論

• 改善の行動・施策を決定

継続的に新たな改善を実施




② ChatOps導入

35

• チームの可視化• コミュニケーションのシステム化




② ChatOps導入

36



② ChatOps導入

※Chatツールを利用した運用

37

チームメンバー

BOT


② ChatOps導入

• 依頼集約

• 異常通知

• ログの自動収集・アップロード

• 作業依頼文の自動生成38


依頼集約

39

担当者・投稿者

投稿内容

• メール通知のみ• 進捗不明

従来は


異常通知

40

発報ホスト名・内容

グラフ


ログの自動収集・アップロード

41

ホスト名の指定

アップロードされたログファイル名

1. ログイン2. ログ発行コマンド3. 終わるまでまつ4. ダウンロード5. アップロード

従来は


作業依頼文の自動生成

42

ホスト名・交換パーツの指定

作業依頼文1. 機種確認2. 対象ラック確認3. ログイン4. シリアル取得5. 作文

従来は




② ChatOps導入

43


• シームレスに議論・対応• 業務効率向上


チームの変化

44


自チームが抱えている課題

①機器の構成・状態不統一②タスクの増加③知見が浸透しない

•多サービス展開•人・機器の変化

要求・要望

課題

45


課題：① 機器の構成・状態が同一でない

• 構築途中の機器の状態が明確に

• 構成の差異を丸めた運用環境

46

改善

アジャイル

ChatOps


課題： ② タスクの増加

• 優先タスクの明確化

47

改善

アジャイル・ChatOps


課題： ③ 知見が浸透しない

• リスクの早期発見

• メンバー間の業務理解度向上

48

改善




自チームが抱えている課題とその改善

① 機器の構成・状態不統一② タスクの増加③ 知見が浸透しない

課題

①：構築途中の機器の状態が明確に①：構成の差異を丸めた運用の実践

②：優先タスクの明確化

③：リスクの早期発見③：メンバー間の業務理解度向上

改善

49


まとめ

50

Copyrig ht © 2017 Yahoo Japan Corporation. All Rig hts Reserved .51

画像：アフロ

• インフラにより多くが求められる時代へ

• 変化に向き会えるチームづくりが重要に

• ソフトウェアの知見がヒントになる

yahoo! japan meetup #8 （インフラ技術カンファレンス）セッション①

Technology