jaws-ug nagoya 7th 2013.12.07

41
JAWS-UG名古屋勉強会第7回 2013.12.7 山口 陽平 ~年の瀬、2014年に向けてAWSの未来を語る ビッグデータの今後

Upload: youhei-yamaguchi

Post on 31-May-2015

1.241 views

Category:

Technology


3 download

DESCRIPTION

JAWS-UG名古屋勉強会第7回の発表資料です。今回はビッグデータの今後についてということで弊社の取り組みとからめて話します。懇親会LTなので気軽に質問してください。

TRANSCRIPT

Page 1: JAWS-UG Nagoya 7th 2013.12.07

JAWS-UG名古屋勉強会第7回 2013.12.7 山口 陽平 ~年の瀬、2014年に向けてAWSの未来を語る

ビッグデータの今後

Page 2: JAWS-UG Nagoya 7th 2013.12.07

自己紹介&会社紹介 要するに技術力で開拓するタイプ

Page 3: JAWS-UG Nagoya 7th 2013.12.07

• 必要なら何でも徹底的にやる研究者

– プログラミング言語・データベース分散

– アルゴリズム・機械学習・CV・自然言語

– 名古屋工業大学出身・未踏ソフトウェア経験

– 世界を美しく記述することを夢見る35歳

• 人を驚かせるのが好き

– ハードリアルタイムJavaVM

– 1000台越え構成のペタバイト分散DB

– 秒間1000万クエリ処理できるKVS

– 超多クラス対応の超高速物体認識エンジン

山 口 陽 平 @melleo1978

※あくまでもイメージです。 実物に髪の毛はありません。

Page 4: JAWS-UG Nagoya 7th 2013.12.07

• 概要:10周年! – 名古屋工業大学発ベンチャー(2003年)

• 目的:ロボの頭脳を作る – 知的インターフェイスによる社会の変革

– ソフトウェアの品質・生産性の向上

• スタッフ:30人 – 役員3人,正社員11人,見習い10人

– データ作成5人,家政婦1人

– IPA未踏ソフトウェア経験者多数

• 社風:難しことを楽しく – 職人,挑戦,自由,昼食・夕食・飲み会は無料

来栖川電算 http://kurusugawa.jp/

弊社が目指すロボ ※写真はあくまでもイメージです。

Page 5: JAWS-UG Nagoya 7th 2013.12.07

事業戦略 知的インターフェイスでよりユーザの近くへ

• 新領域に挑戦

–コンサルティング,開発,大規模インフラ構築

–技術研究・評価

–データ作成

–ライセンス提供

– コンシューマサービスnew!

Page 6: JAWS-UG Nagoya 7th 2013.12.07

来栖川電算ではどうなの? ビッグデータやってんの?

Page 7: JAWS-UG Nagoya 7th 2013.12.07

扱っているデータ 小さなものから大きなものまで種類も様々

• こんな話がよく来る

–小さくても扱い方が分からないデータ

–大きくて捌ききれないデータ

–データがある何かしたい、ないけどしなきゃ

分野 種類 流量 蓄積量

毎朝体操 センサー 1 GB/d 100 GB

製造 画像 1 GB/d 100 GB

学校 画像 - 1 TB

モバイル・通信 アクセスログ・購買履歴 1 GB/h 10 TB

製造 動画・センサー 100 GB/h 2 PB

Page 8: JAWS-UG Nagoya 7th 2013.12.07

例えばこういうこと 収集分析の基盤構築、分析活用システム化の支援

• リリースされた製品がどう使われているか知りたい、製品開発に役立てたい –どうやって収集するの?

–多すぎて見られない、処理できない

–そもそも分析の仕方が分からない

職人 市場環境

社内環境

Page 9: JAWS-UG Nagoya 7th 2013.12.07

機械学習による選別 職人にしかできない業務に専念してもらう

• データから技を抜き出し再利用・自動化

–職人が何から判断しているか

–明文化・言語化が難しくてもOK

–完璧ではないが、分野によっては職人を凌駕

職人 社内環

市場環境

選別結果

吸収

吸収

選別

機械学習

Page 10: JAWS-UG Nagoya 7th 2013.12.07

2014年は更に増える 乗るしかない!このビッグウェーブに!

• ウェアラブル・ユビキタスきてる!

– BLE,iBeacon,Smart Watch,Smart Glass,Smart Home,Smart Car

• BaaSが収集蓄積基盤としてすぐ使える

– AWS:S3・SimpleDB・Dynamo・ID連携

• 分析なら:RDS・EMR・RedShift

–他にも便利なのが

• Parse.com,Tresure Data

Page 11: JAWS-UG Nagoya 7th 2013.12.07

こういう仕事に AWSは “すっごく” 使えるよ!っていう事例集

毎月、猛烈に増えているよ!

詳細は過去のスライドを見てね!

Page 12: JAWS-UG Nagoya 7th 2013.12.07

みなさん疲れますよね そろそろ休憩ですかね

Page 13: JAWS-UG Nagoya 7th 2013.12.07

JAWS-UG名古屋勉強会第7回 2013.12.7 山口 陽平 ~年の瀬、2014年に向けてAWSの未来を語る

Page 14: JAWS-UG Nagoya 7th 2013.12.07

ラジオ体操アプリ いつでも、どこでも、すぐできる!

• Androidの人は ⇒ http://maiasa.jp/

Page 15: JAWS-UG Nagoya 7th 2013.12.07

デモを見よう スマホを持って体操すると腕のモーションを認識

• ラジオ体操を採点! – モーションを音声で通知 – みんなのデータから学習 – ラジオ体操第2

• 素敵なレポート – 努力(回数・カロリー)を数値化 – モーションをアニメ化 – SNSで共有

• 分かりやすい統計やランキング – いつ・どこで・どのくらいやってるかを可視化

Page 16: JAWS-UG Nagoya 7th 2013.12.07

GooglePlayでは 健康&フィットネス51位 10000~50000DL

Page 17: JAWS-UG Nagoya 7th 2013.12.07

Facebookでは 10000いいね!突破!

• 中高年に人気

–スマホなのに変な層にリーチ!

–工場・老人ホームいけるかな?

Page 18: JAWS-UG Nagoya 7th 2013.12.07

Mashup Awordsで 「優秀賞」と「企業賞」を受賞!

• TechCrunchにも載った ⇒

Page 19: JAWS-UG Nagoya 7th 2013.12.07

なぜラジオ体操? 誰もが知ってて、何かと話題で、社員教育になる!

Page 20: JAWS-UG Nagoya 7th 2013.12.07

思い出を切り取り リッチにする

思い出せる、やる気がでる、カワイイ、気になる可視化

Page 21: JAWS-UG Nagoya 7th 2013.12.07

レポート 体験から行動を誘発する可視化

• 説得力があるスコアやグラフ

– 一喜一憂は記憶に深く残る

– 課題が見えればすぐに考えだす

• アニメ化されたモーション

– オドロキとカワイイは共有したい

• 数値化された努力

– やればやるほどに自慢したい

• 添えられた文脈

– 他のことまで思い出し、語りだす

Page 22: JAWS-UG Nagoya 7th 2013.12.07

統計 毎週更新、観点もどんどん増える

• どこにもなかった集合知 –大規模で頻繁に更新される詳細な実績に基づく統計はモバイルならでは

–外部情報で補われリッチに

• ヤル気がでる事実 –自分とみんなとの違いや順位

–継続は力なりの実証

• 生活習慣や地域性の発見 –検索・仲間探し・旅行のきっかけ

Page 23: JAWS-UG Nagoya 7th 2013.12.07

統計の例 放送時刻に縛られてない!

• 放送時刻の周辺や夜にやる人も多い

Page 24: JAWS-UG Nagoya 7th 2013.12.07

統計の例 毎週、日本各地で、主に都市部で!

Page 25: JAWS-UG Nagoya 7th 2013.12.07

統計の例 日本各地、世界各地、離島でも!

• 15ヶ国

–日本のストアのみなのになぜ?

–駐在さん?旅行者?

–毎朝体操なら習慣を継続できる!!!

Page 26: JAWS-UG Nagoya 7th 2013.12.07

統計の例 遊園地へ行ってまでラジオ体操!

Page 27: JAWS-UG Nagoya 7th 2013.12.07

統計の例 あなたは何点?継続すると点数がよくなるぞ!

Page 28: JAWS-UG Nagoya 7th 2013.12.07

運営が監視している統計 アプリ・サービスの最適化に役立つ可視化

Page 29: JAWS-UG Nagoya 7th 2013.12.07

変な使い方の発見 秒数・スコアごとの実施回数

• 途中で中断 –バグ,操作ミス,アプリ紹介,外的要因

• 低スコア –バグ,認識精度不足,楽曲不備,楽曲再生目的,体操未習得,外的要因

Page 30: JAWS-UG Nagoya 7th 2013.12.07

正しいユーザの数 秒数ごとの実施回数の推移

• 正しく利用しているユーザが着実に増加

Page 31: JAWS-UG Nagoya 7th 2013.12.07

高得点ユーザの数 スコアごとの実施回数の推移

• よい結果を得ているユーザが着実に増加

Page 32: JAWS-UG Nagoya 7th 2013.12.07

おかしな機種の発見 機種・スコアごとの実施回数

• ある端末メーカーの今年の夏モデル数機種で加速度センサ値が異常

–弊社の報告により発覚し、メーカは対応中

Page 33: JAWS-UG Nagoya 7th 2013.12.07

認識精度の把握 みんなのデータを活用し、アルゴリズムを改良

• 大規模データからの学習、網羅的な検証

–データのクリーニングが重要!

モーション学習 アルゴリズム

モーション認識 アルゴリズム

辞書

Page 34: JAWS-UG Nagoya 7th 2013.12.07

ラジオ体操の総熱量 みんなの頑張りの凄さを社内で共有

• 3.0 ~ 4.0 GJ 11月28日時点

–実はラジオ体操は運動強度が高い!

熱量 状況

1.5 GJ 雷の平均のエネルギー

1.77 GJ 質量1kgの物体が木星の引力圏から脱出するために必要な運動エネルギー

1.956 GJ プランクエネルギー

2.00 GJ マグニチュード3の地震のエネルギー

3.0 ~ 4.0 GJ 毎朝体操の総熱量 11月28日時点

4.184 GJ TNT火薬1トンの爆発のエネルギー

8.532 GJ 世界の人口1人あたりの年間消費電力量(2002年)

運動強度 状況

2.0 METS 電車の中で立っている

3.0 METS 庭仕事・野球の野手

3.5 METS 平地での自転車

4.0 METS ハイキング・速足

4.5 METS ラジオ体操

6.0 METS 階段昇降・卓球

9.0 METS 水泳・高強度の長距離走・筋力トレーニング

Page 35: JAWS-UG Nagoya 7th 2013.12.07

毎朝体操のAWS費用 = 10$/月 AWSさんごめんなさい

Page 36: JAWS-UG Nagoya 7th 2013.12.07

Q. なぜ安いのか? A. スマホでDirect Hosting Patternだから

• スマホでコンテンツを生成 ⇒ S3へ配置

– スケールアウト:S3

• スパイクだってへっちゃら

– セキュリティ:IAM ID連携

• ユーザスペース楽勝

– 監視:EC2ないしS3見るだけ

レベル S3 Bucket/Path 本人 他人

非共有 priavte.maiasa.jp/u/g /${ID}/${時刻}/${データ名}

GET PUT DELETE

LIST

共有 maiasa.jp/u/g /${ID}/${時刻}/${データ名}

GET PUT DELETE

LIST GET

Page 37: JAWS-UG Nagoya 7th 2013.12.07

来栖川電算は… どこへ行ってしまうのか?

Page 38: JAWS-UG Nagoya 7th 2013.12.07

健康スポーツが熱い 認識技術×ウェアラブルデバイスで波に乗る!

• これからの時代に

–高齢化,成人病,オリンピック,…

• ホットな技術で挑む

–モバイル,ウェアラブル,センサー,BLE ,LOD,ビッグデータ,データマイニング,パターン認識,機械学習,…

Page 39: JAWS-UG Nagoya 7th 2013.12.07

要するに 電脳コイルみたいな世界を作るぞ!

• 認識技術で

–勝手にいろいろやってくれる

• 未来ガジェットで

–何かカッコいい

Page 40: JAWS-UG Nagoya 7th 2013.12.07

スタッフ募集中 プロデューサ、UI・UXエンジニア、すぐ来て!

• 気軽にオフィスへ遊びに来てね!

– 見学できて、ご飯も食べれて、泊まれる。

名古屋本社(2013年フロア増設)

イオン千種・名大病院・名工大の近く

上野支社(2012年開設)

入谷駅・鶯谷駅・上野駅の近く

Page 41: JAWS-UG Nagoya 7th 2013.12.07

やりますよね! ご清聴ありがとうございました