ibm data science experience and watson machine learning 20170429

Data Science Experience andWatson Machine Learning

2017年 4月 29日IBM コンサルティング・アーキテクト

平山 毅

© 2017 IBM Corporation

自己紹介 名前︓平⼭ 毅（ひらやま つよし）2016年2月 IBM入社クラウド事業本部コンサルティングアーキテクト

前職︓Amazon Web ServicesTokyo Stock ExchangeNomura Research Institute

東京理科⼤学卒で計算機科学、統計学、電子商取引の研究早稲⽥⼤学⼤学院で⾦融⼯学、ブロックチェーンの研究

Twitter : t3hirayamaFacebook : tsuyoshi.HirayamaSlideshare︓tsuyoshi.hirayama【直近記事】WIRED︓Innovation InsightsZDnet : Bluemixの歩き方

【執筆著書】

© 2017 IBM Corporation

© 2017 IBM Corporation

Watson Summit 2017 無事終了⼤盛況でした。ありがとうございました︕

© 2017 IBM Corporation

コグニティブアプリケーションを支援するBluemix

クラウドネイティブアプリケーション

API提供 API提供コグニティブアプリ チェーンコード

© 2017 IBM Corporation

IBM Watson の最新方向性

AIBuilding blocks for developers

Visual RecognitionA

PI

ConversationAP

I

DiscoveryAP

I

SpeechAP

ICompare/ComplyA

PI

IoTAP

I

DLaaSAP

I

NLUAP

I

Tone AnalyzerA

PI

NLCAP

I

Personality InsightA

PI

Knowledge QueryA

PI

CloudA highly scalable, security enabled foundation

Developer Services – IAM, Billing, Logging, Monitori ng, + more

Firewall/ Reverse Proxy

Object Storage DNSDedicated Machines

VirtualMachines

Networking File Storage

Watson Oncology

Watson Cyber Security

WeatherGBS/GTS Ind.

SolutionsWatson

Virtual Agent

Watson Explore & Discover

IBM Risk & Compliance

Asset Mgmt.(Maximo)

+ m

ore

Cleanse Enrich Store CrawlDataTools to prepare data for cognitive

ApplicationsFinished products for clients

AI +αとして、 AIを使ったApplications, AIの学習データの元になるDataLake に⼒を入れ始めています。

© 2017 IBM Corporation

最新のBluemix上で使えるWatson一覧

Alchemy APIの統合が完了

© 2017 IBM Corporation

豊富なWatsonのエンタープライズ事例三菱東京UFJ銀⾏投資信託アドバイス

JAL赤ちゃん同伴のハワイ旅

⾏の不安を解消

ネスレ・ジャパンお客様サポート

Watson 医療系の代表事例︓東京⼤学様

Facebook、Amazon、Google、IBM、MicrosoftがAIで歴史的な提携を発表

https://www.partnershiponai.org/

10

2016年9月、人⼯知能の普及とベストプラクティスを共有する非営利団体「Partnership on AI」を設⽴。AIの倫理や公平性、プライバシー、透明性などを共同で研究し、その成果を公表することを目的とする。

Microsoft IBM Facebook Google

© 2017 IBM Corporation

クラウド技術内部にWatsonの活用開始CyberSecurity Object Storage Class

Orchestration,

Infrastrucuture as Code

© 2017 IBM Corporation

コグニティブへのロードマップ

診断「なぜそれが起きたか︖」を調べるためのアナリティクスとレポート

予測「何が起こりうるか︖」・・・結果を予測し時には防ぐためのアナリティクス

コグニティブ「自分がすべき⾏動とその理由は何か」・・・学習するためのアナリティクス

コグニティブ相互作用互いに相互作用する機械、装置、人間・・・「⾏動は自動化される」

アナリティクス(SparkとかSPSSとか重要) ⇒ コグニティブ

© 2017 IBM Corporation

Watson の基本的なロジック ＝ 機械学習

1.必要なサービスを作成2.Inputデータを準備3.質問データをWatsonに4.回答データをDatabaseに5.アプリを配置

Watson API Database

実行環境

.csv .json

データ

使ってみたいなどこで使えるの︖ ｝ where_can_use ｝ Bluemixだよ

質問 分類 回答

機械学習アルゴリズム

© 2017 IBM Corporation

コグニティブシステムへのアプローチ

お手伝い報告洗濯・掃除・料理 etc

100円 300円

DO

本日、PM３︓００に太郎ちゃんからお掃除完了の報告がありました。

承認します。

LINEで振込を承認

IBM FinTech共通APIで⼝座振替を実⾏

Speech To Text

Watson NLC（学習済み）

Cloudant NoSQL DB

Line Bot API

Node-RED

Node-RED IBM FinTechAPI

アイデア システム構成

Garage Method

BlueHub

© 2017 IBM Corporation

Garage Method ⇒ OpenToolchain

コグニティブアプリケーション OpenToolchain

© 2017 IBM Corporation

IBM Watson Data Platform

データソース

データソース

Store

（蓄積）Store

（蓄積）

プラットフォームプラットフォーム

Analytics

ツールAnalytics

ツール

Watson Data Platform

IBM クラウドSoRApp/Service 動画 画像 IoT

DB2 dashDB dashDB Local Cloudant BigInsights Bluemix

Bluemix Data Connect Watson Analytics Data Science ExperienceCognos Analytics on CLoud

SPSS Bluemix

データ・エンジニア ビジネス・アナリスト データ・サイエンティスト アプリ開発者

マルチデータソース

マルチ分析ツール

© 2017 IBM Corporation

IBM Watson Data Platform の構成要素

� Salesforce� Google

Analytics

� Census� ACS� Open Data

DataConnect

Lift

� DB2� Oracleなど

� Swift Obj� AWS S3� HDFS

� Twitter� Financial� Shipping

� Kafka� IBM Streams� Spark

common data, pipelines and projects

Data Lake (Data Store)Object Store ComposeCloudantdashDB BigInsights

Data Lake (Data Store)

Data Flow(Canvas)

デプロイスケジューラー

Streams

API

分析

Predictive | Entity | Text | ...

機械学習

監査セキュリティ/アクセス制御

マスタデータ来歴

ガバナンスオープン

メタデータカタログ 検索ポリシー制御

収集加⼯

ビジネスアナリスト アプリ開発者 データエンジニア

探す - Find 共有 - Share 共創 - Collaborate

Conn

ecto

rs

API

アプリ

クラウド

オンプレ

パブリック

外部データ

ストリーム

情報提供

Data ScienceExperience

WatsonMachine Learning

Watson Data Platform

データ・サイエンティスト

開発者分析者

© 2017 IBM Corporation

Data Science Experice・Notebookを中心インターフェイスにしたマネージドサービスでオブジェクトストレージからデータ読み込みが可能。

Bluemixで作成したNotebooksやData Assetsが利用可能

© 2017 IBM Corporation

Bluemixとのマッピング

Infrastucture

既存のBluemixの組織とスペースをマッピングするだけ

© 2017 IBM Corporation

Data Science Experience による融合効果

Jupyterノートブック Watson ML

Rstudio/Shiny SPSS / CPLEX

Watson Data Platform

© 2017 IBM Corporation

差別になるデータセットの比較もできる

© 2017 IBM Corporation

AIのチューニングのポイント

モデル + 学習データ（が大きな要素）

⇒ 精度があがれば予想ができる

© 2017 IBM Corporation

Watson Machine Learning = 予想分析

= SPSS or Spark + Watson Machine Learning をAPI化

従来はPredictive Analysisと呼んでいたサービス

© 2017 IBM Corporation

Watson Machine Learning・SPSSモデル、Sparkモデルも取り込めるIBM版機械学習サービス・Bluemixからも使えるが、Data Science Experienceからの利用も可能予定。

↓Watsonではなく、、Analyticsの分類にあります

分析モデルをここに入れます。

© 2017 IBM Corporation

顧客予想分析の例

© 2017 IBM Corporation

⾦融予想分析の例

© 2017 IBM Corporation

薬剤分析の例

モデルをこの中に突っ込むだけで使える

© 2017 IBM Corporation

for Spark

© 2017 IBM Corporation

Data Science Experience とWatson Machine Learningは、AIをアプリケーション＆API視点で使えるサービス群です。

まとめ

© 2017 IBM Corporation

IBMはハードウェアまでAI対応

Computing Network Storage/Security

Enterprise strong

Data first

Cognitive at the core

PowerAI

あわせて、IBMはハードウェアそのものをAIに最適化し、クラウドコンピューティングで提供することにも取り込んでいます。

© 2017 IBM Corporation

Thank youご清聴ありがとうございました。

© 2016 IBM Corporation

この資料に含まれる情報は可能な限り正確を期しておりますが、日本アイ・ビー・エム株式会社の正式なレビューを受けておらず、当資料に記載された内容に関して日本アイ・ビー・エムは何ら保証するものではありません。ワークショップ、セッション、および資料は、IBMまたはセッション発表者によって準備され、それぞれ独自の見解を反映したものです。それらは情報提供の目的のみで提供されており、いかなる参加者に対しても法律的またはその他の指導や助言を意図したものではなく、またそのような結果を生むものでもありません。本講演資料に含まれている情報については、完全性と正確性を期するよう努力しましたが、「現状のまま」提供され、明示または暗示にかかわらずいかなる保証も伴わないものとします。本講演資料またはその他の資料の使用によって、あるいはその他の関連によって、いかなる損害が生じた場合も、IBMは責任を負わないものとします。本講演資料に含まれている内容は、IBMまたはそのサプライヤーやライセンス交付者からいかなる保証または表明を引きだすことを意図したものでも、IBM ソフトウェアの使用を規定する適用ライセンス契約の条項を変更することを意図したものでもなく、またそのような結果を生むものでもありません。本講演資料でIBM製品、プログラム、またはサービスに言及していても、IBMが営業活動を行っているすべての国でそれらが使用可能であることを暗示するものではありません。本講演資料で言及している製品リリース日付や製品機能は、市場機会またはその他の要因に基づいてIBM独自の決定権をもっていつでも変更できるものとし、いかなる方法においても将来の製品または機能が使用可能になると確約することを意図したものではありません。本講演資料に含まれている内容は、参加者が開始する活動によって特定の販売、売上高の向上、またはその他の結果が生じると述べる、または暗示することを意図したものでも、またそのような結果を生むものでもありません。パフォーマンスは、管理された環境において標準的なIBMベンチマークを使用した測定と予測に基づいています。ユーザーが経験する実際のスループットやパフォーマンスは、ユーザーのジョブ・ストリームにおけるマルチプログラミングの量、入出力構成、ストレージ構成、および処理されるワークロードなどの考慮事項を含

む、数多くの要因に応じて変化します。したがって、個々のユーザーがここで述べられているものと同様の結果を得られると確約するものではありません。記述されているすべてのお客様事例は、それらのお客様がどのようにIBM製品を使用したか、またそれらのお客様が達成した結果の実例として示されたものです。実際の環境コストおよびパフォーマンス特性は、お客様ごとに異なる場合があります。IBM, IBM ロゴ、ibm.com, は、世界の多くの国で登録されたInternational Business Machines Corporationの商標です。他の製品名およびサービス名等は、それぞれIBMまたは各社の商標である場合があります。現時点での IBM の商標リストについては、www.ibm.com/legal/copytrade.shtmlをご覧ください。