big data ウェビナー シリーズ ciscoのhadoopリ …...spark バッチ spark streamin g...
TRANSCRIPT
シスコシステムズ合同会社
Big Data ウェビナー シリーズ CiscoのHadoopリセールについて
• Big Data/Hadoop パートナー
• リセールするHadoopディストリビューションについて
• Hadoopパートナー概要
• Hadoopサブスクリプションについて
• Hadoopに関するCiscoの商品
Agenda
Big Data / Analytics パートナー
Cloudera
Apache
HBase
MongoD
B
DataStax
Oracle
NoSQL
Database
Splunk
IBM
Pivotal
Hortonwotks
MapR
Elasticsearc
h
Platfora SAS
SAP
Actian
Pivotal
リセールする Hadoop ディストリビューションは?
ARCHITECTURAL INNOVATIONS
PERFORMANCE
FAST TO MARKET
MANAGEMENT & TOOLS 100% OPEN SOURCE
Hadoop Hadoop Hadoop
Hortonworks Cloudera MapR
The Forrester Wave™: Big Data Hadoop Solutions Q1 2014
Forrester
Cloudera vs Hortonworks vs MapR
http://www.networkworld.com/article/2369327/software/
comparing-the-top-hadoop-distributions.html
http://www.experfy.com/bloっzg/cloudera-vs-hortonworks-comparing-
hadoop-distributions/
Hadoopパートナー概要
Hadoop パートナー
2011年設立、Apache Hadoopの100%オープンソース ディストリビューション
Yahoo! エンジニアのスピンアウト。エンジニアリング チームにはHadoop全体のコントリビュータやコミッターが含まれています。
製品: HDP (Hortonworks Data Platform) 100%オープンソース ディストリビューション
HDPのコア コンポーネントはHDFSおよびYARN。YARNは多種多様なデータ アクセス方式を可能にするためのリソース管理と、PLUGGABLEアーキテクチャを提供。
特徴: Hortonworksがフォーカスしている事は非常にクリアで、Enterprise Apache Hadoop
の100%オープンソース ディストリビューションの成長と配布、サポートです。
また、Hadoopディストリビューションの中で、唯一、Windows上でもHDPを配置可能 2013/7 HPがHortonworksと戦略提携
2014/6/24 HPが$50M投資
Hortonworks
HDP: Hortonworks Data Platform
Hortonworks
2008年設立、商業用 Apache Hadoop のリーディングプロバイダであり、Hadoop オープンソース コミュニティへは一番貢献している。
製品: Cloudera Enterpriseは、Apache HadoopベースのBig Data プラットフォームであり、以下の3つのコンポーネントで構成される。
1.CDH (Coudera’s Distribution including Apache Hadoop)
100% オープンソースの商用 Hadoop ディストリビューション
2. Cloudera Manager :CDH の集中管理、運用を行う
3. Cloudera サポート :CDH およびCloudera Manager
Hadoop パートナー
特徴
Impala リアルタイム クエリ (100% オープンソース)
HDFS ハイアベイラビリティ (100% オープンソース)
Cloudera Manager: 使いやすく洗練された運用管理ツール
Cloudera Navigator: Hadoopのためのデータマネジメントツール
Cloudera サポート: グローバルに展開する専任チーム
2014/3にIntelが$740M投資。
Cloudera
CDH: Cloudera’s Distribution including Apache Hadoop
Hadoop パートナー
2009年設立、ミッションクリティカルでリアルタイム性が重要なところで使用される、エンタープライズ グレードのHadoopディストリビューション。MapRは使いやすさおよび、世界レコードのスピードを、Hadoop、NoSQL データベースやストリーミング アプリケーションにもたらします。 製品: MapRは、以下の3つのエディションで構成されます。
M3 COMMUNITY EDITION:ノード数の制限がなく無料で使用可能
M5 ENTERPRISE EDITION:ミラーリング、スナップショット、NFS HA等の機能を含む
M7 (MapR-DB):M5+ Hbase互換のNoSQL DB、Hbaseの高速化および運用の簡素化
特徴: MapRは、Hadoopスタック内の色々なプロジェクトの後方互換を独自に提供。これはユーザーが自身のペースで、パッケージの新しいバージョンにアップグレードする事を可能にします。
MapRはHDFSをC/C++でエンハンスすることによりファイル システムを進化させ、他のHadoopディストリビューションに比べてより良いパフォーマンスを提供します。
MapRはNFSによるアクセスを可能にし、既存アプリケーションとの親和性を備えています。
MapR
MapRのパッケージ全体図
MapR Data Platform (ランダム Read/Write)
データハブ エンタープライズ
グレード 業務オペレーション
MapR-FS (POSIX)
MapR-DB (ハイパフォーマンス NoSQL)
セキュリティ
YARN
Pig
Cascading
Spark
バッチ
Spark Streamin
g
Storm*
ストリーミング
HBase
Solr
NoSQL 、検索
Juju
プロビジョニ ング コーディ ネーション
Savannah*
Mahout
MLLib
機械学習 、グラフ
GraphX
MapReduce v1 & v2
APACHE HADOOP および OSS エコシステム
実行エンジン データガバナンス・オペレーション
ワークフロー 、データ ガバナンス
Tez*
Accumulo*
Hive
Impala
Spark SQL
Drill*
SQL
Sentry* Oozie ZooKeep
er Sqoop
Knox* Whirr Falcon* Flume
データ 統合・ アクセス
HttpFS
Hue
NFS HDFS
API
HBase
API
JSON
API
Map
R C
on
tro
l S
yste
m
(運用管理・監視
)
* ディストリビューションに統合/認証予定
CL
I G
UI
RE
ST
AP
I
Hadoop サブスクリプションについて
Ciscoは何をリセールする?
• Cloudera Enterprise Basic
• Cloudera Enterprise Flex
• Cloudera Enterprise Data Hub
• HDP Enterprise
• HDP Enterprise Plus
• MapR Enterprise Edition (M5)
• MapR Enterprise Database
Edition
• Hadoop ソフトウェアはサブスクリプションとして販売されます。恒久的なライセンスではありません。 • サブスクリプション型番は、一つの型番でソフトウェア ライセンスとサポートが含まれています。
• サブスクリプションは、基本的にはノード(Server)毎に必要で、期間は1/2/3年があります。
• サブスクリプション ライセンスが失効した場合は、更新する必要があります。
• Ciscoは、新しいライセンスおよび更新ライセンスを販売します。
• 以下については含まれません。 • フリー ソフトウェア: Cloudera Express, MapR M3 Community Edition
MapR Cloudera Hortonworks
Ciscoは何をリセールする? Cisco • Hadoopソフトウェア&
サポート
• 1/2/3年のHadoopサブスクリプション
• パートナー様経由での販売
Partner • Cisco AS、チャネルパートナーは、Hadoopパートナーのプロフェッショナルサービスを販売可能
• 教育、トレーニングはHadoopパートナーやThird-partyより提供されます
Cloudera Hadoop Edition § エディション毎のサポートされる機能
1. Enterprise Basic Edition
Core Hadoop (Hadoop, Flume, HCatalog, Hive, Hue, Mahout,
Oozie, Pig, Sentry, Sqoop, Whirr, ZooKeeper ) + Cloudera
manager
2. Enterprise Flex Edition
Enterprise Basic + One additional component from HBase,
Impala, Search, Spark, Cloudera Navigator
3. Enterprise Data Hub Edition
Enterprise Basic + All components
§ サポートレベル
§ 8x5 Support (Local Time)
§ 24x7
§ 24x7 Premium (15分以内のレスポンス)
§ ライセンス パッケージ
1ノード
§ 期間
§ 1/2/3年
サポート詳細: http://www.cloudera.com/content/cloudera/en/products-and-services/product-comparison.html
Hortonworks Hadoop Edition
§エディション毎のサポートされる機能
1. HDP Enterprise
Hadoop, Ambari, Flume, Hive, Hue,
Mahout, Oozie, Pig, Slider, Sqoop, Tez,
Flacon, HBase, Knox
2. HDP Enterprise Plus
HDP Enterprise + Support for additional
components (Accumulo, Argus, Kafka, Storm)
§ ライセンス パッケージ
4ノード毎 (server)
§ 期間
1/2/3年
サポート詳細: http://jp.hortonworks.com/support/
MapR Hadoop Edition § エディション毎のサポートされる機能
§ MapR M5 or Enterprise Edition
Core Hadoop, Flume, Hive, Hue, Mahout, Oozie,
Pig, Sqoop, YARN , Zookeeper
HA, Snapshots and Mirroring
§ MapR M7or Enterprise Database Edition
M5 + Support for MapR M7 tables
§ Custom SKU
Support for Additional Components: Apache
HBase,
Apache Impala, Apache Spark, Lucidworks Search
§ ライセンス パッケージ
1ノード
§ 期間
1/2/3年
サポート詳細: https://www.mapr.com/products/hadoop-download
Hadoopに関するCiscoの商品
Big Dataに関するCiscoの商品
• ライセンスのリセール - Cloudera, MapR, Howtonworks
• Linuxディストリビューション (RedHat/SUSE)
• UCS-C CPAv3 (Common Platform Archtechture)
• UCS Director Express for BigData (Cloudera, MapR, Howtonworksに対応)
• Nexus, ACI連携
• Advanced Service (設計、導入サポート)
Why Cisco? サポート無しで利用中
サポート販売
ライセンス販売(サポート込み)
Apache Hadoop
Apache Hadoopを含む
100%オープンソースディストリビューション
• 教育
• トレーニング
• OS/Hadoop License
• UCS/UCSDE
• Nexus
• AS
ワンストップ サービスを提供可能
Cloudera
Hortonworks
MapR
Cloudera Hortonworks
Cisco
Hadoop
Cisco Big Data Resources