日本 IBM のソフトウェア発表
JP18-0216 (2018 年 3 月 20 日付)
Hortonworks Data Platform for Enterprise Data Lakes で、意思決
定と技術革新を促す堅固なビッグデータ・アナリティクスを実現でき
ます
目次
1 概要 5 技術情報 2 主要前提条件 6 発注情報 2 出荷開始予定日 7 契約条件 2 機能詳細 9 料金 4 プログラム番号 9 AP ディストリビューション 5 製品資料 10 修正概要
Hortonworks Data Platform は、YARN がサポートする集中型アーキテクチャーに基づく、企 業向けのオープン・ソース Apache Hadoop ディストリビューションです。Hortonworks Data Platform は、保存済みデータのニーズに対処し、リアルタイムのお客様アプリケーションを強 化し、意思決定と技術革新を促すビッグデータ・アナリティクスを実現するように設計されて います。
Hortonworks Data Platform V2.6.4 の正式な Apache バージョンには、以下が含まれます。 • Apache Accumulo 1.7.0 • Apache Atlas 0.8.0 • Apache Calcite 1.2.0 • Apache DataFu 1.3.0 • Apache Falcon 0.10.0 • Apache Flume 1.5.2 • Apache Hadoop 2.7.3 • Apache HBase 1.1.2 • Apache Hive 1.2.1 • Apache Hive 2.1.0 • Apache Kafka 0.10.1 • Apache Knox 0.12.0 • Apache Mahout 0.9.0 • Apache Oozie 4.2.0 • Apache Phoenix 4.7.0 • Apache Pig 0.16.0 • Apache Ranger 0.7.0 • Apache Slider 0.92.0 • Apache Spark 1.6.3 • Apache Spark 2.2.0 • Apache Sqoop 1.4.6 • Apache Storm 1.1.0 • Apache TEZ 0.7.0 • Apache Zeppelin 0.7.3
• Apache ZooKeeper 3.4.6 IBM(R) のお客様は、パスポート・アドバンテージからこの新規の製品をダウンロードできます。
主要前提条件
詳しくは、『 前提ハードウェア 』セクションおよび『 前提ソフトウェア 』セクションを参 照してください。出荷開始予定日
2018 年 3 月 20 日機能詳細
Apache コンポーネント Atlas 企業ニーズへの即時対応• KnoxSSO 認証をサポートするための Atlas (AMBARI-18818 、 ATLAS-1244)
クラウド
• 共有サービス HDC: Atlas (AMBARI-19007)
• Atlas admin コンポーネントとは無関係に Atlas hook コンポーネントをインストールし、 構成
コア機能
• エンティティーを手動で作成 (ATLAS-1193) • 上位 API - ユース・ケースを簡素化し、合理化 • ATLAS と Hive 2 との統合 (ATLAS-1280) 統合
Atlas 用の SmartSense データ・キャプチャー (ATLAS-1436)
HDFS 企業ニーズへの即時対応 • 低速ディスクと低速データ・ノードを検出 Hive HDP 2.6.0 には 2 つのバージョンの Apache Hive が組み込まれています。1 つは、バッチ 処理用に Hive 1 ブランチをベースにしたものであり、もう 1 つは、対話式処理用に Hive 2 ブランチをベースにしたものです。Hortonworks は、必要と判断したものについてトラン ク・コード・ベースから安定化、バグ修正、および機能を適用するので、これらはいずれ も、Apache においてリリースされた特定のビルドと同じではありません。相違点に関する具体 的な詳細情報は ここ に記載されています。
Apache Ambari による HDP デプロイメントでは、Hive 1 と Hive 2 の両方を並行してデプロ イできます。このセットアップでは、Hive 2 の機能には Hive LLAP インターフェースを使用 してアクセスします。
• ACID Merge (Hive 1 および 2) Hue 使いやすさ • Hue マイグレーション・ツールの GA 基準 Knox セキュリティー機能
• Hadoop ユーザー・グループ・マッピングに対する Knox サポート (KNOX-237) • PAM を介した Linux(R) ユーザー認証のサポート (KNOX-537)
統合 • WebSockets のサポートを Knox に追加 Phoenix 信頼性 • Phoenix インデックスの安定度向上 Ranger セキュリティー機能 • Atlas + Ranger に共通の既存タイプのタグ・ベース・セキュリティー拡張: Kafka、HDFS、Hbase (RANGER-1233)
• HiveServer2 での「show Databases/Tables/Columns/Views」または「describe database/ schema/table」権限に対する Ranger 許可 (RANGER-1195 、 RANGER-1204)
• Ranger ポリシーにおける $username 変数のサポート (RANGER-698) 統合
• SmartSense ルール: Ranger の製品アナリティクス (RANGER-1304) 企業ニーズへの即時対応
• ビーコン用のガバナンスおよびセキュリティー機能をサポート - Ranger • Ranger プラグインごとに使用中のポリシー・バージョン (RANGER-1230)
• Report Manager または Policy Listing ページでの Ranger Audit Logs & Policy Search の監査検索用の UI ヒント (RANGER-1227)
• Ranger 用の db をセットアップするための Ranger Admin 開始スクリプトの変更
(AMBARI-18065)
• Ranger におけるポリシーのエクスポート/インポート (RANGER-1214)
• Ranger usersync の向上 - 追加属性との増分、グループ・フィルター usersync
(RANGER-1211)
Spark 使いやすさ
• [Codev 2016-17] PySpark における virtualenv をサポート (SPARK-13587) 統合
• Umbrella - HDP で Spark 2 GA を提供: Spark、Livy、および Zeppelin コンポーネントに またがる機能
企業ニーズへの即時対応、セキュリティー
• Spark SQL 照会について、ID 伝搬に対する Spark Thrift Server doAs サポート • Kerberos 認証や高可用性のサポートを含めて、Spark および Spark2 ジョブへの REST
ベース・アクセス用の Livy API (バージョン 0.3) コア機能 • SparkR におけるユーザー定義機能のサポート • SparkR における追加大規模機械学習アルゴリズムのサポート Storm 統合
• 接続の機能拡張: Kinesis spout、openTSDB bolt、new Kafka Consumer spout YARN 企業ニーズへの即時対応 • 高優先度サービス (例: LLAP) が共有クラスターで実行できるようにするキュー優先順位 (YARN-5864) • Slider アプリケーションのフォールト・トレランス • YARN アプリケーションのポート範囲のサポート Zeppelin コア機能 • Spark バージョン 2.x を処理する Zeppelin 使いやすさ • JDBC インタープリターの向上 • Zeppelin Livy 統合の向上 • 1 つのノートブック・パラグラフにおける複数の SQL ステートメントのサポート 企業ニーズへの即時対応、セキュリティー
• Knox ベースの LDAP 認証 (Zeppelin-1472) • LDAP 認証の向上 (Zeppelin-1611)
統合
• Umbrella - HDP で Spark 2 GA を提供: Spark、Livy、および Zeppelin コンポーネントに またがる機能
• Phoenix インタープリターのサポート
Hortonworks Data Platform の部分は、以下の制限の下でリリースされます。 この部分は、以下のいずれかのシナリオに適格なお客様のみが注文可能です。 • 既存の IBM BigInsights(R) ライセンスを持っている
• Enterprise Licensing Agreement (ELA) カタログの IBM Db2(R) Big SQL を持っている
• IBM Db2 Big SQL ライセンスを持ち、Hortonworks からの HDP サポート・サブスクリプ ションを現在持っている
Program number VRM Program name
5737-H46 2.6.0 Hortonworks Data Platform
オファリング情報
製品情報は IBM オファリング情報 Web サイトで入手可能です。
詳細情報は、 パスポート・アドバンテージおよびパスポート・アドバンテージ・エクスプレス
Web サイトでも入手できます。
製品資料
技術資料は IBM Knowledge Center から入手できます。
技術情報
所定稼働環境 前提ハードウェア HDP をインストールするための単一の前提ハードウェアがあるわけではありませんが、いく つかの基本ガイドラインがあります。HDP 2.6.0 のインストール全体で約 6.5 GB のディス ク・スペースを使用します。HDP のハードウェア推奨事項について詳しくは、「 HDP Cluster Planning Guide 」を参照してください。ガイドラインは以下のとおりです。 Machine Type Workload Pattern/ Cluster Type Storage Processor (# of Cores) Memory (GB) Network Balanced workload Twelve 2-3 TB disks 8 128-256 1 GB onboard, 2x10 GBE mezzanine/ external Compute-intensive workload Twelve 1-2 TB disks 10 128-256 1 GB onboard, 2x10 GBE mezzanine/ external Slaves Storage-heavy workload Twelve 4+ TB disks 8 128-256 1 GB onboard, 2x10 GBE mezzanine/ external Name Node Balancedworkload Four or more 2-3 TB RAID 10 with spares 8 128-256 1 GB onboard, 2x10 GBE mezzanine/ external Resource Manager Balanced workload Four or more 2-3 TB RAID 10 with spares 8 128-256 1 GB onboard, 2x10 GBE mezzanine/ external
前提ソフトウェア ブラウザー要件
Ambari Install Wizard はブラウザー・ベースの Web アプリケーションとして実行されます。 このツールを使用するには、グラフィカル・ブラウザーを実行できるマシンが必要です。必要 な最小ブラウザー・バージョンは次のとおりです。
Operating System Browser
Chrome 56.0.2924.87, 57.0.2987 Linux Firefox 51, 52 Chrome 56.0.2924.87, 57.0.2987 Firefox 51, 52 Mac OS X Safari 10.0.1, 10.0.3 Chrome 56.0.2924.87, 57.0.2987 Edge 38 Firefox 51.0.1, 52.0 WindowsTM * Internet Explorer 10, 11 * HDP Stack コンポーネント UI の場合、ブラウザーは Windows OS に対してテストもサポー トもされていません。 どのプラットフォームでも、ブラウザーを最新の安定したバージョンにアップデートすること をお勧めします。 計画情報 パッケージング 本製品は、インターネット経由でのダウンロードによって提供されます。物理メディアはあり ません。 このプログラムを Web サイトからダウンロードした場合は、適用される IBM プログラムのご 使用条件、および該当する場合はライセンス情報 (LI) が含まれており、これらは、当プログ ラムのインストール時に同意・不同意を確認するために表示されます。ライセンスおよびライ センス情報 (LI) は、将来の参照のために LICENSE.TXT などのファイル名でディレクトリーに 保管されます。
発注情報
製品: Hortonworks Data Platform (5737-H46) パスポート・アドバンテージ
Description Part number
Hortonworks Data Platform Virtual Server License + SW Subscription & Support 12 Months
D1XCELL
Hortonworks Data Platform Virtual Server SW Subscription & Support Reinstatement 12 Months
D1XCFLL
Hortonworks Data Platform Virtual Server Annual SW Subscription & Support Renewal 12 Months
E0PAELL
課金単位
Program name Part number or PID number Charge metric Hortonworks Data Platform 5737-H46 Virtual Server
仮想サーバーは、プログラムのライセンス交付に適用される測定単位です。サーバーとは、処 理装置、メモリーおよび入出力機能から構成され、1 人または複数のユーザー、あるいは 1 つ または複数のクライアント・デバイスが要求するプロシージャー、コマンドまたはアプリケー ションを実行する物理コンピューターをいいます。ラック、ブレード筐体、または類似の装 置が使用されている場合、必要なコンポーネントを持つ分離可能な物理デバイス (例えばブ レードまたはラック・マウントのデバイス) はそれ自体が個別のサーバーと見なされます。 仮想サーバーは、物理サーバーで使用可能なリソースを分割化して作成される仮想コンピュー ター、または、分割されていない 1 物理サーバーになります。ライセンス所有者は、仮想サー バー内のプロセッサー・コアの数や、仮想サーバー上のプログラムのコピー数に関係なく、プ ログラムが使用可能な仮想サーバーごとに仮想サーバー・ライセンスを取得する必要がありま す。
契約条件
この発表レターに記載されている情報は、参考のため、および便宜上の目的のためにのみ提供 されています。 IBM とのあらゆる取引を規定する契約条件については、 IBM プログラムのご 使用条件、 IBM インターナショナル・パスポート・アドバンテージ契約、および IBM ソフト ウェア・メンテナンス取得契約などの該当する契約書に記載されています。 ライセンス交付 ライセンス情報文書およびライセンス証書 (PoE) を含む IBM プログラムのご使用条件は、お 客様によるプログラムの使用を規定します。すべての許可使用に、PoE が必要です。パスポー ト・アドバンテージ以外から提供されるパーツ番号のみの製品 (該当する場合) は、ライセン スのみが提供され、ソフトウェア・メンテナンスは含まれません。 ソフトウェア・メンテナンス取得契約 このプログラムは、 IBM プログラムのご使用条件 (IPLA) および関連するソフトウェア・メ ンテナンス取得契約の下でライセンス交付を受け、これにより、プログラムのリリースおよび バージョンへの継続的なアクセスがサポートされます。 IBM は、お客様が取得された各プロ グラムの初期ライセンス取得に、1 年間のソフトウェア・サブスクリプション&サポート (ソ フトウェア・メンテナンスともいう) を組み込んでいます。ソフトウェア・サブスクリプショ ン&サポートの初期期間は、更新オプション (利用可能な場合) を購入することによって延長 できます。このプログラムの使用には、プログラム使用のための一括払いのライセンス使用料 と、電話によるサポート (通常の営業時間中の音声による障害サポート) およびサポートの有 効期間中のプログラムの更新、リリース、およびバージョンへのアクセスを含む拡張サポート に対して毎年の更改使用料が課せられます。 ライセンス情報 (LI) の資料番号 L-MLOY-AW5TJY詳細は、 IBM Software License Agreement Web サイトの License Information document
ページを参照してください。
限定保証の適用 あり
限定保証 IBM は、「プログラム」について、お客様が「プログラム」を IBM 所定の稼動環境で使用する 限り、IBM 所定の仕様に合致することを保証します。かかる保証は、「プログラム」の変更の 加えられていない部分についてのみ適用されるものとします。 IBM は、「プログラム」の実行 が中断しないこともしくはその実行に誤りがないこと、または、すべての誤りが修正されるこ とを保証しません。「プログラム」の使用結果については、お客様の責任とします。 IBM は、お客様に対して、既知の「プログラム」の誤り、誤りの修正、制限事項および回避措 置に関する情報を含んだ IBM データベースへのアクセスを追加料金無しで提供します。詳細に ついては、 IBM ソフトウェア・サポート・ハンドブック を参照してください。 IBM は、「プログラム」の当初の使用権の取得者が「プログラム」を取得してから最低 1 年間 (以下「保証期間」といいます。)、この情報を提供します。 返金保証 なんらかの理由で本プログラムに満足いただけなかった場合は、オリジナル・ライセンス所有 者である場合に限り、送り状の日付から 30 日以内に本プログラムとその PoE を販売元にお返 しいただければ、お支払い額を返金いたします。本プログラムをダウンロードした場合の返金 のお受け取り方法につきましては、本プログラムをお買い求めの販売元にお問い合わせくださ い。 明確にするために、以下のことにご留意ください。(1) IBM インターナショナル・パスポー ト・アドバンテージ契約のもとで取得されたプログラムの場合、この条件は当該プログラムの 取得にのみ適用されます。(2) IBM のいずれかの On/Off Capacity on Demand (On/Off CoD) ソフトウェア契約のもとで取得されたプログラムの場合、この条件は適用されません。これ は、これらの契約が、お客様が既に取得されて使用中のプログラムのみに適用されるためで す。 ボリューム発注 (IVO) なし パスポート・アドバンテージの適用 あり。情報は、 パスポート・アドバンテージおよびパスポート・アドバンテージ・エクスプレ ス の Web サイトでも参照できます。 ソフトウェア・サブスクリプション&サポートの適用 あり。 ソフトウェア・サブスクリプション&サポート (「ソフトウェア・メンテナンス」とも いう) は、パスポート・アドバンテージおよびパスポート・アドバンテージ・エクスプレスを 介してご注文いただくライセンスに含まれています。製品アップグレードおよび技術サポート は、契約に記載されたソフトウェア・サブスクリプション&サポートのオファリングによって 提供されます。製品アップグレードでは、対象ソフトウェアの最新バージョンおよびリリース が提供され、技術サポートでは、世界中の IBM サポート組織への音声および電子アクセスが提 供されます。 取得された各プログラム・ライセンスには、1 年間のソフトウェア・サブスクリプション&サ ポートが含まれています。ソフトウェア・サブスクリプション&サポートの初期期間は、更新 オプション (利用可能な場合) を購入することによって延長できます。 ソフトウェア・サブスクリプション&サポートの有効期間中は、お客様の通常の短期インス トール作業や使用 (使用方法) についての疑問、およびコード関連の質問などについて、 IBM が支援いたします。 IBM は、お近くの IBM サポート・センターの通常の営業時間 (公表され ている基本シフト時間) 内に、お客様の情報システム (IS) 技術サポート担当者に対しての み、電話および (利用できる場合は) 電子アクセスを通じて支援を提供いたします。 (この支 援は、お客様のユーザーにはご利用いただけません。) IBM では、重大度 1 の支援は、通年 1 日 24 時間 週 7 日体制で提供します。詳しくは、 IBM ソフトウェア・サポート・ハンド ブック を参照してください。ソフトウェア・サブスクリプション&サポートには、アプリケー
ションの設計および開発、所定稼働環境以外の環境でのプログラムの使用、または該当契約の もとで IBM が責任を負わない製品に起因する障害に対する支援は含まれていません。 作成されたお客様との契約書に別途指定されていない限り、 IBM は、 IBM が提供していない サード・パーティー製品をサポートしません。対象範囲内のサポートを受けるために IBM に連 絡する場合は、必ず IBM が IBM Software Support Handbook で提供する問題判別およびその 他の指示に従ってください。
インターナショナル・パスポート・アドバンテージ契約および IBM インターナショナル・パ スポート・アドバンテージ・エクスプレス契約の追加情報については、 パスポート・アドバン
テージおよびパスポート・アドバンテージ・エクスプレス Web サイトを参照してください。
Software Support Lifecycle
可変課金の適用 なし 教育機関向け割引の利用 割引適用なし
適切なセキュリティー実施について
IT システム・セキュリティーには、企業内外からの不正アクセスの侵入防止、検知、および対 応によって、システムや情報を保護することが求められます。不適切なアクセスにより、情報 の改ざん、破壊、または悪用を招くおそれがあるほか、システムが誤用された場合は他者への システムを攻撃してしまうおそれがあります。セキュリティーに対して包括的なアプローチを とらない IT システムや IT 製品は、完全にセキュアであるとみなすべきではなく、また単一 の製品や単一のセキュリティー対策で極めて効果的に不正アクセスを防止できるものはありま せん。 IBM システムおよび製品は、規制に準拠したセキュリティーに関する包括的な取り組み の一環として設計されています。これには必然的に追加の運用手順が含まれ、これを最も効果 的なものとするには、他のシステム、製品、またはサービスが必要となる場合もあります。 重要: IBM では、いずれのシステム、製品、あるいはサービスも第三者の悪質な行為、および 不正な行為による影響を受けていないこと、または将来受けないことを保証するものではあり ません。料金
各地域の料金設定については、 IBM 担当員にお問い合わせください。 パスポート・アドバンテージ パスポート・アドバンテージに関する情報および料金については、 IBM 担当者にお問い合わせ ください。追加情報は、 パスポート・アドバンテージおよびパスポート・アドバンテージ・エ クスプレス Web サイトでも入手可能です。AP ディストリビューション
Country/Region Announced AP IOT ASEAN * YesIndia/South Asia ** Yes
Australia Yes
Hong Kong Yes
Macao SAR of the PRC Yes
Mongolia Yes
Country/Region Announced People's Republic of China Yes
South Korea Yes
Taiwan Yes Japan IOT Japan Yes *ブルネイ・ダルサラーム、カンボジア、インドネシア、ラオス人民民主共和国、マレーシア、 ミャンマー、フィリピン、シンガポール、タイ、東ティモール、およびベトナム **バングラデシュ、ブータン、インド、モルジブ、ネパール、およびスリランカ 商標 IBM、Passport Advantage、PartnerWorld、Express、BigInsights および Db2 は、世界の多く の国で登録された International Business Machines Corporation の商標です。
Linux は、Linus Torvalds の米国およびその他の国における商標です。
Windows は、Microsoft Corporation の米国およびその他の国における商標です。 他の会社名、製品名およびサービス名等はそれぞれ各社の商標です。 ご利用条件 お客様の国で発表されて入手可能な IBM の製品およびサービスは、その時点で有効な適用可能 な標準契約書、条項、条件、および料金に基づいて発注できます。 IBM は、この発表をいつで も予告なしに変更または撤回する権利を保有します。この発表はお客様の参照用としてのみ提 供されています。追加のご利用条件については、次の Web サイトでご確認ください。 ご利用条件 この製品発表レターは、IBM Corporation が発表した時点での製品発表レターの抄訳です。 IBM 製品に関する最新情報については、 IBM 担当員または販売店にお問い合わせいただくか、 IBM Worldwide Contacts ページをご覧ください。
日本 IBM
日本 IBM のソフトウェア発表 JP18-02162018 年 3 月 20 日目次資料オプション連絡先オプ ションお問い合わせ先印刷用先頭へ戻る注:日本 IBM のソフトウェア発表JP18-0216 (2018 年 3 月 20 日付)IBM は、International Business Machines Corporation の登録商標です。
修正
(2019 年 2 月 13 日修正)