1
1
データベース不要!
あ大量データファイルから欲しいデータを即座に取り出す
2
その山のようなデータ、
解析できていますか?
欲しいデータを得るまでに、とにかく時間がかかる
システムの構築や運用に手間やお金がかかる
導入した際の費用対効果が見えない状況にある
データベースによる大量データ解析は敷居が高い
データベース
蓄積
ローディング
前処理
(加工・変換)
解析/分析
抽出
解析/分析環境を整えられず、利用を諦めることもしばしば。。
3
SQL+プロシージャ
スクリプト
API
(ODBC/JDBC)
『解析ブースター』とは
欲しいデータを即座に抽出!
大量のCSVファイルをデータベース化することなく、ダイレクトに
加工・集計できる高速なデータ解析支援ツールです。
大量CSVファイル
処理結果
CSVファイル
データ取り込み(ローディング)
インデクシング
加工
集計
省メモリ
4
『解析ブースター』の特長
大量データの高速処理
独自の高速ツリーアルゴリズム(特許取得済み)と非同期I/Oによる、
ストレージの帯域幅をフル活用した高速データ処理
省メモリ
一時ファイル作成による分割・結合(マージ)方式により、省メモリで動作
入力ファイルサイズが実用上無制限
※
テラバイト以上の入力データファイルを指定でき、実用上無制限に処理可能
入力データファイルのサイズは製品価格に影響しない
※ 入出力のためのストレージ容量など、本製品の動作要件を満たすことが前提です
“SQL + プロシージャ” によるCSVファイルへのダイレクト処理
“SQL + プロシージャ” を処理系として、高度で柔軟な処理記述が可能
実行環境として、スクリプトと標準API(ODBC/JDBC)を装備
5
データ解析の方法
6
データベース化不要!処理時間を大幅短縮
処理時間の例
【サプライヤー向け発注データ編集処理】
各所の
販売明細
指定出荷日のデータ抽出
(フィルタリング・ユニオン)
出荷数集計
サプライヤ別
編集(結合)
発注データ
【対象データ】(CSVテキスト)
販売明細:3億件・40GB
サプライヤマスタ:5万件・9MB
【動作環境】
CPU:Intel Xeon x5670 2.93GHz(6コア) x 2
メモリ:96GB HDD:600GB(15KRPM) SAS x 16
OS:Windows Server 2008 R2
他社
DB
21
66分
4分50秒
速度比、
14
倍 !!
(使用メモリ8GB)
データベース化(ローディング)
発注データ
※Windows Server 2008は米国および/または他の国のMicrosoft Corporationの登録商標または商標です。
7
処理能力の例(MB/秒)
並列処理でストレージ帯域幅をフル活用
※※ 処理能力(MB/秒)の計測は、入力データファイルの読み込み開始から出力ファイルの書き込み完了までが対象です。並列数
【3億件・40GBのフィルタリング・ユニオン】
0
200
400
600
800
1 2 4 8
MB/秒
※※
8
膨大な蓄積データの追跡に
追跡時間短縮、早期問題特定!
生産ライン/製造装置 データ収集 設備データ 品質データ 生産情報 ログトレース/解析 リコール対応 クレーム管理システム間のデータ移行に
移行データ 出力 移行先データ作成 クレンジング/ 名寄せ/マスタ作成移行開発期間短縮、担当案件拡大!
解析ブースター: 利用シーン
“1人1台” ・ 現場担当者の業務能力が飛躍的に向上!
解析・分析の前処理に
PDCAを高速回転!
Excel/Access /解析ツール 件数絞込み フィルタ/サマリ/結合 インポート運用・保守時の検証作業に
迅速なトライ&エラーで精度UP!
データ検証 処理評価/テスト データ出力 OK NG→修復 検証済みデータ/処理の投入9
システム構成
ノートPC/
デスクトップPC上
での利用
IAサーバー上での利用
10
製品ラインナップ
エントリー版
スタンダード版
ユーザー数
1
(クライアントサーバー型)
5
SQL・スクリプト(バッチ)
実行・簡易GUI
○
○
プロシージャ
×
○
ODBC/JDBC
×
○
最大並列処理数
2
16
OS
Windows 7 Home Premium(64bit) 以降
Windows Server 2008 (64bit) R2 /
標準価格(税別)
※2
24万円
90万円
※Windows Server 2008、および Windows 7は米国および/または他の国のMicrosoft Corporationの登録商標または商標です。 なお、本文中には(TM)、(R)マークは明記しておりません。
11
動作環境
スペック
CPU
Intel Xeon / Core i3 以降
主メモリ
8GB 以上
ストレージ
入力データファイルサイズの3倍以上の空き容量
OS
Windows 7 Home Premium(64bit) 以降
Windows Server 2008 (64bit) R2 /
モニター
(簡易GUI使用時)
WXGA(1280×800)以上
インターフェース
USB2.0 以降(ライセンスキー用)
※Windows Server 2008、および Windows 7は米国および/または他の国のMicrosoft Corporationの登録商標または商標です。 なお、本文中には(TM)、(R)マークは明記しておりません。
12
12
dd