大規模データ処理の「哲学」
大規模グラフ処理 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Communication Data Size at Each Level Figure 16 compares the reference implementations, R-CSR and R- CSC, with U-BFS in terms of the execution time at each level of the level-synchron[r] ...
12
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング IC2010 ueno
... 変化点検知アルゴリズム SST *1 *1 Tsuyoshi Ide, et al, Knowledge Discovery from Time-series Data using Nonlinear Transformations, The 4th Data Mining Workshop of JSSST 2004 SVD （特異値分解）を 計算し、時系列データ の特徴を抽出 ...
20
PDF 本研究室志望者へ 鈴村研究室 大規模データ処理・ストリームコンピューティング
... パーソナルゲノム医療に向けた次世代 パーソナルゲノム医療に向けた次世代 パーソナルゲノム医療に向けた次世代 パーソナルゲノム医療に向けた次世代 DNA シーケンサーの高速処理 シーケンサーの高速処理 シーケンサーの高速処理 シーケンサーの高速処理 次世代 DNA ...
17
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング IC2010 ueno paper
... 知 大 対 規模 計算 繰 返 場合 多 GPGPU 手法 高 速化 ． GPU 並列 高速化 提案 ．変化 検知 １ あ 特異 変換 計算 多 特異値 解 占 い 特異値 解 計算 う 二 対角化 GPU 並列 実装 行列 320 数 256 CPU 1 対 17.22 倍 高速 ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング VCTL Perf IISWC2011
... We use three different stream programs (Application- Specific Benchmarks) which are are used for different pur- poses such as Call Detail Record Processing (CDR), Volume Weighted Average [r] ...
1
StreamGPU プロジェクト 鈴村研究室 大規模データ処理・ストリームコンピューティング StreamGPU HiPC2012
... Since CUDA can execute many thread-block in parallel, single kernel can proces. s multiple matrices[r] ...
19
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング StreamGPU 20120516
... ゴリズム SST の GPU による性能最適化」電子情報通信学会技術研究報告 既存ライブラリを使った高速化 2010 年 10 月 上野晃司 , 鈴村豊太郎 . データストリーム処理における GPU タスク並 ...
45
大規模グラフ処理 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Hirundo analyzes, identifies the structure of a stream program, and transforms it to many different sample programs with same semantics using the no- tions of Tri-Operator Transformation[r] ...
12
PDF Graph500 への挑戦 鈴村研究室 大規模データ処理・ストリームコンピューティング
... を増しており、Graph500ベンチマークが広がりを見せている。Graph500 のリファレンス実装は、使用されているアルゴリズム の問題により、分散メモリ環境で大規模にスケールさせることができなかった。そこで、大規模にスケール可能な２次元分割に ...（Graph500 のScale 36）のBFS(幅優先探索 ...
4
PDF 本研究室志望者へ 鈴村研究室 大規模データ処理・ストリームコンピューティング
... ずしもすべてのデータ データを データ データ を を保存 を 保存 保存する 保存 する する する必要 必要はなし 必要 必要 はなし はなし（ はなし （ （ （例 例 例 例： ： 連続 ： ： 連続 連続 連続データ データ データ データ） ） ） ） – 到達する 到達 到達 到達 する ...
42
大規模データの匿名加工処理を高速化する技術を開発
... 進んでいます。 データの匿名加工処理においては、例えば同じ属性を持つデータが一定数以上存在 するようにデータを変換し、個人が特定される確率を低減するといった措置を行います。 しかし、このような匿名加工処理の過程では情報が失われる可能性があり、有用な情報 ...
6
SENAC Vol. 52, No. 2( ) 37 [ 大規模科学計算システム ] アプリケーションサービスの紹介 情報部情報基盤課共同利用支援係 はじめに 本センター大規模科学計算システムでは 分子軌道計算 数式処理 データ処理等の各アプリケーションソフトウェアをサービスしています
... 【 12 および 24 並列実行の指定】 本センターでサービスしている Gaussian では、12 および 24 並列での並列処理が可能です。大きな分子の 解析にぜひご活用ください。 12 または 24 並列で実行するには、ルートセクションに Link 0 コマンドの%NProc=並列数を追加します。手入力 の場合は、テキストエディタで先頭行に追加、 ...
15
Hadoop とは 大規模なデータを並列分散処理を行うフレームワークを提供 Google による MapReduce および Google File System(GFS) の論文をベースに開発された Apache プロジェクトの OSS MapReduce MapReduce 分散処理フレームワー
... ● Key-Value のリストを入力として受け取る ● Key の値に関してデータの集計を行い、Key-Value ペアを出力 – 例） 《単語，行番号のリスト》 ⇒ 《単語、行番号リスト（カンマ区切り）》 例） 転置インデックス ...
39
高性能，高生産性を実現する 大規模メモリ・並列処理システムソフトウエアの研究
... クラスタ向けTransactional Memory APIの検討 担当者： 飯田凌大，二間瀬悠希，小林龍之介，川口優樹，津邑公暁（名工大） 赤黒木による評価 K-Meansによる評価 逐次プログラムから の容易な変更で記述可能， ...
10
メモリ階層構造を考慮した大規模グラフ処理の高速化
... 入力パラメータ SCALE, edgefactor(= 16) で, 点数 n = 2 SCALE , 枝数 m = edgefactor ·n を決定. 各 BFS の終了時に, 計算結果である BFS 木を用いて検証を行い, TEPS 値を算出する. 現在のルールでは, 64 回中 Medial の TEPS 値で評価を行い, 高い方がより高い順位となる. GreenGraph500 ...
23
大規模データ天文学の進展
... – 超大質量ブラックホールの発達初期段階？ – 電波であかるいものを選択 方法と結果 ̶ VO のクロスマッチサービスを利用し、QSO カタログ、電波カタログ (7)、可視光カタログ(3)、のクロスマッチ ...
33
大規模データを対象とした分析処理の高速化に関する取り組み Papers & Presentations Onizuka Laboratory
... User Program worker worker Input Data fork fork fork Master worker assign map assign reduce Output File 0 Output Split 1 Split 0 Split 2 Split 3 worker worker worker [r] ...
89
Graph500 への挑戦 鈴村研究室 大規模データ処理・ストリームコンピューティング
... OpenMP, If the vertex exists in CQ , then it finds a set of local vertices adjacent to the global vertex in CQ. The local vertex is added to NQ[r] ...
39
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング ipdps 2012
... – Dynamic load balancing unit and time series prediction algorithm are built on System S. – System S can import C++ or Java code as a user defined operator and modularize it[r] ...
20
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Also we change the input data rate of Twitter streams from low data rate to high data rate, or burst data rate in order to check the validity of the time-series prediction a[r] ...
9