大規模計算とポスト処理
Graph500 への挑戦 鈴村研究室 大規模データ処理・ストリームコンピューティング
... OpenMP, If the vertex exists in CQ , then it finds a set of local vertices adjacent to the global vertex in CQ. The local vertex is added to NQ[r] ...
39
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... ， 大 規 模 エ メ ネ 処 理 要 ゚ ハ モ ォ ー ク ョ ン り あ り ， よ う 中 ，ケ ド カ ン エ メ ネ 処 理 性 能 を 測 定 る ， Graph 500 [1] い う 新 い パ ン ス ブ ー ェ 場 ， 注 目 を 集 い る Graph 500 ， ケ ド カ ン 通 信 性 能 や ， エ メ ネ タ ー シ を 格 納 る ベ ペ モ 大 さ や ， ベ ペ モ メ ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Amazon Linux AMI Beta 2010.11.1 Small （以下、 Small と 略 記 ） 、 同 HighCPU Medium （ 以 下 、 Medium ）の 2 種類を使用する。各インスタンスタ イプのハードウェア性能、 1 時間あたりの課金額は ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Dynamic-Split 処理は入力エッジを基準にマイグレー ションを行っているため SemiDynamic-Split 処理ほどの速度低下は見られなかった．いず れにしても， METIS によるマイグレーションがボトルネックとなり速度低下が発生してい るが， Dynamic-Split 処理を使用した実装ではグラフ分割数 16 において線形以上の高速化 ...
12
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... 高 計算出来る を示 ． ゥヴワヴチ タヴシケダモヴヘ処理，エメネ処理， PageRank ， DSMS ， DSPS ， System S ， SPADE Towards Incremental Graph Processing by Data Stream Processing Shunsuke NISHII and Toyotaro ...
6
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Current Data Stream Processing Systems cannot dynamically assign or remove computational nodes.. New nodes?[r] ...
42
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... [10] 高 田 美 , 木 村 欣 司 , 岩 崎 , 中 村 佳 , 高 速 特 異値分解 開発 , 情報処理学会論 文 誌 ン ン , 47(SIG_7(ACS_14)), pp.81-90, 2006. [11] ATLAS. http://math-atlas.sourceforge.net/. [12] LAPACK. http://www.netlib.org/lapack/. ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Also we change the input data rate of Twitter streams from low data rate to high data rate, or burst data rate in order to check the validity of the time-series prediction a[r] ...
9
StreamGPU プロジェクト 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Task parallelism, where multiple tasks are computed simultaneously, must be used when a stream computing application requires relatively small computations for large[r] ...
10
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... • Graph mining: Propose an improved version of INFerence , a score for directed link prediction based on hierarchies, to process informal graphs not explicitly hierarchical.. Compare the[r] ...
26
ポストペタスケール高性能計算に資するシステムソフトウェア技術の創出 平成 23 年度採択研究代表者 H27 年度 実績報告書 藤澤克樹 九州大学マス フォア インダストリ研究所 教授 ポストペタスケールシステムにおける超大規模グラフ最適化基盤 1. 研究実施体制 (1) 大規模最適化 グループ( 九
... １：並列数の爆発的増大及び不均質化や高密度化よる性能向上の困難性 ２：記憶装置の多階層化・大容量化への対応 平成２７年度は以下の研究に対して重点的に取り組み、多くの成果を上げた。 平成２７年度の研究成果：藤澤チーム ...
5
マイクロソフトと大規模データ処理
... RDBMS と HDFS の間で、双方向のバルクデータ転送を行う仕組み SQL Server-Hadoop Connector も Sqoop を利用しています。 複数のコンピューターからなる分散システムで、ノードのメンバー シップの管理、分散ロック、構成情報の同期といった、 ...
57
2 背景 (1/2) 大規模化, 複雑化, 多様化するハイエンド計算機環境の能力を充分に引き出し, 効率的なアプリケーションプログラムを開発することは困難 有限要素法等の科学技術計算手法 : プリ ポスト処理, 行列生成, 線形方程式求解等の一連の共通プロセスから構成される これら共通プロセスを抽出
... ppOpen-HPC • 東京大学情報基盤センターでは，メニィコアに基づく計算 ノードを有するポストペタスケールシステムの処理能力を 充分に引き出す科学技術アプリケーションの効率的な開 発，安定な実行に資する「自動チューニング機構を有する アプリケーション開発・実行環境：ppOpen-HPC」を開発中。 ...
54
StreamGPU プロジェクト 鈴村研究室 大規模データ処理・ストリームコンピューティング StreamGPU HiPC2012
... Since CUDA can execute many thread-block in parallel, single kernel can proces. s multiple matrices[r] ...
19
大規模データの匿名加工処理を高速化する技術を開発
... 1. 大規模データに対する匿名加工処理の高速化技術の開発 東大生研と日立は、大規模データの解析問合せにおいて高速性を発揮してきた非順 序型実行原理を、新たに匿名加工処理に適用しました。 これまで匿名加工処理には専用ソフトウェアを用いるのが一般的であり、データベ ...
6
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング StreamGPU 20120516
... ゴリズム SST の GPU による性能最適化」電子情報通信学会技術研究報告 既存ライブラリを使った高速化 2010 年 10 月 上野晃司 , 鈴村豊太郎 . データストリーム処理における GPU タスク並 ...
45
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング ipdps 2012
... – Dynamic load balancing unit and time series prediction algorithm are built on System S. – System S can import C++ or Java code as a user defined operator and modularize it[r] ...
20
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... In Deltarser, each parse event and its corresponding byte- sequence are stored in one edge of an automaton. This au- tomaton has two major characteristics: 1) it can directly process byt[r] ...
10
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... By making use of these features and eliminating the redundant processing, we propose a new deserialization mechanism that reuses matching regions from the previously deserialized appl[r] ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... We previously proposed an XML parser based on the notion of differential processing under the hypothesis that XML documents are similar to each other, and in this paper we enhance this[r] ...
12