利用例（４）：大規模データ処理
大規模グラフ処理 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Communication Data Size at Each Level Figure 16 compares the reference implementations, R-CSR and R- CSC, with U-BFS in terms of the execution time at each level of the level-synchron[r] ...
12
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング IC2010 ueno
... タスク数に比例して、条件分岐や引数の数が増えるという問題がある GPU を使った行列計算の高速化に関する研究 ほとんどの研究は非常に大きな行列を対象としている 小さい行列の並列処理に関する研究はない ...
20
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング IC2010 ueno paper
... 知 大 対 規模 計算 繰 返 場合 多 GPGPU 手法 高 速化 ． GPU 並列 高速化 提案 ．変化 検知 １ あ 特異 変換 計算 多 特異値 解 占 い 特異値 解 計算 う 二 対角化 GPU 並列 実装 行列 320 数 256 CPU 1 対 17.22 倍 高速 ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング VCTL Perf IISWC2011
... We use three different stream programs (Application- Specific Benchmarks) which are are used for different pur- poses such as Call Detail Record Processing (CDR), Volume Weighted Average [r] ...
1
PDF Graph500 への挑戦 鈴村研究室 大規模データ処理・ストリームコンピューティング
... 本章では，Graph500ベンチマークの概要と、分散 BFSアルゴリズム について述べる。 ２-1 Graph500ベンチマークの概要 Graph500 は、大 規 模なグラフに対してBFSによる探 索を実行する ベンチマークである。単位時間に処理できたエッジ数と、扱える最大 問題サイズが評価指標となる。計算インテンシブなTop500ベンチマー ...
4
PDF 本研究室志望者へ 鈴村研究室 大規模データ処理・ストリームコンピューティング
... パーソナルゲノム医療に向けた次世代 パーソナルゲノム医療に向けた次世代 パーソナルゲノム医療に向けた次世代 パーソナルゲノム医療に向けた次世代 DNA シーケンサーの高速処理 シーケンサーの高速処理 シーケンサーの高速処理 シーケンサーの高速処理 次世代 DNA シーケンサーによってもたされるライフサイエンス界の ...
17
大規模グラフ処理 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Hirundo analyzes, identifies the structure of a stream program, and transforms it to many different sample programs with same semantics using the no- tions of Tri-Operator Transformation[r] ...
12
StreamGPU プロジェクト 鈴村研究室 大規模データ処理・ストリームコンピューティング StreamGPU HiPC2012
... Since CUDA can execute many thread-block in parallel, single kernel can proces. s multiple matrices[r] ...
19
大規模データの匿名加工処理を高速化する技術を開発
... 進んでいます。 データの匿名加工処理においては、例えば同じ属性を持つデータが一定数以上存在 するようにデータを変換し、個人が特定される確率を低減するといった措置を行います。 しかし、このような匿名加工処理の過程では情報が失われる可能性があり、有用な情報 量を確保するためには、データの抽出範囲や加工単位などを細かく調整しながら、デー ...
6
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング StreamGPU 20120516
... 5 万個 のセンサーがあるとする 4node(16 コア ) で分散処理しても、 SST で各センサーからの入 力データを 1 つ 処理するのに、 10 分 かかる IKA-SST *1*2 (SST の近似を高速に求めるアルゴリズム ) で計算し ...
45
SENAC Vol. 52, No. 2( ) 37 [ 大規模科学計算システム ] アプリケーションサービスの紹介 情報部情報基盤課共同利用支援係 はじめに 本センター大規模科学計算システムでは 分子軌道計算 数式処理 データ処理等の各アプリケーションソフトウェアをサービスしています
... （認証鍵生成サーバで作成した秘密鍵のファイル名を id_rsa_cc として~/.ssh 以下に保存した場合） localhost$ ssh -i ~/.ssh/id_rsa_cc 利用者番号@front.cc.tohoku.ac.jp Enter passphrase for key '/home/localname/.ssh/id_rsa_cc':パスフレーズを入力 （初回接続時のメッセージ） : yes を入力 ...
15
情報処理学会研究報告 IPSJ SIG Technical Report Vol.2013-DBS-158 No /11/26 データ共有型マルチデータベースシステムにおけるクエリ効率化手法 齋藤和広 渡辺泰之 小林亜令 近年, データの大規模化やデータ利用の多様化に対応するために, 単
... システム構成は Data Node, Task Tracker, Impalad が稼働す るスレーブノードが 3 台，Name Node, Job Tracker, Impala Statestore が稼働するマスタノードが 1 台，Hive Server, Hive Metastore, 提案手法を導入したデータ共有型マルチデータ ベースシステムとマルチデータベース管理データが稼働す ...
8
民間航空機開発における大規模 CFD 解析の適用 （その４）
... 5 5. . お おわ わり りに に 民間企業利用サービスにより、世界でもトップレベルの計算機環境を利用することで、当社の 計算機環境では困難であった CFD 空力解析の本格活用を SpaceJet 開発で実現することができた。 東北大学で開発された解析コードやスーパーコンピュータを SpaceJet の設計段階から積極活用 ...
8
大規模データ天文学の進展
... – 超大質量ブラックホールの発達初期段階？ – 電波であかるいものを選択 方法と結果 ̶ VO のクロスマッチサービスを利用し、QSO カタログ、電波カタログ (7)、可視光カタログ(3)、のクロスマッチ ...
33
大規模データを対象とした分析処理の高速化に関する取り組み Papers & Presentations Onizuka Laboratory
... User Program worker worker Input Data fork fork fork Master worker assign map assign reduce Output File 0 Output Split 1 Split 0 Split 2 Split 3 worker worker worker [r] ...
89
PDF 本研究室志望者へ 鈴村研究室 大規模データ処理・ストリームコンピューティング
... 並列モデル モデル モデルとしての モデル としての としての としてのストリーム ストリーム ストリーム ストリーム･ ･プロセッシング ･ ･ プロセッシング プロセッシング プロセッシングの の の の優位性 優位性 優位性 優位性 ファーストクラスとしてのStreams – 明示的なタスクおよびデータの並列性 – マルチコア活用の直感的手法 ...
42
Graph500 への挑戦 鈴村研究室 大規模データ処理・ストリームコンピューティング
... OpenMP, If the vertex exists in CQ , then it finds a set of local vertices adjacent to the global vertex in CQ. The local vertex is added to NQ[r] ...
39
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング ipdps 2012
... – Dynamic load balancing unit and time series prediction algorithm are built on System S. – System S can import C++ or Java code as a user defined operator and modularize it[r] ...
20
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Also we change the input data rate of Twitter streams from low data rate to high data rate, or burst data rate in order to check the validity of the time-series prediction a[r] ...
9
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... グラフ分割を用いた 大規模 2 部グラフのデータストリーム処理 雁瀬 優 †1 上野 晃司 †1 鈴村 豊太郎 †1,†2 近年，グラフ構造に対するマイニング技術が注目を集めている．従来の大規模グラ フ処理の研究はデータを蓄積して実行するバッチ処理が中心となっているが，処理の ...
12