大規模データの近くに
大規模データ天文学の進展
... • データ移動を極力避ける解析システム 望遠鏡・観測装置の大型化、高機能化 • 高品質なデータ、取得のコストの増大 科学成果の最大化 • 取得したデータを 速やかに解析 できる環境の構築 ...
33
1B2-1 大規模学術論文データの共著ネットワーク分析に基づく萌芽領域の 中心研究者予測に関する研究
... ∗1 の 全論文データの共著者数分布を示している．多くは数名の共 著者を持つ著者が大半であるが，数百を超える共著者数を持 つ著者も存在する．これらの著者を見てみると，多くの同姓 同名がある氏名であり，単純に書誌情報データベースから共著 関係を抽出すると曖昧性を含む共著ネットワークとなってし まうことがわかる． Microsoft ...
2
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング IC2010 ueno
... 変化点検知アルゴリズム SST *1 *1 Tsuyoshi Ide, et al, Knowledge Discovery from Time-series Data using Nonlinear Transformations, The 4th Data Mining Workshop of JSSST 2004 SVD （特異値分解）を 計算し、時系列データ の特徴を抽出 ...
20
StreamGPU プロジェクト 鈴村研究室 大規模データ処理・ストリームコンピューティング StreamGPU HiPC2012
... Since CUDA can execute many thread-block in parallel, single kernel can proces. s multiple matrices[r] ...
19
様々な多重代入法アルゴリズムの比較～大規模経済系データを用いた分析～
... Balanced k-nearest Neighbor Imputation (Hasler and Tille, 2013) 概要：ランダム補定は、確率的補定や撹乱的補定とも呼ばれ、補定値の分布を維持しやす いため、項目非回答への対処法として頻繁に使われる。ランダム補定の手法の中でも、ラ ...
44
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング StreamGPU 20120516
... ゴリズム SST の GPU による性能最適化」電子情報通信学会技術研究報告 既存ライブラリを使った高速化 2010 年 10 月 上野晃司 , 鈴村豊太郎 . データストリーム処理における GPU タスク並 ...
45
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング ipdps 2012
... – Dynamic load balancing unit and time series prediction algorithm are built on System S. – System S can import C++ or Java code as a user defined operator and modularize it[r] ...
20
PDF Graph500 への挑戦 鈴村研究室 大規模データ処理・ストリームコンピューティング
... を増しており、Graph500ベンチマークが広がりを見せている。Graph500 のリファレンス実装は、使用されているアルゴリズム の問題により、分散メモリ環境で大規模にスケールさせることができなかった。そこで、大規模にスケール可能な２次元分割に ...（Graph500 のScale ...
4
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... By making use of these features and eliminating the redundant processing, we propose a new deserialization mechanism that reuses matching regions from the previously deserialized appl[r] ...
8
食料品アクセス問題と健康・栄養 －大規模個票データを用いた分析－
... 被説明変数に地域差がある場合，推計された係数からは都道府県固有の効果と説明変数が純粋に被説明変数 に与える影響を識別できない。そのため，都道府県ダミーを用いて地域固有の影響の係数を推計することで，都 道府県固有の影響を除いた説明変数の係数を推計している。本研究では，北海道を基準として，北海道を除外し た 46 ...
12
PDF 本研究室志望者へ 鈴村研究室 大規模データ処理・ストリームコンピューティング
... © International Business Machines Corporation 2008 SPADE : ストリームアプリケーション ストリームアプリケーション ストリームアプリケーション記述言語 ストリームアプリケーション 記述言語 記述言語 記述言語 ストリームアプリケーションを記述するために特化した言語 多様な情報ソースのアダプタ、ウィンドウ定義、並列機構、耐故障性な ...
42
PDF 本研究室志望者へ 鈴村研究室 大規模データ処理・ストリームコンピューティング
... - 情報爆発時代における一つの解決策 情報爆発時代における一つの解決策 情報爆発時代における一つの解決策 情報爆発時代における一つの解決策 動いているデータをリアルタイムに分析 ストリーミング・データ 動いている構造化データや非構造化データのストリーム ストリーム・コンピューティング ...
17
Imperva Incapsula DDoS Protection データシート 大規模で高度な DDoS 攻撃も自動的に緩和 Imperva Incapsulaは ビジネスへの影響を最小限に抑えながら ネットワークやプロトコル そしてアプリケーションレベルの攻撃など 大規模で高度なDDoS 攻撃か
... 高性能のスクラビングクラスターが配置されています。このクラスターを使って、DDoSトラフィック のプロファイリングとブロッキングを実施します。もし攻撃を受けた場合には、インバウンドパケット とHTTPセッションを処理します。Incapsulaでは、優れたインテリジェントのトラフィックプロ ...
5
大規模データを対象とした分析処理の高速化に関する取り組み Papers & Presentations Onizuka Laboratory
... User Program worker worker Input Data fork fork fork Master worker assign map assign reduce Output File 0 Output Split 1 Split 0 Split 2 Split 3 worker worker worker [r] ...
89
目次 1. はじめに ガイドライン策定の背景と目的 用語 ガイドラインの見直し 無料開放の対象となる大規模災害の範囲 災害規模と被害規模 対象地域 大規模災害に対応した措置...
... LAN の積極的な活用を図っていくことが期待されている。 東日本大震災においては、事業者による独自の取組として、公衆無線 LAN サービスを自社のユーザに限定することなく無料開放した事例が見 られた。大規模災害発生時にどのような取組を行うかは各事業者の自主 的な判断によるが、携帯電話がつながりにくい状況においては、このよ ...
23
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング IC2010 ueno paper
... 知 大 対 規模 計算 繰 返 場合 多 GPGPU 手法 高 速化 ． GPU 並列 高速化 提案 ．変化 検知 １ あ 特異 変換 計算 多 特異値 解 占 い 特異値 解 計算 う 二 対角化 GPU 並列 実装 行列 320 数 256 CPU 1 対 17.22 倍 高速 ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング VCTL Perf IISWC2011
... We use three different stream programs (Application- Specific Benchmarks) which are are used for different pur- poses such as Call Detail Record Processing (CDR), Volume Weighted Average [r] ...
1
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... In Deltarser, each parse event and its corresponding byte- sequence are stored in one edge of an automaton. This au- tomaton has two major characteristics: 1) it can directly process byt[r] ...
10
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... We previously proposed an XML parser based on the notion of differential processing under the hypothesis that XML documents are similar to each other, and in this paper we enhance this[r] ...
12
Spark と大規模データ処理 - NAISTビッグデータアナリティクス 第2回
... Word, Excel などの文書，電子メール，ソーシャルメディアの データ，センサーデータ 頻度が多い ( V elocity) 商品の購買履歴データ - クレジットカード，銀行の預貯金 センサーデータ - 気象データ，河川の水位観測，気温 ...
39