前処理、データ処理に関する
データマイニングのための前処理アルゴリズム簡易自動選択システム
... Keywords: Data Mining, Pre-Processing, Meta-Feature, Automatic Algorithm Selec- tion 概 要： 近年あらゆる分野においてデータマイニングに注目が集まっているが，データを解析する 際には解析する対象に関する知識とデータマイニングに関する知識の両方を持ち合わせてい ...
34
Spark と大規模データ処理 - NAISTビッグデータアナリティクス 第2回
... CPU を有効に活用できていない 結局 1 個の CPU だけしか活かせていない データの読み出し速度が遅い ハードディスクからデータを読み出す速度はシーケンシャル で 200MiB/s，ランダムで 380 IOPS (SAS 15000rpm) いくらお金をかけてもこれ以上にはならない ...
39
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... [10] 高 田 美 , 木 村 欣 司 , 岩 崎 , 中 村 佳 , 高 速 特 異値分解 開発 , 情報処理学会論 文 誌 ン ン , 47(SIG_7(ACS_14)), pp.81-90, 2006. [11] ATLAS. http://math-atlas.sourceforge.net/. [12] LAPACK. http://www.netlib.org/lapack/. ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Also we change the input data rate of Twitter streams from low data rate to high data rate, or burst data rate in order to check the validity of the time-series prediction a[r] ...
9
StreamGPU プロジェクト 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Task parallelism, where multiple tasks are computed simultaneously, must be used when a stream computing application requires relatively small computations for large[r] ...
10
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... • Graph mining: Propose an improved version of INFerence , a score for directed link prediction based on hierarchies, to process informal graphs not explicitly hierarchical.. Compare the[r] ...
26
ビッグデータアナリティクス - 第3回: 分散処理とApache Spark
... データを処理するための戦略 小さなデータを処理するためには R や Excel で十分 一つのサーバ，一つのメモリで事足りるとき Excel は最大 105 万行くらいしか扱えない 今回のデータは 2650 万行以上あるので扱えない ...
32
加熱脱着ソリューション 前処理と分析のトータルパッケージ
... 拡大 を 続 ける GC/MS ソリューション アジレントと Markes International 社 の 提携 により 、生産性 を 高 める 革新的 なソリューションがさ らに 豊富 になりました 。 アジレントは 、業界 をリードする 品質 の 高 い 分析機器 を 通 じて 、 より 正 確 な 分析 や 測定 を 実現 し 、 エンジニアや 科学者、 メーカー 、研究者、政府機関 からのニーズに お 応 えします 。 ...
8
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... In Proceedings of Parallel & Distributed Processing Symposium (IPDPS), 2011 IEEE International. 14) Daniele Paolo Scarpazza, Oreste Villa, and Fabrizio Petrini. Efficient Breadth-Fi[r] ...
8
大規模データを対象とした分析処理の高速化に関する取り組み Papers & Presentations Onizuka Laboratory
... User Program worker worker Input Data fork fork fork Master worker assign map assign reduce Output File 0 Output Split 1 Split 0 Split 2 Split 3 worker worker worker [r] ...
89
DB分野におけるデータ処理の『今』と『これから』
... 各モジュールの Producer-Consumerによる基本実装方法 • データを受け取り処理を適用して返す Producer-Consumer パターン • モジュール間のデータ転送は QueueLinker が行うため， データ通信に関するコードの記述不要 ...
30
DesignPattern(No6) 2003/07/28 Visitor 特徴データ構造と処理を分離し, データ構造内を巡り歩く 訪問者 クラスを作成し, そのクラスに処理を任せる このパターンでは, データ構造と処理が分離しているため, 処理の拡張は容易に行なえる ( しかし, データ構造の拡張
... public abstract Object next( ); // (並んだデータを)順次探索していく抽象メソッド } < ClassRoomIterator.java > // ClassRoom 内のデータ(Student)を順次（繰り返し）探索処理のためのクラス public class ClassRoomIterator implements Iterator { ...
18
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... Current Data Stream Processing Systems cannot dynamically assign or remove computational nodes.. New nodes?[r] ...
42
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... グラフ分割を用いた 大規模 2 部グラフのデータストリーム処理 雁瀬 優 †1 上野 晃司 †1 鈴村 豊太郎 †1,†2 近年，グラフ構造に対するマイニング技術が注目を集めている．従来の大規模グラ フ処理の研究はデータを蓄積して実行するバッチ処理が中心となっているが，処理の ...
12
「欠測値補完に関する調査研究報告書」 欠測データの統計的処理 その１
... 欠測データの統計的処理においては、第 2 節の例題にみるとおり、不完全データ の標本を層化するために用いることのできる変数が重要な役割を果たす。不完全デー タのすべてのレコード（※）で値が観測されていて、標本分割の条件付け（層化）に利 用可能な変数を特に「補助変数（covariates）」と呼ぶ。欠測データメカニズムは、不完 ...
23
「廃棄物の処理及び清掃に関する法律」
... 資料編 ■資料１ 建設工事に伴い生ずる廃棄物の処理責任 Ｐ．４１ ■資料２ 特別管理産業廃棄物管理責任者の資格 Ｐ．４５ ■資料３ 感染性廃棄物の判断基準 Ｐ．４６ ■資料４ ＰＣＢ廃棄物について Ｐ．４７ ■資料５ 産業廃棄物の処理を委託できる者〔運搬・処分〕 Ｐ．４８ ■資料６ 廃棄物データシート（ＷＤＳ）様式 Ｐ．５１ ■資料７ 産業廃棄物処理委託標準契約書〔収集・運搬用〕 ...
96
FFPE検体の適切な前処理から遺伝子検査まで_
... 脱水/透徹 包埋前の不完全な脱水により、その後、核酸の断片化や Proteinase K の阻害(水分 に含まれるホルマリンによる) が生じる 再利用したエタノールやキシレンには水分が蓄積されるため、出来るだけ未使用な エタノール/キシレンを使用し、充分に脱水する ...
38
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... In Deltarser, each parse event and its corresponding byte- sequence are stored in one edge of an automaton. This au- tomaton has two major characteristics: 1) it can directly process byt[r] ...
10
Publication 論文 鈴村研究室 大規模データ処理・ストリームコンピューティング
... By making use of these features and eliminating the redundant processing, we propose a new deserialization mechanism that reuses matching regions from the previously deserialized appl[r] ...
8