大量データの高速処理（HPC）
大規模データの匿名加工処理を高速化する技術を開発
... この基盤技術により、国民（ヒト）と生産現場（工場）の健全性維持のため の課題解決に挑戦しています。超ビッグデータ時代においては、個人 情報を含む大規模データの活用が求められます。このプライバシー保 護のために匿名加工が必要になりますが、目的にかなう情報量を確保し ながら匿名加工を施すには膨大な時間がかかります。今回の成果は本 ...
6
ILASデータ処理運用システム
... ● 打上げ前のアルゴリズム開発 アルゴリズム開発においては，プログラムを開発する 前に処理仕様を打ち合わせて，その仕様どおりに開発す れば事足りる訳ではない。大気の放射伝達理論に基づく 自然現象の計算機上での理論計算，ILASセンサに搭載 されている検出器やアンプ，雑音などの機器特性，地球 ...
11
大量の実世界データから 今 を分析するストリームデータ処理の可能性 2008 年 11 月 18 日株式会社日立製作所中央研究所主任研究員西澤格 Hitachi, Ltd All rights reserved.
... ストリームデータ処理の特長 ストリームデータ処理の特長 入力データを分析して，「変化」や 「状況」をリアルタイムに検知・監視できます。 複数の入力データを組み合わせた条件判定や，入力データの編集を行えます。 ...
26
メモリ階層構造を考慮した大規模グラフ処理の高速化
... 入力パラメータ SCALE, edgefactor(= 16) で, 点数 n = 2 SCALE , 枝数 m = edgefactor ·n を決定. 各 BFS の終了時に, 計算結果である BFS 木を用いて検証を行い, TEPS 値を算出する. 現在のルールでは, 64 回中 Medial の TEPS 値で評価を行い, 高い方がより高い順位となる. GreenGraph500 ...
23
マイクロソフトと大規模データ処理
... Sqoop Hadoop 上で大規模な機械学習を行うためのライブラリ 典型的には、ネットワーク経由で収集される大量のデータを基に、 レコメンデーション エンジンの作成や評判分析に利用される。 ...
57
使用済み燃料の処理 処分の観点からの核燃料サイクルにおける高速炉の意義と 高速炉使用済み燃料再処理の 技術動向と課題 資料 2 鈴木達也 長岡技術科学大学 1
... 19 MOX燃料再処理の現状 使用済みMOX燃料の再処理は、フランス、ドイツ、日本、ロシ ア及びイギリスにてプラント規模で試験的に行われた実績は あるが、MOX燃料単独で大量処理された実績はない。 ...
24
バッチ処理高速化ソリューションのご紹介
... これらの事象に対する具体的な施策は、「現行踏襲の暗黙の了解を排除」し、「ＲＤＢＭ Ｓを使わずファイルシステムを使う」・「インタプリタ言語活用の領域を見いたす」など 回帰的な方法を視野に入れたシステム化により、思い切ったコスト削減を行うことで効果 を発揮すると思量。 ...
10
高速データ変換
... 1 のベースに与えられ る正方向のロジック入力に対しエミッタ･フォロワとして動 作し、Q 1 とQ 2 のエミッタ−ベース間に存在するコモンモー ド･キャパシタンスを十分ドライブすることができるため、 非常に高速なスイッチングが可能です。Q 1 のベースをECL 入力で駆動した場合、Q 1 のエミッタはECLの変化レートで ...
39
情報処理学会研究報告 IPSJ SIG Technical Report Vol.2015-DBS-162 No /11/26 最小二乗法のストリーム処理における桁あふれ回避方法 1 今木常之 概要 : オンライントレード,SNS,IoT などで大量に生成する, 時系列データの予測値を
... Keywords: Real-time, Stream, Least Squares Method, Continuous Query 1. はじめに IoT，金融取引，通信ログ，システムログ，SNS，クリッ クストリーム，車両の走行データなどの，社会活動で継続 的に発生する様々なストリームデータを分析し，ビジネス やサービスの改善にリアルタイムにフィードバックする技 ...
8
ORACLEデータベース10G データ・ポンプ: 超高速データ移動ユーティリティの基盤
... 多くの顧客からは、Data Pump に対する要望として「時は金なり。せめて、多量のデータをより速くエクスポート、イン ポートできるようにしてほしい」とたびたびいわれます。この言葉をオラクル社は、深く受け止めました。Data Pump 使 ...
11
単位、情報量、デジタルデータ、CPUと高速化 ～ICT用語集～
... • 地デジの 1 時間録画サイズ：標準 8GB 3 倍モード 4GB • YouTube の 1 時間動画サイズ：0.6GB(HD)∼2GB(FHD) • YouTube に 60 時間/1 分アップロード、1 日に 40 億回再生 • Google が処理するデータは 20 ペタ B/1 日（1/2008） ...
16
大量データ処理時における Ruby メモリ使用量削減対策 RubyWorld Conference 2012 株式会社富士通システムズ イースト中坊誠秀 Copyright 2012 FUJITSU SYSTEMS EAST LIMITED
... 各クラス毎に最適化したデータを持ちまわっていた メモリ消費箇所の特定 procfs / free を各メソッド単位で発行して調査 ファイルオブジェクトや、大きなStringデータの ブロック処理後に、メモリ使用量が増加 ...
38
使いやすさをより一層進化させた Piranesi V6.2 Piranesi V6.2 の画面 高速化対応 3D 点景の影描画を含む配置スピードが 旧バージョン比で 2 倍 -3 倍 高速化します ( ) その他 点景の移動 修正した際の処理速度をはじめ フィルタ処理 ライト処理 反射処理など 全般
... ■EPix カメラアプリの配信（AppStore、Google Play） iPhone、iPad や、Android 端末専用の無料カメラアプリです。このカメラアプリで撮影された画像を Piranesi で読み込むと、地盤面が 設定された EPix ファイルとして扱うことができます。これにより、実写データと、CG データを合成するフォトモンタージュのイメー ...
5
Oracle Database 11g Data Pump：超高速データ移動ユーティリティの基盤
... つの中では速いも のの、パーティション内のパラレル処理をサポートしません。外部表アクセス方 法は同機能をサポートするため、大規模な表またはパーティションをロードまた はアンロードする際に選択できます。また、各アクセス方法は他方を使用する場 合にある制限が与えられます。たとえば、アクティブな参照制約またはグローバ ...
16
2) LX シリーズにブラックモデルを用意 高性能な Core i7 プロセッサーを搭載し 高速処理の SSD と大容量 1TB HDD の 2 つのストレージを搭載したブラックカラーモデルを用意 SSD には やアプリを入れて処理の高速化を実現すると同時に HDD には大量のデータを保存でき メイ
... パナソニックパソコンお客様ご相談センター TEL：0120-873029、06-6905-5067（9:00～20:00 365日受付） 【発売の背景】 レッツノートは、 1996年の発売以来「軽量」「長時間」「頑丈（タフ）」「高性能」というコンセプトのもと、開発・進化を続け、ビジネス用モバイルパソ コンとして高い評価をいただいております。個人店頭向け秋冬モデルでは、タブレットモバイル ...
5
ビッグデータ分析を高速化する 分散処理技術を開発 日本電気株式会社
... 背景 ▌ 近年、インターネットやセンサなどから集まるビッグデータを分析することで、 有用な情報を抽出し、ビジネスに活用するニーズが高まっている ▌ 現在、このようなビッグデータの分析は、Hadoop[*] 等の分散処理基盤を 用い、多数のサーバで行うことが一般的 ...
17
大規模データを対象とした分析処理の高速化に関する取り組み Papers & Presentations Onizuka Laboratory
... User Program worker worker Input Data fork fork fork Master worker assign map assign reduce Output File 0 Output Split 1 Split 0 Split 2 Split 3 worker worker worker [r] ...
89
データベース機能の基礎知識 データベース処理に便利な機能 入力規則 データの並べ替え フィルタ処理 大量のデータを分析する CSV ファイルをインポートする データパイロットによる集計作業 マクロの記録.
... 範囲の選択とデータ入力 セルを選択して文字列を入力するとセル編集モードとなります。 Enter キーを押すとセル編集モー ドが完了し、アクティブセルは1つ下に移ります。セルに入力された文字列データは、セルの中に 左揃えで表示されます。セル幅よりも長い文字列の場合は、右側のセルが空白の場合には右側には ...
57
1 計画策定の意義 私たちが暮らす現代社会は これまで快適で潤いのある生活環境を築くため 大量生産 大量消費 大量廃棄という使い捨てのライフスタイルを恒常化させてきた それに伴い排出される廃棄物は 多様化 増大化を続けたため 処理場や処分場の確保は次第に困難になり 廃棄物処理を取り巻く環境は厳しくな
... 本計画はこのような状況の下、容器包装に係る分別収集及び再商品化の促進等に関す る法律（以下「法」という。）第8条に基づいて一般廃棄物の大半を占める容器包装廃棄 物の分別収集を行い、また3R（リデュース・リユース・リサイクル）の推進により最終 処分量の削減を図る目的で、町民・事業者・行政の三者が、それぞれ適切な役割や具体 ...
8
目次 1. はじめに センサーと設置場所 不要なデータの除去 データ前処理 A) 機械学習ための時系列データ前処理 B) 2 つ部分時系列の距離計算 クラスタリングでの異常検知 A
... ニューロビジネス研究会では、広島県大竹市にあるゴム・プラスチックを製造する広 合化学株式会社のブロー成型機の稼動部に安価なセンサーを試験的に取り付け、取得 したデータの分析を行った。 試験的に取り付けたセンサーから取得したデータの中で、比較的安定な波形を示す ...
22