複数のマシンで分散で処理
1.1 研鑽の背景当技術センターで運用している各種ネットワークサービスは XenServer 1 台により複数の仮想マシンを稼働させ 9 年目を迎えた 老朽による障害も考慮し日頃のメンテナンスや障害に対応するために 複数の XenServer を用いることでより安定した仮想マシン環境を構成し 円滑な
... 電源やネットワークの障害を 分散させるために学内の VLAN 等を活用して XenServer の分散配置も今後取り組んでゆきたい。 それでも、 すべての障害に対応することは不可能と思われる、しかし多くの人がこれらに関わることで、予防や対応策 を迅速かつ効果的に見つけることが可能になると考える。 ...
6
ビッグデータアナリティクス - 第3回: 分散処理とApache Spark
... Hadoop が利用可能なシステムへログイン Hadoop と Spark は， bda1node0x (x は 01 から 18 まで ) にインストールされており，ど のマシンからでも同じように利用できる．ただし， bda1node01 から 04 までは管理用 サーバのためログインできない．そこで， ssh で bda1node05 へログインする． ログイン ...
32
最近の技術動向を観察すると 1. マルチプロセッサ型の計算機アーキテクチャの導入 分散処理 ( 機能分散 地理的分散 ) 2. キャッシュ (Proxy) 技術の導入 CDN(Contents Delivery Network) P2P(peer-to-Peer) など 3. 仮想化技術の導入 Vi
... コンテンツの抽象化 (by DHT) {ファイル名、ファイル拡張子、等} を隠蔽し、単 純な数値で表現。 (*) 仮想メモリ 仮想的なメモリ機構によって生成される、仮想的なメモリ 領域 (とても大きな記憶空間)。仮想メモリは、最終的には適当な物理 メモリにマップされる。 物理メモリ量を超える仮想メモリ 空間を 作り出したり、複数の仮想空間を作り出したりする。... DM[r] ...
34
並列分散ワークフロー処理システムの研究開発
... • 複数拠点のクラスタを用いたワークフロー実行 • 適切なタスク配置により、拠点間のファイル転送を少なくする • 「エッジカット最小」となるグラフ分割問題を解くことにより、タスク をグループ化 ...
21
情報処理学会研究報告 IPSJ SIG Technical Report Vol.2014-CSEC-67 No /12/5 秘密分散法における検証可能な分散情報の更新手法 神宮武志 1 古田英之 1 岩村惠市 1 本稿では, 秘密分散法の分散情報の更新手法について考える. 著者らは [
... 秘密分散法（secret sharing scheme）[2] は，一つの情報 を複数の異なる情報に変換し，そのうちの一定数以上が集 まれば元の情報が復元可能だが，その数未満では元の情報 は全く復元されないという手法である．これによって，サ ...
6
Oracle WebLogic Serverでの分散トランザクションに対するLogging Last Resource最適化
... 1. はじめに トランザクション （ コミット や ロールバック ・コールによって区切 られた一連の処理）は、クライアント・アプリケーションと次の性 質を保証するトランザクション・リソース（データベースやメッセー ジング・システムなど）間の ACID コントラクトであると一般には 言われています。1）原子性：中断されたトランザクション（コミッ ...
6
4D1-4 サンプリングに基づく分散制約最適化手法の複数コンテキスト化と探査戦略の検討
... ムと統合されているため，根ノードに制御が戻った任意の時点 で，木の深さのメッセージ伝達回数で，トップダウンに解を決 定して終了できる．解法の詳細は [Nguyen] を参照されたい． 従来手法は同期型の分散アルゴリズムであり，単一のサンプ ルを取得するたびに，根ノードから葉ノードまでメッセージ伝 ...
4
複数人数による設計開発での利用法 マニュアル
... この方法の問題点は次のとおりです。 ・ プロジェクトファイルにアクセスする場合に処理速度が低下する可能性が高い ・ ネットワークに問題がある場合などにプロジェクトファイルが破損する(モデルの情報の一部または全部が失われる)可能性がある これに対して、DBMS リポジトリを利用する場合には、大人数で利用する場合にも堅牢性が保たれます。複製機能を利用すること ...
21
Who am I? 名前 松尾康博 所属 アマゾンウェブサービスジャパン株式会社 ソリューションアーキテクト 製造業の HPC CAE ビッグデータ解析等を担当 経歴 九州 大学でスパコンの効率率率化研究 SIer で分散キューの開発 導 入 分散処理理
... Amazon EC2 (Elastic Compute Cloud) • 数分で起動し 、1 時間ごとの従量量課⾦金金で利利⽤用可能な仮想マシン • ノード追加・削除 、 マシンスペック変更更も数分で可能 • 管理理者権限 (root / Administrator) で利利⽤用可能 ...
90
ついて説明する.5 章では, 検証実験とその結果について述べる. そして最後に,6 章でまとめと今後の課題とする. 2. DRDoS 攻撃 DRDoS 攻撃とは,TCP/IP プロトコルの基本的な通信手順やアプリケーションの仕様において生成される様々な応答パケットを利用して, 複数のサーバマシンから
... 筒見拓也 † 野々垣嘉晃 † 田辺瑠偉 † 牧田大佑 † 吉岡克成 † 松本勉 † 近年，DNS リフレクション攻撃に代表される分散型サービス不能攻撃，通称 DRDoS 攻撃（Distributed Reflection Denial-of-Service attack）が脅威となっている．DRDoS 攻撃は，インターネット上における様々な種類のサービスを悪 ...
6
1 事務処理 ( 制度 ) の複雑性 規則等で定められた運用が複雑であるために 職員が理解しにくい制度 処理方法となっている事務があり ミスを防止するために複数の専任職員によるチェック等を必要としている状況が見られる 2 手処理を伴う事務処理 現在 紙の帳簿等により管理を行っている業務は 月末の手処
... なお、対象とする個別事務は 「詳細計画」において確定する。 、 (4) 配慮事項 ア 職員の操作性等 発生源入力を基本とし、対象機関の全ての職員が使用することを前提 としていることから、誰でも簡単に操作できる高い操作性とともに、各 種の発生事由に対して、申請漏れ等が生じないよう、必要となる申請及 び手続き方法、添付書類等の案内（ナビゲーション）を可能とするシス ...
10
複数人での写真閲覧行為に基づく自動タグ付加システム
... 8) のような写真共有サービスが真っ先に思い浮かべられる． flickr では多くの人々が写真を閲 覧し，タグやコメント，アノテーションをつけ，検索可能な巨大アーカイブを形成している． さらにそれらのタグやコメントに基づき検索を行ったり，似た嗜好を持つユーザや写真を知 ることもできる．しかしこれらは各個人がタグを付けた上でアップロードされているもの ...
8
ただし 無作為にスレッドを複数実行すると 結果不正やデッドロックが起きる可能性がある 複数のスレッド ( マルチスレッド ) を安全に実行する ( スレッドセーフにする ) ためには 同期処理を用いるこ とが必要になる 同期処理は 予約語 synchronized で行うことができる ここでは sy
... 課題 3 タイピングゲームなどは、自分がタイプしている最中にも、非同期的に(同時に) コンピュータが時間を計 って動作することにより、リアルタイムな操作性を実現している。 以下のタイピングゲームをスレッド処理 を用いて非同期で実行できるよう完成させなさい。 ...
8
MapReduce における RDF-DB処理に適したデータ分散格納方法の提案
... • RDF Loader モジュールによるチューニングも実施 • Reasoning（Transitive Closure）処理の高速化 – Join アルゴリズムや MR パラメータの受動的最適化 2500万トリプルに対するクエリの実行時間 [sec] Query 5a Query 5b Query 6 プロトタイプシステム（圧縮なし） 447 368 842 ...
23
Hadoop とは 大規模なデータを並列分散処理を行うフレームワークを提供 Google による MapReduce および Google File System(GFS) の論文をベースに開発された Apache プロジェクトの OSS MapReduce MapReduce 分散処理フレームワー
... ● 一定時間応答がない DataNode には障害が発生したとみなされる ● 既定のレプリケーション数になるまで自動的に複製が行われる ● チェックサム ● 各ブロックはチェックサム値を持ち、データ損傷の認識と修復が自動的 ...
39
目次 01 IEI マシンビジョンソリューションの開発背景 01 IEI 産業用カメラのメリット 01 光学実験室 02 FPGA 応用技術 03 多角形の関心領域 ROI 03 USB 3.0 でマシンビジョンをより高速に 04 マシンビジョンの未来へ IEI のソリューション 05 IEI 画像
... IC の IP、アルゴリ ズム、FPGA/firmware/driver などそれぞれ違う分野の開発能力を身につけてきた。 マシンビジョンソリューションを開発する前に、長年の光学、レンズモジュール、カメラモジュー ルの経験を積んできた。例えば、1D/2D 高速バーコードリーダー、携帯用カメラモジュール、医療 ...
9
PC 移行は以下の流れで行います 次ページ以降に各手順を記載しますのでご確認ください ( をクリックすると該当の説明にジャンプします ) 移行元の PC での作業 Step1 移行するデータをバックアップする (3 ページ ) [ 随時処理 ]-[ データコピー処理 ] メニュー 複数のデータが存在
... ２ 移行先の PC にセットアップを行う前に以下の点をご確認ください。 セットアップに関するエラーのお問い合わせで、以下を行っていないことが原因であるケースが 多くあります。 ・Administrator（またはAdministrators）権限のユーザーでログインしてください。 ...
10
通商分野でのイッシューベースの複数国間合意（プルリ合意）について
... また、案件毎に異なったスピードで処理する可能性が受容されたことは意義が 大きい。 今後、ラウンドの、コンセンサスによる意思決定とシングルアンダーテーキン グ（包括受諾）の制約が緩めば様々な動きが出てくることが予想される。 ＷＴＯの歴史を振り返ると、１９９６年から９７年に、ＩＴＡ（情報通信合意）、 テレコミサービス合意、金融サービス合意という大きな成果が生まれているが、 ...
19
〇影響の内容は 搬入制限 中間処理料金の値上げ 処理後物売却料金の値下がり 逆有償 最終処分料金の値上げの順〇受入量 保管量 処理量は 影響ありの会社では 14%~28% で増加 増加幅は 3~5 割が回答最多 影響の内容 ( 複数回答 ) 受入量等の増加割合 影響内容搬入制限を受けている中間処理搬
... ・塗料廃プラはあまり影響ない。、養生シート等問合せ増えている。 ・有価売却先の受入停止、焼却施設の受入制限と価格高騰顕著。 ・飲料容器のペットボトル搬入先より年内で受入停止の連絡あり。 ・焼却施設が少ない。最終処分場のキャパ不足。廃プラと他材質の複合物（木くず金属くずなど）が中間処理で受 入制限されている。 ...
6
複数サイトでのNAPの効率的な運用管理
... オプションを利用している場合、NAP の管理範囲は、DHCP のスコープ範囲 に制限されるため、セグメント分割している複数サイトでは、NAP 環境をそれぞれ 準備する必要があります。このような環境では、システム管理者は常に、 「適用ポ リシー」の同期や、 「クライアント状態」の監視を、複数サイトをまたがって行う ...
19