Hadoopによるビッグデータ分析システム構築
労働投入の減少傾向口減少国内需要の縮小懸念第 1 章 ICT によるイノベーションと経済成長 特集部 ( 第 1 章 ~ 第 4 章 ) のテーマとして IoT ビッグデータ AI ~ネットワークとデータが創造する新たな価値 ~ を設定 サイバー空間 AI データを基に分析 データを送信 データの変
... 第 1 章：ICT によるイノベーションと経済成長 第 2 章：IoT 時代における ICT 産業動向分析 経済成長への貢献が期待される ICT 産業について、IoT の進展を踏まえた上で全体構造の 整理を行い、ICT 機器・サービスの各市場規模や成長性、競争環境等について定量的に検証。 ...
6
yamamoto_hadoop.pptx
... – VMWare ESX, Hyper-‐V, Xenなどハードウェア構築の負担を減少させた仮想化システム (弾力性と言う人も) – プライベートクラウド導入しませんか∼？という売り文句はだいたいこの仮想化システムのこと • グリッドコンピューティングの別名と主張する人 – ...
21
RIETI - 援助氾濫と経済成長 :クロスカントリーデータによる分析
... ルデータによる推計のみに用いる推計である。 本稿では、システム GMM 推計における過剰操作変数の問題を避けるためにラグ を１期に限定する。 Roodman (2007a) によれば、原則として操作変数の数が回帰分析に入っ ている国の数を超えないことが重要である。サンプルの大きさに対して操作変数の数が多 すぎると内生変数が過適応し、結果が OLS に近づく。注意すべき点は、操作変数が多すぎ ...
39
日立ソリューションズのビッグデータビジネス
... Hadoop向け業務バッチアプリケーション開発フレームワーク Asakusa Frameworkソリューション 業務バッチが長時間化し困っているお客様、また、業務バッチの再構築に伴い新しい 分散バッチ基盤を導入したいお客様向けに、Hadoopテクノロジーを活用した業務バッ ...
38
ビッグデータ時代の情報活用
... 本稿では，富士通が行っている二つの業種におけるビッグデータの取組みを紹介する。 一つ目は，多様な接点情報（オムニチャネル）による消費者囲込みが急務になっている小 売業の取組みである。爆発的に増加する多様でアドホックな顧客の消費行動情報を解析 し，ある顧客群のニーズを可視化するICT基盤と，現場が情報を活用し施策につなげる場 ...
7
RIETI - 病院の生産性－地域パネルデータによる分析－
... 過去の実証分析の多くは個々の病院レベルのデータを用いた分析を行っているが、 医療サービスのアウトプットの質の違い、診療科目や患者構成・病気の重篤度（case mix）のコントロールといった問題点が従来から指摘されている（Newhouse , 1994）。 難病や高度医療を中心とした病院と定型化された治療を主とする病院の生産性は容易 ...
28
CSR活動をめぐる管理会計システムの現状分析 : 研究フレームワークの構築
... 3.5 管理会計システムの導入研究 管理会計は，Johnson and Kaplan（1987）の主張以来，理論と実務のギャップを埋めること が重要となった。研究手法としては，ケースリサーチやサーベイリサーチを通じて，背後に ある理論体系を析出し，これを理論的にフィードバックすることによって，理論と実務との ギャップを埋めようとすることが行われた。システムについて，理論に適合性があるとすれば， ...
16
ビッグデータ分析を高速化する 分散処理技術を開発 日本電気株式会社
... 背景 ▌ 近年、インターネットやセンサなどから集まるビッグデータを分析することで、 有用な情報を抽出し、ビジネスに活用するニーズが高まっている ▌ 現在、このようなビッグデータの分析は、Hadoop[*] 等の分散処理基盤を 用い、多数のサーバで行うことが一般的 ...
17
Deep Learning によるビッグデータ解析 ~ 手法や CUDA による高速化 2014 年 9 月 5 日 G-DEP ソリューションパートナー株式会社システム計画研究所奥村義和
... 目次 •DeepLearningとGPU •DeepLearningとは •仕組みと計算 •初期化の1手法：Layer-wise Pretraining •SAEによる次元圧縮例 •G-DEPテストドライブ •ビッグデータ・GPU・DeepLearningの接点.. 苦労話など… •ハイパーパラメタは試行錯誤 •層の数、非線形関数の種類、 学習係数、[r] ...
38
時間的な印象変化の分析によるマルチメディアデータ検索・可視化システム
... ータの検索に用いられる検索語について、検索語と検索語の関係を「言葉の 地図」としてダイナミックに可視化することにより、スマートフォンやタブレ ット端末などのタッチパネルから、検索エンジンへの入力を容易にするシス テムである。図 11 に、開発した検索語自動推薦・可視化システムの実働状況 を示す。本方式の特徴は、検索エンジンに蓄積された検索履歴のストーリー ...
18
次世代IT と呼応する宇宙ビッグデータ・ビジネス－「宇宙産業ビジョン2030」による加速－
... 一例として、養殖業ベンチャーであるウ ミトロンは、リモセン衛星から得られるマ クロ海洋環境データを、いけすの環境デー タや魚の生育状況データ等、他のリソース から得られるデータと統合して分析するプ ログラムを開発している。同社はこれによ り、養殖事業者に対して餌付けのタイミン グと餌の量の最適化のガイドラインを提供 することを目指している。また、サービス ...
11
目次 1 会社概要 2 中期経営計画とグローバルIT 戦略 3 テクノロジートレンドとIT 価値の変化 4 ビッグデータの活用の狙い 5 データ分析基盤の整備方針 6 データ分析基盤の目指す姿 7 データ分析基盤の整備ステップ 8 データ分析基盤の仕組み 9 データレーク基盤のシステム構成 10 ま
... ■経験や勘ではなく､事実に基づいて、ビジネス上の判断をできるようにすることで 「何かが起こる前に変わる企業」へ変革 するデータ分析基盤が必要である。 ■One FUJIFILMとして Business Analytics as a Serviceを提供 できるよう データレーク基盤を整備した。 ...
20
DNA付加体定量分析のための全自動前処理システムの構築
... LC-ESI-MS/MS を用いた DNA 付加体の定量分析では、上述の通り大過剰の未損傷体中に存在する DNA 付加体の定 量が必要不可欠であるため適切な前処理が必要不可欠となる。その前処理手法としては、固相抽出法が用いられてい る。本研究では、 DNA 付加体の高度な前処理を達成するために、固相抽出用の吸着分離剤の開発を行なった。その吸 ...
3
ビッグデータ時代の到来
... 分析の精度向上や分析結果を生かしたプロモ ーションなどへの活用が期待できる。 有効活用のためにはIT部門との連携が必要 野村総合研究所（NRI）は、テキストマイ ニングツール「TRUE TELLER」、マスメデ ィアへの消費者の接触と購買との関連を測る 「INSIGHT SIGNAL」、ID連携を可能にする 「Uni-ID」など、個別のソリューションは以 前から提供している。これらのソリューショ ...
24
ビッグデータ利活用入門
... 膨大に蓄積されたテキストデータを単語やフレーズに分解して、これらの 関係を一定のルールにそって分析することにより、出現頻度や相関関係 を把握し、単語の関係や時系列の変化などを抽出することによって、客 観的な分析に利用できます。 ...
74
「PRTRデータの活用」～PRTRデータ分析システム（けんさくん）とPRTRマップ～
... ＮＩＴＥホームページ上から各年度のデータを入手 どんなことがわかるか？ ・自社からの排出が全国でどれくらいか？ ・同業他社は自社より排出量が多い？少ない？ ・○○市から届け出されている排出量が知りたい！ ・あの工場の排出量は去年より減少している？ ...
43
アジェンダ No-NoSQLによるアプローチ Hadoop ビッグデータ活用の課題 PostgreSQL Inter-Analyticsとは なぜPostgreSQL + Hadoopか Webログ分析の例 まとめ 課題と次のステップ 2
... – データ処理のためのMapReduceプログラミングが必要 – Key-Valueデータ処理を意識した設計と実装 – 少量データ分析におけるオーバーヘッドの増加によるパフォーマンス低下 – 構造化データにおける集合演算、結合による複雑な問い合わせは難しい ...
32
新総合事業移行による地域包括ケアシステム構築に関する研究
... Ⅳ．おわりに 新総合事業開始後の高齢者や家族からの相談時の判断について地域包括支援セン ター職員に聞き取り調査を行った結果、 すべてのセンターの職員は、相談時に本人の 心身状態を確認し、①介護保険申請によって利用するサービスか、②日常生活動作の介 助が必要か、③状態の悪化の可能性から新総合事業か介護保険申請かを判断していた。 また、職員は、本人の心身状態の確認が困難だと判断に迷い、本人と家族の意向の違い ...
4
PythonとTwitterAPIによるビッグデータ事始め
... Python と TwitterAPI によるビッグデータ事始め 荒川 歩(武蔵野美術大学) 1. はじめに 社会言語科学では，従来，少数の事例を丁寧に質的に分析する方法と，大量のデータを統計的に分析する方法というお 互いに利点と欠点のある方法が相互に補い合うように用いられてきた．このうち，前者の質的な分析は，研究者の人力に ...
4
ビッグデータの活用と分析に至るプロセス
... PC・スマートフォンをはじめとして、インターネットにつながる機器であるIoT機器が増加しています。 SNS等の普及によって、一般利用者がプログラム不要で様々なデータをインターネット上に保存できるようになりました。 • 数値データ・テキストデータのみならず、画像や動画といった容量の大きいマルチメディアデータの送受信が拡大してきています。 ...
23