CPSとビッグデータ活用による
アジェンダ No-NoSQLによるアプローチ Hadoop ビッグデータ活用の課題 PostgreSQL Inter-Analyticsとは なぜPostgreSQL + Hadoopか Webログ分析の例 まとめ 課題と次のステップ 2
... + '-param GET_GROUP="' + str(get_group) + '" ' ¥ + '-param DELIMITER="' + esc_delimiter + '" ' ¥ （PathMatchesストアド関数一部） ストアド関数の引数を、pigの実行パラメタとして指定 Pigで参照するデータ項目をストアド関数のパラメタで指定 ...
32
ビッグデータを活用したものづくり現場のイノベーションを支援する「最強工場」
... 一つ目の課題は，投資対効果である。製造業の お客様のビッグデータ活用への期待として多いの が，「製造ラインの故障予測・予兆検知」である。 仮にライン故障による年間損失額をXとする。ビッ グデータ活用によって故障予測・予兆検知を把握 する仕組みの構築費用として，ネットワーク構築， ハードウェア（センサー，サーバ・ストレージほ ...
7
日立評論 2014年10月号：人流・交通流ビッグデータを活用した都市経営基盤
... ここでは，都市経営基盤のコンセプト，国内外での事例， および今後の展望について述べる。 2. 都市経営基盤のコンセプト 都市経営基盤ソリューションのコンセプトを 図 1 に示 す。さまざまな社会インフラ事業者から，スマートフォン や IC カード，各種センサーを用いて，人流・交通流デー タを収集する。また，国・自治体からは，施設情報や交通 センサス，人口統計など各種統計情報を収集する。これら ...
5
ビッグデータアナリティクス - 第3回: 分散処理とApache Spark
... これを集計して，日本語で書かれているツイートは全体の何 % なのかを調べたい ”lang”:”ja” が何回出てくるのかを計測（コマンドラインによる方法） % cat /project/bigdata-lab/bda/tweet_20171004.json | grep \"lang\":\"ja\" |wc -l （数十分かかる） ...
32
介護・医療データ活用による地域づくり
... 国 地域課題の分析の支援 介護費や要介護認定の状況、在宅サービスと施設サー ビスの構成等を各市町村、都道府県が他の地域と比較 できるよう、全国的なデータ収集と分析、提供を実施（地 域包括ケア見える化システム） ...
69
ビッグデータ時代の到来
... 意思決定のための科学的手法の 1 つとして、 数理モデルを用いた将来のシミュレーション を通じてさまざまな問題への最適解を導き出 す“オペレーションズリサーチ”がある。こ の分野で活用される技術が“最適化技術”で あり、これをツールの形にしたものは“最適 化ソルバー” （数学的手法を駆使して最適な変 数の値を求めるプログラム）と呼ばれる。オ ペレーションズリサーチの国際学会である INFORMS ...
24
日立ソリューションズのビッグデータビジネス
... 仮想化 / クラウド 「クラウドビジネス」との融合により、 大規模な仮想化環境の導入 が必要 クラウドインフラの費用を圧縮するためOSSのツールへの移行が進展 導入実績多数 ： KVM, Xen, OpenStack 導入実績あり ： oVirt, VirtualBox, CloudStack, QEMU等 DB・関連ツール 昨今のクラウド・ビッグデータビジネスの影響を色濃く反映 ...
38
ビッグデータの活用と分析に至るプロセス
... ビッグデータには、その特性とされる「3つのV」のVariety（バラエティ）、Volume（ボリューム）、Velocity （ベロシティ）のいずれかを持っていることが挙げられます。 【出所】Deja VVVu: Others Claiming Gartner’s Construct for Big Data［Gartner | Doug Laney］ ...
23
ＩＴ運用とビッグデータの意外な関係とは
... 運用効率が大幅に改善され、フルタイムの従業員1名を他の 業務にアサイン。年間10万ドル(1000万円)の節約 ログデータをSplunkに集約する事により、幹部へのダッシュ ボード生成し、契約のアクティベーションやキャンセルなど ビジネスに関わる様々な評価分析が可能に ...
24
481 広告と AI テレビデータ最先端 人体認識技術を活用したテレビ視聴態勢のビッグデータ化とその活用 The Frontier of Television Data How to Create New TV Viewing Big Data by Human Recognition Techno
... INSIGHTS データの解析 現在，TVISION INSIGHTS 社は，取得したデータを さらに指標化して，広告業界の各社に提供している． 具体的には，テレビが 1 台オンしている状態に対し て，どれほどの視聴者がテレビの前に Viewable であっ たかを指標 Viewability Index（VI 値）として定義し， Viewable であった視聴者のうち，どれほどの視聴者が Engaged ...
6
Spark と大規模データ処理 - NAISTビッグデータアナリティクス 第2回
... 最近のシステム構築に関する動向 一つの大きなシステムよりも複数の小さなシステム 倍の値段のサーバは性能が倍とはならない 性能/価格比が最も良いサーバ = コモディティサーバ サーバの数が多い = 壊れやすい ...
39
Oracle Advanced Analytics ビッグ・データと分析をシンプルに
... ナリストは不正パターンをほぼ即座に検出可能00 「TurkcellはOracle Exadata上で100テラバイトの圧縮データ（非圧縮状 態では1ペタバイトの生データ）を管理しています。Oracle Advanced AnalyticsオプションのコンポーネントであるOracle Data Miningを使用 することで、他のどんなツールよりも迅速かつ容易に大量の顧客デー ...
72
目次 1 会社概要 2 中期経営計画とグローバルIT 戦略 3 テクノロジートレンドとIT 価値の変化 4 ビッグデータの活用の狙い 5 データ分析基盤の整備方針 6 データ分析基盤の目指す姿 7 データ分析基盤の整備ステップ 8 データ分析基盤の仕組み 9 データレーク基盤のシステム構成 10 ま
... ■経験や勘ではなく､事実に基づいて、ビジネス上の判断をできるようにすることで 「何かが起こる前に変わる企業」へ変革 するデータ分析基盤が必要である。 ■One FUJIFILMとして Business Analytics as a Serviceを提供 できるよう データレーク基盤を整備した。 ...
20
PDFファイル 2E5OS25b オーガナイズドセッション「OS25 ビッグデータとAI 」
... パラダイムにおいて個別に収集され分析されていた様々な科学 データを集約し，それらを分析することで新たな科学的知見を 発見するという考えは，増大する今日の計算資源によって実現 が可能となった新しい科学的探求として今後発展していくと考 えられる．一方で観測された科学データの共有や再利用，その ためのメタデータ定義，さらにはデータの蓄積，参照方法など ...
4
SAPジャパン、日立、ESRIジャパンが、社会インフラに関する将来予測を可能にするビッグデータ利活用システム基盤の開発・検証を実施
... *1 Hitachi Advanced Data Binder は、内閣府の最先端研究開発支援プログラム「超巨大データベース時代に向けた最高速データベー スエンジンの開発と当該エンジンを核とする戦略的社会サービスの実証・評価」(中心研究者:喜連川 東大教授／国立情報学研究所 所長)の成果を利用しています。 *2 ArcGIS は、Esri 社が提供する GIS ...
5
PDFファイル 2E5OS25b オーガナイズドセッション「OS25 ビッグデータとAI 」
... ノードを検索する手法を提案した．提案手法は PageRank の 下限値と上限値を推定し，動的に部分グラフを構築することで 高速な検索を行う．実データを用いて提案手法と既存手法を比 較したところ，提案手法はより高速に上位 k 個のノードを検 ...
4
580a3c9c データ連携プラットフォーム「DataSpider」と匿名化テストデータ作成ツール「テストエース」による個人情報の「データ活用」と「安全・安心」の両立を実現
... 高度かつ効率的な「データ活用のニーズ」と「安全・安心のニーズ」には、本質的に相いれないとこ ろもあります。 「DataSpider」の提供する多種多様なデータやシステムへの自在で効率的な連携処理と、 「テストエース」の実現する匿名化技術の組み合わせは、このジレンマを解消する手段となりえます。 テストデータとして適切なシステム開発や Web ...
3
PDFファイル 2E4OS25a オーガナイズドセッション「OS25 ビッグデータとAI 」
... 企業内で保有する情報だけではなく，インターネット上の画像，音声，テキストなどが容易に利活用可能になっている。 各種のメディア処理技術や推論，シミュレーション技術を用いることで，安心・安全かつ便利な社会インフラ・システムにお けるイノベーションをもたらすことが期待される。ヘルスケア分野の事例として，生活習慣病の発症率とそれに関する医療費 ...
1
SOMPOデータ・プラットフォーム－グループにおけるビッグデータへの取り組み－
... • 約３か月間の集中育成プログラムでは、ディープラーニングなどＡＩに必須のコ ンテンツを準備する予定であるほか、一流メンターの助言のもと、ＳＯＭＰＯ ホールディングスが実際に保有する自動車の走行データや健康関連データなどの ビッグデータを利用し、実践的なデータ分析からデータ活用ビジネスの企画 提 案まで行います。 ...
24
ビッグデータ時代に求められるデータアーキテクチャ DWH からビッグデータ さらにビジネスインテリジェンス (BI) というように データ活用のステージが変化してきている この流れの中で求められているデータアーキテクチャの方向性として Syncsort の日本法人であるシンクソート ジャパン 代表の
... 置き去りにされがちなのが、レガシーシステムやメインフレームが管理しているデータだ。 データ統合を支える技術にはETL（Extract Transform Load）がある。ETLは企業内にある複数のシステムから データを抽出し、変換、加工といった処理を加えてDWHやビジネスインテリジェンス（BI）ツールに受け渡す役割を担う。 ...
5