海務グループ ビッグデータ活用チーム
ビッグデータ利活用入門
... • 表計算ツールのような数値データの集計・分析、グラフ作成を行うアプリケーション • 代表的なツ－ル： Microsoft Excel(Microsoft) • データベースからデータを検索、抽出、加工してレポートにまとめることができるア プリケーション。プログラミング知識がなくともデータ集計や分析を行うことができる ...
74
ビッグデータ時代に求められるデータアーキテクチャ DWH からビッグデータ さらにビジネスインテリジェンス (BI) というように データ活用のステージが変化してきている この流れの中で求められているデータアーキテクチャの方向性として Syncsort の日本法人であるシンクソート ジャパン 代表の
... 同社の主要製品群を見ていこう。 1. DMExpressを代表とするデータ統合 「DMExpress（以 下、DMX）」は 高 速 デ ー タ 処 理 を 実 現 す る ツ ー ル で あ り、GUI（グ ラ フ ィ カ ル ユ ー ザ ー インタフェース）ベースでジョブの設定が簡単に完了する。一般的にはBIツールを利用する際、DWH内に、分析用に ...
5
2016年度日本基礎心理学会第1回フォーラム 基礎心理学の新しい方法を拓く―ビッグデータ・生体センサー・タブレットの活用―
... 海上自衛隊潜水医学実験隊の景山望氏は，潜水艦内な どの高圧下でストループ検査や記憶実験を行ってきた心 理学者である。使用機材や実施時間など，様々な制約を 伴う特殊環境でのデータ取得に，氏はスマートフォンや タブレット端末が有効ではないかと注目する。これらの デバイスは高圧下や水中での使用に耐えられ，複数のア プリケーションを搭載することができ，心理学実験のア プリケーションやプログラミング環境も整い始めてい ...
2
481 広告と AI テレビデータ最先端 人体認識技術を活用したテレビ視聴態勢のビッグデータ化とその活用 The Frontier of Television Data How to Create New TV Viewing Big Data by Human Recognition Techno
... レビ業界の，新しい指標となるべきテレビ視聴ビッグ データの取得を行っている．コアテクノロジーは，AI を生かしたコンピュータビジョン技術であり，独自に開 発したアルゴリズムをセンサに搭載し，そのセンサを実 際の視聴世帯のテレビの上に配置することで，視聴者の 実際の視聴状態を，リアルタイムかつきめ細かいレベル で取得している（TVISION INSIGHTS 社ではそのデー ...
6
プログラミングによるビッグデータの分析（R）
... Excelから取り込んだ全てのデータは、データフレーム「 elec_weather 」に入っていますが、日時のデータおよび回帰 分析の対象とする地域のデータをデータフレーム「 elwe 」へと抽出します。 • 他の地域に関する分析を参照する場合は、コード内の（東京電力, 東京_）の部分を(北海道電力, 札幌_) （東北電力, 仙台_）（中部電力, ...
30
PythonとTwitterAPIによるビッグデータ事始め
... http://www.mivurix.sakura.ne.jp/mivurix/twitter.html から実際に，「コーデ」を含むツイートを収集する際 に用いたプログラムをダウンロードできる．プログラムをメモ帳などで開き，検索ワードや CONSUMER_KEY などの部分を自分の API キーに置き換え，Windows のコマンドプロンプトでプログラムのディレクトリに移動し て「 pyhon ...
4
Spark と大規模データ処理 - NAISTビッグデータアナリティクス 第2回
... CPU を有効に活用できていない 結局 1 個の CPU だけしか活かせていない データの読み出し速度が遅い ハードディスクからデータを読み出す速度はシーケンシャル で 200MiB/s，ランダムで 380 IOPS (SAS 15000rpm) いくらお金をかけてもこれ以上にはならない ...
39
日立ソリューションズのビッグデータビジネス
... Hadoop向け業務バッチアプリケーション開発フレームワーク Asakusa Frameworkソリューション 業務バッチが長時間化し困っているお客様、また、業務バッチの再構築に伴い新しい 分散バッチ基盤を導入したいお客様向けに、Hadoopテクノロジーを活用した業務バッ ...
38
目次 1. 公共団体とオープン ビッグデータ (1) 定義 特徴. (2) 近年の ICT/web サービス. (3) データ利活用のステップ 目的.... (4) 公共分野のデータ例..... (5) 現状の活用方向 情報応用ビジネス (1) 情報応
... （２）地域的な連携 ………………………………………. （３）信憑情報の共有 …………………….…….…….…. ７．将来のビジネスモデル ……………..………. （１）将来に向けた課題整理 ……………..…….……….. （２）将来のビジネスモデル ……………..………………. ８．人材・組織……..……………………………… （１）CIO補佐監 ……………..…………….……………. ...
85
ビッグデータ時代の到来
... 最適化技術の導入には経営層のリーダーシッ プが必要 最適化技術は経営者にとってなじみの薄い テーマであるためか、企業の間でそれほど広 くは普及していない。INFORMSラウンドテ ーブル（円卓会議）のメンバーの 1 人である Steve Sashiharaは、最適化技術の知見を持 たない経営者向けに、意思決定への革新的な アプローチ手法を紹介する『The Optimization ...
24
時系列ビッグデータの解析と予測
... Keywords: big time-series data, data mining, forecasting 1. は じ め に 時系列シーケンスは，センサネットワーク監視，金 融，オンライン文書，医療情報，Webアクセス履歴や ソーシャルネットワーク等，様々なアプリケーションに おいて大量に生成されている。このような時間発展を伴 う大規模なデータ，すなわち時系列ビッグデータの解析 ...
7
SAPジャパン、日立、ESRIジャパンが、社会インフラに関する将来予測を可能にするビッグデータ利活用システム基盤の開発・検証を実施
... *1 Hitachi Advanced Data Binder は、内閣府の最先端研究開発支援プログラム「超巨大データベース時代に向けた最高速データベー スエンジンの開発と当該エンジンを核とする戦略的社会サービスの実証・評価」(中心研究者:喜連川 東大教授／国立情報学研究所 所長)の成果を利用しています。 *2 ArcGIS は、Esri 社が提供する GIS ...
5
日立評論 2014年10月号：人流・交通流ビッグデータを活用した都市経営基盤
... ここでは，都市経営基盤のコンセプト，国内外での事例， および今後の展望について述べる。 2. 都市経営基盤のコンセプト 都市経営基盤ソリューションのコンセプトを 図 1 に示 す。さまざまな社会インフラ事業者から，スマートフォン や IC カード，各種センサーを用いて，人流・交通流デー タを収集する。また，国・自治体からは，施設情報や交通 センサス，人口統計など各種統計情報を収集する。これら ...
5
ＩＴ運用とビッグデータの意外な関係とは
... • プロダクションシステムおよび開発テストの両方に利用 • 証明書の配信事業の障害状況を分析、トラッキング時間が90%削減 • アプリケーションのトラブルシューティング、性能の監視、サービス レベルの監視、レポーティング • 大規模な性能テストに活用 ...
24
アジェンダ No-NoSQLによるアプローチ Hadoop ビッグデータ活用の課題 PostgreSQL Inter-Analyticsとは なぜPostgreSQL + Hadoopか Webログ分析の例 まとめ 課題と次のステップ 2
... – データ処理のためのMapReduceプログラミングが必要 – Key-Valueデータ処理を意識した設計と実装 – 少量データ分析におけるオーバーヘッドの増加によるパフォーマンス低下 – 構造化データにおける集合演算、結合による複雑な問い合わせは難しい ...
32
HPE Moonshot System ～ビッグデータ分析＆モバイルワークプレイスを新たなステージへ～
... 「 HPE ProLiant m710x サーバーカートリッジ」は、マルチモニターを使いこ なす金融トレーダー向けのリモートワークステーションも実現します。 HPE Moonshot System による高性能かつセキュアなトレーダーワークステー ションは、わずかな遅延や停滞も許されない条件下において、米欧あるいは アジア圏で国境を越えた活用がすでに始まっています。デスクトップ型ワーク ...
6
Microsoft PowerPoint - ビッグデータ研修内容（募集添付用）.ppt [互換モード]
... ・｢フレームワーク活用の技術｣古川正寿・早川順 著 翔泳社 ・｢速習サーバーサイトJava｣古川正寿著 ソフトバンクパブリッシング ・｢Java開発の実用問答集｣古川正寿著 翔泳社出版 ・｢JBuilderで学ぶJava言語｣古川正寿著 ソフトバンクパブリッシング ・｢JBuilderサーブレット開発｣古川正寿著 ソフトバンクパブリッシング ・｢Borland JBuilder4 ...
7
Oracle Advanced Analytics ビッグ・データと分析をシンプルに
... 複雑なセグメント化の問合せを数週間から数分間に短縮 — 競争上の強みを獲得 目的 世界をリードする顧客科学会社 Oracle Advanced Analyticsとサード・パーティ製ツールを使用して、分 析をほぼリアルタイムで実行可能なまでに短縮し、スマートフォンの ような新しいソースの非構造化ビッグ・データを分析 ...
72
医療健康分野のビッグデータ活用研究会 報告書 vol 年 7 月 日本製薬工業協会 医薬産業政策研究所 無断転載を禁ずる
... また、米国では既に数多くの医療情報データベースが存在し、活用されている 3) （図 ７ ）。 電 子 カ ル テ と 臨 床 ゲ ノ ム 情 報 が リ ン ク し た デ ー タ ベ ー ス に つ い て は 、 NextBioClinical（Illumina 社）など既に商用で売られ始めているものもある。このよ うな臨床実装や医療情報データベースにより、臨床ゲノムに個々の患者の臨床診断など ...
40
資料 7 日本の医療ビッグデータの利活用 生涯保健情報統合基盤の進捗状況報告 2018 年 1 月 24 日
... ・匿名加工含む共通運用指針の策定 ・丁寧なオプトアウトに向けた共通パンフレットのひな形を作成 ・患者問い合わせ（オプトアウト請求）の代表窓口として、取りまとめ・各認定事業者への通知 ・認定事業者間でのデータの授受におけるルール策定（データ提供における条件など） ...
17