高度なビッグデータ分析
HPE Moonshot System ～ビッグデータ分析＆モバイルワークプレイスを新たなステージへ～
... 15 倍 * ものパフォーマンス向上を実現しています。 HPE Moonshot System は、 超高密度・低消費電力というメリットをそのままに、様々なアプリケーション／ ワークロードに適用分野を広げていきます。 HPE ProLiant m710x サーバーカートリッジは、アプリケーション仮想化 （ Server Based Computing, Citrix XenApp など） のパフォーマンスを向上さ ...
6
IIJ Technical WEEK Indexer Bullet によるビッグデータ解析
... n パラメータとして変動周期（24 or 168）を設定 u 関数 decompose(): 時系列データを要因ごとに分解する n トレンド（ Trend）、季節要因（seasonal）、ノイズ（random） l 移動平均法による → 時系列解析としては古典的な手法 ...
39
海事分野におけるビッグデータ活用の最新動向
... 2014 年 12 月にロイズレジスター財団は創設を予定されていたアラン・チューリング研究所 に条件付きで 1,000 万ポンド(1,540 万ドル)の助成を行うことを発表した。助成はビッグデ ータの工学応用を対象とする。この戦略はデータの資産としての価値を認め、データを工 学設計の最前線に置くことを目的としている。このようなデータの応用には効率性を高め、 ...
80
Spark と大規模データ処理 - NAISTビッグデータアナリティクス 第2回
... 誰でも使える実装として Hadoop が作られる 分散ファイルシステム Google File System の出現 多くのサーバにデータを分散して配置 いくつかディスクやサーバが壊れてもデータは無事 GFS は Google 以外では利用できない ...
39
労働投入の減少傾向口減少国内需要の縮小懸念第 1 章 ICT によるイノベーションと経済成長 特集部 ( 第 1 章 ~ 第 4 章 ) のテーマとして IoT ビッグデータ AI ~ネットワークとデータが創造する新たな価値 ~ を設定 サイバー空間 AI データを基に分析 データを送信 データの変
... 第 3 章：IoT 時代の新製品・サービス IoT 時代の新たな ICT 機器・サービスとして、現在注目されているフィンテック、シェア リングエコノミー等を取り上げ、それぞれ認知度、利用意向等国際消費者アンケートの比 較を踏まえながら、それらの現状や課題等について分析。また、医療、教育など公共分野 における先進的な ICT 利活用事例や、熊本地震における ICT 利活用事例を紹介。 ...
6
無料セミナー資料：ビッグデータ管理基盤ソフトウェアHadoop入門
... Map/Reduce：収集した膨大なドキュメントを解析し、検索インデックスを構築す るための分散処理基盤 ▌ Doug Cutting氏らにより、GFSとMap/Reduceのオープンソースクローン が開発される⇒ Hadoop ...
25
ビッグデータアナリティクス - 第3回: 分散処理とApache Spark
... 一番ツイートされているテキストは何なのか テキストを全部表示させるようにする >>> df.groupBy("text").count().sort("count",ascending=False).show(20,False) ...
32
経営を変えるビッグデータ活用.indd
... デジタルマーケティングへの関心は高いが、その推進を妨げる問題が、①分析のための分析をしてしまう、②関連部門が非常に多い、③経 営陣の理解を得られない、④プロジェクトの進捗が遅い、の4点である。 これらを解決するための施策として、溝畑氏は「必要メンバーを最小限に絞り、トライアルを経て、どのような結果が得られるかを経営陣 ...
8
PythonとTwitterAPIによるビッグデータ事始め
... Python と TwitterAPI によるビッグデータ事始め 荒川 歩(武蔵野美術大学) 1. はじめに 社会言語科学では，従来，少数の事例を丁寧に質的に分析する方法と，大量のデータを統計的に分析する方法というお 互いに利点と欠点のある方法が相互に補い合うように用いられてきた．このうち，前者の質的な分析は，研究者の人力に ...
4
プロダクトシート Syncsort DMX-h ビッグデータの統合をシンプルに モダンデータアーキテクチャの目標 データウェアハウスおよびメインフレームは従来のデータアーキテクチャにおける中核であり 現在でも重要な役割を担っています しかし データ量の急増に対処したり 企業で分析が必要な多くの新しい
... アクセスと、ビッグ データ リポジトリ への収集。どんなに複雑でも、企業内のあらゆるソースからローデー タを集めます。 モダン データ アーキテクチャの中心にあるのは、データ レイクまた はエンタープライズ データ ハブです。これにより企業は、非常にスケ ーラブルかつコスト効率に優れた方法で、より多くのソースから、より ...
6
時系列ビッグデータの解析と予測
... SpikeM （Matsubara, Sakurai, Prakash, Li, & Faloutsos, 2015） は，BlogやTwitterを始めとするソーシャルネット ワーク上において，噂やニュース等の情報が，時間が経 過するごとに，どのように拡散し減衰していくかを表現 する （Figure 1参照）。提案手法は，ユーザ間のグラフ構 造に基づく情報拡散過程をパワー則に基づく非線形モデ ...
7
質的データ分析におけるグラウンデッドなテキストマイニング・アプローチの提案
... のページ数を必要とする。また分析の全体像を他の研究者が理解する場合も、量的研究に比べ て時間がかかる。GTMA においても、研究者自身が解釈を行う必要はあるが、一般的な質的研 究に比べて、データの全体像や、データ分析と解釈の過程、またその結果を、明瞭な形で示す ことができる。具体的には、コンピュータによる言語処理や多変量解析の結果を示すことで、デー ...
22
人工知能 IoT ビッグデータによる新たな産業革命 我が国経済社会は 様々な構造的 社会的課題に直面している こうした中 IoT ビッグデータ 人工知能をはじめとした新たな技術 ( ) により グローバルに新たな 産業革命 とも呼ぶべきインパクトが見込まれる この結果として 産業構造 就業構造及び経
... 通常の診察行為だけでは見落としがちな 「未病」の傾向 を事前に発見することで、 健康 寿命の長期化 が実現可能。また、これに伴う 医療費の大幅な削減 も期待できる。 心臓病は入院患者がもっとも多い病気の 1つであり、電 子カルテを使用していても、詳細な情報が医療メモに埋 もれてしまうことも少なくないため、 Carilion ClinicはIBMと ...
36
アジェンダ No-NoSQLによるアプローチ Hadoop ビッグデータ活用の課題 PostgreSQL Inter-Analyticsとは なぜPostgreSQL + Hadoopか Webログ分析の例 まとめ 課題と次のステップ 2
... + '-param GET_GROUP="' + str(get_group) + '" ' ¥ + '-param DELIMITER="' + esc_delimiter + '" ' ¥ （PathMatchesストアド関数一部） ストアド関数の引数を、pigの実行パラメタとして指定 Pigで参照するデータ項目をストアド関数のパラメタで指定 ...
32
高度な疲労解析に対応する重要な機能 DesignLife はアーキテクチャを ncode GlyphWorks と共有しており 実試験データと CAE データを高度なレベルで統合しています DesignLife は GlyphWorks とともに または別々に購入できます ncode DesignL
... 重要な機能 製品オプション 応力-寿命 (SN) 応力-寿命メソッドは、主に公称応力が疲労寿命を決め る高サイクル疲労（長寿命）に適用されます。平均応力ま たは温度など複数の材料データ曲線を補完する機能な ど、SN曲線を定義する広範なメソッドを備えています。応 力勾配および表面仕上げを反映するオプションも用意さ れています。Pythonスクリプトは、非常に高い柔軟性を ...
8
の必要性 過去 20 年間における分析機器とラボインフォマティクスシステムの劇的な変化は分析者の主たる仕事を分析からとデータ解析にシフトさせました 高感度化 選択性 真度 精度と処理されるべきサンプル数増加への厳しい要求に対応した分析手法とデータ取り込みの高度化は従来のの改善を追い越してしまいました
... ペプチド ペプチドをベースにした医薬品の開発が進むことにより、一般的な バイオアナリシスラボには新たな課題がもたらされます。このような 高分子医薬品のバイオアナリシスメソッドで求められる感度、選択 性、および頑健性は低分子医薬品と大きく異なるため、それぞれを理 想的に現行の法規制に適合させるためには、ペプチド医薬品に対応す るバイオアナリシスメソッドを開発しなければなりません。生体高分 ...
54
基本方針 IoT(Internet of Things) やビッグデータ 人工知能 (AI) 等の技術の進展により 産業構造や社会構造が大きく変わりつつあるなか IT エレクトロニクス産業は わが国の経済成長ならびに社会の高度化を支える基盤として 重要な役割を担っている 当協会は 世界に先駆け 高度
... 当業界にとって有望な成長分野として新たに設置した先端交通、ヘルスケア、スマート ホームの各課題別部会の分野横断的な取り組みとして、部会間ジョイントチームを立ち上 げ、CPS（サイバーフィジカルシステム）/IoT によるデータ利活用のメリットを積極的に 活かした活動を通じ、社会課題解決への貢献と、当業界の事業領域の拡大に繋がる取り組 みを推進し、関連異業種との一層の連携を強化する。 ...
7
ビッグデータ社会におけるプライバシー～「個人情報」から「プライバシー」保護へ～
... 「AppLog」が組み込まれたアプリの利用開始時には、端末の情報の送信をして「広告配信の最適化などに 利用 するという説明が表示され 拒否も可能 利用」するという説明が表示され、拒否も可能。 しかし、導入済みのすべてのアプリに関する情報を取得することや、性向の分析に利用されることは、ミログ 社のプライバシーポリシーを読み込まないとわかりにくい。 ...
41
Microsoft PowerPoint - ビッグデータ研修内容（募集添付用）.ppt [互換モード]
... 概要 各企業で莫大なデータ（ビッグデータ）をビジネス活用し、新たなサービスを創造することが注目されています。 本コースでは、ビッグデータを活用するために必要な「データの見方」や「データ分析」などの最低限知っておくべき内容や仕組み ...
7
AWSビッグデータソリューション Amazon Redshift, Amazon EMR, Amazon DynamoDBご紹介
... ETL済みデータ USER1: { Interest: [ ʻ‘Carʼ’, ʻ‘Homeʼ’ ], ... } USER2: { Interest: [ ʻ‘Dogʼ’, ʻ‘Catʼ’ ], … } EMR 処理理済みデータ S3 ユーザーごとにログを集計して興味分野を ...
101