大量のデータを分析する
ビッグデータ分析を高速化する 分散処理技術を開発 日本電気株式会社
... 高速化技術の概要 ▌ 機械学習で頻繁に用いられる 繰り返し演算 および 行列演算 を 信頼性を損なわずに高速化 ▌ 新技術を用いた新たな分散処理ソフトウェアを試作、大量データを用いた 機械学習プログラムで検証、MapReduce部分を置き換えることで、 ...
17
314 図 10.1 分析ツールの起動 図 10.2 データ分析ウィンドウ [ データ ] タブに [ 分析 ] がないときは 以下の手順で表示させる 1. Office ボタン をクリックし Excel のオプション をクリックする ( 図 10.3) 図 10.3 Excel のオプション
... Excel ではこのような大量のデータに対する分析を容易に行えるよう、分析ツールと呼ば れる機能を追加することができる。分析ツールとは、統計処理を中心とするデータ分析を ...
26
ネットワークデータは BigData? ネットワークインフラストラクチャは日々大量のデータを生成しています Netflow IPFIX sflow BGP GeoIP SNMP 等のネットワーク情報は トラフィック分析 日々の診断 キャパシティプランニング ピアリングの最適化を実施するための豊富な情
... ～コスト管理と機会創造～ 大量のマルチホームインターネット帯域を消費もしくは販売する場合、 相互接続性を含む最適化が必要です。そのためには、トラフィック量、 BGPパス、相互接続、地理的な到達範囲の相互関係を明確に 把握する必要があります。 Kentik Detectには、トラフィックフローを ...
8
SQL Serverを活用したデータ分析・集計のご提案
... るのかわかる ■商品の購入パターンを分析して効果的な販促を行いたい。 ■ゕンケート回答者の特定項目間の関係を知りたい。 ■顧客が満足する項目のデータからターゲットを絞りたい。 カテゴリの検出 ...
12
大量の実世界データから 今 を分析するストリームデータ処理の可能性 2008 年 11 月 18 日株式会社日立製作所中央研究所主任研究員西澤格 Hitachi, Ltd All rights reserved.
... 入力データを分析して，「変化」や 「状況」をリアルタイムに検知・監視できます。 複数の入力データを組み合わせた条件判定や，入力データの編集を行えます。 入力データから必要なデータだけを抽出 (フィルタリング)できます。 ...
26
MapInfo Marketing M g WebSuite 2.0 マップインフォマーケティングウェブスイート 2.0 地図データ 各種統計データを使い 御社の顧客分析や新店出店などを分析するツールです 地図データ 統計データ 顧客データ 競合店データ MapInfo Marketing WebS
... 統計情報・顧客データの分析 この商圏にはどのような情報が眠っているでしょうか。 地図には様々な統計情報が含まれています。 ユーザーのデータを集計し、統計と共に地理的な分 析を行うことで、これまで見えなかった様々なトレンド が見えてくるはずです。 ...
15
対面学習の学習目標 データ分析のケーススタディ の講義と演習を通じて 以下の理解を深め 実践できるようになることを目標とする 分析の設計 データから現状の把握 現状から 課題の抽出 課題に対する解決のための分析設計 1
... 第5週のまとめ Data（データチェック） データを収集したら、内容を確認し、外れ値や、欠損値が含まれていないかを確認する。 次のような場合、どのような原因が考えられるでしょうか。 ■欠損値が無いことを確認し、回帰分析のモデルを作成したが精度が悪い ...
26
目次 1 会社概要 2 中期経営計画とグローバルIT 戦略 3 テクノロジートレンドとIT 価値の変化 4 ビッグデータの活用の狙い 5 データ分析基盤の整備方針 6 データ分析基盤の目指す姿 7 データ分析基盤の整備ステップ 8 データ分析基盤の仕組み 9 データレーク基盤のシステム構成 10 ま
... OLAP分析 データマイニング プランニング 問題の兆候を発見する 問題の要因を検証する 対処のヒントを得る 計画の根拠を得る 集計、推移、比較、内訳、順 ...
20
Microsoft PowerPoint - 【資料１】統計的分析手法を用いた消費データ分析について
... → 消費支出階級別の消費支出構造の変化を中心に分析をすることとしてはどうか。 ＜高齢単身世帯のデータ活用の課題について＞ ・ 高齢単身世帯については、全国消費実態調査では、高齢夫婦世帯に比べてサンプル数が少ないこと、調査期 ...
29
目次 要旨 背景と目的 はじめに 電力自由化とは 日本の電力自由化経緯 本研究の目的 分析手法 データの選定 データ分析手法 データ分析結果
... ２． 分析手法 ２.１ データの選定 2004 年度・2005 年度から、中規模需要家向ける電力自由化が開始した。2004 年度に 500kW とい う高圧で受電する利用者向けで、2005 年度からは 50kW という高圧で受電する利用者向けとなる。 そこで、我々は 2005 ...
20
日本における結婚観の変化―JGSS累積データ を用いた分析―
... JGSS データのサンプルを女性に限定した分析を行っており、婚姻状態や 就業状態が結婚観に与える効果が変化したことによると明らかにした。2002 年から 2005 年にかけて、 「結婚こそが幸福である」という考えに対する反対の割合が減少するものの、2006 年で再び大幅に増 加した。それ以降大きな割合の変化はなく、2010 ...
12
Oracle Advanced Analytics ビッグ・データと分析をシンプルに
... ナリストは不正パターンをほぼ即座に検出可能00 「TurkcellはOracle Exadata上で100テラバイトの圧縮データ（非圧縮状 態では1ペタバイトの生データ）を管理しています。Oracle Advanced AnalyticsオプションのコンポーネントであるOracle Data Miningを使用 ...
72
GPSデータを用いた小学生の集団津波避難行動の分析
... 本研究では、愛知県知多郡南知多町の内海小学校における避難訓練を事例とし、GPS データから線オブジェク トを作成することで小学校のクラス単位での集団津波避難行動の検討を試みた。結果、避難が比較的容易に行え ...
5
プログラミングによるビッグデータの分析（R）
... • 様々な形態のデータを収集、整理統合することも、データ分析における重要なプロセスですが、ここでは省略して実習用のExcelファイルを取り込みます。 • Excelファイルには9つの電力会社管内に関する消費電力（1時間単位：万kW）、気温（1時間単位：℃）、降水量（1日合計値：mm）のデ ...
30
テキスト型データの計量的分析
... ディング結果を集計するための一連の機能や、語の連関規則（association rule）を算出するための機 能を備えている。 7) さらに、例えば「製造」 「製する」 「作る」などを同じ語として扱うといった指定を無数に集めた既 ...
16
パネル・データの分析
... wage1_fe <- plm(lwage ~ exper , data=wagepan1, model="within" ) # plm(モデル式，データの指定，分析方法の指定） # model : 固定効果“within”，ランダム効果”random”, プール”pooling” # plm の結果をwage1_fe に保存 ...
39
RIETI - 国際化する日本企業の実像－企業レベルデータに基づく分析－
... 業別にわけたデータを対象に行った。表 12 はその分析結果を示したものである。電機機械 産業における距離の被説明変数に対する弾力性は特に大きく (－2.40)、電機機械産業は非 常に距離に敏感な産業であることがわかる。それとは対照的に、輸送用機器産業のその弾 力性は－0.56 ...
41
データベース機能の基礎知識 データベース処理に便利な機能 入力規則 データの並べ替え フィルタ処理 大量のデータを分析する CSV ファイルをインポートする データパイロットによる集計作業 マクロの記録.
... 1 OpenOffice.org オープンマニュアル は じ め に OpenOffice.org は、オープンソース・ライセンスで提供されている統合オフィスソフトです。正式 名称は「OpenOffice.org（オープンオフィス・ドット・オルグ）」。名前のお尻に「.org」と付いて いますが、これはホームページのアドレスでもあり、このソフトを開発しているコミュニティの名 ...
57
講義内容 第 週 データサイエンスとは 第 週 分析の概念と事例ビジネス課題解決のためのデータ分析基礎 ( 事例と手法 ) 第 3 週 分析の具体的手法ビジネス課題解決のためのデータ分析基礎 ( 事例と手法 ) 第 週 ビジネスにおける予測と分析結果の報告ビジネス課題解決のためのデータ分析基礎 (
... データのバイアス 例えば、ある大学で、センター試験の英語の点数と、大学入学後に受け たTOEICの点数の関係性を調べたが、相関は見られなかった。センター 試験の英語の点数とTOEICの点数に関係性はないのだろうか。 ...
51
Rを用いた空間データの構造分析と集積性の検出
... SMRのベイズ推定量 （ E mpirical B ayes Estimator of SMR ） 小地域の死亡率推定に特有な 不安定性を緩和した 死亡率推定. 𝑖 地域のSMRを未知の母数 𝜃 𝑖 とすると, 観測数 𝑜 𝑖 にはポアソン分布を仮定 𝑓 𝑜 𝑖 𝜃 𝑖 , 𝑒 𝑖 = 𝜃 𝑖 𝑒 𝑖 ...
43