Pig を利用したビッグデータ処理
Spark と大規模データ処理 - NAISTビッグデータアナリティクス 第2回
... Word, Excel などの文書，電子メール，ソーシャルメディアの データ，センサーデータ 頻度が多い ( V elocity) 商品の購買履歴データ - クレジットカード，銀行の預貯金 センサーデータ - 気象データ，河川の水位観測，気温 ...
39
ビッグデータ時代の情報活用
... タ） を統合的に集約管理する仕組みである。従来はマス ター化された情報をデータベースで管理していたが，フ ラットデータ処理技術の発展により，多様な形式のデー タを統合的に管理する仕組みとして活用されている。 （注3） ...
7
HPE Moonshot System ～ビッグデータ分析＆モバイルワークプレイスを新たなステージへ～
... ） をはるかに上回るパフォーマン スを発揮し、エントリークラスの CAD ワークステーションとしてご利用いただ けます。同一シャーシ内で、ユーザー属性・用途に応じて異なるカートリッジを 使い分ける Workspace in-a-box ...
6
立体パズルを利用した多次元データ分解手法の理解支援の試み
... る た め に は ， ICT（information and communication technology）ツールを利用したり，アクティブ・ラーニング などの教育手法を用いたりすることが考えられるが，その 際の課題としてここで述べた立体パズルは有効であると考 ...
8
(16) ビッグローブ光テレビ会員端末機器 とは 1 ビッグローブ光テレビを利用して地上デジタル放送 BS デジタル放送または FM ラジオ放送の視聴を行うために BIGLOBE 会員が保有している必要のあるテレビ等の機器 および 2 ビッグローブ光テレビを利用して スカパー JSAT が スカパー
... 2 当社は、次の各号のいずれかに該当する場合には、ビッグローブ光テレビ契約の申し込みを承諾しないことがあります。また、当社 は、ビッグローブ光テレビ契約成立後であっても、次の各号のいずれかに該当することが判明した場合には、当社所定の方法にてビ ...
10
SOMPOデータ・プラットフォーム－グループにおけるビッグデータへの取り組み－
... AI・アルゴリズム データカタログ データソース 社内のみならず、他企業とのアライアンス、オープンデータまでを網羅 したデータセットを用意し 価値あるデータを囲い込む 社内外の利用可能なデータをカタログ化した ...
24
日立ソリューションズのビッグデータビジネス
... Hadoopクラスタの新規構築・スケールアウト、運用で非常に便利 長時間画面を眺めての作業、１台１台の作業から解放されます 環境設定・変更でのヒューマンエラーを最小限にできます Cloudera Managerだけが補完する機能（*1)も見逃せない *1…安全バルブと呼ばれるＸＸＸ ...
38
要旨 : 昨年初めて公開された NDB オープンデータを用いて医薬品マーケティングへの応用可能性を検討した 薬効領域 ( 小分類 ) の市場構造分析と都道府県単位のエリアマーケティングに活用可能であることを確認した キーワード : 医薬品マーケティング 医療ビッグデータ NDB オープンデータ 市場
... ３．公開医療ビッグデータの活用①：医薬品市場構造の分析 ［２］ NDBオープンデータ概要①：薬効領域（大分類）別金額比率 薬効 （大分類） 薬効名称（大分類） 金額（億円） 1 神経系及び感覚器官用医薬品 10,487 2 個々の器官系用医薬品 26,151 3 代謝性医薬品 15,374 4 組織細胞機能用医薬品 10,147 5 生薬及び漢方処方に基づく医薬品 847 6 ...
33
ビッグデータ時代の到来
... Sashiharaは、最適化技術の知見を持 たない経営者向けに、意思決定への革新的な アプローチ手法を紹介する『The Optimization Edge』（2011年、McGraw-Hill社）を著した。 最適化技術の活用が企業に浸透していないの は日本に限った話ではないらしい。同書には、 ...
24
ビッグデータ利活用入門
... 膨大に蓄積されたテキストデータを単語やフレーズに分解して、これらの 関係を一定のルールにそって分析することにより、出現頻度や相関関係 を把握し、単語の関係や時系列の変化などを抽出することによって、客 観的な分析に利用できます。 ...
74
PythonとTwitterAPIによるビッグデータ事始め
... Python と TwitterAPI によるビッグデータ事始め 荒川 歩(武蔵野美術大学) 1. はじめに 社会言語科学では，従来，少数の事例を丁寧に質的に分析する方法と，大量のデータを統計的に分析する方法というお 互いに利点と欠点のある方法が相互に補い合うように用いられてきた．このうち，前者の質的な分析は，研究者の人力に ...
4
はじめに ビッグデータを活用して どんな価値を生み出したいですか? 真実を伝えられないサマリデータ 収集できず切り捨てられた詳細データ 膨大に溜まったまま活用できない履歴データ ごみの山か 宝の山か? データが発生し 消滅するまでのライフサイクルに注目すると 価値を生み出せる瞬間が そして今必要な技
... © Hitachi, Ltd. 2013. All rights reserved. 13 今後、貴社でビッグデータの活用を進めていく場合、 どのようなことが問題・課題となりそうですか？ 出典：2012年12月25日 株式会社野村総合研究所 ビッグデータの利活用に関するアンケート調査 ...
54
ビッグデータの活用と分析に至るプロセス
... カタログ、 データレコードの情報利用 特定の場所、時点に関する 天気情報の検索と抽出 分析用データとしての利用 データ全体または 一部の傾向・特徴 傾向・特徴の発見、 未知の情報の予測 天気の地域性・季節性の発見、 天気予報 ...
23
海事分野におけるビッグデータ活用の最新動向
... グデータの普及に伴うサイバーセキュリティの問題についても、高いプライオリティをお いて検討が進められていることも、この分野の関心が比較的薄い日本としては十分留意す べき点である（9.参照）。 海事分野におけるビッグデータの活用は、研究開発段階を超えてビジネスとして展開され る段階に入ったが、これはこれから引き起こされる大きな一連の動きの始まりに過ぎない。 ...
80
ビッグデータ時代の悩みをストレージで即解決 ブロックストレージ編Q A &
... ストレージ運用管理ソフトウェア Hitachi Command Suite（HCS）とは ● サーバからストレージまでシステム全体を管理 ストレージだけでなく、サーバ、SANスイッチを含めたシステム全体の構成・容量・性能を 把握できます。アベイラビリティ管理ソフトウェア（JP1/Performance Management）と 連携することもできます。 ...
9
時系列ビッグデータの解析と予測
... 自動特徴抽出 実用的な技術やシステムの開発を考えた際，最も重要 である課題が特徴抽出の完全自動化である。例えば，自 己回帰やフーリエ変換，特異値分解をはじめとする従来 の時系列処理技術では，使用する係数の個数や閾値等の パラメータの設定が必要である。しかし，解析するデー タが膨大になるほど，専門のエンジニアによる細やかな パラメータチューニングには時間的，金銭的コストが多 ...
7
はじめに 本資料は 日本 OSS 推進フォーラムビッグデータ部会にて ビッグデータ基盤を実現するオープンソースソフトウェアの動向を調査したものです 本調査は Web などから一般的に収集可能な情報を元に最近の傾向を把握する事を目的としています 本調査結果のみを元に各ソフトウェアの良し悪しを論じるもの
... 利用企業数 StackShare（ https://stackshare.io/ ）に登録されている利用企業数（Stacks） 求人数 StackShare（ https://stackshare.io/ ）に登録されている求人数（Jobs） StackOverflow（ http://stackoverflow.com/ ）に ...
57
プログラミングによるビッグデータの分析（R）
... • 2018年3月時点における上記URLのウェブサイトの表記は概ね英語ですが、英単語が分かれば、ダウンロードやインストールに支障はありません。 • OSへインストールするためのRには、Windows版、Macintosh版、Linux版がありますが、この講座ではWindows版で説明します。 • Windowsを利用している場合は「Download R for ...
30
ビッグデータを活用したものづくり現場のイノベーションを支援する「最強工場」
... ニシアティブセンター（以下，BDIC）」を設立し た。BDICでは，富士通グループのビッグデータ関 連の知見を集約し，お客様からの問合せに対しワ ンストップで支援している（図 -1 ）。ここでは特に， 製造業のお客様の課題をビッグデータ解析技術で ...
7
ビッグデータアナリティクス - 第3回: 分散処理とApache Spark
... これを集計して，日本語で書かれているツイートは全体の何 % なのかを調べたい ”lang”:”ja” が何回出てくるのかを計測（コマンドラインによる方法） % cat /project/bigdata-lab/bda/tweet_20171004.json | grep \"lang\":\"ja\" |wc -l （数十分かかる） ...
32