教育ビッグデータ解析
MATLAB®によるビッグデータ解析
... Hive ™ : Facebookによって開発されたデータウェアハウス Pig ™ : Yahoo!によって開発されたデータフロー言語および実行環境 HBase ™ : GoogleのBigtableを参考にした列指向の分散データベース Cassandra ™ : Facebookによって開発された列指向の分散データベース ...
26
ビッグデータの活用と分析に至るプロセス
... ビッグデータには、その特性とされる「3つのV」のVariety（バラエティ）、Volume（ボリューム）、Velocity （ベロシティ）のいずれかを持っていることが挙げられます。 【出所】Deja VVVu: Others Claiming Gartner’s Construct for Big Data［Gartner | Doug Laney］ ...
23
Oracle Advanced Analytics ビッグ・データと分析をシンプルに
... – Hive対応透過レイヤーを使って、HDFSデータのアクセスと変換を実行 – R言語を使ってマッパーとリデューサを作成 – Rメモリ、ローカル・ファイル・システム、HDFS、Hive、Oracle Database間でデータをコピー – RプログラムをHadoop MapReduceジョブとして実行して、結果をそれらの場所に返すようにスケジューリング ...
72
Pwrake/Gfarmによる ビッグデータ解析
... -T, --tasks [PATTERN] Display the tasks (matching optional PATTERN) with descriptions, then exit. -v, --verbose Log message to standard output.[r] ...
46
無料セミナー資料：ビッグデータ管理基盤ソフトウェアHadoop入門
... Map/Reduce：収集した膨大なドキュメントを解析し、検索インデックスを構築す るための分散処理基盤 ▌ Doug Cutting氏らにより、GFSとMap/Reduceのオープンソースクローン が開発される⇒ Hadoop ...
25
海事分野におけるビッグデータ活用の最新動向
... デジタル化は船舶保守サービスのあり方を根底から変えている。バルチラはビッグデータ と高度なデータ分析を利用して企業の業務効率改善と資産のパフォーマンス最適化を助け る新しい種類のサービスを開発する戦略をとっている。 バルチラグループの補修・保守・アフタサービス事業が占める売上及び利益の割合はここ しばらく一貫して上昇傾向を示しており、過去 2 年間のグループの売上高に占める割合は 毎年 ...
80
Deep Learning によるビッグデータ解析 ~ 手法や CUDA による高速化 2014 年 9 月 5 日 G-DEP ソリューションパートナー株式会社システム計画研究所奥村義和
... 目次 •DeepLearningとGPU •DeepLearningとは •仕組みと計算 •初期化の1手法：Layer-wise Pretraining •SAEによる次元圧縮例 •G-DEPテストドライブ •ビッグデータ・GPU・DeepLearningの接点.. 苦労話など… •ハイパーパラメタは試行錯誤 •層の数、非線形関数の種類、 学習係数、[r] ...
38
HOKUGA: 情報教育のためのWeb プログラミングによるアンケート作成とデータ解析について
... は，予め作成しておいたデータを書き込むテ キストファイル ”anc.dat” に，フォームに入 力されたデータを書き込む手順を表してい る。関数 fopen によってテキストファイル ”anc.dat” を追記ファイルとして開き，ファ イル名を変数 $fp に代入する。for 文により， ⚐から数えてキーの数（count($a)によって 変数 $a の配列数が得られる）だけ，繰り返す。 関数 fwrite ...
10
プログラミングによるビッグデータの分析（R）
... Excelから取り込んだ全てのデータは、データフレーム「 elec_weather 」に入っていますが、日時のデータおよび回帰 分析の対象とする地域のデータをデータフレーム「 elwe 」へと抽出します。 • 他の地域に関する分析を参照する場合は、コード内の（東京電力, 東京_）の部分を(北海道電力, 札幌_) （東北電力, 仙台_）（中部電力, ...
30
ＩＴ運用とビッグデータの意外な関係とは
... Engineer トラブルシュートにかかる時間を70%改善する事によりITコスト削減 を実現 3つのデータセンターおよび400におよぶ仮想システムで構成される PingOne Applicationのデータ分析を集中化、生産性を大幅に向上 複数ツールの統合が顧客要求に対するプロアクティブな対応 を実現 ...
24
HPE Moonshot System ～ビッグデータ分析＆モバイルワークプレイスを新たなステージへ～
... 」としてレーシングマシンのリアルタイム データ分析に活用しています。バッテリ、温度、ブレーキ、回転数など、テレメーターから刻々と送られ てくるデータを高速で処理。マシンの状況を把握しながら、速度、ポジション、ピットタイミングなど、 メンテナンスエンジニアやドライバーに適切な情報を提示しています。 HPE Moonshot ...
6
PDFファイル 2E4OS25a オーガナイズドセッション「OS25 ビッグデータとAI 」
... The 28th Annual Conference of the Japanese Society for Artificial Intelligence, 2014 - 1 - ビッグデータ解析と社会イノベーションに向けた取り組み Big Data Analytics and its Application toward Social Innovation 池田 尚司 *1 ...
1
次世代IT と呼応する宇宙ビッグデータ・ビジネス－「宇宙産業ビジョン2030」による加速－
... ている。つまり、この流れは他産業にとって も新しいビジネスに取り組むチャンスとなっ ている。 「宇宙利用産業」の視点でみると、 「衛星デ ータ×次世代 IT」におけるもう一つの大きな 変化が見られる。かつては、宇宙産業という と、図表５のとおり、衛星製造、打ち上げ、 衛星運用・データ配信等のハード産業ばかり が注目されたが、近年は、衛星データ解析、 統合ソリューション、エンドユーザー利用等 ...
11
恒星のスペクトル観測とデータ解析 研究発表一覧 第４６回関東理科教育研究発表会千葉大会
... ①蛍光灯 ②太場光 蛍光灯は，水銀の輝線と蛍光体による 太場光は，代表的な連続スペクトルです。 発光スペクトルが観測できます。 フラウンホーファー線（暗線）が観察できます。 恒星のスペクトル観測とデータ解析 ...
2
統計的データ解析
... 最尤法の直接利用と最小二乗法 最小二乗法を使えないとき＝分布が正規分布でないとき ビンまとめし、ヒストグラムをつくると、１ビンあたりに含ま れるデータ数が十分大きい場合、正規分布で近似できる。 この場合最小二乗法が使えるようになる。 ...
61
データ解析実習マニュアル
... 33 : unsigned long cnt1; /* main内で使用 */ 34 : int pattern; /* パターン番号 */ 35 : 36 : /* データ保存関連 saveDataのサイズは最大で2.5KB程度としてください */ 37 : int iTimer10; /* 取得間隔計算用 */ 38 : unsigned char saveData[SAVE_SIZE][2]; /* 保存エリア ...
105
Microsoft PowerPoint - ビッグデータ研修内容（募集添付用）.ppt [互換モード]
... 各企業で莫大なデータ（ビッグデータ）をビジネス活用し、 新たなサービスを創造することが注目されています。 本コースでは、ビッグデータを活用するために必要な 「データの見方」や「データ分析」などの最低限知っておく べき内容や仕組みを理解していただきます。また、多くの 企業で必要としている予測分析の仕組みを事例解説など ...
7
データ解析チュートリアル
... 第38回天文情報処理研究会「大規模サーベイとそのデータ処理」 (1999) 第39回天文情報処理研究会「超高速ネットワークと天文学」 (2000) 第40回天文情報処理研究会「大フォーマットCCD素子の現状と将来」 (2000) 第41回天文情報処理研究会「天文学とカタログ」 (2000) ...
5
PythonとTwitterAPIによるビッグデータ事始め
... しかし現状では， Twitter というビッグデータの分析にはプログラミング等の知識を要するため，それらの専門 的な知識をもった人以外には障壁が大きいと思われる．そこで本研究では，素人として大量のツイートデータを収 集し，テキストマイニングで簡単な分析を行う方法について紹介する．例として，近年「大人コーデ」や「双子コ ...
4
日立ソリューションズのビッグデータビジネス
... IT業界のキーワードとして、2010年頃から注目を浴び始めた『ビッグデータ』 一方で、本質が掴み難く、バズワードと捉えられているのも現実 約3年経った現在も、「ビッグデータとは何か?」、「これまでの分析と何が違う のか?」といった議論が交わされ、 ...
38