Sparkの主な拡張コンポーネントの紹介と、SparkSQLを利用した簡単な分析

ゼロからはじめるSparkアプリケーション入門（2）

2016/05/31 14:00

目次
Page1 Sparkのテクノロジースタック SparkSQL GraphX Spark Streaming MLlib
Page2 SparkSQLでのプログラミング csvファイルの読み込みとSQLでの操作トランザクションごとの購入価格のサマリー
Page3 複雑な構造のファイルとSparkSQLでのマッピング
Page4 MariaDBとSparkSQLの連携商品の購買ログの補完を行うデータベースの準備購入ログの準備インタラクティブシェルの起動分析処理
Page5 キャッシュと遅延評価 RDDのキャッシュなぜキャッシュ処理が必要なのかまとめ

※この続きは、会員の方のみお読みいただけます（登録無料）。

バックナンバー

連載:ゼロからはじめるSparkアプリケーション入門

田中裕一（日本アイ・ビー・エム株式会社）（タナカユウイチ）

Web系・広告系企業にて、Hadoop/Spark/Kafka等Hadoopエコシステムを利用した広告システム（DMP）・行動分析基盤・レコメンド基盤の全体アーキテクチャ設計やプログラミング、最適化、行動解析を担当。Spark/Hadoopエコシステムを筆頭にOSSを組み合わせた大規模なアーキテクチ...