◎ 伊藤 雅博（株式会社 日立製作所）

OSSソリューションセンタ所属。これまでにストレージ装置とその管理ソフトウェアの開発に従事してきた。現在はHadoop/Spark/HBaseを中心としたビッグデータ関連OSSの導入支援やソリューション開発に従事している。最近は学生時代に取り組んできた機械学習やデータ分析に再び取り組みたいと考えている。

◎ 木下 翔伍（株式会社 日立製作所）

OSSソリューションセンタ所属。これまでにIaaS稼働監視サービスの基盤開発、OpenStackを題材にしたクラウド基盤の運用管理に関する研究、CloudFoundryの検証・評価業務などに従事してきた。現在はビッグデータに関するソリューション開発やOSSの検証業務に従事している。

第1章 Spark Streamingの概要と検証シナリオ
第2章 Kafka、Spark、Elasticsearchによるシステム構築と検証の進め方
第3章 Kafka、Spark、Elasticsearch のパラメータチューニング
第4章 マシン台数の調整とシステム全体のボトルネックについての考察
第5章 Spark 2.0を活用した配電設備の負荷集計システムの性能検証
第6章 Spark 2.0の性能検証の結果とボトルネックの考察
第7章 Sparkのデータ処理プロセスと処理性能のボトルネック
第8章 Sparkの性能向上のためのパラメータチューニングとバッチ処理向けの推奨構成