Spark Streaming のバックアップ(No.5) - .NET 開発基盤部会 Wiki

[ トップ ] [ 新規 | 一覧 | 単語検索 | 最終更新 | ヘルプ ]

「.NET 開発基盤部会 Wiki」は、「Open棟梁Project」,「OSSコンソーシアム .NET開発基盤部会」によって運営されています。

戻る
- Apache Storm
- Hadoop Streaming
- Spark Streaming

目次 †

目次
概要
詳細
参考
- gihyo.jp … 技術評論社

概要 †

ビッグデータのストリーム処理のプロダクト
Apache Sparkのストリーム処理コンポーネント

詳細 †

マイクロバッチを提供
分散処理型でないデータ並列計算を実行
配信保証は安全なデータソースに依存

参考 †

Spark Streamingの概要と検証シナリオ | Think IT（シンクイット）
https://thinkit.co.jp/article/9958
Apache Storm vs Spark Streaming - Ericsson
https://www.ericsson.com/en/blog/2015/7/apache-storm-vs-spark-streaming

gihyo.jp … 技術評論社 †

Hadoopはどのように動くのか
─並列・分散システム技術から読み解くHadoop処理系の設計と実装

Sparkの設計と実装
- 第20回［1］～登場の背景とデータ処理の特徴
  https://gihyo.jp/admin/serial/01/how_hadoop_works/0020
- 第21回［2］～Sparkにおけるデータ共有の仕組みと耐障害性の実現方法
  https://gihyo.jp/admin/serial/01/how_hadoop_works/0021