「[[.NET 開発基盤部会 Wiki>http://dotnetdevelopmentinfrastructure.osscons.jp]]」は、「[[Open棟梁Project>https://github.com/OpenTouryoProject/]]」,「[[OSSコンソーシアム .NET開発基盤部会>https://www.osscons.jp/dotNetDevelopmentInfrastructure/]]」によって運営されています。 -戻る --[[Apache Hadoop>Hadoop]] --[[ストリーム処理>分散処理:ストリーム系]] ---Hadoop Streaming ---[[Spark Streaming]] ---[[Apache Storm]] ---[[Apache NiFi]] ---[[Apache Kafka]] *目次 [#f778a8f2] #contents *概要 [#s14f5446] -[[Hadoop]]が開発された当初から存在する機能 -[[ビッグデータ]]のストリーム処理のプロダクト -[[Hadoop]]のストリーム処理コンポーネント *詳細 [#df3a2462] -Unixの標準入出力を受け付けることができる。 -つまり、 好きな言語で Map/Reduceを書ける。 *参考 [#b0c8d6b9] -Hadoop Streamingを使って お好きな言語でMap☆Reduce!~ https://www.slideshare.net/masayataji/hadoop-streaming-mapreduce -EMRでHadoop Streamingジョブを実行する | Developers.IO~ https://dev.classmethod.jp/articles/hadoop-streaming-on-emr/ -HadoopStreaming で MapReduce を Python で動かす - しろかい!~ https://shirokai.hatenablog.com/entry/hadoop-streaming