前回は、 Web ConsoleからAmazon Elastic MapReduceを起動する方法を説明しました。今回はAPIでの起動方法を紹介していきます。 Web ConsoleとAPIはどこが違うのか 使用前に、 まずWeb ConsoleとAPIの違いをおさえておきましょう。 Webコンソールは、 1回の操作でJobを1つしか ...
昨今、 バッチ処理にHadoopを活用する事例が話題になっています。その中でも特筆すべきなのは、 分散処理技術であるMapReduceです。しかし、 MapReduceを実際に使うには、 数台から数100台のサーバを用意し、 Hadoopのセットアップもしなければなりません。
翔泳社では、「独習」「徹底入門」「スラスラわかる」「絵で見てわかる」「一年生」などの人気シリーズをはじめ、言語や開発手法、最新技術を解説した書籍を多数手がけています。プロジェクトマネジメントやチームビルティングといった管理職向けの ...
「MapReduce」よ、道を譲ってくれ。君はここまでよく頑張ってくれたが、今日のビッグデータ開発者が求めているのは、処理速度と簡潔性だ。 「Apache Hadoop」(以下Hadoop)環境で稼働するフレームワークとして、最近登場した、高速処理が得意な「Apache Spark ...
Hadoop is the most significant concrete technology behind the so called “Big Data” revolution. Hadoop combines an economical model for storing massive quantities of data – the Hadoop Distributed File ...