Amazonの子会社Amazon Web Services（AWS）は米国時間4月2日、オープンソースのソフトウェアフレームワーク「Hadoop」を利用して大量のデータ解析を行う、新たなクラウドコンピューティングのベータサービスを開始した。 「Amazon Elastic MapReduce」と呼ばれるこの ...

Amazon Elastic Mapreduce （EMR） は、 Hadoop環境を構築することなくMapReduceが使える、 PaaSに近いものです。しかし、 中身はAmazonが独自にカスタマイズしているHadoopなので、 一般的なHadoopのチューニング手法をそのまま適用できない場合があったりします。 前回の ...

When the Big Data moniker is applied to a discussion, it’s often assumed that Hadoop is, or should be, involved. But perhaps that’s just doctrinaire. Hadoop, at its core, consists of HDFS (the Hadoop ...

A monthly overview of things you need to know as an architect or aspiring architect. Unlock the full InfoQ experience by logging in! Stay updated with your favorite authors and topics, engage with ...

What are some of the cool things in the 2.0 release of Hadoop? To start, how about a revamped MapReduce? And what would you think of a high availability (HA) implementation of the Hadoop Distributed ...

Hadoop has been widely embraced for its ability to economically store and analyze large data sets. Using parallel computing techniques like MapReduce, Hadoop can reduce long computation times to hours ...

Scientists and mathematicians have long loved Python as a vehicle for working with data and automation. Python has not lacked for libraries such as Hadoopy or Pydoop to work with Hadoop, but those ...

第4回まではHadoopの活用事例や、 どのような用途に向いているのかということを中心に解説してきました。さて、 最終回となる第5回は、 Hadoopをこれから活用し始めようとしているエンジニアが理解しておくべきことや、 情報収集のポイントなどについて ...

Interest in Apache Spark surpassed Apache Hadoop for the first time last month, according to Google Trends. While it’s not a definitive statement of Spark’s actual impact on big data processing in the ...

The demand for job skills related to data processing — NoSQL, Apache Hadoop, Python, and a smattering of other such skills — has hit all-time highs, according to statistics collected by tech job site ...