FANCOMI Ad-Tech Blog

株式会社ファンコミュニケーションズ nend・新規事業のエンジニア・技術ブログ

Hadoop

Hadoop Streamingで、MapReduceをPHPで実装する

はじめに こんにちは、t_oookaです。 今回は、Hadoop Streamingを使用して、PHPでmap,reduce処理を実装してみます。 Hadoop Streamingとは、hadoopが提供するユーティリティで、当該ユーティリティを使用することでJava以外の任意の言語やコマンド(標準入力…

MongoDBとHiveでごにょごにょ事始め

こんにちは、s_mamedaifukuです。 先頭の ”s" は「塩」の ”s" です。 MongoDBとHiveの連携を試みている今日この頃です。 各ソフトウェアのバージョンは MongoDB : 2.6.1 Hadoop(EMR) : 1.0.3 Hive : 0.11.0.1 です。 HiveからMongoDBのデータを操作する 「Mo…

とあるオープンソースの分散処理基盤 -Hadoop(ハドゥープ)-

Introduction - Hadoopとは? こんにちは、k_oomoriです。今回は、オープンソースミドルウェアのApache Hadoopを取り上げたいと思います。 コンピュータの性能は日々進化しているとはいえ、1台のマシンの性能にはおのずと限界があります。また、その時々で常…