Pig 付録についていた count_word.pl
日経 Linux 2011-05 を参考に Hadoop を実験してみましたがなぜかエラーになるので一度ソースを見てみました結果、付録DVDに入っていたスクリプトには#!/usr/bin/perl#use strict;my %words;...
2011-04
Pig Pig Pig の実験
引き続き、Pig の実験です続いて、データ処理の実験のためのファイルをダウンロードしますへアクセスし、reviewsNew.rarというファイルをダウンロードしますこのファイルは。.rar という形式なので、解凍するためにsudo apt-...
Pig Pig の設定をスクリプトで実行
前回、Hadoop の設定をスクリプトで実行できるようにしたので今回は Pig を設定してみますPig はすべての hadoop インストール済みのマシンにいれる必要性はなく、どれか１つでよいようなので別のスクリプトにしましたまずvi se...
Hadoop Hadoop の設定をスクリプトで実行
ディスク容量が足りなかったため再度 設定することにしました今度は、容量を大きめにつくってみました前回、２０GBで足りないので、今回の Vmware で作成した容量は50GB 割当てしましたまた、再度設定することも考えて、セットアップスクリプ...
Hadoop Hadoop でエラーの意味
hadoop を使うため、pig を実行したところ、エラーになりました原因を探したところ、どうやらディスク容量が足りないのが原因のようです前回、VMware Player で容量を増やしたのですがたしかに容量は増えたのですが、未使用領域が増...
Pig Pig でデータ処理
準備がほぼ整ったので、Pig でデータ処理してみましたしかし、雑誌のとおりにやったところエラーになります原因は、Pig のクラスパスにありましたport PIG_CLASSPATH=/opt/hadoop/confとなっていましたこれをex...
VMware VMware Player の仮想マシンの容量拡張
Vmware Player では、仮想マシンに割り当てたHDDの容量を拡張できます作成した仮想マシンを選択しEdit virtual machine settingsをクリックhard Disk(SISI) をクリックしUtils をクリッ...
unrar .rar ファイルの解凍
日経 Linux 2011-05 を参考に、Hadoop の実験を開始していますしかし、.rar 拡張子の解凍方法が載っていないので検索してみましたunrar コマンドで解凍できるようなのですがubuntu 10.10 にはインストールされ...
Pig Pig の導入
前回、分散処理技術 Hadoopで hadoop をインストールしパスフレーズなしのSSHでSSH公開鍵認証でログインできるようになったので、今度はPig をインストールしますPig は。大容量データの集計処理などに使うようですPig の使...
android AppWidget概要
Appwidget は、ホームボタン長押しででるウィジェットを作成するエミュレータでウィジェットを画面に追加し、実際の動作確認をしたいのならmenu と書いてあるボタンをクリックしAdd をクリック次にWidget をクリックすれば自作アプ...