Hadoop Hadoop の設定をスクリプトで実行
ディスク容量が足りなかったため再度 設定することにしました今度は、容量を大きめにつくってみました前回、２０GBで足りないので、今回の Vmware で作成した容量は50GB 割当てしましたまた、再度設定することも考えて、セットアップスクリプ...
Snowpool
Hadoop Hadoop Hadoop でエラーの意味
hadoop を使うため、pig を実行したところ、エラーになりました原因を探したところ、どうやらディスク容量が足りないのが原因のようです前回、VMware Player で容量を増やしたのですがたしかに容量は増えたのですが、未使用領域が増...
Pig Pig でデータ処理
準備がほぼ整ったので、Pig でデータ処理してみましたしかし、雑誌のとおりにやったところエラーになります原因は、Pig のクラスパスにありましたport PIG_CLASSPATH=/opt/hadoop/confとなっていましたこれをex...
VMware VMware Player の仮想マシンの容量拡張
Vmware Player では、仮想マシンに割り当てたHDDの容量を拡張できます作成した仮想マシンを選択しEdit virtual machine settingsをクリックhard Disk(SISI) をクリックしUtils をクリッ...
unrar .rar ファイルの解凍
日経 Linux 2011-05 を参考に、Hadoop の実験を開始していますしかし、.rar 拡張子の解凍方法が載っていないので検索してみましたunrar コマンドで解凍できるようなのですがubuntu 10.10 にはインストールされ...
Pig Pig の導入
前回、分散処理技術 Hadoopで hadoop をインストールしパスフレーズなしのSSHでSSH公開鍵認証でログインできるようになったので、今度はPig をインストールしますPig は。大容量データの集計処理などに使うようですPig の使...
android AppWidget概要
Appwidget は、ホームボタン長押しででるウィジェットを作成するエミュレータでウィジェットを画面に追加し、実際の動作確認をしたいのならmenu と書いてあるボタンをクリックしAdd をクリック次にWidget をクリックすれば自作アプ...
SSH パスフレーズなしのSSH
今回、Haddop の実験を行うにあたってパスフレーズなしのSSH接続が必要になるので、これについて勉強してみました日経 Linux 2011-05 にはssh-keygen -t dsaを実行し、パスフレーズを空白のまま Enter とな...
Hadoop 分散処理技術 Hadoop
日経Linux 2011-05で短期連載でHadoop の特集があるので、これを実験hadoop に関しては、Wikipedia の記事Hadoopを見ましたなにごとも手をつけて実験してみるとなにか得るものがあるかもまずは、Hadoop を...
Edy IS04 で Edy でポイント設定
IS04 で Edyでポイントを設定しましたいまだに対応しているポイントは少なく、以前であればTポイントにしたのですが、今回は、２００円でたまるのは。楽天かANAマイルなので、ここは新しい実験のためにANAマイルを選択しました先日、ようやく...