Configurare hadoop Pseudo-distribuito

da admin il novembre 26, 2009

Come prerequisito di questa guida vi è quello di aver già installato hadoop, cosa che potete fare seguendo al guida How to install hadoop standalone che potete trovare sempre su questo blog.

Entriamo nel sistema con l’utente hadoop creato nella guida precedente… l’avete seguita attentamente VERO!!!


Per prima cosa è necessario scaricare il pacchetto con i file di configurazione:

sudo apt-get install hadoop-0.20-conf-pseudo

dopo di che è necessario configurare le chiavi ssh per far si che non venga chiesta la password ad ogni connessione, per fare ciò bisognerà posizionarsi all’interno della home di hadoop:

cd ~

e lanciare i seguenti comandi:

ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

Finito, per verificarne il funzionamento, lanciare il comando:

/usr/lib/hadoop/bin/start_all.sh

e verificare la presenza delle seguenti pagine web:

http://localhost:50030/
http://localhost:50070/

stoppare quindi il servizio con il comando:

/usr/lib/hadoop/bin/stop_all.sh

Lascia un commento

Required.

Required. Not published.

If you have one.