2013

Tutorial Install Hadoop

Mengenal Hadoop

Hadoop Merupakan Distributed File atau bisa diartikan system file yang terdistribusi

Hadoop ,Hadoop juga merupakan suatu proyek open source milik Apache.Apache

mengembangkan HDFS berdasarkan konsep dari google File System , Oleh karena itulah HDFS

sangat mirip Dengan google file system .Baik Ditinjau dari segi fisiknya maupun logika dan cara

kerjanya .

Karena hadup merupakan file distribusi ,file distribusi tersebut merupakan system yang

menyimpan data tidak dalam satu hard drive (HDD) atau media penyimpan lainnya , akan tetapi

hal lainnya data tersebut di pecah-pecah dan disimpan tersebar dalam suatu cluster yang terdiri

atas beberapa computer ,bisa dua atau bahkan ribuan computer .

Mengistall Hadoop Pada Linux Ubuntu (Single-Node Cluster )

Persiapkan Virtual Box . Dan install .

Install Ubuntu 12.10 di virtual box (Bisa yang versi lain)

Persiapkan Hadoop 2.2.0 ( Bisa juga dengan versi lain)

Persiapan Penginstalan

Install Python dengan Perintah

Selanjutnya dengan menggunakan perintah

Dan selanjutnya perintah “$ sudo apt-get update”

Lalu install JDK pada Ubuntu dengan perintah “$ sudo apt-get install

openjdk-6-jdk”

Kalau sudah bisa dicek dengan perintah “$ java –version”

Buat Hadoop user baru dengan shintax”$ sudo addgroup hadoop “ dan “$

sudo adduser –ingroup hadoop hduser “. Perintah tersebut akan membuat

hduser dan folder hadoop dalam system.

Install SSH pada Ubuntu dengan sintax “$ sudo apt-get install ssh”, tunggu

sampai selesai.

Konfigurasi SSH

Langkah pertama yaitu mengenerate SSH key untuk hduser.

Ketik “$ su – hduser”

Dilanjutkan dengan

Selanjutnya harus mengaktifkan SSH pada local Machine yang telah anda

buat tadi

Kemudian konekkan SSH dengan localhost

Selanjtunya disable IPv6 ,EXIT dari hduser,dan masuk sebagai root.

Pada bagian akhir teks editor ,ketikkan

Selanjutnya harus reboot Ubuntu setelah konfigurasi ipv6 tersebut .dan

setelah itu ketikan perintah untuk melihat apakah sudah terdisable atau

tidak.

Jika muncul angka 1 , maka pen-disable-an IPv6 berhasil.

Install HADOOP Masuk kedalam folder tempat hadoop berada

Ketikkan perintah

Langkah selanjutnya kita update Update $HOME/.bashrc

Dengan Perintah “$ nano $home/.bashrc” lalu akan muncul teks editor ,pada baris

terakhir tambahkan teks seperti ini

Sambungan

Selanjutnya kita konfigurasi file hadoop-env.sh

Cari baris

Dan edit menjadi

Buat suatu direktori dan set chmod nya

Cari dan buka core-site.xml ,pada bagian diantara <configurasi></configuration>isikan

teks berikut ini .

Setelah itu cari dan buka file mapred-site.xml,(jika ditemukan “mapred-

site.xml.template “ maka hapus saja .template ..lalu sisipkan text berikut diantara

<configuration></configuration>.

Cari file hdfs-site.xml, edit juga pada configurationnya

Formatting HDFS FILEsistem Via NameNodeg

Ini berguna untuk mengimplementasi filesistem local cluster teratas,dengan cara

Starting Single-node-Cluster Start hadoop dengan perintah :

Silahkan cek browser pada urlnya ketikkan “localhost:50030” jika berhasil akan muncul

halamannya

Kalau sudah selesai ,hentikan aktivitas hadoop dengan perintah

..