2013
Tutorial Install Hadoop
Mengenal Hadoop
Hadoop Merupakan Distributed File atau bisa diartikan system file yang terdistribusi
Hadoop ,Hadoop juga merupakan suatu proyek open source milik Apache.Apache
mengembangkan HDFS berdasarkan konsep dari google File System , Oleh karena itulah HDFS
sangat mirip Dengan google file system .Baik Ditinjau dari segi fisiknya maupun logika dan cara
kerjanya .
Karena hadup merupakan file distribusi ,file distribusi tersebut merupakan system yang
menyimpan data tidak dalam satu hard drive (HDD) atau media penyimpan lainnya , akan tetapi
hal lainnya data tersebut di pecah-pecah dan disimpan tersebar dalam suatu cluster yang terdiri
atas beberapa computer ,bisa dua atau bahkan ribuan computer .
Mengistall Hadoop Pada Linux Ubuntu (Single-Node Cluster )
Persiapkan Virtual Box . Dan install .
Install Ubuntu 12.10 di virtual box (Bisa yang versi lain)
Persiapkan Hadoop 2.2.0 ( Bisa juga dengan versi lain)
Persiapan Penginstalan
Install Python dengan Perintah
Selanjutnya dengan menggunakan perintah
Dan selanjutnya perintah “$ sudo apt-get update”
Lalu install JDK pada Ubuntu dengan perintah “$ sudo apt-get install
openjdk-6-jdk”
Kalau sudah bisa dicek dengan perintah “$ java –version”
Buat Hadoop user baru dengan shintax”$ sudo addgroup hadoop “ dan “$
sudo adduser –ingroup hadoop hduser “. Perintah tersebut akan membuat
hduser dan folder hadoop dalam system.
Install SSH pada Ubuntu dengan sintax “$ sudo apt-get install ssh”, tunggu
sampai selesai.
Konfigurasi SSH
Langkah pertama yaitu mengenerate SSH key untuk hduser.
Ketik “$ su – hduser”
Dilanjutkan dengan
Selanjutnya harus mengaktifkan SSH pada local Machine yang telah anda
buat tadi
Kemudian konekkan SSH dengan localhost
Selanjtunya disable IPv6 ,EXIT dari hduser,dan masuk sebagai root.
Pada bagian akhir teks editor ,ketikkan
Selanjutnya harus reboot Ubuntu setelah konfigurasi ipv6 tersebut .dan
setelah itu ketikan perintah untuk melihat apakah sudah terdisable atau
tidak.
Jika muncul angka 1 , maka pen-disable-an IPv6 berhasil.
Install HADOOP Masuk kedalam folder tempat hadoop berada
Ketikkan perintah
Langkah selanjutnya kita update Update $HOME/.bashrc
Dengan Perintah “$ nano $home/.bashrc” lalu akan muncul teks editor ,pada baris
terakhir tambahkan teks seperti ini
Sambungan
Selanjutnya kita konfigurasi file hadoop-env.sh
Cari baris
Dan edit menjadi
Buat suatu direktori dan set chmod nya
Cari dan buka core-site.xml ,pada bagian diantara <configurasi></configuration>isikan
teks berikut ini .
Setelah itu cari dan buka file mapred-site.xml,(jika ditemukan “mapred-
site.xml.template “ maka hapus saja .template ..lalu sisipkan text berikut diantara
<configuration></configuration>.
Cari file hdfs-site.xml, edit juga pada configurationnya
Formatting HDFS FILEsistem Via NameNodeg
Ini berguna untuk mengimplementasi filesistem local cluster teratas,dengan cara
Starting Single-node-Cluster Start hadoop dengan perintah :
Silahkan cek browser pada urlnya ketikkan “localhost:50030” jika berhasil akan muncul
halamannya
Kalau sudah selesai ,hentikan aktivitas hadoop dengan perintah
..