Vous êtes sur la page 1sur 5

Atelier Base de données avancées ISETN

Tp installation hadoop cloudera et HDFS

I-Installation Cloudera
1- Téléchargement et installation de VirutalBox : Si vous n’avez pas déjà installé
VirtualBox, accédez à https://www.virtualbox.org/wiki/Downloads pour télécharger et
installer VirtualBox pour votre ordinateur.
2- Téléchargez la VM Cloudera. Téléchargez la VM Cloudera sur
http://downloads.cloudera.com/demo_vm/virtualbox/cloudera-quickstart-vm-
5.4.2-0-virtualbox.zip. La VM mesure plus de 4 Go, le téléchargement prendra donc
un certain temps.
3- Décompressez la VM Cloudera:
Cliquez avec le bouton droit sur cloudera-quickstart-vm-5.4.2-0- virtualbox.zip et
sélectionnez «Extraire tout…»

4- Démarrez VirtualBox.
5- Créer une nouvelle machine virtuelle Linux

1
Atelier Base de données avancées ISETN

6- Ajoutez le Cloudera «cloudera-quickstart-vm-5.13.0-0-virtualbox.vmdk» qui a été


précédemment téléchargé et extrait

7- Appuyez sur “Configuration”, et ajouter plus de CPU si vous avez et activez la


fonction glisser / déposer «bidirectionnelle».
8- Procédez à l’installation de l’image cloudera, après quelques minutes, le bureau de
CentOS s’affiche.

II- Atelier HDFS


 Step1
Ouvrez le navigateur en cliquant sur l'icône du navigateur en haut à gauche de l'écran.

 Step 2 :

Télécharger un fichier texte à copier dans HDFS. Entrez le lien suivant dans le navigateur :

http://ocw.mit.edu/ans7870/6/6.006/s08/lecturenotes/files/t8.shakespeare.txt

2
Atelier Base de données avancées ISETN

Une fois la page chargée, cliquez sur le bouton Ouvrir le menu.

Cliquez Sue save page

Changer le nom de fichier words.txt and cliquez Save.

 Step 3 :

1- Ouvrez un shell de terminal en cliquant sur la case noire carrée en haut à gauche de
l'écran.

2- Exécutez l’instruction cd Downloads pour changer le répertoire courant.

3- Exécutez l’instruction ls pour voir si le fichier words.txt est enregistré

4- Copiez le fichier dans HDFS en tapant

hadoop fs –copyFromLocal words.txt

3
Atelier Base de données avancées ISETN

5- Verifiez si le fichier a été copié dans HDFS.

hadoop fs -ls

6- . copier le fichier dans HDFS . Vous copiez le fichier words.txt dans un autre fichier
words2.txt en tapant
hadoop fs -cp words.txt words2.txt

7- Vous pouvez voir si le nouveau fichier existe ou non en tapant


hadoop fs -ls

8- Copiez un fichier depuis HDFS. Nous pouvons également copier un fichier de HDFS
vers le système de fichiers local en tapant
hadoop fs -copyToLocal words2.txt.

Tapez ls pour voir si le fichier (words2.txt) a été copié

9- Supprimer un fichier dans HDFS. Supprimons words2.txt dans HDFS.Executez

hadoop fs -rm words2.txt

4
Atelier Base de données avancées ISETN

Tapez hadoop fs -ls pour vérifier que le fichier n’existe plus.

Vous aimerez peut-être aussi