Le framework Apache Hadoop

Objectifs

 

Principaux Objectifs

La bibliothèque Hadoop et plus généralement, le projet, est basé sur certains objectifs qui en font ses caractéristiques principales :

• Faciliter le développement d'applications permettant de gérer et d'effectuer des calculs sur des données, distribuées sur un ensemble de machines
• Répondre à un besoin de haute disponibilité lors de l'exécution de tâches sur ces données (tolérance aux pannes)
• Exécuter des opérations complexes sur de gros volumes de données
• Assurer la mise à l'échelle d'une architecture distribuée

Nous allons voir que les grands concepts d'Hadoop que nous allons aborder dans la partie suivante, permettront de répondre à ces problématiques.

 

Présentation

• Accueil

Le Framework

• Un peu d'histoire...
• Présentation
• Objectifs

Son fonctionnement

• Architecture
• Map / Reduce
• Système de fichiers HDFS
• L'exécutable Hadoop

Les modes d'utilisation

• Standalone
• Pseudo-distributed
• Fully-distributed

Implémentations et outils

• Implémentations du framework
• Qui l'utilise ?'

Conclusion

• Conclusion
• Webographie