Supervisez Hadoop en toute simplicité
-
Le stockage distribué et le traitement distribué de grands ensembles de données ont toujours été un défi pour les administrateurs informatiques. Ce besoin croissant de stocker et de traiter efficacement de grands ensembles de données a conduit au développement du framework Hadoop. Avec sa capacité de stockage massive et sa puissance de traitement énorme, Hadoop permet aux utilisateurs de gérer des ensembles de données toujours plus nombreux et d'effectuer facilement des tâches. Cependant, il est important de garantir le bon fonctionnement du framework Hadoop. Avec Applications Manager, qui fournit à la fois la supervision Hadoop Mapreduce et Hadoop Yarn, il est facile d'obtenir des informations opérationnelles sur votre environnement Hadoop, de vous connecter aux clusters Hadoop via l'API REST ou JMX, de maintenir une intégrité optimale des clusters Hadoop distribués et de garantir que vos clusters tâches disponibles et traitement rapide et précis.
-
Suivez l’intégrité globale des clusters Hadoop.
L'outil de supervision Hadoop d'Applications Manager vous permet de:
- Surveillez la disponibilité et l'intégrité de votre système Hadoop.
- Comprendre et surveiller les statistiques HDFS (système de fichiers distribué Hadoop) - capacité DFS, espace utilisé, espace libre et espace utilisé non-DFS.
- Suivez la croissance des fichiers et des répertoires et évitez tout problème éventuel dû à une croissance anormale du nombre de fichiers.
- Suivez l'état des blocs (manquants, corrompus, etc.) pour vous assurer que les données sont stockées de manière optimale sur le DFS Hadoop.
-
Surveillez le système de fichiers distribués Hadoop (HDFS).
- Comprenez la capacité et les tendances d'utilisation de HDFS en suivant l'état de la JVM et du système d'exploitation NameNode.
- Recevez des notifications lorsque les seuils sont dépassés.
- Surveillez l'état des DataNodes individuels et recevez des notifications instantanées en cas de panne.
- Suivez la mémoire HDFS et soyez averti en cas de manque de mémoire.
-
Comprenez les performances des TaskTrackers ou des NodeManagers.
Avec la solution de supervision de cluster Hadoop d'Applications Manager, vous pouvez:
- Suivre l'état (actif, mort, sur liste grise, etc.) des TaskTrackers et des emplacements dans Hadoop version 1.x à partir de Hadoop MapReduce.
- Afficher l'état de la file d'attente pour déterminer si les tâches s'exécutent parfaitement ou si la file d'attente est bloquée.
- Pour la version 2.x, suivez les performances du NodeManager à partir de Hadoop Yarn.
- Apprendre le nombre de nœuds dans différents états tels qu’actif, hors service, défectueux et perdu.
-
Suivez facilement vos travaux et vos candidatures.
- Soyez toujours conscient du nombre de travaux ou d'applications en cours d'exécution à un moment donné.
- Triez tous les travaux ou applications en fonction de leur état.
- Recevez des notifications sur le nombre de travaux ou d'applications qui ont échoué, afin que vous puissiez prendre les mesures correctives nécessaires.
Rapports et tableaux de bord.
Gardez des informations puissantes à portée de main. Avec la solution de supervision des performances Hadoop d'Applications Manager, visualisez l'utilisation des ressources et les performances de votre cluster Hadoop avec des rapports et des tableaux de bord prédéfinis qui affichent des données historiques et en temps réel.
Suivez les profils utilisateur pour améliorer la productivité des utilisateurs
Dans les environnements virtuels, le suivi des profils utilisateur est essentiel pour garantir aux utilisateurs une expérience cohérente à chaque fois qu'ils se connectent. Évitez les problèmes tels que le gonflement du profil (création de plusieurs utilisateurs qui ajoute à plus du stockage) et la vitesse de connexion lente en surveillant le chargement du profil et l'exécution du script et les délais de traitement du système.
