Introduction

Grafana est une plateforme permettant de créer des tableaux de bord de visualisation pour les métriques. Dans ces tableaux de bord, la création de différents types de widget et de nombreuses options sont disponibles pour la visualisation des métriques.

Plus de détails sont disponibles sur le site officiel: https://grafana.com/

Installation

L'installation de Grafana sous CentOS se fait via un paquet RPM. La version de Grafana testée avec Shinken Entreprise est la v7.4.2.

Pour l'installer, utiliser la commande suivante:

yum install https://dl.grafana.com/oss/release/grafana-7.4.2-1.x86_64.rpm

Une fois l'installation terminée, le lancement de Grafana dépend de la version de CentOS utilisée.

  • Sous CentOS 6

    chkconfig grafana-server on
    service grafana-server start


  • Sous CentOS 7

    systemctl enable grafana-server
    systemctl start grafana-server


Après avoir installé puis lancé Grafana, l'interface sera accessible sur le port 3000. Les identifiants par défaut sont admin/admin

Connexion avec Graphite

Pour pouvoir récupérer les métriques générées par Shinken et enregistrées dans Graphite. Grafana doit avoir accès à Graphite. Pour cela, il faut ajouter dans Grafana une source de données Graphite.

Dans l'interface, aller dans la catégorie Data Sources , puis ajouter une nouvelle source de type Graphite, qui sera paramétrée comme suivant:

  • URL: adresse du serveur hébergeant Graphite, sur le port 80. Par exemple: 

    http://localhost:80





Si Grafana est installé sur un serveur différent du serveur Graphite, il faudra effectuer une étape de configuration supplémentaire. Par défaut, Graphite autorise seulement les connexions locales.

Pour permettre à des serveurs distants d'accéder à ses données, il faut le fichier de configuration Apache de Graphite /etc/httpd/conf.d/graphite.conf :

  • Changer la ligne :

    <VirtualHost 127.0.0.1:80>


  • En :

    <VirtualHost 0.0.0.0:80>

    Cette ligne permet de spécifier les interfaces réseau de la machine sur lesquelles effectuer l'écoute. Spécifier 0.0.0.0 ou * permettent d'écouter sur toutes les interfaces réseau. On peut mettre une seule interface à la place en spécifiant l'IP de l'interface réseau concernée.

  • Redémarrer Apache pour prendre en compte les modifications
    Sur CentOS 6:

    service http restart


    Sur CentOS 7:

    systemctl restart httpd


L'installation et la connexion de Grafana avec Graphite sont maintenant terminées.

Vous pouvez maintenant créer des tableaux de bord, ajouter des utilisateurs et permettre la visualisation des métriques de Shinken.

Intégration dans Shinken

Par défaut, cette version n'accepte pas d'être intégrée dans un widget page web (pour plus de détail sur la configuration du widget voir la page : Widget Page web).

Si l'authentification est activée dans Grafana et que vous souhaitez l'intégrer dans un widget web, il faut que Grafana soit sur le même adresse IP ou même nom de domaine (exemple: shinken-solution.com est un nom de domaine) . Sans quoi le blocage CORS des navigateurs bloquera la connexion à Grafana.



Pour l'activer vous devez éditer le fichier de configuration Grafana /etc/grafana/grafana.ini :

allow_embedding = true

Puis redémarrer Grafana


Sur CentOS 6:

service grafana-server restart


Sur CentOS 7:

systemctl restart grafana-server


Créer un tableau de bord (dashbord)

Pour créer un tableau de bord,

  1. Cliquer sur le "+", "Create", puis "Add new panel".



  2. Définir un nom dans le menu de droite et dans la partie basse de l'écran, vous avez la composition de la requête.
    Pour générer un graphe, il faut cliquer sur "select metric", puis ajouter la métrique souhaitée.



  3. Il faut sélectionner l’intervalle de visualisation.


Une fois terminé, le bouton "Save" en haut à droite, va sauvegarde le panneau dans le tableau de bord. Le nom inscrit sera le nom du tableau de bord qui peut être composé de plusieurs panneaux.

Récupération de l'URL à intégrer dans Shinken

Pour centraliser la visualisation des éléments supervisés par Shinken, il est possible d'intégrer les tableaux de bord Grafana dans un tableau de bord Shinken en utilisant la Widget Page web.

Par exemple :

  1. Allez sur votre panneau et cliquer sur share :



  2. Dans l'onglet "Embed", sélectionnez le line comme ci-dessous :



    Pour obtenir un graphique évolutif en temps réel, remplacer dans le lien, toute la partie "from=XXXX&to=XXXX" par "from=now-6h&to=now" pour avoir un intervalle de 6h de visualisation.

  3. Copier ce lien dans votre widget Page web.

    Exemple :




    http://adresse_serveur:3000/d-solo/sLWNXIsMk/synchronizer?orgId=1&from=now-6h&to=now&panelId=2


    Décomposition de l'adresse :

    ParamètreDéfinition
    adresse_serveurAdresse IP / Nom DNS du serveur
    3000Port par défaut de Grafana
    d-soloPermet de cacher les barres de navigation de Grafana pour n'afficher que les éléments visualisés 
    synchronizerNom du tableau de bord
    from=now-6hIntervalle d'affichage du graphes sur 6h
    to=nowIntervalle jusqu'à maintenant
    panelId=2Numéro du panneau dans le tableau de bord


Passage en HTTPS

Dans le fichier de configuration de Grafana ( /etc/grafana/grafana.ini ),

Ajoutez :

protocol = https
cert_file = /chemin/vers/server.cert
cert_key = /chemin/vers/server.key


Puis redémarrer Grafana :

  • Sur CentOS 6 :

    service grafana-server restart


  • Sur CentOS 7:

    systemctl restart grafana-server


Lien vers la mapping nom→uuid nécessaire pour grafana, et suivi des requêtes

Lors de l'utilisation de Grafana, les requêtes vont arriver dans le serveur Apache de Graphite avec des noms et non pas des uuids comme dans l'interface de visualisation qui elle fonctionne avec des uuids.

Pour cela il faut que le serveur Apache ait accès à un mapping entre les noms et les uuids. Il faut le lier à la base SLA qui a en son sein ce mapping.

Cette configuration se fait au sein du fichier /opt/graphite/conf/mongodb.conf via le champ URI.

URI=mongodb://localhost/?w=1&fsync=false


Les logs de cette connexion se font au sein du fichier /var/log/graphite/info.log

Les logs de mise à jour du cache seront activés. Si vous souhaitez suivre la mise à jour du mapping nom → uuid et les requêtes pour un hôte particulier, vous pouvez remplir le fichier /opt/graphite/storage/whisper/.apache_graphite_host_filter_log avec le nom de l'hôte. Vous verrez sa mise à jour dans le mapping, ainsi que les requêtes de recherches de métriques le concernant.


Sécurisation de la connexion Graphite → MongoDB ( via un tunnel SSH )

Comme toutes les connexions vers MongoDB, il est possible, et même recommandé, de sécuriser la communication via un tunnel chiffré SSH.

Ceci se défini dans le fichier /opt/graphite/conf/mongodb.conf avec les paramètres :


NomTypeUnitéDéfautCommentaire


URI


Texte---mongodb://localhost/?w=1&fsync=falseURI vers le serveur SLA, où tous les noms d’hôtes et de checks sont enregistrés pour la traduction uuid


USE_SSH_TUNNEL


Booléen---0

Paramètre permettant d'activer ou non l'utilisation d'un tunnel SSH
Valeurs possibles :

  • 0
  • 1


SSH_USER


Texte---shinkenNom distant de l'utilisateur de connexion


SSH_KEYFILE


Texte---/opt/graphite/conf/id_rsaChemin vers la clé SSH privée utilisée


SSH_TUNNEL_TIMEOUT


Nombreseconde
Durée du timeout au bout duquel on détermine si l'établissement du tunnel a échoué


DATABASE


Texte---shinkenBase de données utilisée pour stocker les données SLA



Graphite étant hébergé par le service apache, il n'a donc pas accès au répertoire /var/lib/shinken et donc pas accès à la clé SSH /var/lib/shinken/.ssh/id_rsa. C'est pour cette raison que la clé SSH est situé dans /opt/graphite/conf/id_rsa.

Deux solutions s'offrent à vous :

  • Générer une nouvelle clé SSH pour apache / graphite à l'aide de la page suivante : Création automatique et gestion de la clé SSH de l'utilisateur shinken
    • Lors de la génération de la clé, il est possible de spécifier directement le chemin suivant : /opt/graphite/conf/id_rsa
    • Il faudra ajouter cette nouvelle clé publique ( /opt/graphite/conf/id_rsa.pub ) sur le/les serveurs MongoDB.
    • Cette clé sera indépendante et non impacté par un changement de clé SSH sur l'utilisateur "shinken".

  • Utiliser la clé SSH de l'utilisateur "shinken" présent sur le serveur.
    • La clé publique est sûrement déjà présente sur les serveurs MongoDB.
    • Il faut copier la clé privée et changer les droits pour l'utiliser et la maintenir à jour en cas de changement.

      cp /var/lib/shinken/.ssh/id_rsa* /opt/graphite/conf/
      chown apache:apache /opt/graphite/conf/id_rsa


Attention : un lien symbolique entre les deux fichiers ne fonctionnera pas, car apache n'a pas les droits d'aller lire le fichier originel.


Mise à jour v5.1.3 vers v7.4.2

Il faut simplement lancer la commande suivante :

yum update https://dl.grafana.com/oss/release/grafana-7.4.2-1.x86_64.rpm

 Une fois Grafana mis à jour, il suffit de rafraîchir la page et de s'authentifier