Rotation des log
Depuis la version 02.08.02 nous avons ajouter une rotation automatique des log de la base, par défaut la rotation est mensuelle.
Pour les version précédent vous pouvez mettre en place vous même la rotation des log. Pour cela, il faut rajoutez deux entrées au fichier /etc/crontab| Code Block | ||||||
|---|---|---|---|---|---|---|
| ||||||
# A 3h01 on demande a mongo de rotationner son log 1 3 * * * root kill -USR1 `cat /var/run/mongodb/mongod.pid` #A 3h02 on supprime les logs plus vieux de 7jours 2 3 * * * root find /var/log/mongodb/ -name "*.log.*" -type f -mtime +7 | xargs /bin/rm -f |
Et ensuite relancer le daemon crond:
| Code Block | ||||||
|---|---|---|---|---|---|---|
| ||||||
service crond reload |
Compactage de la base
La base de données va se fragmenter au fil des insertions/suppression d'éléments, et le volume des données va devenir plus faible que le volume sur disque (dans /var/lib/mongo). Il est possible de surveiller cet écart de consommation, et même la réduire.TODO : Compatage de la base : https://docs.mongodb.com/v3.6/reference/command/compact/#dbcmd.compact + backup restore
Surveillance du taux
Un script sera prochainement disponible afin d'avoir le calcul de ce taux, avec les volumes utilisés et les volumes sur disque.
Compactage de la base
Deux méthodes options existent pour le compactage de la base :
- Compactage dans la base
- Faire une sauvegarde la base et restauration dans une autre base
La 1ere option ne nécessite pas le montage d'une autre base ni de transfèrt de transfère de donnée c'est globalement plus simple mais pendant que la base se compacte elle est indisponible ce qui peux provoquer un long temps indisponibilité.
Une autre chose à pendre en compte : depuis la version 02.07.00 nous avons mis à jour la version de Mongo utilisé, nous sommes passé de la version V02.09 à V03.00. La version V03.00 de Mongo utilise par défaut un nouveau moteur de stockage : Wired Tiger, plus performant.
Si votre installation initiale de Shinken est antérieure à la version 02.07.00 il y a de grande chance que vous n'utilisez pas le moteur Wired Tiger mais MMAPv1. Vous pouvez vérifiez avec la commande suivante :
| Code Block |
|---|
mongo shinken --quiet --eval "print(db.serverStatus().storageEngine.name)" |
Si vous n'utilisiez pas le moteur Wired Tiger nous vous conseillons la méthode de transfère de donnée vers une autre base pour utiliser le moteur Wired Tiger dans la nouvelle base, ce nouveau moteur consommant moins de données et étant plus performant.
Méthode 1 : Compactage dans la base
Il est important à noter que pendant que le script va fonctionner, la base se bloquée et les opérations ne pourront pas se faire. Nous vous conseillons de faire cette opération avec Shinken éteint.
Un script sera fourni pour lancer le compactage de la base.
Méthode 2: sauvegarde/restauration de la base dans une autre base de donnée
Il est important de noter que pendant la restauration des données, il ne faut pas que shinken Shinken fonctionne. Cette opération doit donc se faire à froid.
Afin de sauvegarder la base, il faut prévoir suffisamment d'espace disque. Il faut ensuite lancer:
| Code Block | ||
|---|---|---|
| ||
shinken-backup --addons --configuration --sla --user |
Restauration sur un nouveau serveur:
Il faut ensuite transférer le backup sur le nouveau serveur et lancer la restauration:
| Code Block | ||
|---|---|---|
| ||
shinken-restore |
Restauration sur le même serveur:
Si vous souhaitez réutiliser le même serveur, il va falloir:
- arrêter mongo
- supprimer ses données
- s'assurer que le format de données est bien WiredTiger
- restaurer les données
Arrêter mongo:
| Code Block | ||
|---|---|---|
| ||
/etc/init.d/mongod stop |
Supprimer les données:
| Code Block | ||
|---|---|---|
| ||
rm -rf /var/lib/mongo/* |
Pour s'assurer que le format de données est WiredTiger, il faut que l'entrée suivante soit dans le fichier /etc/mongod.conf:
| Code Block | ||||
|---|---|---|---|---|
| ||||
storage:
engine: wiredTiger |
Puis relancer la base:
| Code Block | ||||
|---|---|---|---|---|
| ||||
/etc/init.d/mongod start |
Ensuite il faut lancer l'import, qui va se faire avec le nouveau format de données, et avec un espace disque consommé minimal:
| Code Block | ||||
|---|---|---|---|---|
| ||||
shinken-restore |