| Scroll Ignore | ||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| ||||||||||||||||
|
Concept
La Le moteur de base de données va se fragmenter au fil des insertions/suppressions d'éléments et le volume des données va devenir plus faible que l'espace disque consommé ( dans /var/lib/mongo ).
Après la version 3, MongoDB propose une nouveau moteur de stockage de données appelé WiredTiger, qui permet d'avoir de meilleures performances et un espace disque consommé plus faible avec moins de fragmentation et une compression de donnée.
Il y a 2 situations ou vous aurez à utiliser la procédure de migration de MMapV1 vers WiredTiger:
- Si vous avait installé votre Shinken à partir d'une version ANTÉRIEUR à la V02.06.00.
- Le format de stockage était alors MMapV1.
- Si vous faites un shinken-restore d'une configuration sauvegardé sur un Shinken au format MMap1.
- La sauvegarde des données de MongoDB garde le format de stockage.
d'origine de MongoDB, MMAPv1, ne supportait pas la compression des données, ce qui entraînait une consommation importante d’espace disque. Le moteur plus récent, WiredTiger, intègre nativement la compression, permettant ainsi de réduire significativement la taille de la base sur le disque. Passer à WiredTiger permet donc d'optimiser l'utilisation de l'espace de stockage.
Préparation
Quel format de donnée le MongoDB utilise
Quel format de donnée votre MongoDB utilise?
Vérifier que le type de moteur de stockage est bien MMapv1 à l'aide de la commande suivante :
| Code Block | ||||
|---|---|---|---|---|
| ||||
mongo shinken --quiet --eval "print(db.serverStatus().storageEngine.name)" |
Le retour de la commande doit être MMapv1.
| Tip |
|---|
| Si le retour est wiredTiger, alors la base de données est déjà migrée et vous il n'avez est pas besoin de nécessaire de continuer cette procédure. |
Limiter les données sauvegardées en base
Plus la base de données contient de données, plus la migration vers un nouveau moteur de données prendra du temps, notamment en raison du processus de sauvegarde et de restauration des données. Pour cette raison, il peut être judicieux de limiter les données stockées en base avant de procéder à la migration ( voir la page MongoDB - Méthode 1 : Ne garder que les données pertinentes ).
PréparationFaire un état des lieux
En premier lieu, il est important de récupérer des statistiques de la base de données qui vont nous servir plupart à vérifier que la migration de donnée s'est bien passé.
| Code Block | ||||
|---|---|---|---|---|
| ||||
mongo shinken --quiet --eval 'db.getCollectionNames()' | tee db_info.info
mongo shinken --quiet --eval 'printjson(db.adminCommand( { listDatabases: 1 } ));' | tee -a db_info.info
mongo shinken --quiet --eval 'db.getCollection("sla_archive").count();' | tee -a db_info.info |
Ces commandes vont afficher et conserver dans le fichier db_info.info respectivement :
- La liste des collections de la base shinken dans une chaîne de caractères séparée par des virgules.
- La liste des bases présentes sur le serveur de production, dans un format JSON.Le nombre d'archives SLA présente sur le serveur de production.
En fonction de votre l'architecture, il est possible que des commandes ne retournent rien. Si par exemple vous exécutez , pour exécuter ces commandes sur un serveur qui héberge uniquement la base du Synchronizer, alors seul la deuxième commande vous retournera des valeurs.
| Info |
|---|
Si aucune commande ne retourne de valeurs, il faut vérifier que vous êtes si on est sur le bon serveur. Cette procédure changera bien le type du moteur de stockage, mais aucune donnée ne sera impactée. |
Enlever ce qui est inutile
Avant de faire la migration, il peut être intéressant de supprimer les anciennes données SLA afin de ne conserver que les données pertinentes.
shinken-sla-delete-until | Code Block | ||
|---|---|---|
| ||
shinken-sla-delete-until --nb-day=365 |
Si vous réduisez le nombre de jours stockés en utilisant le script, changez le paramètre nb_stored_days du module sla, par défaut dans /etc/shinken/modules/sla.cfg
. |
Migration de la base
Il faut éteindre Shinken pour continuer la procédure
| Code Block | ||||
|---|---|---|---|---|
| ||||
service shinken stop |
| Warning | ||
|---|---|---|
| ||
Avant toute opération, faites un shinken-backup complet ( ou avec les options qui permettent de sauvegarder les données ) du serveur impacté. |
On sauvegarde les données de Shinken :
| Code Block | ||||
|---|---|---|---|---|
| ||||
cd /tmp mongodump -d shinken mongodump -d event_container mongodump -d synchronizero data_to_migrate |
On éteint la base de données et on la vide
| Code Block | ||||
|---|---|---|---|---|
| ||||
service mongod stop cd /var/lib/mongo rm -fr * |
Changer le moteur de mmapv1 à wiredTiger. Mettre à jour le fichier /etc/mongod.conf :
| Code Block | ||||
|---|---|---|---|---|
| ||||
storage:
engine: wiredTiger |
Démarrer Mongo
| Code Block | ||||
|---|---|---|---|---|
| ||||
service mongod start |
Vérifier le type de moteur de stockage :
| Code Block | ||||
|---|---|---|---|---|
| ||||
mongo shinken --quiet --eval "print(db.serverStatus().storageEngine.name)" |
Le retour de la commande doit être wiredTiger
On restaure les données dans MongoDB
| Code Block | ||||
|---|---|---|---|---|
| ||||
cd /tmp mongorestore dumpdata_to_migrate |
On vérifie les données dedans avec le fichier db_info.info que l'on a créé précédemment.
| Info |
|---|
Si vous avez utilisé le script shinken-sla-delete-until, le nombre de sla_archive doit avoir changé. |
| Code Block | |||
|---|---|---|---|
| |||
| |||
mongo shinken --quiet --eval 'db.getCollectionNames()'
mongo shinken --quiet --eval 'printjson(db.adminCommand( { listDatabases: 1 } ));'
mongo shinken --quiet --eval 'db.getCollection("sla_archive").count();' |
Démarrer Shinken
| Code Block | ||||
|---|---|---|---|---|
| ||||
service shinken start |