Page History

La base de données va se fragmenter au fil des insertions/suppression suppressions d'éléments et le volume des données va devenir plus faible que l'espace disque consommé ( dans /var/lib/mongo ). Il est possible de surveiller cet écart de consommation et même le réduire.

Il est fortement recommandé de migrer sur le moteur Wired TigerWiredTiger, qui permet d'avoir de meilleures performances et un espace disque consommé plus faible ( moins de fragmentation et compression de données ).

1) Préparation

Sur la machine de production

Vérifier que le type de moteur de stockage est bien mmapv1MMapv1 à l'aide de la commande suivante : 

mongo shinken  --quiet --eval "print(db.serverStatus().storageEngine.name)"

Le retour de la commande doit être MMapv1. Si le retour est wiredTiger, alors la base de données est déjà migrée et vous n'avez pas besoin de continuer cette procédure.

Ensuite on récupère des statistiques de la base de données qui vont nous servir à vérifier que des données sont bien présentes.

mongo shinken --quiet --> mmapv1-eval 'db.getCollectionNames()' | tee db_info.info
mongo shinken --quiet --eval 'printjson(db.adminCommand( { listDatabases: 1 } ));' | tee -a db_info.info
mongo shinken --quiet --eval 'db.getCollection("sla_archive").count();' | tee -a db_info.info

Ces commandes vont afficher et conserver dans le fichier db_info.info respectivement :

• La liste des collections de la base shinken dans une chaîne de caractères séparée par des virgules.
• La liste des bases présentes sur le serveur de production, dans un format JSON.
• Le nombre d'archives SLA présente sur le serveur de production.

En fonction de votre architecture, il est possible que des commandes ne retournent rien. Si par exemple vous exécutez ces commandes sur un serveur qui héberge uniquement la base du Synchronizer, alors seul la deuxième commande vous retournera des valeurs.

Il faut éteindre Shinken pour continuer la procédure

service shinken stop

2) Migration de la base

On peut supprimer les données SLA trop veilles si l'on avait n’avait pas mis en place la rotation des SLA

/var/lib/shinken/libexec/tools/shinken-sla-delete-until --nb-day=365

--nb-day=365 : Pour garder 365 jours de données SLA

Sur la machine de production

Modifier le paramètre paramètre nb_stored_days du module sla, par défaut dans /etc/shinken/modules/sla.cfg pour mettre le même nombre nombre de jour jours que mis précédemment.

Note : Il n'est nécessaire de redémarrer Shinken maintenant se , ce sera fait plus tard dans la procédure.

On dump les données d'archive SLA et la base de données des events.évènements :

cd /tmp
mongodump -d shinken -c sla_archive 
mongodump -d event_container -c ec_datas

Eteindre On éteint la base de données et on la vidervide

service mongod stop
cd /var/lib/mongo
rm -fr *

Changer le moteur pour wiredTigerde mmapv1 à wiredTiger. Mettre dans à jour le fichier fichier /etc/mongod.conf :

storage:
     engine: wiredTiger

Redémarrer mongoDémarrer Mongo

service mongod start

Vérifier que le type de moteur de stockage est bien wiredTiger : 

mongo shinken  --quiet --eval "print(db.serverStatus().storageEngine.name)" --> wiredTiger

Le retour de la commande doit être wiredTiger

On démarre mongo On redémarre mongo et on restaure les donnée dedantdonnées dedans

service mongod startcd /tmp
mongorestore dump

On vérifie les données dedans avec le fichier db_info.info que l'on a crée précédemment.

Note : le nombre de sla_archive doit avoir changer vus que on en a supprimé et il ne doit rester qu'une collection : sla_archive 

mongo shinken --quiet --eval 'db.getCollectionNames()' 
mongo shinken --quiet --eval 'printjson(db.adminCommand( { listDatabases: 1 } ));' 
mongo shinken --quiet --eval 'db.getCollection("sla_archive").count();' 

Eteindre Shinken, Eteindre mongo, copier les données sur la machine de production.

Dans cet exemple on va le faire avec une archive pour que le SCP soit plus rapide si vous avez un très bon débit et des CPU faible sur votre machine de prod fait un scp de /var/lib/mongo direct

service mongo stop
cd /var/lib/
tar cvzf mongo.tar.gz mongo/
scp mongo_wiredTiger.tar.gz @ADDRESS_MACHINE_DE_PRODUCTION:/tmp

Sur la machine de production

Changer le moteur pour wiredTiger. Mettre dans le fichier /etc/mongod.conf :

storage:
     engine: wiredTiger

Copier les données de /tmp/mongo_wiredTiger.tar.gz dans /var/lib/mongo

cd /tmp
tar xvzf mongo_wiredTiger.tar.gz -C /var/lib/mongo

Vérifier les droits unix et les fichiers dans /var/lib/mongo

ls -als /var/lib/mongo

Redémarrer mongo

service mongod start

Vérifier que le type de moteur de stockage est bien wiredTiger: 

mongo shinken  --quiet --eval "print(db.serverStatus().storageEngine.name)" --> wiredTiger

Et restaurer les données de production

mongorestore dump