SQWareProduction:mongodb : Différence entre versions
m (Updated by BatchUser) |
m (Updated by BatchUser) |
||
(2 révisions intermédiaires par le même utilisateur non affichées) | |||
Ligne 36 : | Ligne 36 : | ||
{{SQWareProduction_sqwmng_ExecSQL.ksh_presentation}} | {{SQWareProduction_sqwmng_ExecSQL.ksh_presentation}} | ||
[[SQWareProduction:mongodb:bin:sqwmng_ExecSQL.ksh|Voir l'aide detaillee pour sqwmng_ExecSQL.ksh]]<br><br> | [[SQWareProduction:mongodb:bin:sqwmng_ExecSQL.ksh|Voir l'aide detaillee pour sqwmng_ExecSQL.ksh]]<br><br> | ||
+ | |||
+ | === sqwmng_FailWithoutMail.ksh === | ||
+ | Script $gvsqw_MngBin/bin/sqwmng_FailWithoutMail.ksh:<br> | ||
+ | {{SQWareProduction_sqwmng_FailWithoutMail.ksh_presentation}} | ||
+ | [[SQWareProduction:mongodb:bin:sqwmng_FailWithoutMail.ksh|Voir l'aide detaillee pour sqwmng_FailWithoutMail.ksh]]<br><br> | ||
=== sqwmng_GatherIndicators.ksh === | === sqwmng_GatherIndicators.ksh === | ||
Ligne 104 : | Ligne 109 : | ||
== lib == | == lib == | ||
+ | === sqwmng_CompactAllDatabases.lib === | ||
+ | librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_CompactAllDatabases.lib:<br> | ||
+ | {{SQWareProduction_sqwmng_CompactAllDatabases.lib_presentation}} | ||
+ | {{SQWareProductionSurchargeLib|mongodb|Mng|sqwmng_CompactAllDatabases.lib}} | ||
+ | <br> | ||
+ | [[SQWareProduction:mongodb:lib:sqwmng_CompactAllDatabases.lib|Voir l'aide detaillee pour sqwmng_CompactAllDatabases.lib]]<br><br> | ||
+ | |||
=== sqwmng_CompactDatabase.lib === | === sqwmng_CompactDatabase.lib === | ||
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_CompactDatabase.lib:<br> | librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_CompactDatabase.lib:<br> | ||
Ligne 110 : | Ligne 122 : | ||
<br> | <br> | ||
[[SQWareProduction:mongodb:lib:sqwmng_CompactDatabase.lib|Voir l'aide detaillee pour sqwmng_CompactDatabase.lib]]<br><br> | [[SQWareProduction:mongodb:lib:sqwmng_CompactDatabase.lib|Voir l'aide detaillee pour sqwmng_CompactDatabase.lib]]<br><br> | ||
+ | |||
+ | === sqwmng_CopyDumpAllDatabases.lib === | ||
+ | librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_CopyDumpAllDatabases.lib:<br> | ||
+ | {{SQWareProduction_sqwmng_CopyDumpAllDatabases.lib_presentation}} | ||
+ | {{SQWareProductionSurchargeLib|mongodb|Mng|sqwmng_CopyDumpAllDatabases.lib}} | ||
+ | <br> | ||
+ | [[SQWareProduction:mongodb:lib:sqwmng_CopyDumpAllDatabases.lib|Voir l'aide detaillee pour sqwmng_CopyDumpAllDatabases.lib]]<br><br> | ||
=== sqwmng_CopyDumpDatabase.lib === | === sqwmng_CopyDumpDatabase.lib === | ||
Ligne 117 : | Ligne 136 : | ||
<br> | <br> | ||
[[SQWareProduction:mongodb:lib:sqwmng_CopyDumpDatabase.lib|Voir l'aide detaillee pour sqwmng_CopyDumpDatabase.lib]]<br><br> | [[SQWareProduction:mongodb:lib:sqwmng_CopyDumpDatabase.lib|Voir l'aide detaillee pour sqwmng_CopyDumpDatabase.lib]]<br><br> | ||
+ | |||
+ | === sqwmng_DumpAllDatabases.lib === | ||
+ | librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_DumpAllDatabases.lib:<br> | ||
+ | {{SQWareProduction_sqwmng_DumpAllDatabases.lib_presentation}} | ||
+ | {{SQWareProductionSurchargeLib|mongodb|Mng|sqwmng_DumpAllDatabases.lib}} | ||
+ | <br> | ||
+ | [[SQWareProduction:mongodb:lib:sqwmng_DumpAllDatabases.lib|Voir l'aide detaillee pour sqwmng_DumpAllDatabases.lib]]<br><br> | ||
=== sqwmng_DumpDatabase.lib === | === sqwmng_DumpDatabase.lib === | ||
Ligne 159 : | Ligne 185 : | ||
<br> | <br> | ||
[[SQWareProduction:mongodb:lib:sqwmng_NetBackup.lib|Voir l'aide detaillee pour sqwmng_NetBackup.lib]]<br><br> | [[SQWareProduction:mongodb:lib:sqwmng_NetBackup.lib|Voir l'aide detaillee pour sqwmng_NetBackup.lib]]<br><br> | ||
+ | |||
+ | === sqwmng_RestoreAllDatabases.lib === | ||
+ | librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_RestoreAllDatabases.lib:<br> | ||
+ | {{SQWareProduction_sqwmng_RestoreAllDatabases.lib_presentation}} | ||
+ | {{SQWareProductionSurchargeLib|mongodb|Mng|sqwmng_RestoreAllDatabases.lib}} | ||
+ | <br> | ||
+ | [[SQWareProduction:mongodb:lib:sqwmng_RestoreAllDatabases.lib|Voir l'aide detaillee pour sqwmng_RestoreAllDatabases.lib]]<br><br> | ||
=== sqwmng_RestoreDatabase.lib === | === sqwmng_RestoreDatabase.lib === | ||
Ligne 206 : | Ligne 239 : | ||
{{SQWareProductionSurchargeToo|mongodb|Mng|sqwmng_SetEnv.ksh}} | {{SQWareProductionSurchargeToo|mongodb|Mng|sqwmng_SetEnv.ksh}} | ||
[[SQWareProduction:mongodb:tools:sqwmng_SetEnv.ksh|Voir l'aide detaillee pour sqwmng_SetEnv.ksh]]<br><br> | [[SQWareProduction:mongodb:tools:sqwmng_SetEnv.ksh|Voir l'aide detaillee pour sqwmng_SetEnv.ksh]]<br><br> | ||
+ | |||
+ | === sqwmng_TestInstConnection.ksh === | ||
+ | Script $gvsqw_MngBin/../tools/sqwmng_TestInstConnection.ksh:<br> | ||
+ | {{SQWareProduction_sqwmng_TestInstConnection.ksh_presentation}} | ||
+ | [[SQWareProduction:mongodb:tools:sqwmng_TestInstConnection.ksh|Voir l'aide detaillee pour sqwmng_TestInstConnection.ksh]]<br><br> | ||
=== sqwmng_TestMySQL.ksh === | === sqwmng_TestMySQL.ksh === |
Version actuelle datée du 18 décembre 2023 à 08:50
Sommaire
- 1 Presentation
- 2 bin
- 2.1 sqwmng_CompactAllDatabases.ksh
- 2.2 sqwmng_CompactDatabase.ksh
- 2.3 sqwmng_CopyDumpAllDatabases.ksh
- 2.4 sqwmng_CopyDumpDatabase.ksh
- 2.5 sqwmng_DumpAllDatabases.ksh
- 2.6 sqwmng_DumpDatabase.ksh
- 2.7 sqwmng_ExecSQL.ksh
- 2.8 sqwmng_FailWithoutMail.ksh
- 2.9 sqwmng_GatherIndicators.ksh
- 2.10 sqwmng_NetBackup.ksh
- 2.11 sqwmng_ParallelRun.ksh
- 2.12 sqwmng_RestoreAllDatabases.ksh
- 2.13 sqwmng_RestoreDatabase.ksh
- 2.14 sqwmng_RunJob.ksh
- 3 etc
- 4 lib
- 4.1 sqwmng_CompactAllDatabases.lib
- 4.2 sqwmng_CompactDatabase.lib
- 4.3 sqwmng_CopyDumpAllDatabases.lib
- 4.4 sqwmng_CopyDumpDatabase.lib
- 4.5 sqwmng_DumpAllDatabases.lib
- 4.6 sqwmng_DumpDatabase.lib
- 4.7 sqwmng_GatherIndicators.lib
- 4.8 sqwmng_GatherIndicators_Overload.lib
- 4.9 sqwmng_GenerateCreateInstance.lib
- 4.10 sqwmng_Global.lib
- 4.11 sqwmng_NetBackup.lib
- 4.12 sqwmng_RestoreAllDatabases.lib
- 4.13 sqwmng_RestoreDatabase.lib
- 4.14 sqwmng_SetEnv.lib
- 5 menu
- 6 tools
- 7 help
- 8 spm
Presentation
Utilisation
C'est le module d'exploitation local de mongodb.
Il est entierement ecrit en ksh et sql.
Il permet les operations d'exploitation pour mongodb.
Exemples d'utilisations de l'outil:
- Backup
- Recovery
- Compute statistics
- Indicators collection to store in referential database SQWareRepository
- Rotate logs
- ....
This module is deployed locally on the machine hosting the authorities to manage,
in order to avoid any points of weakness related to an NFS mount or whatever.
The deployment is done through a simple command SQWareCentral module using inventory located in SQWareRepository !
Guide d'installation de SQWareProduction pour mongodb
Explication des repertoires
Repertoires se trouvant dans $gvsqw_MngBin:
- bin : Repertoires contenant standard scripts
- bin_cust : Repertoires contenant customs scripts for your environnement
- etc : Repertoires contenant the standard files of configuration
- etc_cust : Repertoires contenant the customs files of configuration for your environnement (overload standards)
- help : Repertoires contenant the standard files of help
- help_cust : Repertoires contenant the customs files of help for your environnement
- lib : Repertoires contenant the generic shell function librairies
- lib_cust : Repertoires contenant the generic shell function librairies (overload standards)
- spm : Contain sql query toolkit
- tools : Repertoires contenant the standard scripts used on an ad hoc
- tools_cust : Repertoires contenant the customs scripts used on an ad hoc for your environnement
- menu : Repertoires contenant the standard menus
- menu_cust : Repertoires contenant the custom menus for your environnement
Convention de nommage de fichiers
La majorite des fichiers sont nommes avec suffixes:
- *.ksh : pour les scripts
- *.cfg : pour les fichiers de configuration
- *.lib : pour les librairies de fonctions
- *.hlp : pour les fichiers d'aide
Convention de nommage dans les scripts
En général, la convention de nommage suivante est utilisée dans tous les scripts de SQWareProduction:
- gvsqw_ {}: variable globale initialisée par l'environnement et/ou la lib générique
- lvsqw_ {}: variable locale initialisée par le script et/ou une lib spécifique
- gfsqw_ {}: fonction définie par une lib générique
- lfsqw_ {}: fonction définie par le script et/ou une lib spécifique
bin
sqwmng_CompactAllDatabases.ksh
Script $gvsqw_MngBin/bin/sqwmng_CompactAllDatabases.ksh:
compact de toutes les databases en parallele
Voir l'aide detaillee pour sqwmng_CompactAllDatabases.ksh
sqwmng_CompactDatabase.ksh
Script $gvsqw_MngBin/bin/sqwmng_CompactDatabase.ksh:
Voir l'aide detaillee pour sqwmng_CompactDatabase.ksh
sqwmng_CopyDumpAllDatabases.ksh
Script $gvsqw_MngBin/bin/sqwmng_CopyDumpAllDatabases.ksh:
copie de fichiers dump de toutes les databases en parallele
Voir l'aide detaillee pour sqwmng_CopyDumpAllDatabases.ksh
sqwmng_CopyDumpDatabase.ksh
Script $gvsqw_MngBin/bin/sqwmng_CopyDumpDatabase.ksh:
copie des fichiers dump $lvsqw_CopyType
Voir l'aide detaillee pour sqwmng_CopyDumpDatabase.ksh
sqwmng_DumpAllDatabases.ksh
Script $gvsqw_MngBin/bin/sqwmng_DumpAllDatabases.ksh:
Dump des databases en parallele
Voir l'aide detaillee pour sqwmng_DumpAllDatabases.ksh
sqwmng_DumpDatabase.ksh
Script $gvsqw_MngBin/bin/sqwmng_DumpDatabase.ksh:
mongodump de la database
Voir l'aide detaillee pour sqwmng_DumpDatabase.ksh
sqwmng_ExecSQL.ksh
Script $gvsqw_MngBin/bin/sqwmng_ExecSQL.ksh:
execute un fichier SQL sur l'instance
Voir l'aide detaillee pour sqwmng_ExecSQL.ksh
sqwmng_FailWithoutMail.ksh
Script $gvsqw_MngBin/bin/sqwmng_FailWithoutMail.ksh:
sort en erreur avec affichage des parametres passes
Voir l'aide detaillee pour sqwmng_FailWithoutMail.ksh
sqwmng_GatherIndicators.ksh
Script $gvsqw_MngBin/bin/sqwmng_GatherIndicators.ksh:
collecte les indicateurs DBA
Voir l'aide detaillee pour sqwmng_GatherIndicators.ksh
sqwmng_NetBackup.ksh
Script $gvsqw_MngBin/bin/sqwmng_NetBackup.ksh:
backup avec NetBackup des fichiers dump/backup
Voir l'aide detaillee pour sqwmng_NetBackup.ksh
sqwmng_ParallelRun.ksh
Script $gvsqw_MngBin/bin/sqwmng_ParallelRun.ksh:
Gere l'execution de commandes unix en parallele
Prend en parametre un fichier avec les commandes a executer
Vous pouvez choisir:
- Le degre de parallelisme
- Aggressivite de lancement (nombre de secondes entre deux lancements)
- Aggressivite de check de fin (nombre de secondes entre deux check de fin)
Voir l'aide detaillee pour sqwmng_ParallelRun.ksh
sqwmng_RestoreAllDatabases.ksh
Script $gvsqw_MngBin/bin/sqwmng_RestoreAllDatabases.ksh:
restore de toutes les databases en parallele
Voir l'aide detaillee pour sqwmng_RestoreAllDatabases.ksh
sqwmng_RestoreDatabase.ksh
Script $gvsqw_MngBin/bin/sqwmng_RestoreDatabase.ksh:
Restore database
Voir l'aide detaillee pour sqwmng_RestoreDatabase.ksh
sqwmng_RunJob.ksh
Script $gvsqw_MngBin/bin/sqwmng_RunJob.ksh:
Execute les scripts pour MongoDB et genere les fichiers log et erreur
base sur le fichier de configuration $gvsqw_RootCfg/sqwmng_Jobs.cfg
compresse et purge les logs les plus anciennes
Voir l'aide detaillee pour sqwmng_RunJob.ksh
etc
sqwmng_CreInst_CrontabRef.cfg
Fichier de configuration $gvsqw_MngBin/../etc/sqwmng_CreInst_CrontabRef.cfg:
Voir l'aide detaillee pour sqwmng_CreInst_CrontabRef.cfg
sqwmng_CreInst_Jobs.cfg
Fichier de configuration $gvsqw_MngBin/../etc/sqwmng_CreInst_Jobs.cfg:
Voir l'aide detaillee pour sqwmng_CreInst_Jobs.cfg
sqwmng_GlobalVar.cfg
Fichier de configuration $gvsqw_MngBin/../etc/sqwmng_GlobalVar.cfg:
Global var for MongoDB
Contient les variables operationnelles de SQWareProduction.
Voir l'aide detaillee pour sqwmng_GlobalVar.cfg
.profile
Exemple de .profile $gvsqw_MngBin/../etc/.profile:
Exemple de lignes a ajouter au .profile pour les users mongodb.
Voir l'aide detaillee pour .profile
.profile_confort
Fichier pour mettre les aliases $gvsqw_MngBin/../etc/.profile_confort:
Contenu des aliases de confort de SQWareProduction pour mongodb.
Modèle:SQWareProductionSurchargeConfort
Voir l'aide detaillee pour .profile_confort
lib
sqwmng_CompactAllDatabases.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_CompactAllDatabases.lib:
lib for sqwmng_CompactAllDatabases.ksh
Voir l'aide detaillee pour sqwmng_CompactAllDatabases.lib
sqwmng_CompactDatabase.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_CompactDatabase.lib:
lib for sqwmng_CompactDatabase.ksh
Voir l'aide detaillee pour sqwmng_CompactDatabase.lib
sqwmng_CopyDumpAllDatabases.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_CopyDumpAllDatabases.lib:
lib for sqwmng_CopyDumpAllDatabases.ksh
Voir l'aide detaillee pour sqwmng_CopyDumpAllDatabases.lib
sqwmng_CopyDumpDatabase.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_CopyDumpDatabase.lib:
lib for sqwmng_CopyDumpDatabase.ksh
Voir l'aide detaillee pour sqwmng_CopyDumpDatabase.lib
sqwmng_DumpAllDatabases.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_DumpAllDatabases.lib:
lib for sqwmng_DumpAllDatabases.ksh
Voir l'aide detaillee pour sqwmng_DumpAllDatabases.lib
sqwmng_DumpDatabase.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_DumpDatabase.lib:
lib for sqwmng_DumpDatabase.ksh
Voir l'aide detaillee pour sqwmng_DumpDatabase.lib
sqwmng_GatherIndicators.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_GatherIndicators.lib:
lib for sqwmng_GatherIndicators.ksh
Voir l'aide detaillee pour sqwmng_GatherIndicators.lib
sqwmng_GatherIndicators_Overload.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_GatherIndicators_Overload.lib:
lib for overLoad sqwmng_GatherIndicators.ksh
Voir l'aide detaillee pour sqwmng_GatherIndicators_Overload.lib
sqwmng_GenerateCreateInstance.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_GenerateCreateInstance.lib:
lib for generate create instance
Voir l'aide detaillee pour sqwmng_GenerateCreateInstance.lib
sqwmng_Global.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_Global.lib:
central lib of generic fonctions for mongodb
Voir l'aide detaillee pour sqwmng_Global.lib
sqwmng_NetBackup.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_NetBackup.lib:
lib for sqwgen_NetBackup.ksh
Voir l'aide detaillee pour sqwmng_NetBackup.lib
sqwmng_RestoreAllDatabases.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_RestoreAllDatabases.lib:
lib for sqwmng_RestoreAllDatabases.ksh
Voir l'aide detaillee pour sqwmng_RestoreAllDatabases.lib
sqwmng_RestoreDatabase.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_RestoreDatabase.lib:
lib for sqwmng_RestoreDatabase.ksh
Voir l'aide detaillee pour sqwmng_RestoreDatabase.lib
sqwmng_SetEnv.lib
librairies de fonctions shell $gvsqw_MngBin/../lib/sqwmng_SetEnv.lib:
fonction to set env for $MNG_SID
Voir l'aide detaillee pour sqwmng_SetEnv.lib
tools
sqwmng_Crypt.ksh
Script $gvsqw_MngBin/../tools/sqwmng_Crypt.ksh:
Generic script to crypt file with openssl
Voir l'aide detaillee pour sqwmng_Crypt.ksh
sqwmng_GenerateCreateInstance.ksh
Script $gvsqw_MngBin/../tools/sqwmng_GenerateCreateInstance.ksh:
Generate create instance files
Voir l'aide detaillee pour sqwmng_GenerateCreateInstance.ksh
sqwmng_ListAsyncFilesGlobal.ksh
Script $gvsqw_MngBin/../tools/sqwmng_ListAsyncFilesGlobal.ksh:
List Async files (sql, log, mail) to upload in SQWareCentral (all in a directory)
Voir l'aide detaillee pour sqwmng_ListAsyncFilesGlobal.ksh
sqwmng_ListAsyncFiles.ksh
Script $gvsqw_MngBin/../tools/sqwmng_ListAsyncFiles.ksh:
List Async files (sql, log, mail) to upload in SQWareCentral
Voir l'aide detaillee pour sqwmng_ListAsyncFiles.ksh
sqwmng_SetEnv.ksh
Script $gvsqw_MngBin/../tools/sqwmng_SetEnv.ksh:
set env for $MNG_SID
Modèle:SQWareProductionSurchargeToo
Voir l'aide detaillee pour sqwmng_SetEnv.ksh
sqwmng_TestInstConnection.ksh
Script $gvsqw_MngBin/../tools/sqwmng_TestInstConnection.ksh:
Test instance connection
Voir l'aide detaillee pour sqwmng_TestInstConnection.ksh
sqwmng_TestMySQL.ksh
Script $gvsqw_MngBin/../tools/sqwmng_TestMySQL.ksh:
Generic test MySQL connection script
Voir l'aide detaillee pour sqwmng_TestMySQL.ksh
sqwmng_TestSendmail.ksh
Script $gvsqw_MngBin/../tools/sqwmng_TestSendmail.ksh:
Generic test sendmail script
Voir l'aide detaillee pour sqwmng_TestSendmail.ksh
sqwmng_Uncrypt.ksh
Script $gvsqw_MngBin/../tools/sqwmng_Uncrypt.ksh:
Generic script to uncrypt file with openssl
Voir l'aide detaillee pour sqwmng_Uncrypt.ksh
help
Contenu des fichiers d'aide pour l'option "-s" des scripts bin.
spm
Outil de requetes SQL
Voir l'aide detaillee pour spm