SQWareProduction:postgres:bin:sqwpg CopyDumpAllDatabases.ksh

De WikiFr_dbSQWare
Révision datée du 27 mai 2022 à 15:39 par BatchUser (discussion | contributions) (Updated by BatchUser)
(diff) ← Version précédente | Voir la version actuelle (diff) | Version suivante → (diff)
Aller à : navigation, rechercher

Presentation

Script $gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh :


Execution de sqwpg_CopyDumpDatabase.ksh en mode parallele
Vous pouvez choisir:

  • Le degre de parallelisme
  • Aggressivite de lancement (nombre de secondes entre deux lancements)
  • Aggressivite de check de fin (nombre de secondes entre deux check de fin)


Filtres de generation de la liste des databases (vous pouvez tous les mixer):

  • Liste d'inclusion de database
  • Liste d'exclusion de database
  • Clause d'inclusion de type like
  • Clause d'exclusion de type like
  • Clause where



Aide en ligne

L'aide en ligne est accessible dans la plupart des scripts avec l'option -h.
Ex: $gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -h
Contenu de l'aide :

Sourcing sqwpg_Global.lib v2024.07 SQWareProduction for PostgreSQL (dbSQWare) ... 

Utilisation: sqwpg_CopyDumpAllDatabases.ksh [-h] -I instance -IS <SourceInstance> -US <SourceHostname> [+ options]

DESCRIPTION
   sqwpg_CopyDumpAllDatabases.ksh copie des dumps de toutes les bases de donnees en parallele
SUPPORT
   PostgreSQL versions supportees: 9.0 <= v <= 16

PARAMETERS
     -I  instance       : Instance cible pour copy.
     [
     -GetInf  u@h:path  : user@host:path pour recuperer le dump source distant.
     OR
     -PutInf  u@h:path  : user@host:path pour pousser le dump sur le host distant.
     OR
     -IS instance       : Instance source.
     -US hostname       : Hostname source.
     ]
OPTIONS
     -P  Nb threads     : Nombre de threads en parallele (par defaut 2).
     -ID   listdb       : Liste des bases de donnees pour execution de copy (par defaut toutes).
     -ED   listdb       : Liste des bases de donnees a exclure.
     -IL   likeclause   : Clause d'inclusion de type like pour generer la liste des bases de donnees (exemple: 'db%').
     -EL   likeclause   : Clause d'exclusion des bases de donnees de type like (exemple: 'nodb%').
     -HI   Nb           : Nombre de generations a garder, seulement pour l'option get (par defaut 1).
     -RD   directory    : Repertoireou placer les fichiers dump (par defaut /pgbackup/$PG_SID).
     -RDS  directory    : Repertoire source pour trouver le fichier dump (par defaut /pgbackup/$lvsqw_InstanceSource).
     -UUS  username     : Utilisateur source unix (par defaut, meme que la cible).
     -WCD  whereclause  : Clause where pour generer la liste des databases.
     -AGR Nb_sec        : Nombre de secondes entre deux lancements (par defaut 1s).
     -AGE Nb_sec        : Nombre de secondes entre deux check de fin (par defaut 10s).
     -FRT       code    : Valeur forcee du code retour sur erreur.
     -Before scriptname : Script a executer avant la copie.
     -After  scriptname : Script a executer apres la copie.
     -NoMail            : Desactive l'envoi de mail sur erreur a pmexpdba@gmail.com (par defaut, envoi sur erreur).
     -AddMail   email   : Adresse Email a ajouter a 'pmexpdba@gmail.com'.
     -SendReport        : Envoi du rapport d'execution.
     -h                 : Affichage de l'aide complete.
     -s                 : Affichage des exemples d'utilisation.
     -Locale    locale  : Force la Locale d'affichage de l'aide (fr,en).
     -Exec              : Execute les commandes generees (par defaut, affiche les commandes generees).

Information.png
Information:
Pour etre sur d'avoir une aide a jour, reportez vous directement a l'aide en ligne du script avec l'option -h .


Traitement de l'erreur

Erreurs de parse des arguments

Ce type de message est genere:

Lack 'PG_SID' parameter, Utilisation: sqwpg_CopyDumpAllDatabases.ksh [-h]  -I instance -IS <SourceInstance> -US <SourceHostname> [+ options]

Si vous vous connectez via un terminal, aucun mail ne sera envoyé et vous aurez plutôt ce type de message:

Not sending mail because you are in connected mode !!!
Lack 'PG_SID' parameter

Si vous n'êtes pas connecté à un terminal, le message d'erreur apparaît et est envoyé par mail à l'adresse contenue dans la variable $gvsqw_GlobalMail (Voir l'aide pour personnaliser cette variable). L'objet commence toujours par "$gvsqw_MailMsg_postgres : " (Voir l'aide pour personnaliser cette variable).

Information.png
Information:
L'envoi de mail peut être désactivé par l'option -NoMail pour une exécution.


Execution errors

Que vous soyez ou non connecté à un terminal, le message d'erreur apparaît et un mail contenant un résumé des erreurs de traitement est envoyé à l'adresse contenue dans la variable $gvsqw_GlobalMail (Voir l'aide pour personnaliser cette variable). L'objet commence toujours par "$gvsqw_MailMsg_postgres : " (Voir l'aide pour personnaliser cette variable).

Information.png
Information:
L'envoi de mail peut être désactivé par l'option -NoMail pour une exécution.


Exemples d'utilisation

Sourcing sqwpg_Global.lib v2024.07 SQWareProduction for PostgreSQL (dbSQWare) ... 

#Standard (Locale) help for script sqwpg_CopyDumpAllDatabases.ksh:


$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -h
#Affichage de l'aide en ligne pour ce script

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -Locale fr -h
#Affichage de l'aide en ligne pour ce script avec forcage de la locale 'fr' (Locale par defaut geree par $gvsqw_Locale)

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -s
#Affichage des exemples d'utilisation pour ce script

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname>
#Genere les commandes mais ne les execute pas !

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path>
#Genere les commandes mais ne les execute pas !

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -PutInf <user@host:path>
#Genere les commandes mais ne les execute pas !

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -Exec
#Execute sqwpg_DumpDatabase.ksh en mode parallele pour toutes les bases de l'instance $PG_SID

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -Exec
#Execute sqwpg_DumpDatabase.ksh en mode parallele pour recuperer les fichiers dump de toutes les bases de l'instance $PG_SID

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -PutInf <user@host:path> -Exec
#Execute sqwpg_DumpDatabase.ksh en mode parallele pour pousser les fichiers dump de toutes les bases de l'instance $PG_SID

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -RD <DirName> -Exec
#Copie les dumps dans le repertoire cible (par defaut /pgbackup/$PG_SID)

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -After <script> -Exec
#Execute le script <script> apres la copie des dumps

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -Before <script> -Exec
#Execute le script <script> avant la copie des dumps

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -RDS <DirName> -Exec
#Repertoire pour trouver le fichier dump a copier (par defaut $gvsqw_RootDumpSource)

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -UUS <username> -Exec
#Execute le script en tant que Source unix user(par defaut, meme que la target)

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -HI <NumberOfGenerations> -Exec
#Change le nombre de generation a garder

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -AGR 20 -Exec
#Reglage du temps d'attente en secondes entre deux lancements de commandes, 20s ici

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -AGE 30 -Exec
#Reglage du temps d'attente en secondes entre deux check de fin, 30s ici

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -ID 'DbName1,DbName2' -Exec
#Execute les commandes generees pour seulement les 2 bases de donnees specifiees

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -ED 'DbName3,DbName4' -Exec
#Execute les commandes generees sauf pour les 2 bases de donnees specifiees

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -IL '%_PROD' -Exec
#Clause like pour generee une liste dynamique de bases a inclure (exemple: 'dbprod%')

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -EL '%_TESTS' -Exec
#Clause like pour generee une liste dynamique de bases a exclure (exemple: 'dbtest%')

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -GetInf <user@host:path> -WCD '<condition>' -Exec
#Clause where pour generee une liste dynamique de bases a inclure (exemple: 'OPEN_MODE=MOUNTED')

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -P <NumericValue> -Exec
#Execute le script sqwpg_CopyDumpDatabase.ksh avec un degre de parallelisme de '<NumericValue>'
#Utilise par defaut la variable gvsqw_NbThreadXXX dans $gvsqw_PgBin/../etc/sqwpg_GlobalVar.cfg
#Vous pouvez changer le defaut sur tout l'environnement si vous settez cette variable
#dans le fichier de configuration $gvsqw_PgBin/../etc_cust/sqwpg_GlobalVar.cfg

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -AddMail 'mymail1@mydomaine.com,mymail2@mydomaine.com' -Exec
#Ajoute la liste de mail a l'adresse par defaut geree par $gvsqw_GlobalMail

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -SendReport -Exec
#Envoie la log par mail a la fin du traitement meme s'il n'y a pas d'erreur (par defaut, seulement en cas d'erreur)

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -NoMail -Exec
#Desactive l'envoi de mail sur erreur a $gvsqw_GlobalMail (par defaut, seulement en cas d'erreur)

$gvsqw_PgBin/sqwpg_CopyDumpAllDatabases.ksh -I $PG_SID -IS <SourceInstance> -US <SourceHostname> -FRT <NumericValue> -Exec
#Force le code retour a '<NumericValue>' sur erreur (si pas d'erreur, "exit 0"!)
#Vous pouvez aussi forcer le code retour de ce script pour tous
#si vous settez la variable d'environnement: $gvsqw_ForcedReturnCodeScript_sqwpg_CopyDumpAllDatabases=<NumericValue>
#dans le fichier de configuration $gvsqw_PgBin/../etc_cust/sqwpg_GlobalVar.cfg

Information.png
Information:
Pour être sûr que les exemples sont exacts, reportez-vous directement à l'option d'aide en ligne du script -s .