SQWareProduction:teradata

De WikiFr_dbSQWare
Révision datée du 8 mars 2020 à 19:29 par BatchUser (discussion | contributions) (Updated by BatchUser)
Aller à : navigation, rechercher

Presentation

Utilisation

C'est le module d'exploitation local de teradata.
Il est entierement ecrit en ksh et sql.
Il permet les operations d'exploitation pour teradata.
Exemples d'utilisations de l'outil:

  • Backup
  • Recovery
  • Compute statistics
  • Indicators collection to store in referential database SQWareRepository
  • Rotate logs
  • ....

This module is deployed locally on the machine hosting the authorities to manage, in order to avoid any points of weakness related to an NFS mount or whatever. The deployment is done through a simple command SQWareCentral module using inventory located in SQWareRepository !
Guide d'installation de SQWareProduction pour teradata

Explication des repertoires

Repertoires se trouvant dans $gvsqw_TerBin:

  • bin : Repertoires contenant standard scripts
  • bin_cust : Repertoires contenant customs scripts for your environnement
  • etc : Repertoires contenant the standard files of configuration
  • etc_cust : Repertoires contenant the customs files of configuration for your environnement (overload standards)
  • help : Repertoires contenant the standard files of help
  • help_cust : Repertoires contenant the customs files of help for your environnement
  • lib : Repertoires contenant the generic shell function librairies
  • lib_cust : Repertoires contenant the generic shell function librairies (overload standards)
  • spm : Contain sql query toolkit
  • tools : Repertoires contenant the standard scripts used on an ad hoc
  • tools_cust : Repertoires contenant the customs scripts used on an ad hoc for your environnement
  • menu : Repertoires contenant the standard menus
  • menu_cust : Repertoires contenant the custom menus for your environnement
Attention.png
Warning:
Ne modifiez pas les scripts standards et les fichiers de configuration de dbSQWare.

Utilisez les répertoires *_cust pour les customisations. 'Cela facilitera les mises à jour de version' .


Convention de nommage de fichiers

La majorite des fichiers sont nommes avec suffixes:

  • *.ksh : pour les scripts
  • *.cfg : pour les fichiers de configuration
  • *.lib : pour les librairies de fonctions
  • *.hlp : pour les fichiers d'aide
Attention.png
Warning:
Ne modifiez pas les scripts standards et les fichiers de configuration de dbSQWare.

Utilisez les répertoires *_cust pour les customisations. 'Cela facilitera les mises à jour de version' .


Convention de nommage dans les scripts

En général, la convention de nommage suivante est utilisée dans tous les scripts de SQWareProduction:

  • gvsqw_ {}: variable globale initialisée par l'environnement et/ou la lib générique
  • lvsqw_ {}: variable locale initialisée par le script et/ou une lib spécifique
  • gfsqw_ {}: fonction définie par une lib générique
  • lfsqw_ {}: fonction définie par le script et/ou une lib spécifique

bin

sqwter_ExecSQL.ksh

Script $gvsqw_TerBin/bin/sqwter_ExecSQL.ksh:

execute un fichier SQL sur l'instance Voir l'aide detaillee pour sqwter_ExecSQL.ksh

sqwter_GatherIndicators.ksh

Script $gvsqw_TerBin/bin/sqwter_GatherIndicators.ksh:

collecte les indicateurs DBA Voir l'aide detaillee pour sqwter_GatherIndicators.ksh

sqwter_NetBackup.ksh

Script $gvsqw_TerBin/bin/sqwter_NetBackup.ksh:

backup avec NetBackup des fichiers dump/backup Voir l'aide detaillee pour sqwter_NetBackup.ksh

sqwter_ParallelRun.ksh

Script $gvsqw_TerBin/bin/sqwter_ParallelRun.ksh:

Gere l'execution de commandes unix en parallele
Prend en parametre un fichier avec les commandes a executer
Vous pouvez choisir:

  • Le degre de parallelisme
  • Aggressivite de lancement (nombre de secondes entre deux lancements)
  • Aggressivite de check de fin (nombre de secondes entre deux check de fin)


Voir l'aide detaillee pour sqwter_ParallelRun.ksh

sqwter_RunJob.ksh

Script $gvsqw_TerBin/bin/sqwter_RunJob.ksh:

Execute les scripts pour Teradata et genere les fichiers log et erreur
base sur le fichier de configuration $gvsqw_RootCfg/sqwter_Jobs.cfg
compresse et purge les logs les plus anciennes Voir l'aide detaillee pour sqwter_RunJob.ksh


etc

sqwter_CreInst_CrontabRef.cfg

Fichier de configuration $gvsqw_TerBin/../etc/sqwter_CreInst_CrontabRef.cfg:


Voir l'aide detaillee pour sqwter_CreInst_CrontabRef.cfg

sqwter_CreInst_Jobs.cfg

Fichier de configuration $gvsqw_TerBin/../etc/sqwter_CreInst_Jobs.cfg:


Voir l'aide detaillee pour sqwter_CreInst_Jobs.cfg

sqwter_GlobalVar.cfg

Fichier de configuration $gvsqw_TerBin/../etc/sqwter_GlobalVar.cfg:
Global var for Teradata
Contient les variables operationnelles de SQWareProduction.

Information.png
Information:
Vous pouvez surcharger les variables contenues dans $gvsqw_TerBin/../etc/sqwter_GlobalVar.cfg

en mettant les memes noms de variables dans $gvsqw_TerBin/../etc_cust/sqwter_GlobalVar.cfg pour tous vos environnements
ou dans $HOME/sqwConfig/sqwter_GlobalVar.cfg pour cet utilisateur specialement.

Voir l'aide detaillee pour sqwter_GlobalVar.cfg

.profile

Exemple de .profile $gvsqw_TerBin/../etc/.profile:
Exemple de lignes a ajouter au .profile pour les users teradata.
Voir l'aide detaillee pour .profile

.profile_confort

Fichier pour mettre les aliases $gvsqw_TerBin/../etc/.profile_confort:
Contenu des aliases de confort de SQWareProduction pour teradata.
Modèle:SQWareProductionSurchargeConfort
Voir l'aide detaillee pour .profile_confort


lib

sqwter_ExecSQL.lib

librairies de fonctions shell $gvsqw_TerBin/../lib/sqwter_ExecSQL.lib:
lib for sqwter_ExecSQL.ksh

Information.png
Information:
Vous pouvez surcharger les fonctions contenues dans $gvsqw_TerBin/../lib/sqwter_ExecSQL.lib

en redeclarant une fonction du meme nom $gvsqw_TerBin/../lib_cust/sqwter_ExecSQL.lib pour tous les environnements
ou dans $HOME/sqwConfig/sqwter_ExecSQL.lib specifiquement pour ce user .


Voir l'aide detaillee pour sqwter_ExecSQL.lib

sqwter_GatherIndicators.lib

librairies de fonctions shell $gvsqw_TerBin/../lib/sqwter_GatherIndicators.lib:
lib for sqwter_GatherIndicators.ksh

Information.png
Information:
Vous pouvez surcharger les fonctions contenues dans $gvsqw_TerBin/../lib/sqwter_GatherIndicators.lib

en redeclarant une fonction du meme nom $gvsqw_TerBin/../lib_cust/sqwter_GatherIndicators.lib pour tous les environnements
ou dans $HOME/sqwConfig/sqwter_GatherIndicators.lib specifiquement pour ce user .


Voir l'aide detaillee pour sqwter_GatherIndicators.lib

sqwter_GatherIndicators_Overload.lib

librairies de fonctions shell $gvsqw_TerBin/../lib/sqwter_GatherIndicators_Overload.lib:
lib for overLoad sqwter_GatherIndicators.ksh

Information.png
Information:
Vous pouvez surcharger les fonctions contenues dans $gvsqw_TerBin/../lib/sqwter_GatherIndicators_Overload.lib

en redeclarant une fonction du meme nom $gvsqw_TerBin/../lib_cust/sqwter_GatherIndicators_Overload.lib pour tous les environnements
ou dans $HOME/sqwConfig/sqwter_GatherIndicators_Overload.lib specifiquement pour ce user .


Voir l'aide detaillee pour sqwter_GatherIndicators_Overload.lib

sqwter_GenerateCreateInstance.lib

librairies de fonctions shell $gvsqw_TerBin/../lib/sqwter_GenerateCreateInstance.lib:
lib for generate create instance

Information.png
Information:
Vous pouvez surcharger les fonctions contenues dans $gvsqw_TerBin/../lib/sqwter_GenerateCreateInstance.lib

en redeclarant une fonction du meme nom $gvsqw_TerBin/../lib_cust/sqwter_GenerateCreateInstance.lib pour tous les environnements
ou dans $HOME/sqwConfig/sqwter_GenerateCreateInstance.lib specifiquement pour ce user .


Voir l'aide detaillee pour sqwter_GenerateCreateInstance.lib

sqwter_Global.lib

librairies de fonctions shell $gvsqw_TerBin/../lib/sqwter_Global.lib:
central lib of generic fonctions for teradata

Information.png
Information:
Vous pouvez surcharger les fonctions contenues dans $gvsqw_TerBin/../lib/sqwter_Global.lib

en redeclarant une fonction du meme nom $gvsqw_TerBin/../lib_cust/sqwter_Global.lib pour tous les environnements
ou dans $HOME/sqwConfig/sqwter_Global.lib specifiquement pour ce user .


Voir l'aide detaillee pour sqwter_Global.lib

sqwter_NetBackup.lib

librairies de fonctions shell $gvsqw_TerBin/../lib/sqwter_NetBackup.lib:
lib for sqwgen_NetBackup.ksh

Information.png
Information:
Vous pouvez surcharger les fonctions contenues dans $gvsqw_TerBin/../lib/sqwter_NetBackup.lib

en redeclarant une fonction du meme nom $gvsqw_TerBin/../lib_cust/sqwter_NetBackup.lib pour tous les environnements
ou dans $HOME/sqwConfig/sqwter_NetBackup.lib specifiquement pour ce user .


Voir l'aide detaillee pour sqwter_NetBackup.lib

sqwter_SetEnv.lib

librairies de fonctions shell $gvsqw_TerBin/../lib/sqwter_SetEnv.lib:
fonction to set env for $TER_SID

Information.png
Information:
Vous pouvez surcharger les fonctions contenues dans $gvsqw_TerBin/../lib/sqwter_SetEnv.lib

en redeclarant une fonction du meme nom $gvsqw_TerBin/../lib_cust/sqwter_SetEnv.lib pour tous les environnements
ou dans $HOME/sqwConfig/sqwter_SetEnv.lib specifiquement pour ce user .


Voir l'aide detaillee pour sqwter_SetEnv.lib


menu


tools

sqwter_Crypt.ksh

Script $gvsqw_TerBin/../tools/sqwter_Crypt.ksh:
Generic script to crypt file with openssl Voir l'aide detaillee pour sqwter_Crypt.ksh

sqwter_GenerateCreateInstance.ksh

Script $gvsqw_TerBin/../tools/sqwter_GenerateCreateInstance.ksh:
Generate create instance files Voir l'aide detaillee pour sqwter_GenerateCreateInstance.ksh

sqwter_GetConnectString.ksh

Script $gvsqw_TerBin/../tools/sqwter_GetConnectString.ksh:
set env for $TER_SID Voir l'aide detaillee pour sqwter_GetConnectString.ksh

sqwter_ListAsyncFilesGlobal.ksh

Script $gvsqw_TerBin/../tools/sqwter_ListAsyncFilesGlobal.ksh:
List Async files (sql, log, mail) to upload in SQWareCentral (all in a directory) Voir l'aide detaillee pour sqwter_ListAsyncFilesGlobal.ksh

sqwter_ListAsyncFiles.ksh

Script $gvsqw_TerBin/../tools/sqwter_ListAsyncFiles.ksh:
List Async files (sql, log, mail) to upload in SQWareCentral Voir l'aide detaillee pour sqwter_ListAsyncFiles.ksh

sqwter_SetEnv.ksh

Script $gvsqw_TerBin/../tools/sqwter_SetEnv.ksh:
set env for $TER_SID
Modèle:SQWareProductionSurchargeToo Voir l'aide detaillee pour sqwter_SetEnv.ksh

sqwter_TestMySQL.ksh

Script $gvsqw_TerBin/../tools/sqwter_TestMySQL.ksh:
Generic test MySQL connection script Voir l'aide detaillee pour sqwter_TestMySQL.ksh

sqwter_TestSendmail.ksh

Script $gvsqw_TerBin/../tools/sqwter_TestSendmail.ksh:
Generic test sendmail script Voir l'aide detaillee pour sqwter_TestSendmail.ksh

sqwter_Uncrypt.ksh

Script $gvsqw_TerBin/../tools/sqwter_Uncrypt.ksh:
Generic script to uncrypt file with openssl Voir l'aide detaillee pour sqwter_Uncrypt.ksh


help

Contenu des fichiers d'aide pour l'option "-s" des scripts bin.


spm

Outil de requetes SQL
Voir l'aide detaillee pour spm