Commit 8c79c6a8 authored by Bertrand Gauthier's avatar Bertrand Gauthier
Browse files

Synchro : modif pour profiter de la possibilité de spécifier un where dans les...

Synchro : modif pour profiter de la possibilité de spécifier un where dans les destinations (filtrage par étab)
parent ec0781fe
Loading
Loading
Loading
Loading
+30 −11
Changes for bin/run-import.sh: 30 added lines, 11 removed lines.
Original line number Diff line number Diff line
@@ -4,11 +4,9 @@
#        Script de lancement de l'import et de la synchro pour un établissement.
#############################################################################################
#
# Variables d'env requises :
#   ETAB : code de l'établissement à traiter, ex: "UCN".
#
# Variables d'env possibles :
#   SERVICE : code du service à traiter, ex: "variable".
# Variables d'env attendues :
#   ETAB    : Code de l'établissement à traiter (ex: "UCN"). OBLIGATOIRE.
#   SERVICE : Code du service à traiter, (ex: "variable"). OPTIONNEL.
#

usage() {
@@ -30,17 +28,38 @@ APP_DIR=$(cd ${CURR_DIR}/.. && pwd)
echo "Répertoire courant : $CURR_DIR"
echo "Répertoire de l'appli : $APP_DIR"

function run() {
  service=$1
  (
    set -x ;
    /usr/bin/php ${APP_DIR}/public/index.php import --synchronize=0 --etablissement=${ETAB} --service=${service} && \
    /usr/bin/php ${APP_DIR}/public/index.php run synchro --name=${service}-${ETAB}
  )
}

# Import (appel web service) puis Synchro
if [ -z "$SERVICE" ]; then
  # tous les services
  set -x
  /usr/bin/php ${APP_DIR}/public/index.php import-all --etablissement=${ETAB} --synchronize=0 --breakOnServiceNotFound=0 && \
  /usr/bin/php ${APP_DIR}/public/index.php run synchro --all
  SERVICES[0]='structure'
  SERVICES[1]='etablissement'
  SERVICES[2]='ecole-doctorale'
  SERVICES[3]='unite-recherche'
  SERVICES[4]='individu'
  SERVICES[5]='doctorant'
  SERVICES[6]='these'
  SERVICES[7]='these-annee-univ'
  SERVICES[8]='role'
  SERVICES[9]='acteur'
  SERVICES[10]='origine-financement'
  SERVICES[11]='financement'
  SERVICES[12]='titre-acces'
  SERVICES[13]='variable'
  for SERVICE in ${SERVICES[@]}; do
    run ${SERVICE}
  done
else
  # seul service spécifié
  set -x
  /usr/bin/php ${APP_DIR}/public/index.php import --etablissement=${ETAB} --service=${SERVICE} --synchronize=0 && \
  /usr/bin/php ${APP_DIR}/public/index.php run synchro --name=${SERVICE}
  run ${SERVICE}
fi

# Refresh de la vue matérialisée utilisée pour la recherche des thèses
+102 −102
Changes for config/autoload/unicaen-db-import.global.php: 102 added lines, 102 removed lines.
Original line number Diff line number Diff line
@@ -4,68 +4,11 @@ use Application\Entity\Db\Source;
use Import\Model\ImportObserv;
use Import\Model\ImportObservResult;

return [
    'import' => [

        'import_observ_entity_class' => ImportObserv::class,
        'import_observ_result_entity_class' => ImportObservResult::class,

        'connections' => [
            // Cf. config locale
        ],

        //
        // Classe de l'entité Doctrine représentant une "Source".
        //
        'source_entity_class' => Source::class,

        //
        // Code de la Source par défaut (injectée dans les entités implémentant SoucreAwareInterface).
        //
        'default_source_code' => 'SYGAL::sygal',

        //
        // Alias éventuels des noms de colonnes d'historique.
        //
        'histo_columns_aliases' => [
            'created_on' => 'HISTO_CREATION',     // date/heure de création de l'enregistrement
            'updated_on' => 'HISTO_MODIFICATION', // date/heure de modification
            'deleted_on' => 'HISTO_DESTRUCTION',  // date/heure de suppression

            'created_by' => 'HISTO_CREATEUR_ID',     // auteur de la création de l'enregistrement
            'updated_by' => 'HISTO_MODIFICATEUR_ID', // auteur de la modification
            'deleted_by' => 'HISTO_DESTRUCTEUR_ID',  // auteur de la suppression
        ],

        //
        // Forçage éventuel de valeur pour les colonnes d'historique.
        //
        'histo_columns_values' => [
            'created_by' => 1, // auteur de la création de l'enregistrement
            'updated_by' => 1, // auteur de la modification
            'deleted_by' => 1, // auteur de la suppression
        ],

        //
        // Témoin indiquant si la table IMPORT_OBSERV doit être prise en compte.
        // La table IMPORT_OBSERV permet d'inscrire les changements de valeurs à détecter pendant la synchro.
        // Les changements détectés sont consignés dans la table IMPORT_OBSERV_RESULT.
        //
        'use_import_observ' => true,

        //
        // Imports.
        //
        'imports' => [

        ],

        //
        // Synchros.
        //
        'synchros' => [
// Déclinaison des synchros par établissement (pour pouvoir lancer la synchro pour un établissement précis).
// ==> ajout d'un 'where' à toutes les destinations des synchros.
$synchrosProto = [
    [
                'name' => 'structure',
        'name' => 'structure-%s', // <<< Sera décliné en 'structure-UCN', 'structure-URN', etc.
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_STRUCTURE',
@@ -77,13 +20,12 @@ return [
            'table'              => 'STRUCTURE',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_STRUCTURE',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'", // <<< Sera déclinée en "d.source_code like 'UCN::%'", etc.
        ],
    ],
    [
                'name' => 'etablissement',
        'name' => 'etablissement-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_ETABLISSEMENT',
@@ -95,13 +37,12 @@ return [
            'table'              => 'ETABLISSEMENT',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_ETABLISSEMENT',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'ecole-doctorale',
        'name' => 'ecole-doctorale-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_ECOLE_DOCT',
@@ -113,13 +54,12 @@ return [
            'table'              => 'ECOLE_DOCT',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_ECOLE_DOCT',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'unite-recherche',
        'name' => 'unite-recherche-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_UNITE_RECH',
@@ -131,13 +71,12 @@ return [
            'table'              => 'UNITE_RECH',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_UNITE_RECH',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'individu',
        'name' => 'individu-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_INDIVIDU',
@@ -149,13 +88,13 @@ return [
            'table'              => 'INDIVIDU',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_INDIVIDU',
//            'where'              => "d.source_code like 'UCN::%'", // todo: à virer
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'doctorant',
        'name' => 'doctorant-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_DOCTORANT',
@@ -167,13 +106,12 @@ return [
            'table'              => 'DOCTORANT',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_DOCTORANT',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'these',
        'name' => 'these-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_THESE',
@@ -185,13 +123,12 @@ return [
            'table'              => 'THESE',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_THESE',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'these-annee-univ',
        'name' => 'these-annee-univ-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_THESE_ANNEE_UNIV',
@@ -203,13 +140,12 @@ return [
            'table'              => 'THESE_ANNEE_UNIV',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_THESE_ANNEE_UNIV',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'role',
        'name' => 'role-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_ROLE',
@@ -221,13 +157,12 @@ return [
            'table'              => 'ROLE',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_ROLE',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'acteur',
        'name' => 'acteur-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_ACTEUR',
@@ -239,13 +174,12 @@ return [
            'table'              => 'ACTEUR',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_ACTEUR',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'origine-financement',
        'name' => 'origine-financement-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_ORIGINE_FINANCEMENT',
@@ -257,13 +191,12 @@ return [
            'table'              => 'ORIGINE_FINANCEMENT',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_ORIGINE_FINANCEMENT',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'financement',
        'name' => 'financement-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_FINANCEMENT',
@@ -275,13 +208,12 @@ return [
            'table'              => 'FINANCEMENT',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_FINANCEMENT',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'titre-acces',
        'name' => 'titre-acces-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_TITRE_ACCES',
@@ -293,13 +225,12 @@ return [
            'table'              => 'TITRE_ACCES',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_TITRE_ACCES',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
    [
                'name' => 'variable',
        'name' => 'variable-%s',
        'source' => [
            'name'               => 'app',
            'table'              => 'SRC_VARIABLE',
@@ -311,11 +242,80 @@ return [
            'table'              => 'VARIABLE',
            'connection'         => 'default',
            'source_code_column' => 'SOURCE_CODE',
                    //'log_table' => 'import_log',
                    //'intermediate_table' => 'TMP_VARIABLE',
            'intermediate_table_auto_drop' => false,
            'where' => "d.source_code like '%s::%%'",
        ],
    ],
];
$etabs = ['UCN', 'URN', 'ULHN', 'INSA'];
$synchros = [];
foreach ($etabs as $etab) {
    foreach ($synchrosProto as $proto) {
        $proto['name'] = sprintf($proto['name'], $etab);                                 // ex : "individu-UCN"
        $proto['destination']['where'] = sprintf($proto['destination']['where'], $etab); // ex : "d.source_code like 'UCN::%'"
        $synchros[] = $proto;
    }
}

return [
    'import' => [

        'import_observ_entity_class' => ImportObserv::class,
        'import_observ_result_entity_class' => ImportObservResult::class,

        'connections' => [
            // Cf. config locale
        ],

        //
        // Classe de l'entité Doctrine représentant une "Source".
        //
        'source_entity_class' => Source::class,

        //
        // Code de la Source par défaut (injectée dans les entités implémentant SoucreAwareInterface).
        //
        'default_source_code' => 'SYGAL::sygal',

        //
        // Alias éventuels des noms de colonnes d'historique.
        //
        'histo_columns_aliases' => [
            'created_on' => 'HISTO_CREATION',     // date/heure de création de l'enregistrement
            'updated_on' => 'HISTO_MODIFICATION', // date/heure de modification
            'deleted_on' => 'HISTO_DESTRUCTION',  // date/heure de suppression

            'created_by' => 'HISTO_CREATEUR_ID',     // auteur de la création de l'enregistrement
            'updated_by' => 'HISTO_MODIFICATEUR_ID', // auteur de la modification
            'deleted_by' => 'HISTO_DESTRUCTEUR_ID',  // auteur de la suppression
        ],

        //
        // Forçage éventuel de valeur pour les colonnes d'historique.
        //
        'histo_columns_values' => [
            'created_by' => 1, // auteur de la création de l'enregistrement
            'updated_by' => 1, // auteur de la modification
            'deleted_by' => 1, // auteur de la suppression
        ],

        //
        // Témoin indiquant si la table IMPORT_OBSERV doit être prise en compte.
        // La table IMPORT_OBSERV permet d'inscrire les changements de valeurs à détecter pendant la synchro.
        // Les changements détectés sont consignés dans la table IMPORT_OBSERV_RESULT.
        //
        'use_import_observ' => true,

        //
        // Imports.
        //
        'imports' => [

        ],

        //
        // Synchros.
        //
        'synchros' => $synchros,
    ],
];
 No newline at end of file