Commit 2117ad62 authored by Bertrand Gauthier's avatar Bertrand Gauthier
Browse files

COrrection du script et des templates de création d'une base toute neuve

parent 9fcb6e46
Loading
Loading
Loading
Loading
+34 −20
Changes for bin/database/build_db_install_files.sh: 34 added lines, 20 removed lines.
Original line number Diff line number Diff line
@@ -48,7 +48,9 @@ mkdir -p $OUTPUT_DIR
[[ -z $PGUSER ]] && echo "Vous devez faire un 'export PGUSER=xxxx'." && exit 1
[[ -z $PGPASSWORD ]] && echo "Vous devez faire un 'export PGPASSWORD=xxxx'." && exit 1

# Chargement des variables de config
# Chargement des variables de config :
#   DBNAME
#   DBUSER
source ${CONFIG_FILE}

THIS_DIR=$(cd $(dirname $0) && pwd)
@@ -62,16 +64,22 @@ echo " PGUSER=$PGUSER"
echo "Fichier de config chargé : $(realpath ${CONFIG_FILE})"
echo "Génération des fichiers permettant de créer la base de données '$DBNAME' et l'utilisateur '$DBUSER'..."

function applyDbParamsInScript() {
function replacePgDatabaseAndUserInScript() {
  FILE=$1
  # NB : d'abord le nom de la base puis le user
#  sed -i -e "s|$PGDATABASE|${DBNAME}|g" $FILE
  sed -i -e "s|OWNER TO $PGUSER|OWNER TO ${DBUSER}|g" $FILE
  sed -i -e "s|Owner: $PGUSER|Owner: ${DBUSER}|g" $FILE
}
function injectConfParamsInScript() {
  FILE=$1
  sed -i -e "s|$PGDATABASE|${DBNAME}|g" $FILE
  sed -i -e "s|$PGUSER|${DBUSER}|g" $FILE
  sed -i -e "s|{DBNAME}|${DBNAME}|g" $FILE
  sed -i -e "s|{DBUSER}|${DBUSER}|g" $FILE
}
function removeSchemaInScript() {
function prepareScript() {
  FILE=$1
#  sed -i -e 's/public\.//g' $FILE
  #sed -i -e 's/public\.//g' $FILE  # suppression du nom de schém "public"
  sed -i -e 's/FOR EACH ROW EXECUTE FUNCTION/FOR EACH ROW EXECUTE PROCEDURE/g' $FILE  # 9.x compatible
}

#=========================================================================#
@@ -82,7 +90,7 @@ function removeSchemaInScript() {
OUTPUT_FILE=$OUTPUT_DIR/README.md
SRC_SCRIPT=$THIS_DIR/src/README.template.md
cp $SRC_SCRIPT $OUTPUT_FILE
applyDbParamsInScript $OUTPUT_FILE
injectConfParamsInScript $OUTPUT_FILE
echo "> $OUTPUT_FILE"

#
@@ -108,6 +116,7 @@ NAME_CREATE_DB_USER='create_db_user'
NAME_CREATE_SCHEMA='create_schema'
NAME_INSERT_BOOTSTRAP_DATA='insert_bootstrap_data'
NAME_INSERT_DATA='insert_data'
NAME_PREPARE_DATA='prepare_data'
NAME_CREATE_COMUE='create_comue'
NAME_INIT='init'
NAME_CREATE_FIXTURE='create_fixture'
@@ -129,7 +138,7 @@ mkdir -p $OUTPUT_DIR/sql
OUTPUT_FILE=$OUTPUT_DIR/sql/01_$NAME_CREATE_DB_USER.sql
SRC_SCRIPT=$THIS_DIR/src/sql/$NAME_CREATE_DB_USER.template.sql
cp $SRC_SCRIPT $OUTPUT_FILE
applyDbParamsInScript $OUTPUT_FILE
injectConfParamsInScript $OUTPUT_FILE
echo "> $OUTPUT_FILE"

#
@@ -137,8 +146,8 @@ echo "> $OUTPUT_FILE"
#
OUTPUT_FILE=$OUTPUT_DIR/sql/02_$NAME_CREATE_SCHEMA.sql
pg_dump --section=pre-data --schema-only --exclude-table 'MV_INDICATEUR*' >$OUTPUT_FILE
applyDbParamsInScript $OUTPUT_FILE
removeSchemaInScript $OUTPUT_FILE
replacePgDatabaseAndUserInScript $OUTPUT_FILE
#prepareScript $OUTPUT_FILE
echo "> $OUTPUT_FILE"

#
@@ -154,41 +163,46 @@ echo "> $OUTPUT_FILE"
#
OUTPUT_FILE=$OUTPUT_DIR/sql/04_$NAME_INSERT_DATA.sql
PATTERN='categorie_privilege|domaine_scientifique|import_observ|information_langue|nature_fichier|privilege|profil|profil_privilege|soutenance_configuration|soutenance_etat|soutenance_qualite|type_rapport|type_structure|type_validation|version_fichier|wf_etape'
pg_dump --data-only --column-inserts --table "($PATTERN)" >$OUTPUT_FILE
applyDbParamsInScript $OUTPUT_FILE
removeSchemaInScript $OUTPUT_FILE
pg_dump --data-only --column-inserts --table="($PATTERN)" >$OUTPUT_FILE
replacePgDatabaseAndUserInScript $OUTPUT_FILE
echo "> $OUTPUT_FILE"

#
# prepare data
#
OUTPUT_FILE=$OUTPUT_DIR/sql/05_$NAME_PREPARE_DATA.sql
SRC_SCRIPT=$THIS_DIR/src/sql/$NAME_PREPARE_DATA.sql
cp $SRC_SCRIPT $OUTPUT_FILE
echo "> $OUTPUT_FILE"

#
# constraints
#
OUTPUT_FILE=$OUTPUT_DIR/sql/05_$NAME_CREATE_CONSTRAINTS.sql
OUTPUT_FILE=$OUTPUT_DIR/sql/06_$NAME_CREATE_CONSTRAINTS.sql
pg_dump --section=post-data --schema-only >$OUTPUT_FILE
removeSchemaInScript $OUTPUT_FILE
replacePgDatabaseAndUserInScript $OUTPUT_FILE
echo "> $OUTPUT_FILE"

#
# COMUE
#
OUTPUT_FILE=$OUTPUT_DIR/sql/06_$NAME_CREATE_COMUE.sql.dist
OUTPUT_FILE=$OUTPUT_DIR/sql/07_$NAME_CREATE_COMUE.sql.dist
SRC_SCRIPT=$THIS_DIR/src/sql/$NAME_CREATE_COMUE.template.sql
cp $SRC_SCRIPT $OUTPUT_FILE
#applyDbParamsInScript $OUTPUT_FILE
echo "> $OUTPUT_FILE"

#
# init
#
OUTPUT_FILE=$OUTPUT_DIR/sql/07_$NAME_INIT.sql.dist
OUTPUT_FILE=$OUTPUT_DIR/sql/08_$NAME_INIT.sql.dist
SRC_SCRIPT=$THIS_DIR/src/sql/$NAME_INIT.template.sql
cp $SRC_SCRIPT $OUTPUT_FILE
#applyDbParamsInScript $OUTPUT_FILE
echo "> $OUTPUT_FILE"

#
# fixtures
#
OUTPUT_FILE=$OUTPUT_DIR/sql/08_$NAME_CREATE_FIXTURE.sql.dist
OUTPUT_FILE=$OUTPUT_DIR/sql/09_$NAME_CREATE_FIXTURE.sql.dist
SRC_SCRIPT=$THIS_DIR/src/sql/$NAME_CREATE_FIXTURE.template.sql
cp $SRC_SCRIPT $OUTPUT_FILE
echo "> $OUTPUT_FILE"
+22 −20
Changes for bin/database/src/README.template.md: 22 added lines, 20 removed lines.
Original line number Diff line number Diff line
@@ -12,10 +12,11 @@ Les fichiers fournis permettant de créer une base de données pour SyGAL sont :
    - [`02_create_schema.sql`](sql/02_create_schema.sql)
    - [`03_insert_bootstrap_data.sql`](sql/03_insert_bootstrap_data.sql)
    - [`04_insert_data.sql`](sql/04_insert_data.sql)
    - [`05_create_constraints.sql`](sql/05_create_constraints.sql)
    - [`06_create_comue.sql.dist`](sql/06_create_comue.sql.dist) (à "préparer" avec le script) 
    - [`07_init.sql.dist`](sql/07_init.sql.dist) (idem)
    - [`08_create_fixture.sql.dist`](sql/08_create_fixture.sql.dist) (idem)
    - [`05_prepare_data.sql`](sql/05_prepare_data.sql)
    - [`06_create_constraints.sql`](sql/06_create_constraints.sql)
    - [`07_create_comue.sql.dist`](sql/07_create_comue.sql.dist) (à "préparer" avec le script) 
    - [`08_init.sql.dist`](sql/08_init.sql.dist) (idem)
    - [`09_create_fixture.sql.dist`](sql/09_create_fixture.sql.dist) (idem)
    

## Case départ
@@ -27,9 +28,9 @@ Ouvez un shell et placez-vous dans le répertoire contenant le présent README e
## Préparation de certains scripts SQL

Les scripts SQL à "préparer" portent l'extension `.sql.dist` :
  - [`06_create_comue.sql.dist`](sql/06_create_comue.sql.dist)
  - [`07_init.sql.dist`](sql/07_init.sql.dist)
  - [`08_create_fixture.sql.dist`](sql/08_create_fixture.sql.dist)
  - [`07_create_comue.sql.dist`](sql/07_create_comue.sql.dist)
  - [`08_init.sql.dist`](sql/08_init.sql.dist)
  - [`09_create_fixture.sql.dist`](sql/09_create_fixture.sql.dist)

Pour les préparer, vous devez dans l'ordre :

@@ -47,9 +48,9 @@ Pour les préparer, vous devez dans l'ordre :

Une fois le script bash exécuté, vous devriez vous retrouver avec 3 scripts SQL supplémentaires dans le répertoire 
[`sql/`](sql) :
  - [`06_create_comue.sql`](sql/06_create_comue.sql)
  - [`07_init.sql`](sql/07_init.sql)
  - [`08_create_fixture.sql`](sql/08_create_fixture.sql)
  - [`07_create_comue.sql`](sql/07_create_comue.sql)
  - [`08_init.sql`](sql/08_init.sql)
  - [`09_create_fixture.sql`](sql/09_create_fixture.sql)

À présent, tout est prêt pour lancer la création de la base de données.

@@ -61,11 +62,11 @@ Une fois le script bash exécuté, vous devriez vous retrouver avec 3 scripts SQ

```bash
ON_ERROR_STOP=1 \
PGHOST=host.domain.fr \
PGHOST=localhost \
PGPORT=5432 \
PGDATABASE=postgres \
PGUSER=postgres \
PGPASSWORD=xxxxxxxx \
PGPASSWORD=admin \
psql -f sql/01_create_db_user.sql
```

@@ -74,11 +75,11 @@ Ce 1er script SQL crée la base de données `{DBNAME}` et l'utilisateur `{DBUSER
**Attention, l'utilisateur est créé avec un mot de passe par défaut** donc vous devez le modifier en faisant un 
truc du genre :
```bash
PGHOST=host.domain.fr \
PGHOST=localhost \
PGPORT=5432 \
PGDATABASE=postgres \
PGUSER=postgres \
PGPASSWORD=xxxxxxxx \
PGPASSWORD=admin \
psql -c "alter user {DBUSER} with encrypted password 'VRAI_MOT_DE_PASSE'"
```

@@ -92,11 +93,11 @@ Pour cela, exportez les variables d'environnement PostgreSQL comme suit :
```bash
export \
ON_ERROR_STOP=1 \
PGHOST=host.domain.fr \
PGHOST=localhost \
PGPORT=5432 \
PGDATABASE={DBNAME} \
PGUSER={DBUSER} \
PGPASSWORD=xxxxxx
PGPASSWORD=VRAI_MOT_DE_PASSE
```

Lancez ensuite *dans l'ordre* chacun des scripts suivants :
@@ -105,10 +106,11 @@ Lancez ensuite *dans l'ordre* chacun des scripts suivants :
psql -f sql/02_create_schema.sql && \
psql -f sql/03_insert_bootstrap_data.sql && \
psql -f sql/04_insert_data.sql && \
psql -f sql/05_create_constraints.sql && \
psql -f sql/06_create_comue.sql && \
psql -f sql/07_init.sql && \
psql -f sql/08_create_fixture.sql
psql -f sql/05_prepare_data.sql && \
psql -f sql/06_create_constraints.sql && \
psql -f sql/07_create_comue.sql && \
psql -f sql/08_init.sql && \
psql -f sql/09_create_fixture.sql
```

Par précaution, effacez éventuellement les variables d'environnement PostgreSQL :
+1 −1
Changes for bin/database/src/sql/create_comue.template.sql: 1 added line, 1 removed line.
Original line number Diff line number Diff line
@@ -17,7 +17,7 @@ insert into etablissement (id, structure_id, domaine, source_id, source_code, es
select
  nextval('etablissement_id_seq'), s.id,
  '{ETAB_COMUE_DOMAINE}', --> domaine à personnaliser
  1, 'COMUE', 1, 0, 1, 1
  1, 'COMUE', true, false, 1, 1
from structure s
where s.source_code = 'COMUE'
;
+8 −8
Changes for bin/database/src/sql/init.template.sql: 8 added lines, 8 removed lines.
Original line number Diff line number Diff line
@@ -34,8 +34,8 @@ select
    s.id,
    '{ETAB_DOMAINE}',
    '{ETAB_CODE}',
    0,
    1,
    false,
    true,
    1,
    1, 1
from structure s
@@ -48,13 +48,13 @@ where s.source_code = '{ETAB_CODE}'
delete from source where code <> 'SYGAL::sygal'
;
insert into source (id, code, libelle, importable, etablissement_id)
select 2, source_code||'::apogee', 'Apogée '||source_code, 1, id
select 2, source_code||'::apogee', 'Apogée '||source_code, true, id
from etablissement
where source_code = '{ETAB_CODE}'
  and {SOURCE_APOGEE} = 1
;
insert into source (id, code, libelle, importable, etablissement_id)
select 3, source_code||'::physalis', 'Physalis '||source_code, 1, id
select 3, source_code||'::physalis', 'Physalis '||source_code, true, id
from etablissement
where source_code = '{ETAB_CODE}'
  and {SOURCE_PHYSALIS} = 1
@@ -77,10 +77,10 @@ insert into role (
    type_structure_dependant_id
)
with tmp(code, libelle, these_dep) as (
    select 'ADMIN',     'Administrateur',             0 union
    select 'MDD',       'Maison du doctorat',         0 union
    select 'BU',        'Bibliothèque universitaire', 0 union
    select 'DOCTORANT', 'Doctorant',                  1
    select 'ADMIN',     'Administrateur',             false union
    select 'MDD',       'Maison du doctorat',         false union
    select 'BU',        'Bibliothèque universitaire', false union
    select 'DOCTORANT', 'Doctorant',                  true
)
select
    nextval('role_id_seq'),
+4 −4
Changes for bin/database/src/sql/insert_bootstrap_data.template.sql: 4 added lines, 4 removed lines.
Original line number Diff line number Diff line
@@ -8,7 +8,7 @@
delete from source where code = 'SYGAL::sygal'
;
insert into source (id, code, libelle, importable)
values (1, 'SYGAL::sygal', 'SyGAL', 0)
values (1, 'SYGAL::sygal', 'SyGAL', false)
;

--
@@ -26,10 +26,10 @@ values (1, 'sygal-app', 'Application SyGAL', 'ldap')
delete from role where source_code in ('ADMIN_TECH', 'OBSERV')
;
insert into role (id, code, libelle, source_code, source_id, role_id, these_dep, histo_createur_id, histo_modificateur_id)
  values (1, 'ADMIN_TECH', 'Administrateur technique', 'ADMIN_TECH', 1, 'Administrateur technique', 0, 1, 1)
  values (1, 'ADMIN_TECH', 'Administrateur technique', 'ADMIN_TECH', 1, 'Administrateur technique', false, 1, 1)
;
insert into role (id, code, libelle, role_id, source_code, source_id, these_dep, histo_createur_id, histo_modificateur_id)
  values (2 /*241*/, 'OBSERV', 'Observateur', 'Observateur', 'OBSERV', 1, 0, 1, 1)
insert into role (id, code, libelle, source_code, source_id, role_id, these_dep, histo_createur_id, histo_modificateur_id)
  values (2 /*241*/, 'OBSERV', 'Observateur', 'OBSERV', 1, 'Observateur', false, 1, 1)
;

-- drop sequence INDIVIDU_ID_SEQ;
Loading