GitLab

at 2022-12-12T14:11:35+01:00

 Une BD sql.gz qui génère une corruption de données systématique - Notre espoir de comprendre le problème ? - Closes #2571

Report - correction de certain totaux (exprimé en int au lieu d'en float pour les poids) + revue de certains libellés

 ################################################################################

 report.psObservationCatchTotalCountByGroupPerSpeciesFate.modelType=PS

 report.psObservationCatchTotalCountByGroupPerSpeciesFate.name=Observations - Dénombrement des captures par type de banc et devenir, filtrés par groupe

-report.psObservationCatchTotalCountByGroupPerSpeciesFate.description=Afficher les nombres de captures par groupe d'espèce selon le type de banc et le devenir, filtré par groupe

+report.psObservationCatchTotalCountByGroupPerSpeciesFate.description=Afficher les nombres de captures selon le type de banc et le devenir, filtré par groupe

 report.psObservationCatchTotalCountByGroupPerSpeciesFate.variable.speciesGroup=fr.ird.observe.dto.referential.common.SpeciesGroupDto|\

 Select distinct sg \

 From TripImpl t \

 ## Poids des captures par groupe d'espèces

 ################################################################################

 report.psObservationCatchWeightByGroupPerSpeciesFate.modelType=PS

-report.psObservationCatchWeightByGroupPerSpeciesFate.name=Observations - Poids des captures par type de banc et devenir, filtrés par groupe

-report.psObservationCatchWeightByGroupPerSpeciesFate.description=Afficher le poids de captures par groupe d'espèce selon le type de banc et le devenir, filtrés par groupe

+report.psObservationCatchWeightByGroupPerSpeciesFate.name=Observations - Poids des captures par type de banc et devenir, filtrés par groupe (en t)

+report.psObservationCatchWeightByGroupPerSpeciesFate.description=Afficher le poids de captures selon le type de banc et le devenir, filtrés par groupe (en t)

 report.psObservationCatchWeightByGroupPerSpeciesFate.variable.speciesGroup=fr.ird.observe.dto.referential.common.SpeciesGroupDto|\

 Select distinct sg \

 From TripImpl t \

 Group by s, sf \

 Order By s.homeId

 report.psObservationCatchWeightByGroupPerSpeciesFate.operations.2=ComputeDynamicHeader:Espèce,Total BL,Total BO|speciesFate

-report.psObservationCatchWeightByGroupPerSpeciesFate.operations.3=SumIntRow:1|3

-report.psObservationCatchWeightByGroupPerSpeciesFate.operations.4=SumIntColumn:1|1

+report.psObservationCatchWeightByGroupPerSpeciesFate.operations.3=SumRow:1|3

+report.psObservationCatchWeightByGroupPerSpeciesFate.operations.4=SumColumn:1|1

 ################################################################################

 ## Poids des captures par groupe d'espèces, type de banc et et raison de rejet

 ################################################################################

 report.psObservationCatchWeightByGroupPerReasonForDiscard.modelType=PS

-report.psObservationCatchWeightByGroupPerReasonForDiscard.name=Observations - Poids des rejets par type de banc et raison de rejet, filtrés par groupe

+report.psObservationCatchWeightByGroupPerReasonForDiscard.name=Observations - Poids des rejets par type de banc et raison de rejet, filtrés par groupe (en t)

 report.psObservationCatchWeightByGroupPerReasonForDiscard.description=Afficher le poids de captures rejetées par espèce selon le type de banc et type de rejet, filtrés par groupe

 report.psObservationCatchWeightByGroupPerReasonForDiscard.variable.speciesGroup=fr.ird.observe.dto.referential.common.SpeciesGroupDto|\

 Select distinct sg \

 Group by s, sf \

 Order By s.homeId

 report.psObservationCatchWeightByGroupPerReasonForDiscard.operations.2=ComputeDynamicHeader:Espèce,Total BL,Total BO|reasonForDiscard

-report.psObservationCatchWeightByGroupPerReasonForDiscard.operations.3=SumIntRow:1|3

-report.psObservationCatchWeightByGroupPerReasonForDiscard.operations.4=SumIntColumn:1|1

+report.psObservationCatchWeightByGroupPerReasonForDiscard.operations.3=SumRow:1|3

+report.psObservationCatchWeightByGroupPerReasonForDiscard.operations.4=SumColumn:1|1

 ################################################################################

 ## Dénombrement des rejets par groupe d'espèces, type de banc et raison de rejet

 ################################################################################

 report.psObservationCatchTotalCountByGroupPerReasonForDiscard.modelType=PS

-report.psObservationCatchTotalCountByGroupPerReasonForDiscard.name=Observations - Dénombrement des rejets par type de banc et raison de rejet, filtrés par groupe

-report.psObservationCatchTotalCountByGroupPerReasonForDiscard.description=Afficher le nombre de captures rejetées par espèce selon le type de banc et le type de rejet, filtrés par groupe

+report.psObservationCatchTotalCountByGroupPerReasonForDiscard.name=Observations - Dénombrement des rejets par type de banc et raison de rejet, filtrés par groupe (en t)

+report.psObservationCatchTotalCountByGroupPerReasonForDiscard.description=Afficher le nombre de captures rejetées par espèce selon le type de banc et le type de rejet, filtrés par groupe (en t)

 report.psObservationCatchTotalCountByGroupPerReasonForDiscard.variable.speciesGroup=fr.ird.observe.dto.referential.common.SpeciesGroupDto|\

 Select distinct sg \

 From TripImpl t \

 # <http://www.gnu.org/licenses/gpl-3.0.html>.

 # #L%

 ###

-syntax.name=Observations - Dénombrement des rejets par type de banc et raison de rejet, filtrés par groupe

-syntax.description=Afficher le nombre de captures rejetées par espèce selon le type de banc et le type de rejet, filtrés par groupe

+syntax.name=Observations - Dénombrement des rejets par type de banc et raison de rejet, filtrés par groupe (en t)

+syntax.description=Afficher le nombre de captures rejetées par espèce selon le type de banc et le type de rejet, filtrés par groupe (en t)

 syntax.rows=-1

 syntax.columns=-1

 syntax.columnsHeader=

 # #L%

 ###

 syntax.name=Observations - Dénombrement des captures par type de banc et devenir, filtrés par groupe

-syntax.description=Afficher les nombres de captures par groupe d'espèce selon le type de banc et le devenir, filtré par groupe

+syntax.description=Afficher les nombres de captures selon le type de banc et le devenir, filtré par groupe

 syntax.rows=-1

 syntax.columns=-1

 syntax.columnsHeader=

 # <http://www.gnu.org/licenses/gpl-3.0.html>.

 # #L%

 ###

-syntax.name=Observations - Poids des rejets par type de banc et raison de rejet, filtrés par groupe

+syntax.name=Observations - Poids des rejets par type de banc et raison de rejet, filtrés par groupe (en t)

 syntax.description=Afficher le poids de captures rejetées par espèce selon le type de banc et type de rejet, filtrés par groupe

 syntax.rows=-1

 syntax.columns=-1

 result.columns=9

 result.rows=2

 result.0=Espèce^Total BL^Total BO^Espèce non désirée ou protégée^Taille^Cuve pleine^Poisson abîmé ou impropre à la consommation humaine^Autre ( à préciser dans les notes )^Total

-result.1=[FAO]ALV [sc]Alopias vulpinus [fr]Renard^0.0^12.0^null^null^12.0^null^null^12
+result.1=[FAO]ALV [sc]Alopias vulpinus [fr]Renard^0.0^12.0^null^null^12.0^null^null^12.0
 # <http://www.gnu.org/licenses/gpl-3.0.html>.

 # #L%

 ###

-syntax.name=Observations - Poids des captures par type de banc et devenir, filtrés par groupe

-syntax.description=Afficher le poids de captures par groupe d'espèce selon le type de banc et le devenir, filtrés par groupe

+syntax.name=Observations - Poids des captures par type de banc et devenir, filtrés par groupe (en t)

+syntax.description=Afficher le poids de captures selon le type de banc et le devenir, filtrés par groupe (en t)

 syntax.rows=-1

 syntax.columns=-1

 syntax.columnsHeader=

 result.columns=19

 result.rows=2

 result.0=Espèce^Total BL^Total BO^Ailerons seulements^Partiellement conservé (ex: ailerons de requin, poisson séché)^Autres (à préciser dans les notes)^Conservé pour raisons scientifiques^Conservé pour le marché local ou poisson séché/salé à bord^Conservé à destination de la conserverie^Utilisé en cuisine du bord^Echappe du filet (pour requin-baleine et cétacés)^Rejeté, statut non observé^Rejeté suffocant^Rejeté suffocant blessé^Sortie vivant du filet (pour requin-baleine et cétacés)^Sortie mort du filet (pour requin-baleine et cétacés)^Rejeté vivant^Rejeté mort^Total

-result.1=[FAO]ALV [sc]Alopias vulpinus [fr]Renard^0.0^12.0^null^null^null^null^null^null^null^12.0^null^null^null^null^null^null^null^12
+result.1=[FAO]ALV [sc]Alopias vulpinus [fr]Renard^0.0^12.0^null^null^null^null^null^null^null^12.0^null^null^null^null^null^null^null^12.0
         }

     }

-    public void saveModelVersion() {

-        saveVersion(null, getModelVersion());

+    protected void saveModelVersionAndCommit() {

+        Version version = getModelVersion();

+        log.info(String.format("[ Version %s ] Saving persistence model database version and commit.", version));

+        sqlHelper.saveAndCommit(jdbcHelper, version.getVersion());

+        dbVersion = version;

     }

     public Optional<TopiaMigrationServiceAskUserToMigrate> getAskUserToMigrate() {

     protected void saveVersion(TopiaSqlSupport sqlSupport, Version version) {

         log.info(String.format("[ Version %s ] Saving new database version.", version));

-        if (sqlSupport != null) {

-            sqlHelper.save(sqlSupport, version.getVersion());

-        } else {

-            sqlHelper.save(jdbcHelper, version.getVersion());

-        }

+        sqlHelper.save(sqlSupport, version.getVersion());

         dbVersion = version;

     }

             context.dropLegacyTable();

             if (dbVersion.equals(modelVersion)) {

                 log.info("Database is up to date, but was coming from legacy migration table, fill new migration table.");

-                context.saveModelVersion();

+                context.saveModelVersionAndCommit();

                 return;

             }

         }

         if (versionTableExist && dbNotVersioned) {

             log.info("Database is empty, no migration needed.");

-            context.saveModelVersion();

+            context.saveModelVersionAndCommit();

             return;

         }

         List<Version> versionsToApply = context.getResources().getVersionsAfter(dbVersion);

         if (versionsToApply.isEmpty()) {

+            //TODO This case should never happen?

             log.info("No version to apply, no migration needed.");

-            context.saveModelVersion();

+            context.saveModelVersionAndCommit();

             return;

         }

         return deleteTableSql() + fillVersionSql(version);

     }

-    default void save(JdbcHelper jdbcHelper, String version) {

+    default void saveAndCommit(JdbcHelper jdbcHelper, String version) {

         try {

-            jdbcHelper.runUpdate(saveTableSql(version));

+            jdbcHelper.runUpdate(saveTableSql(version) + "commit;");

         } catch (Exception e) {

             throw new TopiaException(String.format("Could not save version %s", version), e);

         }

Tony CHEMIT pushed to branch develop-9.0.x at ultreiaio / ird-observe

Commits:

8 changed files:

Changes: