Un meta-catalogue simplifié rassemblant le contenu de Metawal et d'ODWB

[vbombaerts]

Au niveau wallon, on a actuellement deux catalogues de données qui présentent des données complémentaires : metawal/géoportail et odwb.be

L'objectif est de créer un meta-catalogue qui rassemblera tout le contenu et servira de point d'entrée vers les différents catalogues et leurs spécificités.

Une solution envisagée pour y arriver serait que Metawal moissonne ODWB et réexpose le tout sous forme d'un webcomposant catalogue (recherche, filtres, facettes, liste de résultats). Ce méta-catalogue pourra être intégré à un site web.

[fxprunayre]

Lié à #786

• Créer un groupe ODBW
• Configurer un moissonneur:

{"@id":"4284","@type":"simpleurl","owner":["70"],"ownerGroup":[14697],"ownerUser":["70"],"site":{"name":"odwb","uuid":"1f4e3e33-be43-486e-a371-f9fed31d4df1","account":{"use":false,"username":[],"password":[]},"url":"https://www.odwb.be/api/explore/v2.0/catalog/datasets?limit=10&offset=0&timezone=UTC&include_links=false&include_app_metas=false","icon":"blank.png","loopElement":"/datasets","numberOfRecordPath":"/total_count","recordIdPath":"/dataset/dataset_id","pageSizeParam":"limit","pageFromParam":"offset","toISOConversion":"schema:iso19115-3.2018:convert/fromJsonOpenDataSoft"},"content":{"validate":"NOVALIDATION","importxslt":"none","batchEdits":"[]"},"options":{"every":"0 0 0 ? * *","oneRunOnly":false,"overrideUuid":"SKIP","status":"active"},"privileges":[{"@id":"1","operation":[{"@name":"view"},{"@name":"dynamic"},{"@name":"download"}]}],"ifRecordExistAppendPrivileges":false,"info":{"lastRun":"2024-09-09T08:21:08.124161Z","running":false,"result":{"added":"1036","atomicDatasetRecords":"0","badFormat":"0","collectionDatasetRecords":"0","datasetUuidExist":"0","privilegesAppendedOnExistingRecord":"0","doesNotValidate":"0","xpathFilterExcluded":"0","duplicatedResource":"0","fragmentsMatched":"0","fragmentsReturned":"0","fragmentsUnknownSchema":"0","incompatible":"0","recordsBuilt":"0","recordsUpdated":"0","removed":"0","serviceRecords":"0","subtemplatesAdded":"0","subtemplatesRemoved":"0","subtemplatesUpdated":"0","total":"1036","unchanged":"0","unknownSchema":"0","unretrievable":"0","updated":"0","thumbnails":"0","thumbnailsFailed":"0"}}}

Résultats:

• 1036 fiches moissonnées
• Améliorations :
  • HTML dans le résumé (cf Record view / Improve support of HTML in abstract geonetwork/core-geonetwork#8359)
  • Amélioration du mapping (Harvester / Simple URL / ODS improvement geonetwork/core-geonetwork#8362)

A déployer pour test @GeryNi

[GeryNi]

Nouvelle version déployée.

[GeryNi]

En me basant sur la config fournie par Francois, j'ai créé un harvester 'odwb-test' qui utilise le groupe 'Test-ODWB',

[vbombaerts]

@GeryNi le groupe Test-ODWB est un groupe pour les fiches Metawal qui sont exposées vers ODWB. Peux-tu changer (éventuellement créer un nouveau groupe) sinon ils vont moissonner leurs propres fiches ;-)

[GeryNi]

Merci @vbombaerts , je n'avais pas vu que ce groupe était utilisé. J'ai créé un nouveau groupe 'ODWB-gny' pour éviter toute confusion.

[GeryNi]

[vbombaerts]

C'est juste qu'on ne les voit pas...

[vbombaerts]

J'ai lancé une indexation au cas où... mais les fiches n'apparaissent pas. Ce n'est pas le seul moissonneur pour lequel les fiches n'apparaissent pas.

[GeryNi]

@vbombaerts Avec l'aide de @fxprunayre , on a corrigé la config du moissonneur odwb-test (déployé sur l'environnement TEST).
On pourra en rediscuter ensemble demain lors de la réunion.