Suppression ressources obsolètes "base consolidée IRVE statique"

[thbar]

Voir:

• Mise à jour job import IRVE vers geo_data #3794 (comment)
• Mise à jour job import IRVE vers geo_data #3794 (comment)
• [Question] Pourquoi y a-t-il moins de pdc dans la v2.3.1 par rapport à la v2.2.0 malgré l'assouplissement ? schema-irve#57 (comment) confusion créée chez utilisateurs

@stephane-pignal on s'en reparle, on va voir comment supprimer ensemble les "anciennes versions" de la consolidation, car le souci c'est que des personnes en dépendent et ne réalisent pas que c'est mis à jour ; autant déclencher une erreur 404 et inciter à aller vers la data à jour.

[thbar]

Je propose de supprimer les ressources marquées ❌, et de conserver celles marquées OK

voir https://www.data.gouv.fr/fr/datasets/fichier-consolide-des-bornes-de-recharge-pour-vehicules-electriques/

@stephane-pignal ça te va ? idem @ptitfred qui commence à fouiller tout ça en lien avec #3794 ?

[ptitfred]

@thbar nous consommons toujours le schéma 2.2.0 en production

[thbar]

@ptitfred haha alors bonne alerte 😄 on va temporiser le ménage ici en attendant que ça soit au propre. Tu vas partir sur celle de tout en haut du coup ? (avec le point qu'il faut faire attention en cas d'upgrades comme on a dit !)

[ptitfred]

L'objectif de #3794 est bien de basculer vers la dernière version (en l'occurrence 2.3.1)

[thbar]

L'objectif de #3794 est bien de basculer vers la dernière version (en l'occurrence 2.3.1)

Alors il y a une subtilité dont je n'ai connaissance que depuis peu (merci @Pierlou) et que je vais quand même demander à vérifier:

• la deuxième ligne du screenshot plus haut correspond à https://github.com/etalab/schema-irve/blob/v2.3.1/dynamique/schema-dynamique.json
• la première, qu'on va conserver, est-elle différente et correspond à https://github.com/etalab/schema-irve/releases/latest si je comprends bien (c'est à dire "la dernière, quelle que soit la dernière y compris si elle change")

@Pierlou est-ce que tu confirmes que c'est bien ce qui se passe au niveau consolidation ?

[Pierlou]

Bonjour 👋 Pas exactement :

la deuxième ligne du screenshot plus haut correspond à https://github.com/etalab/schema-irve/blob/v2.3.1/dynamique/schema-dynamique.json

Il n'y a rien lié aux IRVE dynamiques dans ce jeu de données

la première, qu'on va conserver, est-elle différente et correspond à https://github.com/etalab/schema-irve/releases/latest si je comprends bien (c'est à dire "la dernière, quelle que soit la dernière y compris si elle change")

Presque : le lien que tu as envoyé pointe vers le datapackage, ici on parle bien de la latest du schéma IRVE statique : https://schema.data.gouv.fr/etalab/schema-irve-statique/

Pour revenir sur le fonctionnement : chaque version qui n'est pas exclue dans notre fichier de config donne lieu à une consolidation (quotidienne), qui apparait sous la forme Consolidation de la vX.X.X du schéma (anciennement ces fichiers étaient nommés Dernière version consolidée (vX.X.X), on a changé dans un souci de lisibilité).

L'ajout récent est le fichier Consolidation de la dernière version à date du schéma, qui est la ressource stable à privilégier pour avoir accès aux dernières données en date avec la dernière version du schéma (ce fichier est agnostique aux montées de versions, il sera toujours lié à la dernière version à date)

[thbar]

@Pierlou pardon, erreur d'inattention sur ce point de ma part car je bosse aussi sur le dynamique là 😄

Il n'y a rien lié aux IRVE dynamiques dans ce jeu de données

Oui je parlais bien du statique !

L'ajout récent est le fichier Consolidation de la dernière version à date du schéma, qui est la ressource stable à privilégier pour avoir accès aux dernières données en date avec la dernière version du schéma (ce fichier est agnostique aux montées de versions, il sera toujours lié à la dernière version à date)

OK c'est exactement ce que je voulais dire, merci pour la confirmation !

@ptitfred donc il faudra trouver un moyen idéalement de prendre la dernière version statique disponible, dynamiquement !

[thbar]

(sinon ça va casser en fait à chaque tour)

[ptitfred]

@ptitfred donc il faudra trouver un moyen idéalement de prendre la dernière version statique disponible, dynamiquement !

Je suis confus ; n'est-ce pas précisément ce que je suis en train de faire ?

[thbar]

@ptitfred donc il faudra trouver un moyen idéalement de prendre la dernière version statique disponible, dynamiquement !

Je suis confus ; n'est-ce pas précisément ce que je suis en train de faire ?

On s'appellera ça sera plus simple je pense !

[Pierlou]

La dernière version statique disponible sera désormais toujours ce fichier : https://www.data.gouv.fr/fr/datasets/fichier-consolide-des-bornes-de-recharge-pour-vehicules-electriques/#/resources/eb76d20a-8501-400e-b336-d85724de5435 (pour éviter d'avoir à changer de fichier à chaque montée de version)

[stephane-pignal]

Après sauvegarde local, suppression via le backoffice data.gouv des ressources suivantes :

• Consolidation de la v2.3.1 du schéma - AAAAMMJJ
• Dernière version consolidée (v2.3.0 du schéma) - 20240206
• Dernière version consolidée (v2.2.1 du schéma) - 20240206
• Dernière version consolidée (v2.2.0 du schéma) - 20240206
• Version consolidée (version 1) - AAAAMMJJ

Nouvel affichage

[Pierlou]

Au prochain passage de la prod le fichier Consolidation de la v2.3.1 du schéma - AAAAMMJJ sera recréé automatiquement (l'idée étant qu'il y a actuellement un fichier par version non mentionnée dans la drop list + le fichier stable de la dernière version). A discuter si vous voulez qu'il n'y ait pas coexistence de la dernière version x2

[stephane-pignal]

Merci @Pierlou, en effet étant donné la date de mise à jour j'imaginais bien que celui-ci serait recréé
On verra lors de notre prochaine réu d'équipe la coexistence ou non avec la x2

[stephane-pignal]

ATTENTION : la ressource "Consolidation de la v2.3.1 du schéma - AAAA/MM/JJ" est nécessaire à la génération de la ressource "Consolidation de la dernière version à date du schéma (v2.3.1) - AAAA/MM/JJ

[thbar]

Il reste juste une ressource obsolète que je propose de supprimer, le reste étant actuellement mis à jour en automatique. What do you think?