L’ATBVB (Association des Techniciens de Bassins Versants Bretons) a organisé une webconférence sur “La récupération et mises en formes des données Qualité Eau en Bretagne : quels outils à disposition?” le 1er décembre, avec les interventions de l’Observatoire de l’environnement en Bretagne, l’Agence de l’Eau Loire-Bretagne, l’Office Français de la Biodiversité et le Bureau de recherches géologiques et minières (BRGM).
Déroulé du webinaire
Ce webinaire présente la chaîne de publication des données, en partant de la bancarisation des données, leur diffusion dans Naiades et Hubeau et un exemple de valorisation de la donnée avec l’OEB:
1- Mode de transmission des données du bassin aux plateformes nationales (Naïades et ADES) – Gaël DORSO de l’Agence de l’Eau Loire-Bretagne
2- Présentation du portail Naiade et de ses évolutions – Remi ESCAFFRE de l’Office Français de la Biodiversité (OFB)
3- Présentation des différents services de l’outil national Hubeau – Benoit LARDEAU du Bureau de recherches géologiques et minières (BRGM)
4- Présentation des données et outils à disposition sur le portail de l’OEB – Timothée BESSE de l’Observatoire de l’environnement en Bretagne (OEB)
Vous trouverez les diaporamas de ce webinaire sur le site de l’ATBVB via le lien suivant: https://atbvb.fr/webinaire-recuperation-et-mises-en-formes-des-donnees-qualite-eau-en-bretagne-quels-outils-a-disposition/
Merci et bon visionnage !
Charlotte Le Guénic,
animatrice ATBVB
charlotte.leguenic@atbvb.fr – 07 72 30 34 19
www.atbvb.fr
Et mise en forme des données Qualité en Bretagne quels outil à disposition donc organisé par l’association des techniciens de bassinversant en breton et merci aussi aux intervenants d’avoir répondu présent donc si tu veux Gael je te laisse commencer donc Gael dorau de l’Agence de l’eau qui va qui va
Commencer et je vous souhaite un bon webinaire merci Charlotte alors donc Gael dorau donc je suis le l’administrateur des des données de la surveillance à l’Agence de l’eau loirebretagne donc j’ai en charge la la base de données la banque de de bassin euh sur les les données qualité
Euh et donc sur cette présentation alors juste un un mot de d’introduction nous avons choisi de de suivre un cheminement logique qui est celui de la chaîne de publication des données en partant donc de la la bancarisation des données euh jusqu’à leur à leur diffusion dans NAD
Dans UBO et puis euh ensuite on verra un exemple de valorisation de ces données à travers des écrans web et donc euh euh voilà donc l’enjeu de de cette chaîne de publication hein c’est de c’est vraiment de pour pour nous tous d’en assurer le la qualité alors le contexte hein euh le
Contexte donc je vais faire diffuser euh j’ai pardon voilà je sais pas si ça marche ouais c’est bon euh le contexte euh c’est le système d’information sur l’eau finalement nous sommes tous les maillons d’une grande chaîne qui est le le système d’information sur l’eau et euh voilà
Pour prendre un peu de recul hein c’est bah il y a y a il y a des centaines de millions d’ données alors peut-être plus de 600 millions maintenant euh et euh effectivement une multiplicité de d’acteurs il y a une vingtaine de de grandes banques de données voilà et
Finalement l’enjeu c’est de sur cette ce système d’information c’est queon a une multiplicité d’acteurs mais quand même il y a une volonté de de centraliser euh une relative centralisation de de la gouvernance et de la et de l’infrastructure technique qu’il y a derrière ce système d’information euh ce
Qui est ce qui ce qui était une gageur puisque voilà comme vous le savez en France les politiques de l’eau sont quand même largement décentralisées euh donc on a on a cet outils à disposition les les grands enjeux hein sur sur ce ce système d’information de manière
Générale hein c’est euh c’est qu’il faut fiabiliser donc la qualité des données euh bien sûr il y a un enjeu de de mise à disposition au grand public et puis euh et bien il y a il y a aussi également un énorme enjeu sur l’exploitation des données puisque bah
Ce qui intéresse les acteurs et ce qui ce qui intéresse le grand public aussi hein finalement c’est pas tant de savoir combien de données il y a dans la base mais c’est par exemple répondre à des questions concrètes euh est-ce que la qualité de l’eau s’améliore ou pas donc
Ça ça ça ça implique d’avoir des de bons outils à disposition mais aussi d’être en capacité d’exploiter intelligemment les données d’en maîtriser la sémantique alors pour ma part je je vais faire une présentation courte enfin d’un quart d’heure euh où je vais je vais aborder le la bancarisation des données
Donc avec le le la nécessaire conformité au référentiel du cendre je va insister sur ce point pour commencer et puis je présenterai la plateforme forme de dépôt des données de l’Agence de l’eau que vous connaissez déjà peut-être euh ensuite on passera rapidement en vue en revue les les fichiers d’échange de données les
Différents formats qui sont acceptés et puis je terminerai avec la diffusion des données de l’agence dans nayad ce qui fera le la transition avec le le point suivant euh qui sera sur nan alors d’abord euh je voulais revenir ça me semblait important sur le le langage commun qui est notre langage
Commun qui est le Le Cendre hein référence qui assure le euh je dirais la centralisation de tous les référentiels sur l’eau euh c’est vrai que euh grâce au cendre on a un certain un certain niveau je dirais de d’alignement à la fois syntaxique et sémantique de toutes
Nos données et cet enjeu d’alignement il est essentiel euh pour assurer l’interopérabilité des outils et aussi une bonne utilisation des données donc euh bah vous connaissez sans doute tous hein déjà le le centre donc j’ai remis ici le lien le la première étape quand on bancarise une donnée c’est s’assurer
Qu’elle est conforme au référentiel du centre mais alors des fois ça peut paraître un peu laborieux mais c’est nécessaire pour parler tous le même langage alors au cendre il y a des référentiels analytiques j’en ai mis certains que que vous connaissez déjà les paramètres unités support méthodes
Les taxons et aussi des centaines de nomenclatures et puis il y a des référentiels applicatifs les réseaux les intervenants que j’ai mis ici les stations de mesure alors pour les les stations de mesure euh c’est un peu spécifique puisque la demande de création d’une station se fait non pas
Pas sur le le site du Centre comme pour tous les autres référentiels mais se fait directement via l’agence de l’eauir Bretagne à noter que jusqu’à aujourd’hui l’outil qui nous sert à gérer les stations de mesure c’est pas le même que celui qui nous sert à gérer les données
Qualité donc il y a toujours un temps de latence entre le moment où la station est créée et le moment où on peut bancariser la donnée puisquévidemment faut que la la la station remonte au cendre et ensuite il faut qu’elle redescende du centre dans nos outils de gestion donc voilà c’est c’est parfois
Un peu frustrant à partir de l’année prochaine on va tou gérer dans le même outil et donc dans la même base de données et donc il y aura plus ce temps de latence c’est-à-dire que quand une station sera créée on pourra bancariser directement la donnée euh voilà donc j’ai mis ici le
J’ai remis ici l’adresse du MDM le Master Data Management du cendre he qui permet de de modifier des des référentiels à savoir donc il faut créer son propre compte utilisateur sur notre site internet le site Internet de donc de l’Agence de l’eau il y a une page qui est dédiée à
Tous les suivis qualités hein sur les cours d’eau et pl d’eau et sur les eaux souterraines aussi d’ailleurs sur cette page on y trouve les prescriptions techniques euh qui sont à respecter en particulier si on veut que les données servent à l’évaluation de l’état l’état écologiqueat chimique dans le cadre de
La la planification hein ben il faut respecter voilà certains certaines prescriptions par exemple sur le les les supports les fractions les unités de mesure voilà donc de manière générale c’est c’est un enjeu aussi de respecter ces prescriptions pour assurer une certaine homogénéité du jeu de données
Même si bon voilà il peut y avoir pour un même paramètre des unités de mesure différentes dans le dans la base de données on sait que ça existe on essaie en tout cas pour les les suivis par exemple de l’agence de Lou d’avoir toujours une même une seule et même unité pour un
Paramètre il y a également donc des C décharge type pour pour le cas où vous auriez recours à des prestations pour les les prélèvements et le programme de surveillance de l’Agence de l’eau qui indique où on va faire nos suivis et quand et l’idée étant de venir compléter
Nos suivis de en tout cas de pas faire des suivis en doublon donc voilà il y a également donc j’ai l’ mis en gras le guide technique de la bancarisation he qui reprend tous les éléments don je vous parle aujourd’hui en détail euh donc c’est c’est vraiment un document
Important il y a tous les formats d’échange également qui sont listés sur cette page avec des exemples euh voilà pour se familiariser avec tous ces ces moyens techniques de bancariser la donnée moi je suis donc administrateur de données je suis plus côté base de données mais j’ai des collègues qui sont
Spécialisés vraiment par type de par type de milieu par voilà par type de données donc j’ai remis ici leurs adresses vous pouvez les les contacter en cas de problème euh il y a également les collègues qui sont en délégation que vous connaissez chargé d’intervention n’hésitez pas à
Vous rapprocher d’eux euh je je précise également que donc pour Sylvain jolie qui est ici est mis en référence sur le Biot il est également en charge du suivi he de la de la politique territoriale des agences de l’eau de l’Agence de l’eau loirebretagne pour le le les aides relatives à la
Surveillance alors la plateforme de données on y accède par cette url c’est là c’est ici la page d’accueil avec une invite de connexion qu’on voit et vous avez également donc sur le la même page he sur notre site internet je précise une notice d’utilisation de cette plateforme euh qui qui euh voilà qui
Reprend en détail son fonctionnement et que je vous invite à télécharger si d’aventure vous devez utiliser la plateforme alors d’abord vous faites une demande de création de compte hein sur la plateforme et puis ensuite donc nous on reçoit la demande et et votre compte est est créé vos identifiants vous seront
Envoyés par la suite donc quand vous allez sur la plateforme vous avez accès à un espace qui vous permet de de faire un dépôt euh et donc ce sur cet espace bah c’est voilà comment ça se présente hein on choisit le le type de données qu’on va déposer soit l’hydrobiologie la
Physic-chimie après le type de milieu le support et le type d’import en fait c’est le format d’import on va voir après les les différents formats d’import qui sont acceptés ils sont d’ailleurs détaillés dans la notice et puis il faut sélectionner également le lot de données alors je précise que on
Peut déposer un dossier zip avec dedans plusieurs fichiers d’un même format par contre on peut pas déposer plusieurs fichiers d’un format différent dans un même zip par exemple pour l’hydrobiologie lesl l sont à déposer dans un envoi spécifique à part des des fichiers de soutien alors que les deux
Relèvent de la même opération de prélèvement hydrobiologique il faut faire quand même deux dépôts séparés alors le traitement du dépôt en base donc c’est tout simple la plateforme reçoit le le fichier et puis elle va effectuer un certain nombre de contrôle on va voir après lesquels euh
Et en fonction de de ces contrôles et bien vous allez recevoir un un message qui va vous dire si c’est bon ou si c’est pas bon nous on est notifié de notre côté de de ce qui se passe sur la plateforme alors sur la plateforme il y
A aussi un espace pour suivre les les dépôts he la consultation des dépôts donc chacun des déposants peut consulter ses propres dépôts et puis nous nous pouvons consulter l’ensemble des dépôts évidemment et vous voyez à droite le code couleur qui signale les différents étaps possibles d’un traitement donc en
Attente en cours refuser accepter partiellement ou valider en sachant que quand la la demande a été traitée bah vous recevez un un mail qui vous dit si c’est refusé acceptter partiellement ou validé ce qui est très important c’est de télécharger le rapport d’import alors même dans un cas dans le cas où l’import
Est validé car il peut contenir certaines informations donc voilà ça c’est c’est essentiel notamment dans le cadre de de doublons des doublons qui peuvent être repérés par la plateforme d’import alors il peut s’agir de vrai doublons ou de fux doublons donc effectivement euh sur ces doublons euh en fait le
Il peut arriver que pour un même qu’on puisse faire deux prélèvements pour un même paramètre le même jour sur la même station avec le même producteur avec une heure différente avec de résultats de mesure différents pour autant la règle de gestion dans la plateformme de dépôt c’est considérer qu’il s’agit doubl
Alors dans ce CASL ce qui se passe c’est que la deuxè donnée va écraser la première donc ça c’est important de le savoir par exemple pour pour choisir la donnée qui va va aller en base ça ça c’est une information qui est disponible dans le rapport d’
Alors les contrôles il y en a deux deux grands types de contrôle he pour valider les données donc les les contrôles qui sont fait par la plateforme de manière automatique he des contrôles de conformité à la de syntaxe et des contrôles de conformité au référentiel du cendre et au scénario du cendre et
Puis une fois que la donnée est en base de données l’Agence de l’eau peut être amené à faire des contrôles de validation des contrôles métier qui vont venir ensuite se faire une fois que la donnée est en base donc c’est des contrôles de doublon des contrôles de bornes également des contrôles
Interparamètres alors les bornes ce sont des bornes qui sont calculées par des méthodes statistiques basées sur lesécart intercartil euh en sachant qu’on a des des bornes par paramètres et des bornes par station qui se basent sur des chroniques de station euh et qui sont plus fines que les bornes par
Paramètres qui sont pas adapté au contexte qui peuvent contexte il peut varier en fonction du du de la taille du cours d’eau évidemment euh les bornes d’impossibilité maximum par exemple sont au moins de de de pertinence selon le type de cours d’eau qu euh du quel il s’agit quoi donc en fait
Le c’est ces bornes euh elles donnent lieu une fois qu’ell que voilà ell donnent lieu à des messages de d’erreur ou d’avertissement ouou d’information en fonction du fonction de l’erreur qui a rencontré et elles elles ont ensuite un impact sur l’attribution de la qualification et du statut qui va être
Attribué à la donnée alors je rentre pas dans le détail mais bon c’est c’est c’est par là qu’on affine la qualification des données j’ai remis ici donc le le les les coordonnées de du bureau d’études coordinateur qui assure le l’assistance technique sur la plateforme de dépôt avec le numéro de
Téléphone et on enevient au fichier d’échange donc les fichiers d’échange pour la la physiquechimie euh le le fichier qui est privilégié he c’est le le format XML ku alors ku 2 ou 3 donc c’est vrai que là on a on a repéré depuis quelques semaines qu’il y
Avait un problème avec le Kesu 3 parce qu’on on arrive pas à prendre en compte le l’heure de des prélèvements donc pour l’instant privilégie quu 2 et à partir du mois de janvier le le correctif sera appliqué on pourra prendre aussi du du 3 l’idée c’est que bah votre laboratoire
Vous envoie le labo que vous pouvez ensuite convertir en quu al évidemment vous avez pas forcément la plupart d’entre vous n’ont pas d’outil qui permettent de convertir en tesu donc à ce moment-là bah on peut admettre quand même de le labo he c’est toujours mieux
Que rien euh voilà en sachant que euh et bien sur ce ce fichier il y a une valise pour la qualification et pour le statut hein l’idée c’est que le chaque producteur chaque mîre d’ouvrage doit valider qualifier ces données donc ça c’est le principe on va dire idéal après
On est bien conscience que c’est on a bien conscience que c’est c’est parfois difficile de voilà de de pouvoir produire ce type de fichier donc on a mis en place des formats simplifiés tableur tableur Excel donc pour le on a ici donc ce qu’on appelle un masque laboratoire qui qui peut être téléchargé
Sur notre site Internet et ce qu’il faut savoir sur ce masque labo c’est que il y a pas de qualification ni de statut qui est présent nativement dans ce dans ce format d’échange donc ce sera a fini après ave les contrôles donc ce format il est à prendre uniquement si le quezu est
Impossible pour les l’hydrobiologie on a des donc le même principe on a des fichiers d’échange standard B donc des des fichiers nationaux donc euh pour les listes hein c’est en point texte sauf pour les les poissons et puis ensuite on a des fichiers d’échange soutien bio pour les
Indices et les métriques donc tous ces formats sont accessibles alors à la fois depuis notre site mais également sur le le site de de l’ B euh et les résultats hydrobiogiques donc sont qualifiés en correct par le l’agence au niveau de validation 1 s’il y a pas d’anomalie dans les
Contrôles tout comme pour la physic-chimie hein pour l’hydrobiologie nous avons un également un masque de saisie simplifié au format Excel euh puisque bah c’est c’est pareil he c’est parfois compliqué de de remplir les les fichiers nationaux donc euh on parle d’un d’un masque on appelle ça le masque ur masque de saisie
Hydrobiologie téléchargeable également sur notre site Internet à noter que un seul masque de saisie est à transmettre à l’agence pour un producteur une campagne et un réseau de suivi qualité et vous avez bah plusieurs onglets dans ce fichier avec un onglet par compartiment par exemple un onglet pour
Les macrofilite pour les détomés pour les invertébrés et cetera donc voilà pour les fichiers d’échange et j’en termine avec le la diffusion des données dans nayad alors à l’agence de donc nous avons l’irbretagne donc nous avons le fonctionnement suivant qui est pas alors c’est pas le même fonctionnement pour toutes les
Agences puisque toutes les agences ne disposent pas d’un service web mais donc en gros donc pour l’hydrobiologie on fait une alimentation une fois par an en mode annul et remplace donc qui a lieu en général au mois de novembre novembre décembre c’est à la fin de l’année donc
Là pour cette année ça a été fait il y a quelques jours pour l’agence de bouir Bretagne euh et pour la physicquechimie donc c’était le même principe d’alimentation jusqu’à l’année dernière et depuis cet été on est passé sur un mode d’alimentation par flux euh différentiel donc qui se fait en
Principe tous les 15 jours alors en savoir à savoir que il y a eu ça a fonctionné pendant quelques mois et puis à depuis 19 septembre c’est en anomalie il y a une anomalie de d’accès euh pour le le bergm donc sur notre flux XML donc qui est en cours de résolution cette
Anomalie a donné lieu également à la disparition de certains jeux de données dans dans aayad donc c’est il se peut actuellement qu’il a quelques problèmes dans NAD sur le les données d’orbretagne donc c’est en cours de de résolution alors si vous souhaitez accéder directement à notre service web sur
Lequel vous pouvez récupérer les données donc mais uniquement de l’agence de l’bretagne enfin du bassin à l’bretagne plus exactement puisque il y a les données Agen mais également tous les autres données qu’on récupère et bien c’est le le point d’accès c’est celui que j’ai mis là à savoir qu’il faut communiquer au
Préalable l’adresse IP de la machine qui invoque le service Web pour qu’on puisse l’autoriser dans notre système voilà donc le point d’accès et donc nayad voilà donc je je laisser le la la parole ensuite à mon collègue de l’ FB Rémi escaf qui qui s’occupe de qui suit le le projet NAD et
Qui va vous présenter un peu la plateforme qui vous permet donc d’accéder à toutes les données surt l’historique pas seulement donc de l’agence mais mais au niveau vraiment national et donc pour les questions ou juste précise pour les questions ce sera après nos interventions on fait le qure
Intervention à la suite et il y aura la question après voilà j’arrête le partage vous pouvez quand même les si vous le souhaitez au moment de des interventions rédigez votre question dans la bulle de discussion ok ben merci ga j’en profite pour me présenter donc je fais partie de la direction surveillance évaluation
Données à l’ofb et donc je suis en charge notamment de la banque NAT qu’on va présenter aujourd’hui euh l’idée aujourd’hui c’est de faire un petit point alors je sais pas si tout le monde connaît nayad j’imagine que pour certains oui après vous êtes pas forcément des utilisateurs
Fréquents enfin voilà on je pense que le public peut être assez varié donc on fera un point sur bah le périmètre de Nat qu’est-ce que c’est qu’est-ce que ça contient euh un point sur les fonctionnalités ensite on fera un dernier point sur Ben les actualités surtout concernant les données
Euh alors petite présentation générale déjà dire que NAT c’est un projet qui copiloté OFB BRGM donc le BRGM plutôt pour la partie technique amo et l’ofb pour la partie métier l’objectif de N c’est de mettre en fait à disposition les données en loint unique voilà de disposer de d’interface simple pour permettre la
Sélection et l’extraction des données d’avoir une vision fidèle des données des banques de référence ça c’est une notion qui est assez importante mais on y revient un tout petit peu plus tard avoir une certaine rapidité accès à la donnée et puis voilà on sait très bien on n’est pas sur des données
Forcément qui sont grand public on s’adresse plutôt à un public averti ou expert on a quatre thématiques grandes thématiques qui sont diffusées par NAD euh donc l’hydromorphologique donc qui concerne tout ce qui va les caractéristiques et la morphologie des cours d’eau lescoulement le débit et cetera l’hydrobiologie donc avec les
Résultats d’inventaire d’espèces calcul d’indicateur et cetera les températures et la physicochimie donc avec l’analyse et la concentration des substances on a des producteurs de données qui peuvent être euh voilà enfin soit un ou plusieurs en fait par thématique qui peuvent être donc des agences office de l’eau ou laadal Mayot pour le cas
Particulier de Mayot euh mais aussi d’autres acteurs comme par exemple l’INRA et euh ben l’ofb aussi qui euh euh qui pilote certaines banques de référence en propre euh revenir sur la notion de banque de référence c’est une notion qui est assez importante euh une banque de référence c’est quoi en fait
C’est une banque qui va garantir la qualité des données donc leur extivité leur intégrité qui va effectuer aussi bah les contrôles qualité comme l’a présenté g juste avant et ben aussi la sécurité des données donc tout ce qui va être historisation et sauvegarde donc tous les producteurs de données qu’on a
Mentionné avant en fait sont des banques de référence pour leur thématique et garantissent cette qualité et la sécurité des données NAT c’est pas une banque de référence en soi donc en fait c’est vraiment un gen de relais en fait ne fait qu’exposer les données des banques de référence tout en
Garantissant ben que les données euh qui sont bancarisés par les producteurs soit les mêmes que sont diffusés au grand public donc NAD n’effectue aucun traitement euh sur les données voilà durant la chaîne chaîne d’alimentation euh actuellement dans NAD on a 11 producteurs pour la physicochimie donc les agences de l’eau
Office de l’eau et laadl Mayotte pour l’ydrobiologie un peu la même chose sauf qu’on on a aussi ASP qui est responsable des données poissons cours d’eau pour la métropole et on a aussi linraay qui est responsable des poissons PL d’eau pour la métropole pour les températures on a
Deux producteurs donc le réseau national de température RT qui est piloté aussi par l’ofb et l’office de l’eau de la Réunion qui est pour l’instant notre seul producteur enfin notre seule banque de données pour les températures en notre mer et enfin donc pour l’hydromorphologie on a une banque qui est caris
Euh voilà pour une présentation un peu générale euh au niveau des principes d’alimentation donc Gael en a parlé un petit peu juste avant on va avoir trois types d’alimentation de données dans NAD des échanges hom machine donc à travers nos campagnes annuelles d’alimentation des données dans NAD donc si on prend
Physico-chimie et hydrobiologie c’est des campagnes qui vont commencer environ un septembre pour céal jusqu’à la fin de l’année et donc ces échanges hommes machine ils vont concerner ben des dépôts de fichiers CSV conforme au au kesus CSV bio et physicochimie reméi je me permets de te
Couper tu peux mettre en plein écran euh je peux mais j’ai un petit problème c’est pas hyper confortable pour moi mais je peux essayer ok merci je va reprendre le partage euh donc des échanges en machine on a aussi deschanges en web service donc en XML et seulement pour la physique auchimie
Euh donc pour l’instant on a que trois banques qui sont concerné par ces échanges donc la dernière c’est Loir Bretagne comme l’indiicael euh depuis euh depuis la rentrée environ euh et on a aussi l’agence de l’EOT RMC et c’est Normandie en fait là le gros euh gros avantage qu’on fait ça soulage notamment
Les producteurs de données qui n’ont pas besoin de générer des fichiers tous les ans et qui peuvent aussi être très volumineux et pour Ben vous utilisateur ça vous permet d’avoir des données plus fraîches plus souvent puisquen fait c’est directement euh ben NAT qui vient interroger le le web service de l’agence
Pour savoir si des données ont été mises à jour ou des données ont été ajoutées et donc on va récupérer ben ces données en en différentiel on a aussi de la copie de base euh en trimestriel bon j’insiste pas trop là-dessus mais en tout cas pour nos banques qui sont opérées directement
À l’ofb voilà on a des facilités qui font qu’on peut directement copier en fait nos bases de en les bases producteurs euh Vernat voilà schéma récapitulatif voilà qui montre bien que Ben selon les thématique on a un ou plusieurs producteurs on peut avoir aussi un ou plusieurs modes d’alimentation ben voilà
Notamment pour les données de température pour la physique chimie on a du dépôt de fichierers du web service et enfin bon l’hydrobiologie où on est pour l’instant que sur du dépô de fichier CSV euh voilà on voit aussi UBO sur ce schéma donc je je vais pas trop non plus
Ondir le sujet puisque ça ça vous sera présenté juste après mais donc hubo vient interroger aussi les la base NAT pour et ben diffuser les données sous son autre format sous format d’API petit tableau aussi récapitulatif pour un peu avoir des ordres de grandeur entre les différentes thématiques qui
Sont diffusées donc en physicochimie on va avoir des données qui vont dater de 1960 jusqu’à 2023 on a quasiment 20 million d’analyes alors pour ceux qui exploitent les données hein c’est les volumétries qui sont ben assez importantes hein c’est pas des des jeux de données qui se manipule vraiment
Facilement on peut dire en hydrobiologie on a des données qui vont de 71 à 2022 un peu moins de 10 millions euh d’enregistrement pour les températures donc c’est notre deuxème thématique représente la plus de volumétrie on est à 42 millions d’enregistrement et enfin pour hydromorphologie on va de 2008 à 2022 et
On a voilà 62000 enregistrements je vous ai mis aussi un lien qui renvoie vers le portail nayad ce détail vous l’avez aussi directement sur le site en fait avec un tableau récapitulatif par banque de référence donc par thématique et par producteur en fait où vous avez en fait l’information
De de quand à quand de quand date le dernier chargement et ben de quand à quand sétal les données et combien j’en ai euh petit point sur les f ité du site voà je pense que la plupart d’entre vous doivent déjà connaître un petit peu donc je vais pas
Trop voilà mant sur le sujet je veux dire pour la recherche voilà on a de la recherche qui est multiritères donc géographique temporel par type de résultat aussi en terme de qualité de la donnée donc avec la qualification le statut la recherche qui est conviviale donc avec la sis intuitive des critères
Qui peuvent être cumulatifs aussi donc des prévisualisation des résultats pour la consultation vous avez plusieurs points de vue la répartition cartographique des résultats la liste des opérations des indices ou des résultat d’inventaire euh et puis aussi vous pouvez consulter le détail d’une opération particulier au niveau des exports ils
Sont homogènes sur tout le territoire donc c’estussi ben l’intérêt d’avoir un site qui concentre la donnée de plusieurs producteurs c’est que quand vous les téléchargez quel que soit le producteur vous allez avoir le le même format en sortie euh elles sont accessibles donc depuis les pages consultation vous disposez aussi de
Fichiers France entiè qui sont mis à jour régulièrement et voilà aussi en terme de documentation euh voilà on fait l’effort de documenter les pages et de donner des liens pardon euh vers les fich du cendre concernés euh loin je pense que vous connaissez un petit peu actualités qui vont vous intéresser
Un peu plus aussi euh euh donc je vais vous parler seulement des des actualités qui vont concerner plutôt les données euh les premièes types d’actualité ça va être des ajout de champ dans format d’échange euh notamment donc en vert on va avoir tout ce qui impacte la ce qui
Impacte la l’hydrobiologie et en rouge ce qui concerne la physicochimie l’ajoute d’un champ Commentaire pour les opérations hydrobio euh ben à savoir que c’est un champ qui n’existe pas actuellement qui existe en physicochimie mais pas en en hydrobiologie voilà c’est un champ qui permettrait notamment de justifier par exemple des prélèvements
Qui ont pas été faits il y aura aussi l’ajoute de quatre nouveaux champs dans le quzu physicochimie pour permettre l’alimentation des données physicochimie sur support Biot et en particulier ce support poisson en fait dansad donc voilà le format actuel ne permet pas la bancarisation de ces données ben par manque d’information en
Fait et donc voilà ces quatre nouveaux champs nous permett on de de diffuser ces données et actuellement ça ça euh ça concerne environ 85000 euh analyses un chiffre qui voilà devrait aussi augmenter au fur et à mesure des années en terme de mise à jour de champ
Existant ici donc ça plutôt être des problématiques internes mais qui vous impactent indirectement euh ça va être pour permettre la bonne codification en fait des enregistrements et euh ne pas avoir en fait de doubl en base de données c’est-à-dire sans rentrer trop dans le détail que parfois les spécifications du cendre ne permettent
Pas de différencier deux enregistrements et donc là l’idée ça va être de mettre à jour certains champs notamment les les codes list F flore pour pouvoir ben différencier deux inventaires entre eux donc ça va impacter les invertébrés les diatomés PL d’eau et les diatomés cours d’eau euh
Derniè Act sur les données des nouvelles données euh notamment les données issues du contrôle sanitaire euh potable donc si vous connaissez c’est le cination ciseau donc qui est piloté par la Direction générale de la santé et qui concerne en fait les données d’analyse euh en fait au premier niveau de la
Chaîne de traitement de l’eau potable donc au niveau du captage les analyses physico-chimiques qui sont effectués au niveau de ces captages euh donc ça c’est en cours de travaux on espère peut-être pouvoir alimenter ces données fin 2023 mais au moins peut-être début 2024 et ben ce qui est intéressant c’est que
C’est euh euh en fait un vraiment un très gros jeu de données avec un plus en historique euh alors j’ai mis potentiellement plus de 35 millions d’analyses parce que euh voilà des difficultés en fait à à comment dire à faire le euh comment dire à faire la bascule
Entre le format ciseau et le format nayad donc je pense pas qu’on arrivera à diffuser toutes ces données d’un coup mais on arrivera à en diffuser de plus en plus au fur et à mesure notamment ben un des enjeux c’est de d’arriver à faire communiquer un un code ciseau avec un
Code cendre puisque il n’existe pour le moment pas vraiment de voilà de tableau de de comparaison entre ces stations là euh on a discuté un petit peu mais donc on diffuse les donné en continu pour la physicque chimie pour trois agences donc RMC aesn et aelb et une dernière actu donc le
Flouage du données sensiblebles en hydrobioo euh d’ici la fin de l’année donc une une petite partie des donnéesrobiio vont être euh flouté euh dans NAD donc vous n’aurez pas accès à ces résultats euh ben leors des recherches euh pour info ça concerne une dizaine de taxons c’est vraiment euh on
Va dire assez marginal et ça représente voilà je CIS 1000 ou 2000 enregistrements mais ça me permet de vous passer l’information puisque évidemment que ces données euh benelles sont disponibles pour nos partenaires donc si vous avez besoin déjà si vous voulez l’ensemble des jeux de données
Nous on est aussi à notre à disposition pour euh pour vous envoyeer voilà les données qui manquent dans NAD euh voilà c’est tout pour cette présentation et là je vais laisser la main à leunois et antonus pour vous parler de [Musique] hubo du coup est-ce que mon écran est partagé correctement
Oui c’est bon c’est bon voyez bien le vous voyez bien le diap oui on le voit on le voit ok donc je vais faire une présentation générale de de donc je suis avec Anton Andr de l’ofb moi je suis ben lardau je suis chef de projet au BRGM et donc nous
Notre côté obgm on est en charge de la mise en œuvre de de euh donc le le le principe général du beau he qui qui est issu d’un d’un programme d’investissement d’avenir il y a maintenant déjà quelques années euh sa fonction principale c’est de de proposer des API qui permett d’exposer les
Données ouvertes sur l’eau euh et de les rendre le le plus accessible euh possible pour favoriser derrière les réutilisations euh pour développer des applications des services tout toute tout utilisation pertinente à partir de ces de ces données ouvertes euh donc c’est un dispositif moi qui a déjà quelques années comme je l’ai
Indiqué qui est euh un dispositif qu’on pourrait qualifier de vivant puisqueau fil du temps on on a eu de nombreux enrichissements tant sur le périmètre évidemment ben des nouvelles API des nouvelles données euh du référencement de ces API à différents différents endroits des évolutions de de l’identité visuelle des évolutions techniques et
Puis on a toujours je dirais des des perspectives quant à quant à l’évolution de de beau toujours des nouvelles API extension de Cell qui existe euh de faciliter également l’utilisation du dispositif euh pour rendre les données plus plus facilement requettables interrogeables et puis toujours des actions un petit peu comme aujourd’hui
De communication d’accompagnement une volonté de de de pouvoir également proposer un cataloguage des données qui sont exposées et puis toujours des des des améliorations techniques au fil de l’au alors au mot il y a deux parties a une partie visible donc il y a un certain nombre de ressources qui sont en
Accès libre euh sur sur internet donc il y a déjà il y a le site principal euh on pourra voir un aperçu tout à l’heure il y a la newsletter pour ça à laquelle on peut s’inscrire sur ce site euh il y a un dépôt giitthub qui permet des partages
De codes des échanges des questions euh il y a un site d’assistance donc c’est une rubrique sur le site d’assistance du BRGM là aussi on va retrouver une efq un formulaire de contact et puis les API sont également référencés sur api.gou on va retrouver euh différentes
Informations sur le le les les les API leurs évolutions les les les opérations qu’ell proposent euh alors la partie qu’on voit pas euh c’est que derrière eo il y a une très grosse infrastructure technique euh qui est hébergée au BRGM qui met en on en œuvre beaucoup de de machines euh et
Également un certain nombre de de technologies différentes puisque chaque fond fonction qu’on doit assurer derrière peut faire appel à des composants qui sont très spécifiques donc on a une partie éditorielle avec Drupal je vais pas les détailler mais on utilise du Java on indexe avec du
Solaire il y a un composant Big Data différentes techn après de de d’ingestion valorisation de supervision et ainsi de suite ce qui permet quand même de d’avoir une capacité à traiter plus de plus de 20 requêtes par seconde alors concrètement avec tout ça qu’est-ce qu’on fait ben on expose sous forme de
D’API des données qui sont issues de banques nationales des données en rapport avec l’eau donc on a vu on a évoqué NAD juste avant donc EBO expose des des données qui viennent de de NAD en terme de de de de de qualité des EAU mais on a également des données qui
Viennent de la base onde pour les les les écoulements des données qui viennent des données d’hydrométrie euh puisqu’il y a une partie Deo qui est réalisée en partenariat avec avec le le chapi euh donc on a des données euh euh temps réel quasi temps réel et euh des des observations élaborées euh des
Informations sur les températures des cours d’eau des informations qui viennent de ASP également euh et des des données sur la la la qualité de de des EAU potables euh qui nous sont transmises par le ministère de la Santé et concrètement qu’est-ce qu’on fait avec ces données bien il y a un
Certain nombre de de réutilisations là j’en a mis quelques-unes euh elles sont détaillées il y a une rubrique sur le site sur le site web du beau euh qui est qui est qui est présente plus en détail euh alors hop je je passe dessus rapidement donc là vous pourrez voir
Pour si vous voulez avoir une idée un petit peu des réutilisations qui sont faites derrière euh il y a une vignette et après il y a une fiche qui explique euh ce qui a été fait avec le avec les données avec les les les les API mais on
Voit que ça peut être intégré à des outils de gestion comme par exemple l’outil aquatique qui est proposé par Aquascope ou plus à des dans des fonctions d’analyse ou de rediffusion voire de de de prévision concrètement qu’est-ce qu’on va trouver euh qu’est-ce qu’on va trouver sur les suite du beau ben pour
Chaque API on va trouver une page qui va vous présenter l’API euh pour savoir toute une partie description qui permet de savoir ce que fait la pay quelles sont les données qu’elle expose quelles sont les limitations qui sont associées les format proposé les opérations qui sont associées puis on a une deuxième partie
Avec ce qu’on appelle la console qui va permettre de tester la p de façon manuelle tester les différents paramètres on a tout un tas d’explications sur quels sont sont les paramètres qu’on peut passer quelles sont les valeurs qui sont attendues et puis la dernière partie qui donne le
Modèle qui permet de de savoir quels sont les informations que la pay va retourner voilà concrètement à quoi ça à quoi ça ça ressemble quand on veut tester les différents paramètres de la p et ce qu’on a derrière alors comme ça ça paraît un petit peu un petit peu abrupt
Et en fait ce qu’il faut avoir en tête c’est que E sont des API donc la cible c’est une automatisation c’està dire que ce sont des données structurées qui sont exposées pour être visible par des programmes donc on passe des paramètres dans l’URL et ça retourne suivant les
Cas soit du fichier soit un fichierers CSV soit les fichiers gison ou geogison euh soit des fichiers XML c’est uniquement dans le cas de l’hydrométrie où là on a des des fichiers XML qui sont en conforme à un format un format SRE les autres données sont construites en s’appuyant sur les
Codifications du Sendre mais pas sur le format d’échange du SRE euh il y a quelques limitations qui s’accompagne du du du roquetage euh par exemple un nombre maximal de réponses que laap peut retourner donc ça veut dire que quand on est dans une logique de requête volumineuse on veut couvrir
Tout un territoire on veut couvrir une placeage de temps assez assez long euh voilà bah il faut penser à faire un découpage et à à à faire un un requettage en plusieurs étapes donc concrètement un appel à l’API eubo euh bah voilà je vous ai donné un exemple en
Dessous qui permet de d’aller rechercher toutes les stations ondede pour une région donnée et les les les informations seront retournés euh par par paquet de B euh voilà donc ça n’a pas vocation à être utilisé alors c’est tout à fait utilisable par directement euh par par un par un
Utilisateur de façon je dirais manuelle euh mais ce n’est pas ce n’est pas la vocation première du du système euh l’idée c’est de pouvoir construire des services et de pouvoir consommer cette données de façon intégrée automatisée alors pour se faire il y a un espace sur la
Partie gitup je l’ai évoqué tout à l’heure qui permet d’avoir des des exemples de de codes qui ont pu être réalisé dans différents différents langages r python PHP des exemples de de de mise en œuvre des démonstrateur voilà qui permett de voir concrètement l’utilisation qui peut être
Faite et alors là le code le code est téléchargeable l’exemple est téléchargeable euh donc et qui permet du coup de de se la approprié et euh de de de de construire soi-même euh des des des idées de réutilisation euh associé associé aux différentes appels voilà je vous ai remis là les
Quelques quelques ressources clés et les points de contact du coup euh derrière je crois qu’on a un exemple de de mise en application l’utilisation des des API oui oui je vais prendre le relais euh si si tu as fini je voulais présenter la façon dont l’observatoire de l’environnement en Bretagne euh utilise
Ces différentes sources de données pour pour fournir des des indicateurs à l’échelle des des territoires breton juste prendre le temps de partager l’écran vous voyez bien mon écran OK oui donc je suis Timothé B je suis le chargé de projet eau à l’observatoire de l’environnement en Bretagne c’est une
Structure qui qui représente en fait le service public de la donnée environnementale en Bretagne au service des territoires euh sa mission c’est de centraliser de traiter de valoriser de diffuser auprès des territoires et des gestionnaires les les données de référence sur l’environnement c’est une structure qui a été fondée en 2007 par
L’État et la région et qui rejoint par depuis depuis 2 ans par des collectivités locales 23 EPSI de départements et un établissement public de bassin pour la Villain c’est une structure qui est multithématique moi je travaille sur l’eau mais j’ai aussi des collègues qui travaillent sur les
Thématiqu des déchets des paysages de la biodiversité de l’énergie de la biomasse mais aussi du du climat et de l’adaptation dont notamment les questions de de d’impact du du climat sur sur le cycle de l’eau euh pour ce qui est de la thématique de l’eau la plupart des indicateurs sont synthétisés
Parmi les les collections de documents de l’Observatoire les données analyse euh on a sorti en 2000 enfin début 2023 crois l’édition 2022 des chiffres clés de l’eau en Bretagne qui permettent de voilà de présenter pour chacun des des sujets pour lesquel a déjà donné l’état voilà la situation les indicateurs
Principaux pour la Bretagne avec notamment tout un chapitre sur sur les les différentes pollutions et la qualité de l’eau de manière générale euh j’ai il y a différents formats en fait avec lesquels on diffuse cette information sur le site site de l’Observatoire en premier lieu l’idée c’est de mettre à disposition des jeux
De données en Open Data qui sont pas forcément les données brutes des analyse bien sûr mais plutôt les les indicateurs qui sont calculés à l’échelle des territoires ou sur vois sur une année les tendances et cetera ce qui permet de produire des des cartes et des graphiques à l’échelle d’un territoire
On a donc aussi des une collection 35 collections cartographiques autour de la thématique e qui permett de voilà de télécharger directement au format PDF des cartes détaillées présentées sur sur C sujets là actualiser en même temps que les jeux de données mis à disposition et si on veut pouvoir explorer ces données
À l’échelle de son territoire ou sur des années différentes et voir les les indicateurs de manière très visuelle on a une une une vingtaine de de Data visualisation de tableau de bord qui permettent de en fait de de d’utiliser plusieurs filtres pour pour visualiser agréger ces données là
L’idée c’est que ces différents formats et tout ce qui est produit sur le portail de de l’Ob puisse servir des des différents publics on a une partie un peu de diffusion des connaissances à travers une documentation qui est référence les les rapports euh locaux ou régionaux qui peuvent servir directement
Euh voilà des rapports d’études qui peuvent servir pour des utilisateurs plus techniques et euh vers les les élusou le grand public on a une série d’articles et de dossier web qui permett de voilà de d’apporter un peu un point de vue une explication plus pédagogique sur sur ces différentes thématiques et
Dans une partie plus d’accès direct aux données de réutilisation on a vers les les acteurs des territoires ont produit des infographies qui permettent d’avoir une information synthétique réutilisable sur sur un sujet en particulier de manière très graphique et puis euh ces différents tableaux de bord et c’est je
Donnner un Open Data pour pouvoir réutiliser sortir des chiffres clés à l’échelle de son territoire par exemple pour rédiger un une introdu sur un document de planification par exemple pour vous détailler un peu la façon dont dont procède nous pour actualiser les données à partir des services qui
Vous ont été présentés jusque- là pour les données qualité des cours d’eau on a d’abord des données qui nous sont fournies par directement par la laadal Bretagne sont les données de de suivi des bassins versants qui nous le fournit parfois en parallèle de de la fourniture de ces
Données auprès de nayad on le reçoit au format justement qui vous a été présenté tout à l’heure euh là en général au au mois d’août euh ensuite jusqu’à maintenant euh tant que la base de données auosur n’était pas directement branchée à nayad on récupérit également les données auprès de de l’Agence de
L’Eau auprès de Gael dorau pour pouvoir compléter avec les réseaux agences euh qui pouvaient se qui pouvaient exist sur sur le territoire breton et enfin euh en interrogeant directement la p hubo on allit chercher les données de nayad euh qui pouvait voilà compléter éventuellement les données qui qui auraient pas été
Récupérées jusque-l VI a les deux précédentes sources et sachant que voilà l’automatisation en feu de des processus d’interrogation de ces ces outilsl permet notamment via eo de pouvoir actualiser les données plus voilà plus plus fréquemment ou plus plus plus plus facilement que que par des des téléchargements massifs
Euh et l’idée c’est qu’à partir de cet ensemble de données brutes on le rattache à au référentiel des stations sur le territoire pas seulement de la Bretagne mais des bassins versant breton donc on a aussi la cellune et la Villain en entier par exemple euh en en allant
Récupérer cette liste de stations via laap de du service cendre donc on fait on sélectionne parmi toutes les données qu’on récupère celles qui correspondent au périmètres qui nous intéressent des sages bretons et euh ensuite on sélectionne bah les supports qui nous intéressent et on fait souvent on doit
Faire puisqu’on a plusieurs sources là aussi on doit également faire un travail de dédoublonnage des des résultats et on bancarise ces données de travail structuré de manière structurée sur une base de données postgé euh l’idée c’est qu’à partir de cette banque d’analyse de de la qualité de l’eau en fonction des paramètres qui
Sont utilisés on va fournir des des des indicateurs sur les matières azotées matières phosphorées sur l’utrophisation et puis tous les descripteurs des des de la présence de la concentration en pesticides donc on fait cette distinction entre les paramètres pesticides en se référençant à un référentiel des substances pesticides
Qui étaient euh mis en place pour les analyses faites à l’échelle de de la Bretagne donc ça inclut les substances qui ont un code sentre par exemple mais aussi celles qui qui n’en ont pas systématiquement et les différents différents descripteurs qu’on peut avoir pour savoir si leur usage agricole et
Puis leur différents paramètres chimiques ou de ou leur statut de d’autorisation par exemple donc ça c’est un référentiel qui est disponible sur le portail des des données ouvertes de l’Observatoire mais il a vocation à être actualisé parce que pour l’instant il a besoin d’être actualisé au fil des justement des
Autorisations et de l’amélioration des connaissances sur les différentes mollécules ça c’est un travail qui nous nous reste à faire et euh en gros le gros du travail qui est fait sur ces données-là c’est de les agréger par année pour une station donnée à faire des indicateur de concentration moyenne
Maximale minimum le percentille 90 euh et puis d’attribuer ça aux classes de qualité euh SECO ou DCE euh pour une station et une année donnée et puis ensuite on agrège ces données à l’échelle de de plusieurs référentiels géographiques euh qui soient administratifs les communes les PCI les départements la région mais aussi
Hydrographique à travers les sages les bassinversants donc l’idée c’est d’avoir des indicateur un peu de répartition par exemple de quelle est la la part de de station suivie sur un sage qui euh qui sont pour lequels il n’y a pas de dépassement desnormes au potable pour pour les pesticides ou pour les nitrates
Et les phosphores pour le phosphore par exemple et ces indicateurs là on a plusieurs façons de mettre à disposition comme je vous ai dit euh soit sous forme de de de fichier de données valorisé en Open Data soit sous forme des carthèques que je vous ai présenté ou des tableaux
De bord data visualisation pour montrer à quoi ça ressemble on a par exempleexemple de des nitrates dans les cours d’eau breton en haut on a une série de filtres qui permet de choisir le paramètre ça peut être nitrate ammonium par exemple ou nitrite euh l’échelle de territoire qui nous
Intéresse est-ce que c’est un sage est-ce que c’est une EPCI de le choisir pour filtrer les données qui sont présentées et ça veut dire qu’ensuite une fois qu’on a fait ces filtres là tous les graphiques qui sont présentés sont filtrés et et rapportés à ce territoire là donc on a là un graphique
De l’évolution des concentrations du percentiel des concentrations de de nitrate les notes les classes de qualité représenté sur voilà la répartition géographique des stations et puis en bas les les la synthèse un peu des prélèvements qui ont été faits sur une station donnée avec l’historique des des dépassements éventuellement pour chaque pour chaque
Prélèvement pour ce qui est des des pesticides par exemple on trrouve un peu la la même présentation avec en haut des filtres qui permettent de sélectionner les données et euh on a par exemple le les 15 substances les plus quantifiées sur sur le territoire les la Rép partition de ces substances par type
D’activité pesticides un tableau de synthèse et puis des taux de dépassement de norm pour pour un territoire donné soit les les normes toutes substances confondu soit les normes par substance et on a une page comme ça pour cette synthèse à l’échelle d’un territoire une page de synthèse pour une
Station donnée et une page de synthèse à l’échelle d’un enfin une page de synthèse sur une substance donnée où on peut voir bah sur quelle station euh cette substance a été quantifiée quelle est l’évolution du nombre de fois où elle a été cherchée du nombre de fois où
Elle a été quantifiée et puis les taux de dépassement desnmes pour cette substance en particulier et pour le territoire sélectionné euh et enfin une une autre mise à disposition des données ce sont les les jeux de données Open Data on a une plateforme data pointbretagne-environnement.fr qui permet d’aller accéder aux données euh
Sous forme tabulaire et toujours avec des liens fix c’està-dire qu’on peut pointer vers euh un fichier euh un un tableau de de ces de ces données là qui sont renseignés en fonction des différents territoires il y a aussi une API qui permet de de les interroger donc
Là encore c’est pas pour aller chercher les données brutes mais bien les les données valorisées et euh et voilà notamment pour euh pour les nitrates on a un tableau qui permet de retrouver pour pour chaque station le nombre de prélèvements la la classe de qualité et puis voilà les les concentrations
Moyennes maximales et cetera euh et puis enfin on a aussi le l’Observatoire local de l’environnement qui est qui a été ouvert l’année dernière et qui permet de de montrer des des portraits territoire sur plusieurs thématiques donc c’est des informations très simplifiées c’est les indicateurs principaux euh sur une
Thématique et l’idée c’est d’avoir une entrée par par EPCI par exemple ou par département pour l’instant euh et on a ce qu’on appelle un port tra territoire sur la qualité physique au chimique des cours d’eau on a vraiment les chiffres clés les graphiques principaux c’est assez équivalent c’est les mêmes
Résultats que qu’on va trouvver sur les tableaux de bord mais avec une entrée territoire et puis l’idée c’est que ces graphiques là peuvent être réutilisés et intégrés sur les les sites Internet des euh des différents territoires je vous ai fait un tableau avec avec l’actualisation des différents jeux de
Données et les formats auxquels on peut y accéder mais j’imagine que cette présentation sera disponible ensuite sur le site de la tbvb et euh j’ai j’ai pas redétaillé mais le travail le même travail est fait avec les données de qualité des eaux souterraines et les données de qualité biologique des cours
D’eau poisson macrovertébré diatomé et puis une LNE de qualité biologique globale voilà pour pour ce qui est des formats disponibles sur le site Bretagne environnement.fr et je pense que maintenant il nous reste vraent peu de temps pour pour des questions sur l’ensemble de ces présentations h pour les questions vous pouvez aussi
Désactiver vos micros et je vais regarder s’il y a eu des questions dans le la de discussion il me semble que que vous y avez répondu au fur et à mesure en tout cas euh remémy tu veux dire ta question ou pas euh j’avais une question que j’ai
Pas noté dans le chat qui était pour Gael euh concernant l’outil pour Ben donc déposer en fait les données donc pour les bancarisé au sein de la de la banc la Bretagne est-ce que c’est un outil qui utilisit seulement pour les données qui sont produites par des producteurs externes qui veulent par
Exemple diffuser leurs données sur NAD ou quoi que ce soit ou est-ce Queen fait ben la totalité des données euh qui sont produites qui vont être bancarisés passent par par cet outil finalement ouais alors le en fait c’est la la totalité parce que il y a il y a les
Données des partenaires des des déposants qui sont financés par l’agence mais aussi le les les données que nous produisons nous nous les faisons rentrer par le biais de cette plateforme donc c’est censé vraiment euh euh tout prendre euh alors sauf cas particulier euh sauf cas particulier je réfléchis mais j’en
Ai pas en tête non effectivement c’est c’est vraiment le le but hein c’est que cette plateforme se devienne vraiment le le point de passage unique et puis qu’on arrive à faire tous les contrôles à automatiser tous les contrôles via cette plateforme et donc c’est une plateforme qui est aussi utilisée par l’agence s
Normandie mais pas par les autres agences pour l’instant je sais pas si j’ai répondu à ta question re oui merci est-ce qu’il y a d’autres questions moi j’avais une question par rapport à à l’actualisation et au dél d’actualisation des données sur nayad donc je disais que ça allait qu’il
Y avait un un flux tous les 15 jours mais qu’est-ce que ça veut dire concrètement c’està dire si aujourd’hui consulte nayad à quel quelles sont les dernières données auxquelles on peut avoir accès est-ce que c’est les données du mois d’octobre ou du mois de juin et deuxième question j’ai je suis désolé
Mais j’ai pas compris le s’il y avait une manipulation à faire pour avoir accès au aux dernières données j’ai j’ai ça j’ai j’ai pas compris merci pour la dernière question non il y a aucune manipulation en fait ça dépend de donc on a 11 banques de référence
Pour la physicochimie euh on a trois de ces 11 banques qui alimentent en web service donc les données vont être disponibles tous les 15 jours mais c’est en fonction de comment dire ce qui va être bancarisé qualifié par l’ genceou donc ça va pas ça va pas forcément
Êtreah les données du mois en cours après je pense que tu aura plus d’éléments là-dessus euh et sinon ben en terme de données disponibles donc je peux aussi vous renvoyer donc sur le tableau sur NAD je crois que quelqu’un o avit mis le lien dans le chat mais donc
Vous avez bien pour Ben chacune des banques de référence euh donc pour chaque thématique la dernière enfin la date la plus récente de la enfin de la donnée la plus récente disponible alors pour compléter euh la réponse de Remi effectivement donc le les c’est une bonne question en fait les
Les données euh entre le moment où une donnée est acquise sur le terrain enfin où euh l’analyse est faite au labo et le moment où elle est bancarisée il peut se passer en principe hein 2 mois maximum euh et après il faut compter il faut compter 15 jours pour que la donnée soit
Bancarisée chez nous donc sur les délai contractuel maximum on est sur 2 mois et demi al ça peut être moins ça peut être aussi plus puisque les les labos peuvent bah pe aller au-delà du délet contractuel au quel cas ils auront des pénalités ce qui arrive hein euh donc
Voilà donc pour répondre à votre question il y a là on est au mois de décembre c’est les données du mois de septembre c’est ça les mois de septembre ils sont ils sont mais pas pas pas plus récent quoi euh donc c’est c’est il y a toujours ce délai
Incompressible on va dire d’accord mais mois de septembre c’est déjà c’est déjà super c’est c’est déjà assez d’actualité voilà au trimestre c’est quand on est sur les territoires c’est déjà voilà quand nous on souhaiterit communiquer tous les trimestres les données de qualité de l’eau sur notre territoire je
Travaille dans sur un sage dans les codes d’Armor donc c’est si c’est au trimestre c’est déjà voilà c’est c’est déjà assez que euh enfin c’est intéressant que à une période c’était beaucoup plus long la période d’acquisition des données donc ça devenait moins intéressant pour communiquer merci ouais l’acquisition effectivement alors l’acquisition
C’était toujours le même rythme mais c’était la la diffusion d’ aade qui était effectivement une fois par an de septembre octobre pour la physicochimie c’est vrai que là on est passé sur un flux biebdomadaire par contre il faut enfin bimensuel pardon par contre effectivement il faut bien voir que donc
Il y a une une anomalie en cours là sur le sur notre système qui alimente NAD service Web et donc actuellement si vous allez sur NAD vous trouverez pas les données du mois de septembre 2023 mais ça a dû s’arrêter bah la dernière alimentation c’était le 19 septembre
Justement donc les données qu’on y trouve actuellement elles doivent aller jusqu’au mois de de juin je pense quelque chose comme ça donc mais ça va être réparé l’objectif c’est qu’on c’est qu’on soit bien sur cette alimentation en continu et donc qui est sur sur les trois derniers mois enfin qu’on est en
Permanence les données les plus récentes au-delà de auelà de 3 mois quoi c’est le et Timothé pour ta question aussi donc quel est le délai en fait entre la mise à disposition des données entre ho NAD pour hydrobiologie thoriquement le lendemain d’alimentation sur lendemain en fonction du timing les
Données doivent être disponibles sur SAF si c’est traitement changé mais historiquement c’est ça et pour la physicchimie on est sur une fréquence actuellement de deux fois par mois donc le 15 et le prer du mois il semble moi j’avais une question pour Pauline justement qui qui sur son utilisation en
Fait des données à l’échelle du sage quelles sont les sources que vous utilisez et je je je poserai aussi la question c’est que nous-même comme on fournit des indicctateurs qui sont souvent des indicateurs calculés à l’année on fait aussi une actualisation annuelle et euh mais effectivement maintenant que
Les données sont un peu plus fluides dans leur remontée jusqu’à NAD et hubo euh il serait envisageable aussi que si des stations ont des données déjà disponibles qu’elles soient actualisées plus fréquemment mais euh il faudra enfin il faut être attentif à ce moment-là de pas calculer des indicateurs annuels sur des données
Partielles mais je me demandais s’il y avait une un besoin de ce côté-là qui pouvait être qui pouvit exister du côté des territoires c’estàd récupérer au moins les données qui qui existent déjà sans attendre que l’ensemble des des des réseaux et fourn leurs données euh
Alors nous j’avoue que du coup sur le le département des codes d’Armor il y a le le département qui a mis en place une la plateforme aquatique donc qui est qui est géré par qui a été faite par Aquascope donc moi c’est la plateforme que j’utilise maintenant parce que on a
Une formation et donc on euh j’utilise cette plateforme là pour récupérer les données mais sur lesquelles il y a les données de l’Agence de l’Eau euh et ensuite donc c’est c’est surtout dans le cadre donc du tableau de bord donc tous les ans on réalise le tableau de bord
Sur à l’échelle du sage c’est là qu’on exploite le plus de données qualité et on on utilise aussi les données enfin les les analyses qui sont faites par l’OEB justement sur les pesticides qui sont des donn enfin des données que je trouve assez complexes à à analyser et
Donc là euh c’est vraiment l’échelle annuelle nous qu’on qu’on sur ce qui concerne par exemple les pesticides qu’on qu’on utilise les enfin qu’on qu’on utilise vos donné parce que c’est c’est une échelle de temps qui est pertinente pour euh euh pour le tableau de bord je sais pas si ça répond à la
Question oui ça ça répond tout à fait à la question s’il y a des en je sais pas peut-être que ça peut être aussi un échange qu’on peut avoir parachite mais est-ce que vous avez le sentiment que les formats sont simples à réutiliser justement pour vos donneré tableau de
Bord euh même sur les sur les aspects pesticides ou est-ce que finalement il y a chose qui pourrai simplifier votre réutilisation pour les tableaux de bord alors j’avoue que la dernière fois que je les ai traité c’était il y a 2 ans parce que le pour le le dernier
Tableau de bord en fait malheureusement j’ai pas pu utiliser les données parce qu’elles sont elles ont été publiées juste après la publication du tableau de bord duessage le tableau était publié en mai et c’était en juin donc j’ai pas plus les utiliser donc c’était il y a 2
Ans euh donc ilut je vais je vaisir plonger parce que je suis dedans en ce moment et puis peut-être qu’on pourra rééchanger sur ça justement dans le traitement de la donnée mais je me souviens queoui c’était des données qu’on a qu’on a de mémoire qu’on a pu utiliser facilement euh maisfin voilà je
Regarde parce que je me souviens qu’il y a certaines données où j’ai dû faire des manipulations et directement sur le site internet et reprendre à la main parce que je n’avais pas trouvé comment télécharger le un fichier qui reprenait tout mais voilà j’ai plus en tête je m replongerai on pourra réchanger
Dessus super très bien il y a d’autres question euh timothen j’aV une autre question dans chat euh ben forcément on est admiratif de tous ces cas de rétilisation des données et donc je me demande forcément benah queles seraient les contraintes à quel point ça serait facile ou non en
Fait d’étendre ce genre d’outil de valorisation bah à l’échne nationale pour que ça profite aussi à d’autres territoires euh théoriquement sur ces donnéesl euh comme beaucoup de données qu’on utilise qui sont disponibles via au France euh il faudrait simplement que j’enlève un filtre d’une certaine manière et que je change mes
Référentiels géographiques pour afficher euh l’ensemble des sages en France mais bon ça ça relève pas de de nos missions directement euh mais à part à part une question de volumétrie voilà ça le le je je je fais une sous sélection de ces données là et puis des
Calculs qui sont faits par un script mais euh il suffir déverrouiller un filtre mais j’ai pas ENF voilà l’observatoire de l’environnement Bretagne il y a pas pour occasion à faire ce service là pour d’autres territoires et et ça répond il répond aussi à la demande des territoires
Bretons en terme de format en terme d’indicateur de les listes de pesticides par exemple l’usage des pesticides et et c’est un usage qui est notamment défini par la DRAF en fonction des particularités bretonnes donc tout serait pas forcément transposable mais la plusart si bien sûr et justement est-ce qu’il y a déjà
Eu des dire des présentations qui ont été faites à d’autres territoires qui sont dit intéressés soit peutêre reproduire le même genre de chose B juste à leur échelle soit qui ont fait des demandes peut-être pour être intégrer ce genre d’outil euh on n’a pas vocation à intégrer d’autres territoires que la Bretagne sur
Notre enfin dans dans dans le cadre de l’Observatoire mais on est en contact avec d’autres observatoires qui font qui font le même travail notamment dans les Pays de la Loire il y a le l’observateur Tho qui qui vient de recruter de deux personnes pour développer une mission ha
Euh sur les pay de la Loire donc il ils sont on les a rencontré pour pouvoir leur expliquer justement nos méthodes nos outils merci d’utrees question moi j’en avait une pour compléter ce qui vient d’être dit à l’attention de de Timothé est-ce que est-ce que les technologies qui sont utilisées
Notamment pour pour faire tous ces tableaux de bord les datav sont sont des technologies Open Source qui pourra être du coup réutilisé par par d’autres alors les plusieurs choses en soit les le logiciel qu’on utilise pour faire les traitements de données alors historiquement c’était talent Open Studio qui est un
Logiciel open source libre mais qui qui a été remplacé depuis par FME qui est un outil qui est plusons plus ergonomique plus plus plus fluide à utiliser et qui a aussi des fonction de de traitement géographique que n’a pas talent Open Studio pas pas de manière aussi simple
Mais celui-ci est un logiciel commercial mais une partie enfin de certains de mes collègues utilisent très bien r en fait pour faire ce type de récupération collecte traitement et puis écriture en base de données ça peut très bien se faire sous R surtout maintenant qu’il y a pas mal de packages qui qui
Simplifient ce genre de de traitement de données et ensuite le logiciel qu’on utilise pour les tableaux de bord interactif c’est tableau logiciel tableau on a une licence payante pour utiliser le logiciel sur sur des postes de travail mais il y a une version gratuite qui peut qui qui
Peut être utilisée de manière assez complète simplement on peut pas enregistrer le travail sur un poste mais on enregistre systématiquement sur un compte en ligne donc c’est dédié aux données qui ell-mêm peuvent être des données publiques ou ouvertes donc sur lesquel il y a pas besoin de de de faire
Une restriction son données donc cet outil peut être utilisé par d’autres acteurs à partir de de ces données là et puis les bien sûr les base de données postg c’est un logiciel libre aussi euh mais voilà d’accord merci mais on n pas forcément le le ce qui serait le plus
Transposable ça serait développer des packages air air shiny qui fassent ce travail là et qui puisse être déployé sur n’importe quel B par n’importe quel utilisateur sans forcément avoir la structuration de données qu’on a nous ici à l’observatoire oui c’est c’est c’est vrai mais par contre on obtiendrait pas forcément la
Qualité de de esthétique he des graphiques en tout cas ça demandrait ça demanderit beaucoup beaucoup de temps aussi pour voilà avoir atteindre un peu cette cette ce format de présentation là avec des outils comme shiny je pense mais c’est c’est possible aussi mais c’est du temps de développement qu’on a pas forcément
Nous d’accord merci sais pas s’il y a d’autres questions sinon on on clôture tout simplement le webinaire et et de toute façon vous avez vous pouvez passer par moi vous avez également les coordonnées des différents intervenants s’il y a d’autres questions pour la suite et le et le je rappelle que le webinire
A été enregistré donc il sera disponible en replay pour à partir de la semaine prochaine donc merci merci à tous merci aussi aux intervenants et et à la prochaine et bon weekend