Centre dedocumentation
scientifique

Révision de la chaîne de valorisation des données en système d’information décisionnel / Quentin Courtiade (2022) 

Public Titre : Révision de la chaîne de valorisation des données en système d’information décisionnel Type de document : Mémoire Auteurs : Quentin Courtiade, Auteur Editeur : Champs-sur-Marne : Ecole nationale des sciences géographiques ENSG Année de publication : 2022 Importance : 63 p. Format : 21 x 30 cm Note générale : Bibliographie Rapport de projet pluridisciplinaire, cycle ING2 Langues : Français (fre) Descripteur : [Vedettes matières IGN] Bases de données localisées [Termes IGN] données massives [Termes IGN] entrepôt de données localisées [Termes IGN] indexation [Termes IGN] intégration de données [Termes IGN] Nouvelle-Calédonie [Termes IGN] outil d'aide à la décision [Termes IGN] Python (langage de programmation) [Termes IGN] SQL [Termes IGN] système d'information [Termes IGN] tableau de bord [Termes IGN] valorisation des données Index. décimale : PROJET Mémoires : Rapports de projet - stage des ingénieurs de 2e année Résumé : (Auteur) L’Observatoire de l’Environnement en Nouvelle-Calédonie (OEIL) a pour ambition de traduire les pressions, l’état et les réponses qui s’exercent sur l’environnement néo-calédonien. Le pôle Système d’Information, par la mise en place d’un nouveau Système d’Information Décisionnel (SID) au moyen d’une révision de la chaîne de valorisation des données, espère améliorer la rapidité de ses services et en faciliter la maintenance. Le présent stage doit ainsi étudier et mettre en place les outils et méthodes qui constitueront les briques élémentaires de ce futur SID. Afin de répondre aux nécessités de l’entreprise, préalablement à l’intégration des données dans un entrepôt, une étape d’indexation de ces dernières sur une grille hexagonale H3 est établie afin de simplifier le croisement entre sources de données. Une parallélisation des processus est, de surcroît, mise en place au moyen de la librairie Python Dask afin d’assurer le traitement de quantités massives de données. Ce document étudie également comment mettre en place un générateur de code SQL à l’aide de l’outil Data Build Tool (DBT) afin de réaliser des croisements (multi-)thématiques entre les données préalablement indexées. Ces croisements, regroupés en magasins de données sont, par la suite, diffusés via des services web et consommés par des tableaux de bord ou d’autres outils de la manière la plus performante possible. L’indexation des données et la génération automatique de code SQL ont permis une standardisation de la chaîne de valorisation des données, facilitant ainsi sa maintenance. Les tableaux de bord ont également gagné en performance. Note de contenu : Introduction 1. Intégration des données sources dans un entrepôt de données 1.1 Réflexion autour de la structure de l’entrepôt de données 1.2 Validation des concepts et méthodes sur un faible jeu de données 1.3 Mise en œuvre à grande échelle 2. Création et diffusion des magasins de données 2.1 Réflexion autour des outils et méthodes 2.2 Mise en œuvre des outils et méthodes 2.3 Caractérisation des performances et perspectives Conclusion Numéro de notice : 26864 Affiliation des auteurs : IGN (2020- ) Thématique : GEOMATIQUE Nature : Mémoire de projet pluridisciplinaire Organisme de stage : Observatoire de l’Environnement en Nouvelle-Calédonie OEIL Permalink : https://documentation.ensg.eu/index.php?lvl=notice_display&id=101652

Documents numériques

en open access Révision de la chaîne de valorisation des données en système d’information décisionnel Adobe Acrobat PDF