Framework para manejo de datos heterogéneos climáticos.

La Universidad Autónoma de Ciudad Juárez (UACJ), a través del Centro de Estudios Atmosféricos y Tecnologías Verdes (CECATEV), ha recolectado información desde 1996, sin embargo, utiliza procesos manuales para crear los archivos que deben servir al acervo de datos climatológicos de nuestra región lo...

Full description

Bibliographic Details
Author: Alicia Margarita Jiménez Galina
Format: master thesis
Status:Published version
Publication Date:2020
Country:México
Institution:Universidad Autónoma de Ciudad Juárez
Repository:Repositorio Institucional de la Universidad Autónoma de Ciudad Juárez
Language:Spanish
OAI Identifier:oai:uacj.mx:oai:erecursos.uacj.mx:20.500.11961ir-5620
Online Access:http://hdl.handle.net/20.500.11961/5620
Access Level:Open access
Keyword:Datos heterogéneos
Homogeneización
NoSQL
MongoDB
ETL
info:eu-repo/classification/cti/7
id MX_fe3bf7dd57a8e6accc73de3cdc308578
oai_identifier_str oai:uacj.mx:oai:erecursos.uacj.mx:20.500.11961ir-5620
network_acronym_str MX
network_name_str México
repository_id_str
spelling Framework para manejo de datos heterogéneos climáticos.Alicia Margarita Jiménez GalinaDatos heterogéneosHomogeneizaciónNoSQLMongoDBETLinfo:eu-repo/classification/cti/7La Universidad Autónoma de Ciudad Juárez (UACJ), a través del Centro de Estudios Atmosféricos y Tecnologías Verdes (CECATEV), ha recolectado información desde 1996, sin embargo, utiliza procesos manuales para crear los archivos que deben servir al acervo de datos climatológicos de nuestra región lo cual limita la calidad y cantidad de información que se produce. Además, debido a los compromisos que cuenta la UACJ por medio del CECATEV con diversas universidades dentro y fuera del país, se debe compartir la información climática a diferentes usuarios, entre universidades y expertos en la materia. Los datos atmosféricos son heterogéneos debido a que son recolectados por estaciones climatológicas de diferentes tipos, marcas y modelos, así como analizadores de gases y aerosoles, lo que implica un reto en la visualización de los datos de una manera que facilite el análisis y la elaboración de productos relevantes para la toma de decisiones y la mejor comprensión de los procesos radiactivos y contaminantes de nuestra región. Si se considera además del tiempo que se emplea en concentrar la información manualmente, que los datos incluidos no están homogeneizados y lo que implicaría un procedimiento más complejo y tardado querer combinar diferentes estaciones y sensores en un solo archivo, resulta indispensable disponer de una herramienta que permita el tratamiento de los datos, minimizando tiempos y homogenizándolos para que puedan ser asimilados en modelos predictivos de la atmósfera. El presente reporte de desarrollo tecnológico construye la administración de datos heterogéneos, iniciando por los procesos creados para su almacenamiento, así como el tratamiento para extracción y homogeneización de estos. Para este caso se utilizaron datos climáticos provenientes de estaciones meteorológicas y de calidad del aire, las cuales recolectan información de diferentes sensores y en diferentes unidades de medida. Para lograr lo anterior se construye un framework con estas características. Se crea una estructura de metadatos que contienen el perfil de las estaciones y sus sensores, también se utiliza una base de datos NoSQL que permite la gestión de los datos en una estructura dinámica. Utilizando los metadatos y de acuerdo con la elección del usuario, permite combinar estaciones y sensores, rango de fechas y la unidad de salida deseada. Para finalmente a través de los parámetros elegidos extraer y homogeneizar la información, generando un dataset que pueda utilizarse para análisis de datos. En el primer capítulo se describe el dominio de la aplicación analizado para decidir las estrategias a utilizar. Se establece la problemática, se define el objetivo general, los objetivos específicos, así como la justificación. En el segundo capítulo se refiere al marco referencial compuesto por el marco teórico, marco tecnológico y marco conceptual. En el tercer capítulo se describe las estrategias desarrolladas para la construcción del framework, la creación de los metadatos, la estructura dinámica para el almacenamiento de los datos y el conjunto de librerías que forman el framework. En el cuarto capítulo se evalúan los resultados del framework en comparación con el ambiente manual. En el último capítulo, el quinto se presentan las conclusiones de los resultados del framework, así como áreas de oportunidad detectadas para mejoras futuras.Universidad Autónoma de Ciudad JuárezFernando Estrada Saldaña2020info:eu-repo/semantics/masterThesisTesis maestríainfo:eu-repo/semantics/publishedVersionhttp://hdl.handle.net/20.500.11961/5620reponame:Repositorio Institucional de la Universidad Autónoma de Ciudad Juárezinstname:Universidad Autónoma de Ciudad Juárezinstacron:UACJspainfo:eu-repo/semantics/openAccesshttp://creativecommons.org/licenses/by-nc/4.0oai:uacj.mx:oai:erecursos.uacj.mx:20.500.11961ir-56202025-11-26T19:48:28Z
dc.title.none.fl_str_mv Framework para manejo de datos heterogéneos climáticos.
title Framework para manejo de datos heterogéneos climáticos.
spellingShingle Framework para manejo de datos heterogéneos climáticos.
Alicia Margarita Jiménez Galina
Datos heterogéneos
Homogeneización
NoSQL
MongoDB
ETL
info:eu-repo/classification/cti/7
title_short Framework para manejo de datos heterogéneos climáticos.
title_full Framework para manejo de datos heterogéneos climáticos.
title_fullStr Framework para manejo de datos heterogéneos climáticos.
title_full_unstemmed Framework para manejo de datos heterogéneos climáticos.
title_sort Framework para manejo de datos heterogéneos climáticos.
dc.creator.none.fl_str_mv Alicia Margarita Jiménez Galina
author Alicia Margarita Jiménez Galina
author_facet Alicia Margarita Jiménez Galina
author_role author
dc.contributor.none.fl_str_mv Fernando Estrada Saldaña
dc.subject.none.fl_str_mv Datos heterogéneos
Homogeneización
NoSQL
MongoDB
ETL
info:eu-repo/classification/cti/7
topic Datos heterogéneos
Homogeneización
NoSQL
MongoDB
ETL
info:eu-repo/classification/cti/7
description La Universidad Autónoma de Ciudad Juárez (UACJ), a través del Centro de Estudios Atmosféricos y Tecnologías Verdes (CECATEV), ha recolectado información desde 1996, sin embargo, utiliza procesos manuales para crear los archivos que deben servir al acervo de datos climatológicos de nuestra región lo cual limita la calidad y cantidad de información que se produce. Además, debido a los compromisos que cuenta la UACJ por medio del CECATEV con diversas universidades dentro y fuera del país, se debe compartir la información climática a diferentes usuarios, entre universidades y expertos en la materia. Los datos atmosféricos son heterogéneos debido a que son recolectados por estaciones climatológicas de diferentes tipos, marcas y modelos, así como analizadores de gases y aerosoles, lo que implica un reto en la visualización de los datos de una manera que facilite el análisis y la elaboración de productos relevantes para la toma de decisiones y la mejor comprensión de los procesos radiactivos y contaminantes de nuestra región. Si se considera además del tiempo que se emplea en concentrar la información manualmente, que los datos incluidos no están homogeneizados y lo que implicaría un procedimiento más complejo y tardado querer combinar diferentes estaciones y sensores en un solo archivo, resulta indispensable disponer de una herramienta que permita el tratamiento de los datos, minimizando tiempos y homogenizándolos para que puedan ser asimilados en modelos predictivos de la atmósfera. El presente reporte de desarrollo tecnológico construye la administración de datos heterogéneos, iniciando por los procesos creados para su almacenamiento, así como el tratamiento para extracción y homogeneización de estos. Para este caso se utilizaron datos climáticos provenientes de estaciones meteorológicas y de calidad del aire, las cuales recolectan información de diferentes sensores y en diferentes unidades de medida. Para lograr lo anterior se construye un framework con estas características. Se crea una estructura de metadatos que contienen el perfil de las estaciones y sus sensores, también se utiliza una base de datos NoSQL que permite la gestión de los datos en una estructura dinámica. Utilizando los metadatos y de acuerdo con la elección del usuario, permite combinar estaciones y sensores, rango de fechas y la unidad de salida deseada. Para finalmente a través de los parámetros elegidos extraer y homogeneizar la información, generando un dataset que pueda utilizarse para análisis de datos. En el primer capítulo se describe el dominio de la aplicación analizado para decidir las estrategias a utilizar. Se establece la problemática, se define el objetivo general, los objetivos específicos, así como la justificación. En el segundo capítulo se refiere al marco referencial compuesto por el marco teórico, marco tecnológico y marco conceptual. En el tercer capítulo se describe las estrategias desarrolladas para la construcción del framework, la creación de los metadatos, la estructura dinámica para el almacenamiento de los datos y el conjunto de librerías que forman el framework. En el cuarto capítulo se evalúan los resultados del framework en comparación con el ambiente manual. En el último capítulo, el quinto se presentan las conclusiones de los resultados del framework, así como áreas de oportunidad detectadas para mejoras futuras.
publishDate 2020
dc.date.none.fl_str_mv 2020
dc.type.none.fl_str_mv info:eu-repo/semantics/masterThesis
Tesis maestría
info:eu-repo/semantics/publishedVersion
format masterThesis
status_str publishedVersion
dc.identifier.none.fl_str_mv http://hdl.handle.net/20.500.11961/5620
url http://hdl.handle.net/20.500.11961/5620
dc.language.none.fl_str_mv spa
language spa
dc.rights.none.fl_str_mv info:eu-repo/semantics/openAccess
http://creativecommons.org/licenses/by-nc/4.0
eu_rights_str_mv openAccess
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc/4.0
dc.publisher.none.fl_str_mv Universidad Autónoma de Ciudad Juárez
publisher.none.fl_str_mv Universidad Autónoma de Ciudad Juárez
dc.source.none.fl_str_mv reponame:Repositorio Institucional de la Universidad Autónoma de Ciudad Juárez
instname:Universidad Autónoma de Ciudad Juárez
instacron:UACJ
instname_str Universidad Autónoma de Ciudad Juárez
instacron_str UACJ
institution UACJ
reponame_str Repositorio Institucional de la Universidad Autónoma de Ciudad Juárez
collection Repositorio Institucional de la Universidad Autónoma de Ciudad Juárez
repository.name.fl_str_mv
repository.mail.fl_str_mv
_version_ 1858177826275983360
score 14,965156

Similar Items