papa-deimos
Línea 1: | Línea 1: | ||
+ | ''papa-deimos'' es una iniciativa del CIMA/DCAO para empezar a construir y aprender el acceso y manejo de datos del futuro próximo. A medida que las bases de datos climáticas adquieren más resolución espacial, el tamaño de sus archivos crecen rápidamente. La gestión y análisis de datos actual, se vuelve cada vez menos eficaz y se requiere implementar soluciones novedosas. |
||
+ | |||
+ | Este es un problema que afecta toda la comunidad climática internacional y la única solución posible pasa por llevar el cálculo y diagnóstico de datos ahí donde residen. Es decir, proveer al servidor de almacenaje de datos de capacidades de cálculo '' 'in-situ' '' |
||
+ | |||
+ | == Procedimiento actual == |
||
+ | |||
+ | Para la gestión y análisis de datos climáticos, en la actualidad se procede de la siguiente manera: |
||
+ | 1. Elaboración de la '''pregunta científica''' |
||
+ | 1. '''Búsqueda''' de fuentes de datos que puedan ser útiles para responder a la pregunta. Se realiza una búsqueda para encontrar esos datos requeridos, normalmente en servidores ''remotos''. Se determinan los servidor de datos, formato archivos, periodo cubierto, etc... |
||
+ | 1. '''Descarga''' de datos: Una vez se tiene acceso al servidor de datos, se procede a realizar una copia en un recurso propio de los datos requeridos a través de internet. |
||
+ | 1. '''Análisis''' de datos: En la versión '' 'local' '' de los datos se utilizan recursos computacionales propios para realizar los cálculos y diagnósticos estadísticos |
||
+ | 1. '''Figuras''' resultados: En recursos propios, se realizan las figuras que muestran los resultados obtenidos. |
||
+ | |||
+ | == Procedimiento deseado == |
||
+ | La solución ideal se basaría en un único servidor de datos climático el cuál diera acceso a todos los datos climáticos de interés (observaciones, modelado, ...) y con las capacidades de análisis necesarias. |
||
+ | |||
+ | * La búsqueda de datos y sus posibles fuentes de acceso puede ser una tarea difícil y laboriosa. En la actualidad existe el ''Earth System Grid Federation'' ([https://esgf.llnl.gov ESGF]) el cual garantiza acceso universal y abierto de datos climáticos de ejercicios de modelado globales y regionales. No obstante, no existe una plataforma similar para datos observacionales. Además, el acceso a todos esos datos que no estén en algún nodo del ESGF, (por ejemplo, experimentos específicos a una región, país, ...) se vuelve laborioso y difícil. |
||
+ | * El cálculo y diagnóstico de datos climáticos, cada vez requiere de mayores recursos computacionales a los cuales no siempre se tiene acceso. Además suele requerir tener habilidades de programación avanzadas, que no todes les usuaries de datos tienen. |
||
+ | * Los datos climáticos pueden estar en distintos formatos, y/o ser requeridos en otro formato para poder ser utilizados por las distintas herramientas (ej. netCDF, GIS, ...) |
||
+ | |||
+ | ''papa-deimos' intenta prestar este servicio de almacenaje y cálculo ' ''in-situ' '' a la comunidad del CIMA/DCAO. |
||
+ | |||
+ | En la actualidad se está trabajando con el ''Servicio Meteorológico Nacional'' ([https://www.smn.gob.ar/ SMN]) y el ''Instituto Nacional del Agua'' ([https://www.argentina.gob.ar/ina INA]), para mandar una propuesta de financiación dentro del ''Programa d Facilidades Científicas y Tecnológicas (FCT) de Interés Estratégico e Interinstitucional'', para la creación de un ''Centro de Datos Climático Regional'' (Aadpt.AR) para prestar servicio de acceso y diagnóstico 'in situ' a nivel Federal. |
||
+ | |||
+ | ''papa-deimos'' es la herramienta prototipo que nos sirve para aprender los requerimientos necesarios de un equipamiento con estas características. |
||
+ | |||
= uso = |
= uso = |
||
Pasos a seguir para el [[papa-deimos/uso|uso]] de papa-deimos. |
Pasos a seguir para el [[papa-deimos/uso|uso]] de papa-deimos. |
Revisión de 11:59 29 sep 2023
papa-deimos es una iniciativa del CIMA/DCAO para empezar a construir y aprender el acceso y manejo de datos del futuro próximo. A medida que las bases de datos climáticas adquieren más resolución espacial, el tamaño de sus archivos crecen rápidamente. La gestión y análisis de datos actual, se vuelve cada vez menos eficaz y se requiere implementar soluciones novedosas.
Este es un problema que afecta toda la comunidad climática internacional y la única solución posible pasa por llevar el cálculo y diagnóstico de datos ahí donde residen. Es decir, proveer al servidor de almacenaje de datos de capacidades de cálculo 'in-situ'
Contenido |
Procedimiento actual
Para la gestión y análisis de datos climáticos, en la actualidad se procede de la siguiente manera: 1. Elaboración de la pregunta científica 1. Búsqueda de fuentes de datos que puedan ser útiles para responder a la pregunta. Se realiza una búsqueda para encontrar esos datos requeridos, normalmente en servidores remotos. Se determinan los servidor de datos, formato archivos, periodo cubierto, etc... 1. Descarga de datos: Una vez se tiene acceso al servidor de datos, se procede a realizar una copia en un recurso propio de los datos requeridos a través de internet. 1. Análisis de datos: En la versión 'local' de los datos se utilizan recursos computacionales propios para realizar los cálculos y diagnósticos estadísticos 1. Figuras resultados: En recursos propios, se realizan las figuras que muestran los resultados obtenidos.
Procedimiento deseado
La solución ideal se basaría en un único servidor de datos climático el cuál diera acceso a todos los datos climáticos de interés (observaciones, modelado, ...) y con las capacidades de análisis necesarias.
- La búsqueda de datos y sus posibles fuentes de acceso puede ser una tarea difícil y laboriosa. En la actualidad existe el Earth System Grid Federation (ESGF) el cual garantiza acceso universal y abierto de datos climáticos de ejercicios de modelado globales y regionales. No obstante, no existe una plataforma similar para datos observacionales. Además, el acceso a todos esos datos que no estén en algún nodo del ESGF, (por ejemplo, experimentos específicos a una región, país, ...) se vuelve laborioso y difícil.
- El cálculo y diagnóstico de datos climáticos, cada vez requiere de mayores recursos computacionales a los cuales no siempre se tiene acceso. Además suele requerir tener habilidades de programación avanzadas, que no todes les usuaries de datos tienen.
- Los datos climáticos pueden estar en distintos formatos, y/o ser requeridos en otro formato para poder ser utilizados por las distintas herramientas (ej. netCDF, GIS, ...)
papa-deimos' intenta prestar este servicio de almacenaje y cálculo ' in-situ' a la comunidad del CIMA/DCAO.
En la actualidad se está trabajando con el Servicio Meteorológico Nacional (SMN) y el Instituto Nacional del Agua (INA), para mandar una propuesta de financiación dentro del Programa d Facilidades Científicas y Tecnológicas (FCT) de Interés Estratégico e Interinstitucional, para la creación de un Centro de Datos Climático Regional (Aadpt.AR) para prestar servicio de acceso y diagnóstico 'in situ' a nivel Federal.
papa-deimos es la herramienta prototipo que nos sirve para aprender los requerimientos necesarios de un equipamiento con estas características.
uso
Pasos a seguir para el uso de papa-deimos.
Bases de datos existentes
Tabla de los datos accesibles en papa-deimos.
Especificiaciones técnicas
Descripción técnica de papa-deimos.
Puesta en funcionamiento del sistema 'papa-deimos'
Pasos seguidos para la instalación de papa-deimos.