Wikicima - Contribuciones del usuario [es]

CDO/NCOs

2019-06-07T12:14:28Z

Moreira:

Los [https://code.mpimet.mpg.de/projects/cdo/ Climate Data Operators] son unas herramientas muy útiles y versatiles.
Una serie de comandos simples para manejar y analizar archivos climáticos con formato GRIB, netCDF, HDF, entre otros.
Ventajas: trabaja desde la línea de comando, se pueden armar script en bash, python, utiliza poca memoria, suelen ser muy rápidos, y se pueden correr en paralelo.

Algunos comandos como para empezar:
Para ver el contenido de un archivo (variables, dimensiones, atributos)
> ncdump -h archivo.nc --> es un comando de NCO
> cdo showformat archivo.nc --> es el comando de CDO

Una vez que conocemos el archivo y ya sabemos que quermos hacer con el podemos utilizar los comandos de NCO o CDO:
Por ejemplo en CDO se usa cdo "comando" "argumento" "archivo de entrada" "archivo de salida"

Recortar latitud y longitud
> cdo sellonlatbox,lon1,lon2,lat2,lat2 Caso-IV.nc Caso-IV-BOX.nc

Recortar tiempo
> cdo selyear,2010 Caso-IV.nc Caso-IV-2010.nc

Recortar variable
> cdo selname,TEMP,SAL Caso-IV-2010.nc Caso-IV-2010-TEMPySAL.nc

PAra unir o separar archivos, variables, tiempos…
> cdo merge archivo1.nc archivo2.nc archivo1y2.nc
> cdo cut

Estadística básica por día, hora, mes, estación, año…
> cdo yearmean archivo1.nc archivo-mean.nc
> cdo yearstd archivo1.nc archivo-std.nc

Sumar y restar archivos o un valor constante
> cdo add archivo1.nc archivo2.nc archivo1+2.nc
> cdo addc,15 archivo1.nc archivo1+15.nc

O multiplicar, divdir, …
> cdo mul archivo1.nc archivo2.nc archivo1x2.nc

Y permite combinar operadores para minimizar tiempo, se ejecutan de derecha a izquierda y el archivo de salida del operador 2 es el archivo de entrada del operador 1.

> cdo operador1 -operador2 inputfile(s) outputfile

> cdo selname,TEMP,SAL -selyear,2010 Caso-IV.nc Caso-IV-2010-TEMPySAL.nc

Trabajar con en paralelo con varios procesadores Open MP

> cdo -P 8 selname,TEMP,SAL -selyear,2010 Caso-IV.nc Caso-IV-2010-TEMPySAL.nc

= CDO =
Manuales de CDO y hoja de referencia con los comandos:

https://code.mpimet.mpg.de/projects/cdo/embedded/cdo.pdf

https://code.mpimet.mpg.de/projects/cdo/embedded/cdo_refcard.pdf

= NCO =
Manuales de NCO

http://nco.sourceforge.net/nco.html

http://nco.sourceforge.net/nco.pdf

CDO/NCOs

2018-06-05T13:38:14Z

Moreira: /* NCO */

Los [https://code.mpimet.mpg.de/projects/cdo/ Climate Data Operators] son unas herramientas muy útiles y versatiles....
= CDO =
Manuales de CDO y hoja de referencia con los comandos:

https://code.mpimet.mpg.de/projects/cdo/embedded/cdo.pdf

https://code.mpimet.mpg.de/projects/cdo/embedded/cdo_refcard.pdf

= NCO =
Manuales de NCO

http://nco.sourceforge.net/nco.html

http://nco.sourceforge.net/nco.pdf

CDO/NCOs

2018-06-05T13:11:06Z

Moreira: /* CDO */

Los [https://code.mpimet.mpg.de/projects/cdo/ Climate Data Operators] son unas herramientas muy útiles y versatiles....
= CDO =
Manuales de CDO y hoja de referencia con los comandos:

https://code.mpimet.mpg.de/projects/cdo/embedded/cdo.pdf

https://code.mpimet.mpg.de/projects/cdo/embedded/cdo_refcard.pdf

= NCO =
http://nco.sourceforge.net/nco.html

CDO/NCOs

2018-06-05T12:54:37Z

Moreira: /* CDO */

Los [https://code.mpimet.mpg.de/projects/cdo/ Climate Data Operators] son unas herramientas muy útiles y versatiles....
= CDO =
Manuales de CDO y hoja de referencia con los comandos:
https://code.mpimet.mpg.de/projects/cdo/embedded/cdo.pdf
https://code.mpimet.mpg.de/projects/cdo/embedded/cdo_refcard.pdf

= NCO =
http://nco.sourceforge.net/nco.html

CDO/NCOs

2018-06-05T12:51:50Z

Moreira: /* NCO */

CDO/NCOs

2018-06-05T12:50:54Z

Moreira: /* CDO */

Página principal

2014-08-07T18:55:30Z

Moreira: /* Modelos */

== SCAD del CIMA ==
=== Reglamento de uso del SCAD del CIMA ===
Versión descargable: [[ Media:SCAD-Reglamento_de_uso.pdf‎ | SCAD-Reglamento_de_uso‎ ]]

==== General ====

*El siguiente reglamento puede ser modificado sin previo aviso y es responsabilidad de los usuarios mantenerse informados leyendo el mismo regularmente.

*El SCAD del CIMA sólo se puede utilizar para realizar corridas de procesos en paralelo con fines de investigación científica

*Todo usuario DEBE suscribirse al foro del SCAD del CIMA (FALTA URL)

*Toda consulta DEBE canalizarse mediante el foro del SCAD del CIMA

*El SCAD es un recurso compartido por todos, por lo que debe usarse de forma RESPONSABLE y no se debe abusar del mismo

==== De su uso ====

*Está absolutamente prohibido navegar en internet o descargar archivos a través de los clusters. Sólo están permitidas las conexiones hacia los clusters a través de protocolos seguros (ssh, scp, etc.).

*La administración de las corridas (jobs) en los clusters se realiza a través de un sistema de colas (pbs). Esta prohibido lanzar corridas fuera del sistema de colas

*La cantidad de trabajos que pueden estar corriendo, depende de la cantidad y el tipo de nodos que hayan sido solicitados para cada una de las corridas.

*Sólo se puede utilizar para corridas de código paralelizado. Bajo ningún concepto se debe usar el nodo principal para correr programas seriales (Ej: pre y post procesamiento de los datos).

==== Almacenamiento ====

*Todos los archivos de salida deben ser almacenados en el directorio temporal compartido por todos los usuarios (/salidas/$USUARIO). Los archivos pueden permanecer almacenados en este directorio durante un plazo máximo de 30 días al cabo de los cuales serán automáticamente eliminados.

*Cada usuario contará con un “$HOME” de poco tamaño para almacenar archivos permanentes (Ej: Programás, códigos, etc)

==== Agradecimiento ====

*Toda publicación que haya utilizado recursos del SCAD del CIMA debe contener el siguiente agradecimiento:
“Simulations were made with the high-performance computing clusters available at CIMA/UBA-CONICET, Argentina”

=== Autoridades ===
;Comite Asesor Cientifico:
: Claudio Menendez
: Juan Ruiz
: Celeste Saulo
: Silvina Solman
: Carolina Vera (Directora CIMA)

;Coordinador:
: Juan Ruiz

;Supervisor:
: Gabriel Vieytes

=== Monitoreo ===

Página de monitoreo y estadísticas del SCAD del CIMA
*''''' http://scad.cima.fcen.uba.ar/

=== Solicitud de cuenta para uso del SCAD del CIMA ===
Para poder hacer uso de los cluster del SCAD del CIMA, es necesario solicitar el alta de usuario en el [http://pampero.cima.fcen.uba.ar/cluster/ link] siguiente:

*''''' http://pampero.cima.fcen.uba.ar/cluster/

Más información haciendo click [[Solicitud de cuenta para uso del SCAD del CIMA | aqui]]

=== Guía de usuario del SCAD del CIMA ===
Acceso a la Guía de usuario haciendo click [[Guía de usuario del SCAD del CIMA | aqui]]

=== Composición del SCAD del CIMA ===
Detalle de software y hardware que conforman el SCAD del cima haciendo click [[Composición del SCAD del CIMA | aqui ]]

=== Links ===
Links de referencia haciendo click [[Links | aqui ]]

=== Consultas / Dudas ===
Para realizar consultas o quitarse dudas acerca del uso del cluster, utilizar el foro del CIMA
*''''' http://foro.cima.fcen.uba.ar

=== FAQ ===
Preguntas frecuentes haciendo click [[FAQ | aqui ]]

== Reanalysis ==
'''Copia de los archivos para uso interno del CIMA'''. Datos Disponibles via FTP y DODS(**) de:
NCEP Climate Forecast System Reanalysis (CFSR)
ds093.0: 6-hourly Products / Reanalysis 1980-2010(*) / http://rda.ucar.edu/datasets/ds093.0/index.html

Para descargar los archivos via '''FTP''': ftp://usuario:password@datos.cima.fcen.uba.ar

Para abrir los archivos en forma remota '''DODS''': http://gds.cima.fcen.uba.ar:9090/dods/

'''Descripción y ayudas:''' http://www.cima.fcen.uba.ar/CFSR.html

'''Resolucion horizontal'''

Sudamerica: 0.5° x 0.5° - 15°N a 65°S y 30°W a 85°W ( 110 x 160 Longitud/Latitud)

Global: 2.5° x 2.5° - 90°N a 90°S y 0°E a 357.5°E ( 144 x 73 Longitud/Latitud)

'''Resolucion vertical''' en las variables de Nivel: 32 niveles de presión (mbar)

1000 975 950 925 900 875 850 825 800 775 750 700 650 600 550 500 450 400 350 300 250 225 200 175 150 125 100 70 50 30 20 10

'''Período''' 31 Años : 1980/01/01 a 2010/12/31

'''Frecuencia del Pronostico''': 0 6 12 18 h

'''25 VARIABLES DE SUPERFICIE'''

'''6 VARIABLES DE PRESION'''

== Modelos ==

*[[RCA]]

*[[WRF]]

*[[CEMS]]

*[[MARS]]

== Documentación ==
*[[Redes avanzadas]]

== Becarios ==

== Necesidad Compras equipamiento ==

*[[Compras Equipamiento]]

*[[Proveedores]]

FAQ

2014-08-07T18:46:14Z

Moreira: /* Nivel 3 */

== Preguntas Frecuentes ==

=== Nivel 3 ===
''Este texto esta en cursiva''

'''ESTO ES NEGRITA'''

[[Paginanueva|Pagina VIeja]]

<pre>
'''gracias Gabriel !'''
</pre>

FAQ

2014-08-07T18:44:01Z

Moreira: /* Nivel 3 */

== Preguntas Frecuentes ==

=== Nivel 3 ===
''Este texto esta en cursiva''

'''ESTO ES NEGRITA'''

[[Paginanueva|Pagina VIeja]]

'''yo no puedo editar!'''

'''y para cuando las colas?'''

FAQ

2014-08-07T18:43:08Z

Moreira: /* Nivel 3 */

== Preguntas Frecuentes ==

=== Nivel 3 ===
''Este texto esta en cursiva''

'''ESTO ES NEGRITA'''

[[Paginanueva|Pagina VIeja]]

'''yo no puedo editar!'''