Supercómputo y el manejo de grandes volúmenes de datos "Big Data".

Experiencias y retos en CICESE

MTIC Favio Medrano  

hmedrano@cicese.mx

@favo

DIRECCIÓN DE TELEMÁTICA

INFRAESTRUCTURA

NÚMEROS

5

4

5

Personas atendiendo directamente tareas HPC

Proyectos de investigación, institucionales

Clusters distintos proyectos y divisiones

850

Terabytes de almacenamiento de alto rendimiento

NÚMEROS

92,950

6,642,228

Tareas terminadas en lo que va de 2018

Horas cpu de procesamiento totales en lo que va de 2018

3952

Núcleos de procesamiento sumados

¿QUÉ HACEMOS?

Administración de equipos HPC

Facilitamos el despliegue de tareas

Soporte y entrenamiento

¿QUÉ HACEMOS?

Administración

  • Definición de políticas de uso,
  • Manejo de usuarios,
  • instalación paqueteria y librerías,
  • Monitoreo,
  • Garantizar alta disponibilidad

 

¿QUÉ HACEMOS?

Facilitadores

  • Consultoria,
  • Paralelización de código,
  • Selección de librería / lenguaje

 

+ rendimiento

+ tiempo

interpretados

compilados

OpenMPI,  MPICH,

Intel MPI

¿QUÉ HACEMOS?

Soporte y entrenamiento

  • Seminarios,
  • Documentación, tutoriales
  • Talleres

"Administración básica y uso de cluster PBS, MAUI"

"Taller de introducción a uso de cluster con SLURM"

"Python basico, numpy, scipy, matplotlib"

"Python como herramienta para cómputo científico"

¿QUÉ SE HACE?

Pronóstico de clima

Modelos de exploración geofísica

Simulación corrientes y biogeoquímica marina

Simulación de oleaje

Secuenciación genómica

Diseño de proteínas

PROYECTOS

Pronóstico clima

PROYECTOS

Pronóstico huracanes

PROYECTOS

Pronóstico de corrientes marinas en Golfo de México

PROYECTOS

Soluciones "Big Data" para proyecto CIGOM

PROYECTOS FUTUROS

Analítica de centro de datos

Uso de contenedores para flujos de trabajo en HPC

Supercómputo y almacenamiento en la nube

¡GRACIAS!

Supercómputo 45 Aniversario CICESE

By Favio Medrano

Supercómputo 45 Aniversario CICESE

Presentación de las tareas del equipo de cómputo de la dirección de Telematica CICESE. Hacemos un revisión de los proyectos en que hemos participado y nuestros retos.

  • 253