39
Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de Investigaciones Científicas

Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Embed Size (px)

Citation preview

Page 1: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Aplicación de la tecnología Grid:Portal de recursos de supercomputación

José Ruedas Sánchez

Instituto de Astrofísica de AndalucíaConsejo Superior de Investigaciones Científicas

Page 2: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Aplicación de la tecnología Grid: Portal de recursos de supercomputación

Necesidad de evolucionar a tecnologías de computación basadas en la integración de recursos geográficamente distribuidos

Proyectos multidisciplinares

• Simulación y Análisis de datos en Física de Partículas• Modelos predictivos en Ciencias Medio Ambientales• Biología Computacional (Proteómica y Genómica)• Medicina (análisis de imágenes de diagnóstico)• Industria Aeronáutica y Automovilística• Análisis observacional en Astrofísica, …

Requieren

• Procesado y análisis utilizando grandes recursos de cálculo• Acceso a grandes bases de datos (VLDB)• Colaboración distribuida a escala global

Necesitan una tecnología

• Alta productividad (HTC) - Ejecución de un número mayor de aplicaciones• Alto rendimiento (HPC) - Ejecución de una aplicación en menos tiempo

Motivación del problema

Page 3: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

• Concepto análogo a las redes de suministro eléctrico: acceso a recursos geográficamente distribuidos en diferentes dominios de administración, de forma uniforme, transparente, segura, eficiente y fiable

• Los sistemas distribuidos se pueden emplear como un único sistema virtual

Aplicación de la tecnología Grid: Portal de recursos de supercomputación

Evolución de las redes de comunicaciones de alta velocidad dedicadas a la investigación

Tecnología Grid

Ventajas

• Gran potencia de cálculo a bajo precio sin necesidad de adquirir equipamiento• Respeta las políticas internas de seguridad y de gestión de recursos• Creación de Organizaciones Virtuales (VO)• Mayor colaboración y compartición de recursos entre varios centros• Amortizar y justificar los recursos propios a través de un uso más homogéneo• Reducir costes y optimizar recursos

Page 4: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Aplicación de la tecnología Grid: Portal de recursos de supercomputación

• Certificados

Solicitar los certificados a la correspondiente Autoridad de Registro (RA)

CSR de Usuario CSR de Servidor/Servicio

• Registro en e-CA

• Instalación de servicios Globus Elemento computacional (CE) Elemento de almacenamiento (SE)

Solicitar al gestor de la VO el registro de cada usuario Solicitar al Centro de Operación Regional (ROC) el registro del CE en la VO El ROC solicita al Centro de Operación Grid (GOC) la puesta en producción del CE El GOC monitoriza periódicamente la calidad de servicio del CE

Centro de recursos

Page 5: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Globus toolkit

Instalación y configuración

Aplicación de la tecnología Grid: Portal de recursos de supercomputación

• Entorno de computación Grid LHC del CERN (LCG)• Sistema Operativo: Scientific Linux

Infraestructura Grid basada en servicios Globus

Para pertenecer a LCG, es necesario

• Certificado emitido por una Autoridad de Certificación acreditada (pkIRISGridCA)• Estar registrado en una Organización Virtual (VO)

Page 6: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Aplicación de la tecnología Grid: Portal de recursos de supercomputación

InterfazUsuario

• Punto de acceso a los servicios Grid• Permite al usuario, registrado dentro de una VO

Obtener información de todos los recursos Grid disponibles Enviar trabajos para su ejecución Monitorizar el estado de los trabajos Cancelar trabajos Solicitar información de los trabajos Obtener el resultado de la ejecución de los trabajos Copiar, replicar y borrar ficheros

Globus toolkit

Page 7: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Globus toolkit

Aplicación de la tecnología Grid: Portal de recursos de supercomputación

InterfazUsuario

Registro

PlanificaciónEnvío Trabajos

RecursoComputacional

RecursoAlmacenamiento

GestorRecursos

CatálogoRéplicas

ServicioInformación

Page 8: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Globus toolkit

Aplicación de la tecnología Grid: Portal de recursos de supercomputación

Registro

PlanificaciónEnvío Trabajos

RecursoComputacional

RecursoAlmacenamiento

GestorRecursos

CatálogoRéplicas

ServicioInformación

InterfazUsuario

Page 9: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 10: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 11: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 12: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

●●●●●●●●●●

usercert.p12

[email protected]

Page 13: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

●●●●●●●●●●

Page 14: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 15: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

●●●●●●●●●●

Page 16: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 17: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 18: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 19: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 20: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 21: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

1 2 3 4 5 6 7 8 9

math-np

/home/code/math-np

/home/data/math-np

Page 22: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 23: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 24: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 25: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 26: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 27: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 28: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 29: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 30: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 31: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 32: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 33: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 34: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 35: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 36: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de
Page 37: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Introducción · Globus toolkit · Diseño y desa rrollo del portal · ConclusionesIntroducción · Globus toolkit · Diseño y desa rrollo del portal · Conclusiones

Aplicación de la tecnología Grid al diseño y desarrollo de un portal de recursos computacionales · José Ruedas Sánchez

Page 38: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Aplicación de la tecnología Grid:Portal de recursos de supercomputación

José Ruedas Sánchez

Instituto de Astrofísica de AndalucíaConsejo Superior de Investigaciones Científicas

Page 39: Aplicación de la tecnología Grid: Portal de recursos de supercomputación José Ruedas Sánchez Instituto de Astrofísica de Andalucía Consejo Superior de

Aplicación de la tecnología Grid: Portal de recursos de supercomputación

Astrofísica ExtragalácticaRealización de modelos de evolución de galaxias