Diapositiva 1

1
ITALIAN NATIONAL AGENCY
FOR NEW TECNOLOGY, ENERGY
AND THE ENVIRONMENT
2
(No Transcript)
3
Agenda

• LENEA GRID
• Cenni storici
• Linfrastruttura attuale
• I progetti Telegrid Campus
• Il progetto CRESCO
• Principali Obiettivi
• La struttura del progetto Partner
• Le aree applicative
• Coordinamento con gli altri progetti

4
ENEA
Italian Agency for New Tecnologies, Energy and
Environment. 12 research centers in Italy A
Central Computer and Network Service (INFO) 6
Computer Centres Casaccia, Frascati,
Bologna,Trisaia, Portici, Brindisi Multiplatform
resources for serial parallel computation and
graphical post-processing. Others computer
resources in ENEA departments individuals
Centro di Brindisi
5
ENEA Network connection
ENEA computational resources are distributed over
WAN, connected by GARR, the Italian Academic
Research Network
ENEA-GARR 9 PoP, 4-32 Mbps Brindisi Bologna Casa
ccia Frascati Portici Trisaia Palermo Pisa Roma
Sede
6
ENEA GRID

• ENEA GRID è un sistema integrato capace di
  rispondere ai seguenti obbiettivi
• mettere a disposizione un sistema di produzione
  capace di offrire i servizi necessari al calcolo
  scientifico
• integrare l'insieme di risorse informatiche di
  ENEA-INFO, distribuite su WAN
• fornire un ambiente di lavoro unificato e metodi
  di accesso omogenei per tutti i ricercatori
  dell'ENEA indipendentemente dalla loro sede di
  lavoro.
• mettere a disposizione strumenti capaci di
  permettere l'integrazione delle risorse
  informatiche dipartimentali ed individuali e di
  fornire supporto alle attività sperimentali

7
GEANT
boquad.bologna.enea.it
dafne.casaccia.enea.it
power3.frascati.enea.it
Kleos.portici.enea.it
infocal.trisia.enea.it
hermes.brindisi.enea.it
Citrix Metaframe
Citrix Nfuse
WEB(ICA)
ICA
8
I servizi di ENEA GRID

• Servizi per il calcolo scientifico
• Sistemi paralleli/seriali multipiattaforma
• AIX, Linux (Alpha,x86,x86_64,IA64), IRIX, Mac OS
  X, Solaris
• Risorse 3D e il post-processamento grafico
• SGI 3D immersivo
• Risorse Software
• Codici commerciali Fluent, Gambit, Abacus,
  Catia, Ansys
• Codici di ricerca mcnp/x, eranos, fluka,....
• Ambienti di sviluppo analisi IDL, Matlab,
  Mathematica, SAS
• Applicazioni Windows

9
Risorse di Calcolo in ENEA-GRID
Le risorse di Portici, Brindisi Trisaia sono
state aumentate nel quadro del progetto PON
TELEGRID
10
L'architettura di ENEA GRID
La scelta di componenti maturi come garanzia di
affidabilità e semplicità di gestione File
system distribuito AFS/OpenAFS Gestore delle
risorse LSF Multicluster Interfaccia grafica
Java and Citrix Technologies Sistema di
monitoring Patrol Server di licenze Strumenti
per l'integrazione delle risorse dipartimentali
ed individuali File sistem distribuito AFS per
software e dati Condivisione del parco licenze
11
Architettura di ENEA GRID
12
Struttura Software concettuale
ENEA GRID
13
Interfaccia utente
Accesso utente unificato tramite Citrix
Presentation Center ex Metaframe, java e script
di shell Prestazioni ottimizate su WAN e
metodi di comunicazione sicuri Accesso gestito
da 6 server Citrix UNIX Bologna, Casaccia,
Frascati, Trisaia, Portici, Brindisi 4 server
Citrix Windows forniscono accesso alle
applicazioni Windows tramite Web(Frascati,
Portici, Trisaia, Brindisi).
14
WEB ICA SSH
CPUS
15
Schema di integrazione di apparati sperimentali
nel GRID ENEA
16
Integrazione con altri progetti di GRID

• L'obbiettivo della partecipazione di ENEA INFO in
  altri progetti di GRID è concentrato sulla
  interoperabilità.
• Ogni progetto di GRID è caratterizzato da una
  propria architettura/middleware e l'accesso alle
  risorse deve risultare compatibile con
  l'infrastruttura interna
• gt realizzazione di gateway
• Progetti
• Datagrid
• FIRB/Grid.it WP13 Chimica Computazionale
• EGEE
• EGEE-2 E-DAISA ( In corso di approvazione )

17
ENEA GRID e il progetto DATAGRID
ENEA ha partecipato (unfunded) in DATAGRID
(finito 2004) collaborando con ESRIN ESA
Frascati dove è stato realizzato un gateway
DATAGRID gt ENEA-GRID con funzionalità limitate
sottomissione, pubblicazione dei risultati
Test con l'analisi dei dati satellitari di GOME
(livelli di Ozono) IDL/multicase/multipiattaforma

List of path Input File LIV1
User afs/home
WEB
18
ENEA-GRID e il WP13 GRID.it/Chemgrid
Il progetto FIRB GRID.IT nel suo WP13, Chimica
Computazionale, comprende un gruppo di
ricercatori di ENEA Casaccia. WP13 ha realizzato
una piccola GRID sperimentale basata su Globus
3.2 che comprende siti a PG, MI, BO, PD, BA e
ENEA Frascati. Il contributo ENEA un gateway
chemgrid.frascati.enea.it che permette
l'accesso a 16 nodi Linux condivisi con
ENEA-GRID. I componenti installati Server
gatekeeper compatibile con AFS ed LSF
MPICH-G2 gsiftp compatibile con
AFS gssklogd traduce certificato X509 in
token kerberos AFS Client globus 3.2 installato
in AFS ed utilizzabile da ogni server Linux
di ENEA-GRID
19

• EGEE/ENEA Linux Cluster
• LCG 2.6 Middle-ware has been patched for
  compatibility with ENEA-GRID architecture, AFS
  and LSF
• Pool account users are pre-defined as standard
  AFS user of ENEA GRID with AFS homes e.g. for
  dteam VO HOME/afs/enea.it/grd_egee/user/dteam001
  ...
• lcmaps has been modified to acquire an AFS token
  using gssklog.
• gssklogd daemon has been modified for
  compatibility with VO security.
• lsf job manager is used and JobManager.pm and
  lsf.pm have been modified for compatibility with
  AFS file system and ENEA LSF configuration.
• In this approach CE and WN share the same file
  system via AFS.
• Jobs can be submitted by edg-job-submit using
  INFN certification RB and setting explicitly CE
  egce.frascati.enea.it.
• Implementing the gateway one of the Linux WNs
  was modified and tested
• 1) /etc/grid-security and /opt/ directories were
  completely removed.
• 2) a new /opt/globus has been created with 2
  subdirectories bin and etc.
• 3) /opt/globus/etc/globus-user-env.sh is a link
  to the usual file in an AFS location
• 4) /opt/globus/bin/globus-url-copy
  grid-proxy-info are links to wrappers in AFS
• e.g. globus-url-copy -gt wrapper
• wrapper lsrun -m egce.frascati.enea.it
  globus-url-copy

20
where lsrun is the LSF command for immediate
execution on a remote host. As a result all data
transfer between WN and RB are effectively done
by the CE which shares HOME with WN (AFS).
EGEE/ENEA gateway to AIX With the described
approach, a similar /opt/globus has been created
on IBM SP hosts and the CE egceaix.frascati.enea.i
t differs from the Linux CE only for the name of
the resource where LSF submits are
performed. Successful tests have been performed
with the same approach also with submissions to
SGI/Irix 6.5 , to Apple/MacOSX and SGI/Altix IA64
hosts located at 3 different sites Frascati ,
Trisaia (Southern Italy), Casaccia Advantage of
this approach easy WN firewall
configuration! Limitations on WN monitoring and
accounting middle-ware is not yet
available ENEA-INFO site status site
certification in progress
Conclusion successful job submission and result
retrieval to AIX, MacOSX,IRIX and Altix IA64
Worker Nodes has been demonstrated using a Linux
gateway between EGEE LCG 2.6 and ENEA-GRID.
21

• ENEA
• Main activities resources for EGEE
• Integration of EGEE-GRID to ENEA-GRID
• 100 CPUs at 20 of time

ENEA-GRID
Globus Based gateway
Globus Based gateway
Globus Based gateway GigaBit-Link
S-PACI GRID
EGEE GRID
DataGrid at ESA\ESRIN
migliori_at_enea.it
22
Infrastruttura e-learning ENEA
Servizi Base

• Gestione Erogazione della formazione Sincrona,
  Asincrona e Mista

Scelta Pianificazione
Fruizione
Accesso
Corsi on Line
Corsi Aula
Aule Virtuali

Brreze
23
Infrastruttura e-learning ENEA
Servizi GRID

• Accesso software applicativi e risorse di calcolo

Accesso
Scelta
Fruizione
Software
Lavoro Collaborativo
Brreze
Supercomputing

24
Il Progetto CRESCOCentro computazionale di
RicErca sui Sistemi COmplessi

• Principali Obiettivi
• Realizzazione del Polo di calcolo e sviluppo di
  nuove funzionalità di GRID Computing
• Sviluppo di tecnologie e modelli computazionali
  per la descrizione di sistemi complessi di
  origine biologica e di materiali innovativi
• Sviluppo di modelli di simulazione ed analisi
  delle Reti Tecnologiche complesse e delle loro
  interdipendenze

25
Il Progetto CRESCOCentro computazionale di
RicErca sui Sistemi COmplessi

• Potenziamento delle funzioni tradizionali
  dellENEA
• la ricerca sarà fornito supporto (di tipo sia
  capacity che capability), attraverso lutilizzo
  dellinfrastruttura di calcolo, ad attività di
  ricerca già in corso di svolgimento nellEnte
  nellambito delle linee programmatiche esistenti
  tali attività potranno anche avere una
  focalizzazione di natura industriale
• la formazione potranno essere potenziate le
  attività di formazione, in collaborazione con
  alcune sedi universitarie, al fine di supportare
  la diffusione delle metodologie sviluppate
  allinterno del Polo Multidisciplinare negli
  ambiti tematici oggetto di studio e ricerca, con
  positive ricadute anche nella creazione di
  percorsi formativi adatti al successivo
  reclutamento di personale
• il trasferimento tecnologico verranno istituiti
  percorsi ed attivati idonei strumenti per
  favorire lapplicazione industriale delle
  tecnologie sviluppate, anche ricorrendo alla
  collaborazione di idonei partner
  (industrial-exploitation partner).

26
Schema Concettuale
NEW ?
CRESCO
CYBERSAR
EGEE ---gt EGEE-2
PI2S2
SCOPE
E-DEISA
ENEA GRID
SPACI
27
Il Laboratorio VirtualePer le applicazioni
finali allutenza
Schema concettuale dei Laboratori Virtuali di
CRESCO inseriti nellinfrastruttura ENEA-GRID
28
Macrostruttura del progetto
Prof. Jack Dongarra Prof. Umberto Ferrari Prof.
Agostino Mathis TBD LA2 .TBD LA3
29
Le tre linee di attività di CRESCO

• Sviluppo software per i servizi finali allutenza
• SP I Realizzazione del Polo di calcolo e sviluppo
  di nuove funzionalità di GRID Computing
• SP II Sviluppo di tecnologie e modelli
  computazionali per la descrizione di sistemi
  complessi di origine biologica e di materiali
  innovativi
• SP III Sviluppo di modelli di simulazione ed
  analisi delle Reti Tecnologiche complesse e delle
  loro interdipendenze

30
SP I Realizzazione del Polo di calcolo e sviluppo
di nuove funzionalità di GRID Computing.

• Sottoprogetti
• SP I.1 Realizzazione dellinfrastruttura HPCN
• SP I.2 Sviluppo ed integrazione dellarchitettura
  GRID e di grafica 3D
• SP I.3 Sviluppo ed ottimizzazione di codici
  applicativi in settori di RS di punta.
• SP I.4 Progettazione e sviluppo di librerie per
  limplementazione efficiente e parallela di
  nuclei computazionali su dispositivi Field
  Programmable Gate Arrays (FPGA) integrati in un
  ambiente GRID.
• SP I.5 Web archivi

31
SP II Sviluppo di tecnologie e modelli
computazionali per la descrizione di sistemi
complessi di origine biologica e di materiali
innovativi

• Sottoprogetti
• SP II.1 Simulazioni di reti biochimiche
• SP II.2 Bioinformatica PTPS
• SP II.3 Ricerca polimorfismi
• SP II.4 Sviluppo di modelli numerici per analisi
  strutturali complesse e processi di
  sinterizzazione
• SP II.5 Modelling molecolare

32
SP III Sviluppo di modelli di simulazione ed
analisi delle Reti Tecnologiche complesse e delle
loro interdipendenze

• Sottoprogetti
• SP II.1 Fisica delle Reti Complesse
• SP II.2 Analisi di Vulnerabilità delle Reti
  Complesse
• SP II.3 Modelli e Strumenti di Supporto alla
  Ottimizzazione e Riconfigurazione delle Reti
• SP II.4 Modellistica delle Reti Complesse viste
  come aggregati Socio-Tecnologici
• SP II.5 Interdipendenza tra Reti Complesse
• SP II.6 Sistema Informativo per la Salvaguardia
  delle Infrastrutture e della Popolazione

33
Partner

• Partner
• Università di Salerno
• Università di Catania
• Università di Lecce
• Università di Palermo
• Università del Sannio
• Università del Piemonte Orientale
• Università di Roma Tor Vergata
• Università di Roma La Sapienza
• Cons. Interuniversitario ECONA
• CRIAI Consorzio Campano di Ricerca per
  lInformatica e lAutomazione Industriale
• Consorzio BioTekNet (Centro Regionale di
  Competenza in Biotecnologie Industriali)
• Parco Scientifico e Tecnologico della Sicilia
• Consorzio CETMA
• Soc. Ylichron (spin-off ENEA)

34
Collaborazioni dichiarate nel progetto

• Collaborazioni
• Politecnico di Milano Dipartimento di
  Elettrotecnica
• United States Department of State, USA
• Oak Ridge National Laboratories, USA

35
Nuove collaborazioni

• CYBERSAR ?
• PI2S2 ?
• SCOPE ?
• SPACI ?
• .

36
Una proposta di armonizzazione

• Reciproca visibilità sullevoluzione dei
  progetti
• Costituzione di un comitato di raccordo
• Una filosofia di integrazione basata su gateway
• Invito al prossimo incontro di GRISU a NAPOLI
  Aprile 2006
• (Organizzato da CRESCO ..FII)

37
(No Transcript)
38
(No Transcript)