Gruppo storage CCR

1. Gruppo storage CCR Status Report Alessandro Brunengo Workshop CCR Otranto - giugno 2006

2. Il gruppo di lavoro • Gruppo costituito in CCR ad inizio 2005 • Finalita’: valutare soluzioni di storage per i servizi centrali (per fine 2005) • architettura • tipologia di disco • Finalita’ riviste in dicembre 2005: • coordinamento (stimolo?) di attivita’ preparatorie al SC4, con particolare riferimento ai siti candidati Tier2 • test su file system paralleli ed architetture ridondanti • sperimentazione tecnologia iSCSI • generico technology tracking Workshop CCR Otranto - giugno 2006

3. Partecipanti e modalita’ • Circa 30 iscritti alla mailing list (storage@pi.infn.it) • responsiva e reattiva, con traffico a burst • Circa 15 partecipanti regolari alle riunioni (non regolari…) ed operativi, piu’ alcuni ascoltatori • Diverse sezioni interessate e coinvolte • Attivita’ divisa in sottogruppi • le attivita’ attinenti ai test finalizzati al SC4 svolte in stretta collaborazione con altri gruppi di lavoro (gruppo storage del Tier1) • Riunioni (ir)regolari, sottoriunioni telefoniche/videofoniche • Partecipazione alle attivita’ della task force HEPiX sullo storage (un componente nella task force) Workshop CCR Otranto - giugno 2006

4. Attivita’ di valutazione di file system (paralleli) • Il gruppo ha effettuato ed effettua attivita’ di valutazione di file system paralleli (Lustre, GPFS, GFS) • prestazioni • funzionalita’, affidabilita’, ridondanza • scalabilita’ alle dimensioni attuali del Tier1 vedi presentazione di Brunengo su GPFS Workshop CCR Otranto - giugno 2006

5. Attivita’ di preparazione ad SC4 • Intensa attivita’ di test: • funzionalita’ di implementazioni SRM piu’ diffuse (dCache, DPM), in particolare verso le funzionalita’ della V2. • collaborazione con gli sviluppatori di StoRM come beta tester, sulla infrastruttura GPFS • prestazioni di throughput con accesso locale e geografico allo storage via SRM • scalabilita’ di dCache alle dimensioni del Tier1 • interoperabilita’ di diverse implementazioni SRM vedi presentazione di Donvito sulle interfacce SRM • Attivita’ di coordinamento Tier2 (?) • Solo un paio di candidati tier2 molto attivi nelle fasi di test • Svolta una funzione di stimolo alla collaborazione • Le attuali attivita’ di preparazione ad SC4 sono coordinate dal Tier1 Workshop CCR Otranto - giugno 2006

6. thanks to G.Donvito, M.Biasotto

7. iSCSI • Tecnologia potenzialmente alternativa a Fiber Channel per la realizzazione di una SAN • Da valutare: • prestazioni con e senza hardware dedicato (HBA) • funzionalita’ di failover su cammini ridondati • costi a confronto di soluzioni equivalenti in FC • Realizzati test preliminari su infrastrutture incomplete Workshop CCR Otranto - giugno 2006

8. Testbed iSCSI a Trieste thanks to A.Tirel Workshop CCR Otranto - giugno 2006

9. Testbed iSCSI a Trieste - 2 • 5 server dual Opteron 275 con 4 GB di RAM • HBA iSCSI Qlogic QLA4052C (dual port) • Switch Gigabit Ethernet Extreme Networks Summit 400-48 • Target: emulazione software (uno dei nodi con Fedora Core 5 e iscsi-target versione 0.4.13) • Previsti test con Network Appliance FAS3020 (iSCSI, CIFS, NFSv4/3/2) in demo da meta’ giugno • Si ottengono throughput di 25/22 MB/s (r/w) senza HBA, 45/23 MB/s con HBA • i test evidenziano come in caso di driver software l’utilizzo della CPU cresce con una elevata percentuale di I/O wait (>70%) Workshop CCR Otranto - giugno 2006

10. Testbed iSCSI a Pisa • Target iSCSI: Promise Vtrak M500I con porta Ethernet 1Gb/s, 15 dischi da 250 MB, RAID 5 (in conto visione) • Clients: Linux SLES 10 (HP DL 385, 2*Opteron 252, 2 GB RAM), Sun Solaris 10. iSCSI software, no HBA. NIC 1 Gb/s. • Anche in questo caso testbed con hardware incompleto: le HBA saranno disponibili per fine giugno • Realizzati test su LAN e su connessione WAN (veloce): • transfer rate su LAN: 80/50 MB/s (r/w) • i test su WAN hanno incontrato problemi legati ad instabilita’ della rete Workshop CCR Otranto - giugno 2006

11. Attivita’ future • Completamento (?) delle attivita’ di sperimentazione e valutazione in corso (interfacce SRM, iSCSI, GPFS/GFS) • Proseguimento delle attivita’ di technology tracking con la sperimentazione delle ultime soluzioni hardware • sfruttare il laboratorio con materiale in conto visione • Vi sono argomenti su cui si puo’ fare attivita’ importante • valutazione dell’impatto delle configurazioni del parametri del kernel e dello stack TCP/IP sul throughput in condizioni di carico elevato • ** attivita’ gia’ portata avanti da Tiziana: si deve collaborare e contribuire • sperimentazione su soluzioni alternative al file system, con attenzione alle prestazioni (XFS, …) • analisi di soluzioni di alta disponibilita’ sui servizi connessi con lo storage (servizi SRM, file system export, …) • sviluppo di parti mancanti per soluzioni hw/sw adottate in modo diffuso • Tutte le attivita’ che si possono fare e che non ci sono ancora venute in mente… contributi sono caldeggiati Workshop CCR Otranto - giugno 2006

12. Riferimenti La documentazione prodotta e’ riportata sul sito wiki del gruppo, accessibile alla URL: http://grid.ct.infn.it/swiki Workshop CCR Otranto - giugno 2006