150 likes | 268 Views
SSDs im SAN – Praxisbericht Teil3. Erich Eckel Österreichische Lotterien Storage Management. SSDs im SAN - Praxisbericht. Überblick der Infrastruktur All Flash Array SSD & ESX Tests von weiteren SSD Produkten Sonstige Erkenntnisse Fragen. Infrastruktur. 2 Standorte, 75km, 2*4GBit FC
E N D
SSDs im SAN – PraxisberichtTeil3 Erich Eckel Österreichische LotterienStorage Management
SSDs im SAN - Praxisbericht • Überblick der Infrastruktur • All Flash Array • SSD & ESX • Tests von weiteren SSD Produkten • Sonstige Erkenntnisse • Fragen
Infrastruktur • 2 Standorte, 75km, 2*4GBit FC • Linux/Windows/ESX • 120 Server im SAN • 700 vServer (im SAN) • 350 Ports online auf Brocade Switches in 2 Fabrics • 6 FC-Speichersysteme (270TB) • 3 Falconstor Cluster (Transparent Failover) • 2 Datacore „Grid“ (je 3000 GB SSD)
SSDs im SAN - Praxisbericht • Überblick der Infrastruktur • All Flash Array • SSD & ESX • Tests von weiteren SSD Produkten • Sonstige Erkenntnisse • Fragen
Datacore mit SSD (all Flash Array) • Consumer Disk pro/contra • preisgünstig (Enterprise/Consumer) • 2011: 8€ / 1,5€ • 2012: 4€ / 0,75€ • 2013: 2€ / 0,6€ • Stabilität der (high end) Consumer Disken • in 2 Jahren Betrieb 3 ausgefallene Disken (von 40) • Erweiterung mit Enterprise Disken • Verdoppelung der Kapazität 30€/GB => 20€/GB
Datacore mit SSD (all Flash Array) • Verwendung • Schneller Speicher für Falconstor • Lese Cache (HotZone) • Schreib Cache (SaveCache) • Asyncmirror • vor DB-Reorg vServer auf Datacore • 1 Applikation in Queue, bei der DB Server auf Datacore
SSDs im SAN - Praxisbericht • Überblick der Infrastruktur • All Flash Array • SSD & ESX • Tests von weiteren SSD Produkten • Sonstige Erkenntnisse • Fragen
SSD & ESX • ESX 5.5 Read Cache mit SSD • leider noch keine Erfahrung, aber sehr vielversprechend • SSD & Controller wichtig • geringe Latenz • SSD int. Controller <> SSD high end Controller <> PCIe SSD • ESX 5.5 vSAN • Cluster aus min. 3 ESX Server • min. 1 SSD, 1 HDD • Mirror über Netzwerk (1GbE, 10 GbE)
SSDs im SAN - Praxisbericht • Überblick der Infrastruktur • All Flash Array • SSD & ESX • Tests von weiteren SSD Produkten • Sonstige Erkenntnisse • Fragen
Test weiterer SSD Produkte • Intel DC3700 Serie • Enterprise; 10 Writes/Day ; 5 Jahre Garantie • fast so schnell wie im Datenblatt angegeben • getestet mit 2 Jahre alten LSI Controller • Random 4K • R 50.000 IO/s mit 0,16ms bei Q8 • W 30.000 IO/s mit 0,07ms bei Q2 • SMART Storage Systems Optimus Serie => SanDisk • Enterprise SSD; 10 Writes/Day ; 5 Jahre Garantie • Random 4K • max R 60.000 IO/s ; W 20.000 IO/s • R 35.000 IO/s mit 0,24ms bei Q8 • W 10.000 IO/s mit 0,35ms bei Q4
SSDs im SAN - Praxisbericht • Überblick der Infrastruktur • All Flash Array • SSD & ESX • Tests von weiteren SSD Produkten • Sonstige Erkenntnisse • Fragen
Sonstige Erkenntnisse • SSDs & Zugriffe <> n*4k • einige SSD sind bei bestimmten Zugriffen <> n*4k sehr langsam • SAS Controller & Latency • Für HDD irrelevant • gleiche SSD, unterschiedlicher SAS Controller • 0,14ms <> 0,24ms Zugriffszeit • SAS Expander (nur einer getestet) • Queue<8 ca. +0,02ms • Queue>8 bis zu doppelter Zugriffszeit • W Random 4 SSD R0 75T IO/s ; 0,43ms => 56T IO/s ; 0,56ms • R Random 4 SSD R0 100T IO/s ; 0,33ms => 67T IO/s ; 0,47ms • R Random 1 SSD 45T IO/s ; 0,7ms => 21T IO/s ; 1,5ms
Sonstige Erkenntnisse • 4G FC nicht ausgelastet, brauch ich 8G FC? • Durchschnitt (5 Minuten) <20% • z.B. Archive Log für 6-8 Sekunden 400 MB/s • vieles ist in diesen 6-8 Sekunden langsam • selbst mit sample Intervall 1 Minute nicht erkennbar • vermutlich aber auch mit 8G nicht gelöst, aber nur 3-4s
SSDs im SAN - Praxisbericht • Überblick der Infrastruktur • All Flash Array • SSD & ESX • Tests von weiteren SSD Produkten • Sonstige Erkenntnisse • Fragen