22-03-2017
© Atos
Atos - Data Center Fürth
Erfahrungsbericht - Sanierung eines TSI3 Rechenzentrums mit 3500 m2 IT-Fläche im laufenden Betrieb
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
Atos ist ein international führender Anbieter von digitalen Services.
▶ Rund 12 Milliarden Euro Umsatz (2016)
▶ Circa 100.000 Business Technologists in 72 Ländern
▶ Weltweiter IT-Partner der Olympischen Spiele
▶ Atos, Societas Europaea (SE) mit Hauptsitz in Bezons/Paris sowie in München
Auf einen Blick
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
6
Agenda
Data Center Fürth – Ausgangslage 2012
Data Center Erneuerung –das Projekt
Data Center Erneuerung – die Ergebnisse
▶ Data Center Fürth –technische Ausstattung 2012
▶ Data Center Fürth –Herausforderungen
▶ Die Planung
▶ Die Herausforderungen und Risiken
▶ Die Durchführung
▶ Die technische Ausstattung 2016, Effizienz und PUE
▶ Das Projekt aus finanzieller und zeitlicher Sicht
▶ Ende Gut = alles Gut, die neuen Herausforderungen
Data Center Fürth –Ausgangslage 2012
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
8
Data Center Fürth – Ausgangslage 2012Data Center Fürth – technische Ausstattung 2012
Data Center Fläche: 3.500 m ²Fläche technische Ausstattung: 1.500 m ²
Infrastruktur
5 separate Brandschutz BereicheCO2 Löschanlage mit Dopppelbodenflutungunterschiedliche SicherheitszonenEinbruchmeldeanlageVideoüberwachungSecurity Personal (24hx7x365)
Brandschutz und Sicherheit
Onsite Personal 7x24hx365Hands on Support
Services
Transformatoren9 Trafos mit einer Gesamtleistung von 9.820 kVA (n+1 redundant)Netzersatzanlagen3 Dieselgeneratoren (n+1 redundant)2 USV Anlagen (2N redundant)2 Feeds(A und B) am eigenen 20 kV Ring2 separate NetzeinspeisungenMaximale redundante Leistung ca. 1.550 kW
Leistungsparameter Elektrotechnik
Permanente NetzwerküberwachungRedundante WAN Leitungen zwischen den Data Center Standorten Fürth, Nürnberg und Erlangen
Kälte
Maximal mögliche Kälteleistung: 4.150 kW Data Center Kühlung: ca. 1.000 W/m ² (ohne Redundanz)
Netzwerk
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
▶ Auslastung der IT Load bei 50 % je Versorgungspfad (A + B = 100%)
▶ Anstieg der IT Load um 2,4 % innerhalb von nur zwei Monaten
▶ Gesamtstromkapazität (IT und NON IT) war zu mehr als 90% ausgelastet
▶ Aufrüstung der USV Kapazitäten wurde notwendig (war schon für 2011 geplant)
▶ Strategischer Data Center Hub sollte in Fürth/Nürnberg aufgebaut werden
▶ UNTERSUCHUNG der Infrastruktur (Strom/Klima/Gebäude) wurde notwendig und Beauftragt!
▶ Technische Basisinfrastruktur war veraltet (> 20 Jahre), ineffizient und nicht erweiterungsfähig, einzelne „Single Point of Failure“ wurden identifiziert:
– Redundante Stromeinspeisungen endeten in einem Versorgungsraum
– Redundante Dieselgeneratoren versorgten den 20 kV Ring über eine Anbindung
– Redundante Kälteerzeugung war nur in einem Raum untergebracht.
9
Data Center Fürth – Ausgangslage 2012Data Center Fürth – Herausforderungen
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
Corporate Presentation
Data Center Erneuerung –das Projekt
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
11
Data Center Erneuerung – Das ProjektDie Planung
▶ Die Vorplanung erfolgte zwischen Januar und Mai 2013
▶ Geprüft wurde, ob und wie sich ein solches Projekt realisieren lässt und welche (genauen) Kosten zu erwarten sind
Vorplanung (nach der Entscheidung zur Erneuerung im Dezember 2012)
▶ Zwischen August und Dezember 2013 erfolgte die Detailplanung durch die Ingenieur Büros (Architekt, Elektroinstallationen, Kälteversorgung und Löschanlage), deren Arbeit ein Erfolgsschlüssel des Projektes waren
Detailplanung
▶ Die Ausschreibung und die Gespräche mit allen Anbietern wurden zwischen Januar und April 2014 durchgeführt (HOAI)
▶ Erstellt wurden die Ausschreibungsunterlagen durch die Ingenieur Büros
▶ Bis Juni 2014 erfolgten die Beauftragungen der ausgewählten Partner
Ausschreibung (nach der Bestätigung der Planung im Januar 2014)
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
12
Data Center Erneuerung – Das ProjektDie Herausforderungen und Risiken
▶ Umbau und Umschaltungen OHNE Betriebsunterbrechungen!
▶ Platzprobleme (am Campus) für die diversen Firmen Container und begrenzte technische Räumlichkeiten innerhalb der Bestandsgebäude!
▶ Bis zu 100 externe Mitarbeiter sind gleichzeitig auf dem Campus und zum Teil im Hoch-sicherheitsbereich beschäftigt!
▶ Was finden wir ungeplant in einem Campus aus den 60iger Jahren?
Herausforderungen
▶ Keine ausreichende Redundanzen während der Umbauphase bei der Stromversorgung und Klimatechnik!
▶ Staubentwicklung, Vibrationen durch Baugeräte!
▶ Ungeplante Zeitverzögerungen oder Kostensteigerungen!
▶ Externe Mitarbeiter im Hochsicherheitsbereich
Risiken
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
Data Center Erneuerung – Das ProjektDie Durchführung
Bau Station 20
Inst. B–feed Station 20
03/’15
Renewal Station 19
12/14 01/’15
Installation Kälte
11/’14
▶ Bau des neuen Gebäudes – Station 20 (05-09/’14)▶ Neugestaltung Station 19 (01-03/’15)▶ Umbau Station 16 als zukünftigen Löschanlagen Raum (07-08/’15)
▶ Rückbau Decke▶ Installation der neuen Kälteverohrung innerhalb der IT Fläche▶ Installation der Umluftkühlgeräte und temporären Kältemaschinen▶ Inbetriebnahme der Umluftkühlgeräte mit temporären Kältemaschinen▶ Rückbau des alten Kältesystems ▶ Umbau der alten Kältestation und weitere Fläche zu zwei neuen
Kältestationen (A und B Feed)▶ Installation der neuen Kältetechnik ▶ Umschaltung der temporären Kälteversorgung zu neuer Kältetechnik
▶ Installation der elektrotechnischen Anlagen in Station 20 (08-12/’14)
▶ Umschaltung Station 19 nach Station 20 (01/’15)▶ Installation der elektrotechnischen Anlagen in Station 19
(04–05/’15)▶ Umschaltung Station 16 nach Station 19 (06-07/’15) ▶ Installation der neuen Löschanlage innerhalb Station 20 (09-10/’15)
▶ Neue Verrohrung für Löschanlage innerhalb der IT Fläche (09-10/’15)▶ Installation des Flaschenlagers (10/’15)▶ Inbetriebnahme der Löschanlage (12/’15)
Löschanlage
09/’14
Switch
06/’15 07/’1508/’14
Inst. A–feed Station 19 Switch
09/’15
Renewal Station 16
05/’14 12/’15
Kälte
Löschanlage
Konstruktion
Strom
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
14
Data Center Erneuerung – Das ProjektBilder
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
15
Data Center Erneuerung – Das ProjektBilder
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
Corporate Presentation
Data Center Erneuerung –die Ergebnisse
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
17
Data Center Erneuerung – Die ErgebnisseDie technische Ausstattung 2016, Effizienz und PUE
▶ IT Load bis 2,3 MW (2012 = 1,6 MW) ohne Erweiterung der USV und Klimatechnik möglich
▶ Endausbau bis auf 3,6 MW IT Load ist mit Erweiterungen in der Klimatechnik, der USV und Netzersatzanlage realisierbar
▶ Beseitigung der SPOFs in der Strom – und Klimaversorgung
▶ Stickstoff Löschanlage mit Raumflutung
Die technische Ausstattung 2016:
▶ Einsparung von 30 % der Energiekosten nach Inbetriebnahme der neuen Kältetechnik
▶ Reduzierung des PUE von 2.0 auf ca. 1.3 bis 1.4 im Jahresmittel, aktuell ca. 1.25
Effizienz:
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
18
Data Center Erneuerung – Die ErgebnisseDas Projekt aus finanzieller und zeitlicher Sicht
▶ das 2014 genehmigte Projektbudget wurde um 3 % überzogen, der Betrag war insgesamt 2,5% höher als die ursprüngliche Kostenschätzung von 2012
▶ die Mehrkosten entstanden im Wesentlichen durch zusätzlichen Aufwand für Redundanzen in der temporären Infrastruktur und Sicherheitsanforderungen
▶ die Planung musste während der Realisierungsphase in einigen Bereichen angepasst werden, vor allem aus baulichen Gegebenheiten
▶ im Zusammenhang mit dem Projekt und den notwendigen rechtlichen Genehmigungen wurden aktuelle gesetzliche Anforderungen umgesetzt (Wasserkonzept, Brandschutzkonzept, Nutzungsänderungen im Bestand)
finanzielle Betrachtung:
▶ das Projekt hat 20% (3 Monate) mehr Zeit als geplant benötigt
Zeitplanung:
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
▶ Wir haben ein Rechenzentrum im laufenden Betrieb und ohne Downtime modernisiert und zukunftssicher gemacht!
▶ Wir haben die Effizienz deutlich erhöht!
▶ Wir haben die Möglichkeiten der Brandbekämpfung den aktuellen Standards angepasst.
▶ Auf den IT Flächen werden nur noch Kaltgangeinhausungen installiert.
▶ Alle neuen Verkabelungen erfolgen ausschließlich über Kabeltrassen oberhalb der Racks.
▶ ABER: das System der Kälteerzeugung und Kälteverteilung ist deutlich komplexer geworden!
▶ UND: wir werden weiter optimieren, vor allem im Kältebereich!
19
Data Center Erneuerung – Das ProjektEnde Gut = alles Gut, die neuen Herausforderungen
Atos, the Atos logo, Atos Codex, Atos Consulting, Atos Worldgrid, Worldline, BlueKiwi, Bull, Canopy the Open Cloud Company, Unify, Yunano, Zero Email, Zero Email Certified and The Zero Email Company are registered trademarks of the Atos group. May 2016. © 2016 Atos. Confidential information owned by Atos, to be used by the recipient only. This document, or any part of it, may not be reproduced, copied, circulated and/or distributed nor quoted without prior written approval from Atos.
ThanksFor more information please contact:T + 49 211 399 23494M + 49 177 [email protected]
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
21
Interessante Zahlen
▶ 9 USV Systeme, 16 Tonnen
▶ 1152 USV Batterien, 26 Tonnen
▶ 65 Niederspannungsanlagen, jede 550 kg
▶ 10 Mittelspannungsfelder, jeder 450 kg
▶ 1100 Meter Rohrleitungen für Stromkabel
▶ 500 Meter Kabeltrassen
▶ 6000 Meter Stromkabel
▶ 8 Trafos, 8 Tonnen
▶ 4,8 MW Stromkapazität
▶ 16 Tonnen USV Batterien (1096 Stück)
▶ 12 Tonnen USV Systeme (9 Stück)
▶ 5 Trafos, 7,5 Tonnen
▶ 14 Tonnen Mittelspannungsschaltanlagen
▶ 6 Tonnen Elektroverkabelung
▶ 168 Tonnen an Material, Kältemaschinen, Rohrleitungen, Umluftschächte
▶ 2700 Meter Rohrleitungen
▶ 1600 Meter Stromleitungen zur Versorgung der Kältetechnik
▶ 4000 Meter Rohrleitungen
▶ 1300 Meter Leckage-Melder
▶ 80 m² Druckentlastungsöffnungen
▶ 4,2 MW Kälteerzeugung durch Kältemaschinen
▶ 1,9 MW Kälteerzeugung durch freie Kühlung
Strom Kälte
Ab
bau
In
sta
llatio
n
| 22-03-2017 | C. Pausch | © AtosGermany | IDM| Data Center Services & Consulting
Persönliche Einladung