Deutsches Forschungsnetz
N E U E S I M X - WiN 53. DFN-Betriebstagung * 26.10. - 27.10.2010 2010 Hans-Martin Adler DFN-Geschäftsstelle 10178 Berlin, Alexanderplatz 1 Tel: 030/88429939 e-mail:adler@dfn.de Seite 2
Themen Optische Plattform IP-Plattform /Außenanbindungen Doppelte Anbindung / Verfügbarkeit 100GE - Test Leistungssteigerung 2011 Seite 3
Optische Plattform 94 Glasfaserabschnitte ca. 10.250 km Einbindung EWE mit Fasern nach AWI und MUE beauftragt Faser SAA BON und ROS GRE Anfrage nach Faser GRE - FFO Seite 4
Faser KPN Faser GL Faser GC WINGAS X-WiN-Topologie (Glasfaserstruktur) Faser andere Wellenlänge AAC FZJ ENS EWE MUE AWI BIE DKR DES BRE DUI BOC DOR KAS BON SAA STB WUP BIR KEH GIE GSI KAI FZK PAD MAR FRA HEI STU KIE HAN WUE HAM HMB BRA GOE ILM ERL JEN GAR ROS PIK POT MAG LEI BAY ESF REG ZIB CHE TUB FFO ZEU HUB ADH DRE SLU Richtung Basel FHM Stand Oktober 2010 Seite 5
X-WiN-Topologie (Glasfasern und Wellenlängen) Faser KPN Faser GL Faser GC WINGAS Faser andere Wellenlänge AAC FZJ ENS MUE AWI EWE BIE DKR DES BRE DUI BOC DOR KAS BON SAA STB WUP BIR KEH GIE GSI KAI FZK Richtung Basel BAS PAD MAR FRA HEI STU KIE HAN WUE HAM HMB BRA GOE ILM ERL AUG JEN GAR ROS PIK POT MAG LEI BAY ESF REG GRE ZIB CHE TUB FFO ZEU HUB ADH DRE SLU FHM Stand Oktober 2010 Seite 6
Verbindungen auf der optischen Plattform Protokoll/ DFNInternet VPN Bandbreite DFN Faser Carrier Verbindung DFN Faser Carrier Verbindung 2,5 Gbit/s SDH 0 0 0 0 10 Gbit/s SDH 0 0 2 0 1 GE 4 10 30 0 10 GE 80 3 17 0 Summe 84 13 49 0 Gesamt 97 49 Seite 7
Optische Plattform: Ausfälle 2010 2010 Anzahl Dauer gesamt (h) maximale Ausfallzeit (h) Störungen 10 72 13 Wartungen 32 148 9 Seite 8
IP-Plattform: Oktober 2010 KIE ROS GRE BIE EWE BRE AWI HAM DES TUB HUB PIK PAD HAN BRA MAG POT ZIB ADH BOC MUE DUI FZJ KAS GOE T-Internet CRS- HAN CRS- FRA CRS- POT CRS- ERL BAY FFO ZEU T-Internet DRE CHE DOR WUP AAC BON BIR MAR GIE SAA FRA KAI GSI WUE HEI AUG FZK ERL REG FHM GAR STU ILM JEN LEI XR 2x10GE 10GE 1GE 53 CISCO7609 KR Seite 9
DFNInternet Dienst : 776 Anwender Stand: 25.10.2010 Kategorie Bandbreite (Mbit/s) Anzahl Anzahl hlcluster XI01 2 1 22 XI02 20/7 111 27 XI03 34/12 21 10 XI04 50/17 16 14 XI05 100/34 83 20 XI06 150/50 39 27 XI07 300/100 25 8 XI08 600/200 7 3 XI10 1000/350 9 10 XI11 2000/670 2 1 XI12 5000/1700 1 8 XI13 10000/3400 0 4 XI14 2x10.000/6700 1 1 Summe 316 155 XPI02-04 29 M1+M2 276 Seite 10
IPv6 vergebene Adressbereiche: 113 Anzahl Anwender: 77
IPv6 vergebene Adressbereiche: 113 Anzahl Anwender: 77!!Noch 226 Tage (10.06.2011) IPv4 Adressen!!
VPN VPN entweder auf der optischen Plattform oder der IP-Plattform 17 VPNs über 49 optische Verbindungen (Beispiele: DWD, DEISA, LHC, ZIB-RRZN, DESY, AWI, PTB, LOFAR, HEPPI) 9 VPNs über IP-Plattform (Beispiele: DLR, GRS, FZJ, GKSS, IPP, Uni Kassel- Uni F/M, FhI)
Außenanbindungen: DFNInternet-Dienst Global Upstream 3x10 GE 10 GE 10 GE 130 ISPs X-WiN Backup 2x10 GE Forschungsnetze Nordamerika Süd- und 60 Gbit/s Mittelamerika Japan, China T-Internet 2 x 10 GE 15 ISPs 10 GE 14 nationale private Peerings Europäische Forschungsnetze Seite 14
Statistik: Messpunkte X-WiN Anwender Anschlüsse DFN-Internet & VPN Global Upstream alle sonstigen Ziele im globalen Internet X-WiN Exportiertes Datenvolumen : Summe der gesendeten Daten über alle Anschlüsse europäische und nordamerikanische Wissenschaftsnetze Peerings mit ISPs T-InterConnect Peering mit T-Internet Sonstige ISP bilaterale Peerings Seite 15
Exportiertes Datenvolumen: Mai 2010: 9.403 TeraByte 10.000 exportiertes Datenvolumen X-WiN Kernnetz X-WiN-Anwender für die Jahre DFN->ISPs 2008-2010 DFN->T-Internet DFN->GÉANT DFN->Global l Upstream XVPN-Dienste 9.000 8000 8.000 7.000 yte T B 6.000 5.000 4.000 3.000 2.000 1.000 0 Sep 09 Okt 09 Nov 09 Dez 09 Jan 10 Feb 10 Mar 10 Apr 10 Mai 10 Jun 10 Jul 10 Aug 10 Sep 10 Monat (Vorjahresmonat links) Seite 16
Status doppelte Anbindung: 25.10.2010 Anzahl der Anwender von DFNInternet mit redundantem Anschluss, davon 284... Anwender am Kernnetzknoten 49... Redundanz durch Haupt- und Nebenleitung 176... Redundanz durch Weiternutzen von DFNBackup 1... Redundanz durch andere Anschlüsse an andere Netze 58 Anzahl Anwender im Cluster, die für ihre Redundanz selbst verantwortlich sind 117 Anzahl Anwender, die gegenwärtig keine Redundanz haben 99 Gesamtzahl aller Anwender von DFNInternet (ohne Mitnutzer) 500 Seite 17
DFNInternet: Verfügbarkeit Monate 100,000% 99,990% 99,980% 99,970% 970% 99,960% 99,950% 99,940% 99,930% 99,920% 920% 99,910% 99,900% 07/09 08/09 09/09 10/09 11/09 12/09 01/10 02/10 03/10 04/10 05/10 06/10 07/10 08/10 09/10 einfach mehrfach Slide 18
DFNInternet: Verfügbarkeit Quartale 100,000% 99,990% 99,980% 99,970% 970% 99,960% 99,950% 99,940% 99,930% 99,920% 920% 99,910% 99,900% Q1/09 Q2/09 Q3/09 Q4/09 Q1/10 Q2/10 Q3/10 einfach mehrfach Slide 19
Doppelte Anbindung und Verfügbarkeit Ereignisse im X-WiN mit Minderung der Verfügbarkeit: o Stromausfall am Kernnetzknoten Ursachen: Wartung, Stromausfall in der Region, Brand der USV USV-Strom für mindestens 2 Stunden! USV-fällt aus, Diesel springt nicht an ->FE-Endgeräte haben nur eine Stromversorgung o Standortumzüge oder Umbau 2010: ILM, MUE, ROS, TUB 2011: PIK, BON (?) o Wartungen IOS-Upgrades der X-WiN-Router (XR) Seite 20
Doppelte Anbindung und Verfügbarkeit Ereignisse im X-WiN mit Minderung der Verfügbarkeit: o Stromausfall am Kernnetzknoten Ursachen: Wartung, Stromausfall in der Region, Brand der USV USV-Strom für mindestens 2 Stunden! USV-fällt aus, Diesel springt nicht an ->FE-Endgeräte haben nur eine Stromversorgung o Standortumzüge oder Umbau 2010: ILM, MUE, ROS, TUB 2011: PIK, BON (?) o Wartungen IOS-Upgrades der X-WiN-Router (XR) immer noch ca. 40 Nebenleitungen nicht in Betrieb! Seite 21
Erweiterung der Anschluss-Überwachung Standard d mit ICMP (Pings) Überwachung der BGP-Session durch Auswerten einer SNMP-Variablen sofern zwischen XR und KR eine BGP-Session etabliert wurde (in der Regel bei Anschlüssen mit Nebenleitung) Workflow ist gleich -> 1. Anwender dann Carrier Seite 22
DFN Motivation für 100G Tests Mittelfristig: Ausschreibung DWDM-Geräte Langfristig: Ausschreibung Faserinfrastruktur Fragen Kommt eine DWDM-Ausschreibung für 100G-Technik zu früh? Ist 100G-Technik verfügbar? Ist die derzeitige Faserinfrastruktur für 100G-Technik geeignet? Seite 23
Konkrete Fragestellungen Faserinfrastruktur Sind die Abstände der Verstärker bei 10G und 100G Technik gleich? Deutliche Unterschiede mit Kostenauswirkungen? Faserparameter Gibt es besonders sensitive Parameter die es beim Einsatz von 100G Technik zu beachten gilt? (daher auch Praxistest und kein Labortest mit Kabelrollen) Handhabung und Nutzbarkeit Zusammenspiel optische Technik und Router Seite 24
Kooperationspartner Industrie Glasfaser: GasLINE DWDM: Huawei Router: Cisco Wissenschaft Vertreter aus HPC: FZ Jülich Vertreter aus LHC: KIT Koordinierung durch DFN-Verein Seite 25
Faserverlauf FZK KIT Düsseldorf Kirchtroisdorf 17 km 93 km Merkmale Köln FZ Jülich Bonn 250 km Luftlinie 447 km Faserstrecke Faser gemäß ITU-T G.652 7 Faserabschnitte 5 optische Verstärker keine Regeneration Porz 88 km Koblenz Dernbach 60 km Naurod Wiesbaden Frankfurt Mainz 96 km 64 km Darmstadt Gernsheim Mannheim Heidelberg Reilingen 29 km KIT Karlsruhe Seite 26
Messaufbau bei den Anwendern K1 J1 K2 J2 K3 Cisco Switch 4900M Cisco Switch 4900M J3 K4 J4 K5 J5 K6 K7 K8 Cisco Switch 4900M Cisco Router CRS-3 Cisco Router CRS-3 Cisco Switch 4900M J6 J7 J8 K9 x 127 J9 ms-kit1 ms-fzj1 hades-kit2 hades-fzj2 KIT ti-kit1 447km FZJ end systems, s, 10GBase SR administration: KIT, FZJ end systems, 10GBase LR administration: DFN Seite 27
Messergebnisse DWDM-Technik wenige Minuten nach Einschalten betriebsbereit b b it 30 Stunden initialer Dauertest ohne Fehler Router-Technik Konfiguration analog zu IP-Technik im X-WiN mehrere Dauertests bei vollem Durchsatz keine erkennbaren Einbrüche Seite 28
Projektergebnisse DFN@100G zeigt, dass die im X-WiN vorhandenen Glasfasern auch für die Übertragung mit 100 Gbit/s geeignet sind bereits heute 100G-Technologie sehr stabil ist 100G-Technologie weitgehend problemlos im X-WiN betrieben werden kann DFN@100G zeigt, dass 100G-Technologie in der kommenden DWDM-Ausschreibung berücksichtigt werden kann Seite 29
Leistungssteigerung 2011 Seite 30
Fragen...???? Seite 31