Deutsches Forschungsnetz

N E U E S I M X - WiN

55 DFN-Betriebstagung * 18 10 - 19 10 201155. DFN Betriebstagung 18.10. 19.10.2011Hans-Martin Adler

DFN-Geschäftsstelle10178 Berlin, Alexanderplatz 1

Tel: 030/88429939 e-mail:adler@dfn.de

Seite 2

Themen

• Optische Plattform• Optische Plattform• IP-Plattform /Außenanbindungen• Doppelte Anbindung / Verfügbarkeit• Doppelte Anbindung / Verfügbarkeit• IPv6

VPNs• VPNs• Leistungssteigerung 2011

U ü K t t d t• Umzüge Kernnetzstandorte• Neues TTS

Seite 3

Optische Plattform• 94 Glasfaserabschnitte mit ca. 10.250 km

• Upgrade ZEU - XWiN auf 10GE nach ADH

• Faser ROS – GRE und SAA – BON beauftragt

• Nichtredundanz zu DES beseitigt

• Angebot Faser GRE – FFO - ZEU

• Umzüge ROS und TUB

Seite 4

X-WiN-Topologie(Glasfasern und Wellenlängen)

HAMDES

DKR

KIE

ROSFaser KPNFaser GLFaser GC

GREAWI

FFOTUBBRE

HANPEPENS ZEU

SLU

Faser GC

Faser andere

WINGAS

Wellenlänge

EWEHMB

POT

DUI

BRA MAGBIE

ZIBHUB

ADHPADGOE

DORBOC

WellenlängeMUE

FZJ

AAC BIR CHEILM

LEI

JEN

KAS

GIEMAR

DOR

WUP DRE

BAYGSI

FRA ILM

ESFKAI

BON

WUE

ERLFZK

HEI

STU

REG

KEHSTB

KAISAA

GAR

Seite 5

STU

Richtung BaselBAS

AUGFHM

Stand Oktober 2011

Optische Plattform: Faserstruktur

HAMDES

DKR

KIE

ROSDark fibre

AWIGRE

FFOTUBBRE

HANENS ZEU

SLUPIK

EWE HMB

POT

DUI

BRA MAGBIE

ZIBHUB

ADHMUE

PADGOE

DOR

FZJ

AAC BIR

DRE

CHEILM

LEI

JEN

KAS

GIEMAR

DOR

WUP

ERLBAYGSI

FRA ILM

ESFKAI

BONWUE

GAR

FZKHEI

STU

REG

KEHSTB

KAISAA

STU

Richtung Basel

BAS

FHM

Date: AUG 2011

Verbindungen auf der optischen Plattform

Protokoll/ DFNInternet VPN Bandbreite DFN Faser Carrier

Verbindung DFN Faser Carrier

Verbindung

2,5 Gbit/s SDH 0 0 0 0

10 Gbit/s SDH 0 0 0 0

1 GE 5 5 33 0

10 GE 81 4 22 0

Summe 86 9 0

Gesamt 95 55

Seite 7

Optische Plattform: Ausfälle 2011

2011 A hl Dauer gesamt maximale A f ll it2011 Anzahl Dauer gesamt

(h) Ausfallzeit(h)

Störungen 4 65 26

Wartungen 48 209 11

Seite 8

IP-Plattform: Oktober 2011

BIE

BREDES TUB HUB

KIE ROS GRE

EWE HAMAWI PEPBIE

MUE

POTHAN ZIB ADHBRA

FFOMAG

AWI

ZEU

PAD

PEP

MUE

DUI

GOEKAS

BAY DRE

POTCRS-

HANCRS-

T-Internet

ZEU

ERL LEI

CHE

AAC

FRACRS-

ERLCRS- T-InternetFZJ

BOC

BIR

MAR

GIE

FRAREG

AUGILM

JEN

LEI

2x10GEWUE

BONDOR

WUP FHM

FZK

BIRGSI

HEISTU

GAR

ILM

SAA10GE1GEKAI

Seite 9

XR 53 CISCO7609

KR

Erweiterungen IP-Plattform

• Ständige Messungen des Datenverkehrs im X-WiN durch das WiN Labor (Accounting)WiN durch das WiN-Labor (Accounting)

• hohes Verkehrsaufkommen zwischen GAR und FRA und AAC und FRAFRA und AAC und FRA

• 3 neue Wellenlängen GAR-FRA, GAR-ERL, AAC-HANAAC-HAN

DFNInternet Dienst : 766 Anwender Stand: 17.10.2011

K t i B db it (Mbit/ ) A hl A hl Cl tKategorie Bandbreite (Mbit/s) Anzahl Anzahl ClusterXI01 2 1 22XI02 20/20 112 29XI02 20/20 112 29XI03 34/34 26 10XI04 50/50 17 14XI05 100/100 77 20XI06 150/150 39 27XI07 300/300 27 8XI07 300/300 27 8XI08 600/600 6 3XI10 1000/1000 11 9XI11 2000/2000 2 8XI12 5000/5000 1 4XI13 10000/1000 0 0XI13 10000/1000 0 0XI14 2x10.000/2x10.000 1 1

Summe 320 155

Seite 11

XPI02-04 30M1+M2 261

Statistik: MesspunkteX-WiN AnwenderAnschlüsse DFN-Internet & VPN

europäische und nordamerikanische

Wissenschaftsnetze

Global Upstreamalle sonstigen

X-WiNalle sonstigen Ziele im globalen Internet

„Exportiertes Datenvolumen“: Summe der gesendeten Daten

über alle AnschlüssePeerings mit ISPs

über alle Anschlüsse

Sonstige ISPbilaterale PeeringsPeering mit T-Internet

T-InterConnect

Seite 12

Exportiertes Datenvolumen: Mai 2011: 13.142 TeraByte

exportiertes Datenvolumen X-WiN Kernnetzfür die Jahre 2009-2011

A d DFNI t t A d IP VPN

12.000

14.000Anwender DFNInternet Anwender IP-VPN

DFN->ISPs DFN->T-Internet

DFN->GÉANT DFN->Global Upstream

10.000

e

6.000

8.000

T B

yte

2 000

4.000

0

2.000

ep 0

9ep

10

kt 0

9kt

10

ov 0

9ov

10

ez 0

9ez

10

an 1

0an

11

eb 1

0eb

11

ar 1

0ar

11

pr 1

0pr

11

ai 1

0ai

11

un 1

0un

11

ul 1

0un

11

ug 1

0ug

11

ep 1

0ep

11

Seite 13

Se

Se O O No

No

De

De Ja Ja Fe Fe Ma

Ma

Ap

Ap M M Ju Ju J J u Au

Au Se

Se

Monat (Vorjahresmonat links)

Störungsminuten DFNInternet12.000

10.000

8.000

6.000

4.000

2.000

Seite 14

0

01/09

02/09

03/09

04/09

05/09

06/09

07/09

08/09

09/09

10/09

11/09

12/09

01/10

02/10

03/10

04/10

05/10

06/10

07/10

08/10

09/10

10/10

11/10

12/10

01/11

02/11

03/11

04/11

05/11

06/11

07/11

08/11

09/11

einfach doppelt

Verfügbarkeit DFNInternet

1h 0m (99,989%)100,00

4h 0m (99,954%)99,95

8h 0m (99,909%)8h 46m (99,900%)

12h 0m (99,863%)

99,90

%]

15h 0m (99,829%)

18h 0m (99 795%)99,80

99,85

Verfü

gbar

keit

[%

18h 0m (99,795%)

21h 0m (99,760%)99,75

V

24h 0m (99,726%)

27h 0m (99,692%)99,70

Jan 2009 – Dez 2009

Jan 2010 – Dez 2010

Okt 2010 – Sep 2011

Seite 15

30h 0m (99,658%)99,65

0 10 20 30 40 50 60 70 80 90 100relative Anzahl Einrichtungen [%]

Außenanbindungen: DFNInternet-Dienst

Global Upstream

10 GE 10 GE

4x10 GE

149 ISPs

X WiN2 x 10 GET-Internet

14 nationale

X-WiN10 GE

19 ISPs

2x10 GE

Forschungsnetze

14 nationale private PeeringsBackup

Europäische Forschungsnetze

60 Gbit/sNordamerika

Süd- und Mittelamerika

Seite 16

Mittelamerika

Japan, China

IPv6

• vergebene Adressbereiche: 125vergebene Adressbereiche: 125

• Anzahl Anwender: 83

Welt-IPv6-Tag: 08.06.2011

• Ziel: 24 Stunden Test, ob alle Dienste und Geräte auch mit IPv6 noch funktionieren

• Teilnehmer: Über 200 Content-Provider (u. a. Google, Yahoo, Akamai, Facebook)(u a Goog e, a oo, a a , aceboo )

Seite 18

Welt-IPv6-Tag: 08.06.2011

• Ergebnisse aus DFN-Sicht:

– Internet ist nicht zusammengebrochen

– kein Run auf IPv6-Adressen im Vorfeld

– präventiv die Anzahl der 6to4 Gateways von 1 auf 4 höherhöht

Seite 19

Welt-IPv6-Tag: 08.06.2011

• Internationale VC (Megaconference)

3 MCUs (Australien, Slowenien, USA) 14 Länder mit 60 Endpoints

– wird als Erfolg dargestellte

– es gab aber im Vorfeld viele Tücken im Detail und hoher VorbereitungsaufwandVorbereitungsaufwand

Seite 20

IPv6 – im IP-Forum morgen

•• 9:45 - 10:30 Uhr•• IPv6 im LAN der TU Kaiserslautern•• Thomas Esselen RegionalesThomas Esselen, Regionales

Hochschulrechenzentrum Kaiserslautern (RHRK)

Seite 21

VPN

• VPN entweder auf der optischen Plattform oder der IP-Plattform

16 VPNs über 55 optische Verbindungen• 16 VPNs über 55 optische Verbindungen(Beispiele: DWD, DEISA, LHC, ZIB-RRZN, DESY, AWI, PTB, LOFAR, HEPPI)

• 11 VPNs über IP-Plattform(Beispiele: DLR GRS FZJ GKSS IPP Uni Kassel Uni F/M FhI PTB(Beispiele: DLR, GRS, FZJ, GKSS, IPP, Uni Kassel- Uni F/M, FhI, PTB, BAUA)

VPN-HEPPI: Backbone

• HEEPI (High Energy Partical Physicists Infrastructure))

5 d di i t 10GE W ll lä l Ri• 5 dedizierte 10GE-Wellenlängen als Ring geschaltet

• AAC DES DES FZK FZK GSI GSI FRA• AAC-DES, DES-FZK, FZK-GSI, GSI-FRA, FRA-AAC

Seite 23

VPN-HEPPI: Backbone

BIE

BREDES TUB HUB

KIE ROS GRE

EWE HAMAWI PEPBIE

MUE

POTHAN ZIB ADHBRA

FFOMAG

AWI

ZEU

PAD

PEP

MUE

DUI

GOEKAS

BAY DRE

POTCRS-

HANCRS-

T-Internet

ZEU

ERL LEI

CHE

AAC

FRACRS-

ERLCRS- T-InternetFZJ

BOC

BIR

MAR

GIE

FRAREG

AUGILM

JEN

LEI

2x10GEWUE

BONDOR

WUP FHM

FZK

BIRGSI

HEISTU

GAR

ILM

SAA10GE1GEKAI

Seite 24

XR 53 CISCO7609

KR

Leistungssteigerung 2011

• Ziel: B db it H tl it B db it N b l it– Bandbreite Hauptleitung = Bandbreite Nebenleitung

• sehr gut angenommen, keine Downgrades

• Umstellung durch die Carrier erfolgte zügig

• Realisierung im Sommer abgeschlossen

Seite 25

Umzüge Kernnetzstandorte

• PIK -> PEP: 24.02.11PIK PEP: 24.02.11

• ROS in neues RZ: 08.06.11

• TUB in neuen RZ-Raum: ab 06.07.11

Umzüge Kernetzstandorte

• Erfahrungen:

• Parallelaufbau der DWDM-Technik nicht möglichg• Parallelaufbau der Zugangsleitungstechnik schwierig

(Managementproblem)(Managementproblem)• Parallelaufbau des X-WiN-Routers sichert

InternetkonnektivitätInternetkonnektivität• doppelte Anbindung verhindert Ausfall beim Umzug• optische Protection verhindert Ausfall der VPN-

Verbindungen

Umzug ROS: neues RZ

f• schon frühzeitig in die Bauplanung einbezogen

• eigener Raum im neuen RZ-Gebäude mit i Eieigenem Eingang

• dreifach Anbindung von ROS erleichterte den UmzugUmzug

Umzug ROS: neues Gebäude

Seite 29

Umzug TUB: neuer Raum

• 7 Fasern enden in TUB

• neue Datenschränke 60x80 wegen K lt kli ti iKaltgangklimatisierung

• parallele Bereitstellung der DWDM-Schränke nicht möglich Umzug der Schränke sehrnicht möglich - Umzug der Schränke sehr zeitaufwendig

Umzug TUB

• Vorschlag für Umzug der Kernnetzstrecken

– Abbau der DWDM-Technik in ADH,HUB,ZIBAbbau der DWDM Technik in ADH,HUB,ZIB– Aufbau der Technik in TUB mit Verkabelung wie

t dinotwendig– Umschalten der Fasern Zug um Zug mit Umzug g g g

nur der notwendigen DWDM-KomponentenDauer pro Faser 30 45 Minuten– Dauer pro Faser 30 - 45 Minuten

Umzug TUB

Umzug TUB

Umzug TUB

Neues Trouble Ticket System

• Umstellung am 28.03.2011

• Neues Portal

• Link blieb erhalten: https://tts-xwin dfn deLink blieb erhalten: https://tts xwin.dfn.de• User ID: neu: x-win@dfn.de• Login: neu:

Seite 35

Neues TTS: seit 28.03.2011

Seite 36

Seite 37

Open incitends (ICMs)

Seite 38

ICM 1998668: 10.10.11/ 10:39 -19:19 Uhr

Seite 39

Wartung: ICM 1994327

Seite 40

Wartung: ICM 1994327

Seite 41

Wartungsankündigungen

Seite 42

Seite 43

Fragen ...?

??

?

? ??

Seite 44

Status doppelte Anbindung: 17.10.2011

Anzahl der Anwender von DFNInternet mit redundantem Anschluss, davon 296

... Anwender am Kernnetzknoten 49

... Redundanz durch Haupt- und Nebenleitung 189

... Redundanz durch Weiternutzen von DFNBackup 1

... Redundanz durch andere Anschlüsse an andere Netze 57 Anzahl Anwender im Cluster, die für ihre Redundanz selbst verantwortlich sind 117

Anzahl Anwender die gegenwärtig keine Redundanz haben 92 Anzahl Anwender, die gegenwärtig keine Redundanz haben 92

Gesamtzahl aller Anwender von DFNInternet (ohne Mitnutzer) 505

Seite 45