Abschlussprojekt. aus. Routing SS 06. BGP und IS-IS

Transkript

1 Abschlussprojekt aus Routing SS 06 BGP und IS-IS Spitz Brandl Gerstbauer tm tm tm041015

2 Inhaltsverzeichnis 1) Aufbau... 3 a) Verkabeln laut Angabe... 3 b) Überprüfung der Verkabelung mit DP ) Netzdesign... 5 a) Ihnen steht der IP Adressbereich /29 zur Verfügung... 5 b) öffentliche Serverfarm in Graz restliches Netz privat... 5 c) Konfiguration der Loopbackinterfaces... 6 d) Konfiguration von OSPF als internes Routing-Protokoll (Salzburg IS-IS)... 6 e) Der ore ist aus Ausfallsicherheit vollvermascht f) Wien soll als DHP Server für das gesamte Netz fungieren g) Verwenden Sie NAT um die privaten Adressen in offizielle umzusetzen h) Aktivieren Sie EBGP zwischen den AS i) Aktivieren Sie IBGP zwischen Wien, Graz und Salzburg ) BGP Routensteuerung a) Traffic zum AS 1 soll ROM Leitung T3 verwenden b) Ausgehende Daten sollen sonst immer die Strecke Wien Paris verwenden d) Unser AS 2711 darf keine Transitarea werden ) Tests a) Alle Netze müssen erreichbar sein b) Überprüfen Sie die Routingtabellen bezüglich der richtigen Next Hops c) Deaktivierung von Leitungen und Überprüfung der Alternativen... 18

3 1) Aufbau a) Verkabeln laut Angabe b) Überprüfung der Verkabelung mit DP Frame Relay Switch fr-switch_i(config)#frame-relay switching fr-switch_i(config)#int s0/0 fr-switch_i(config-if)#enc frame-relay fr-switch_i(config-if)#clockrate fr-switch_i(config-if)#frame-relay lmi-type ansi fr-switch_i(config-if)#frame-relay intf-type dce fr-switch_i(config-if)#frame-relay route 100 interface Serial0/1 150 fr-switch_i(config-if)#frame-relay route 200 interface Serial0/2 250

4 fr-switch_i(config-if)#exit fr-switch_i(config)#int s0/1 fr-switch_i(config-if)#enc frame-relay fr-switch_i(config-if)#clockrate fr-switch_i(config-if)#frame-relay lmi-type ansi fr-switch_i(config-if)#frame-relay intf-type dce fr-switch_i(config-if)#frame-relay route 150 interface Serial0/0 100 fr-switch_i(config-if)#frame-relay route 300 interface Serial0/2 350 fr-switch_i(config-if)#exit fr-switch_i(config)#int s0/2 fr-switch_i(config-if)#enc frame-relay fr-switch_i(config-if)#clockrate fr-switch_i(config-if)#frame-relay lmi-type ansi fr-switch_i(config-if)#frame-relay intf-type dce fr-switch_i(config-if)#frame-relay route 250 interface Serial0/0 200 fr-switch_i(config-if)#frame-relay route 350 interface Serial0/1 300 fr-switch_i(config-if)#exit fr-switch_i#sh frame-relay route Input Intf Input Dlci Output Intf Output Dlci Status Serial0/0 100 Serial0/1 150 active Serial0/0 200 Serial0/2 250 active Serial0/1 150 Serial0/0 100 active Serial0/1 300 Serial0/2 350 active Serial0/2 250 Serial0/0 200 active Serial0/2 350 Serial0/1 300 active Salzburg Zentrale SZ(config)#int s0/1 SZ(config-if)#ip address SZ(config-if)#no shut SZ(config)#int s0/2 SZ(config-if)#ip address SZ(config-if)#no shut SZ(config)#int s0/3 SZ(config-if)#ip address SZ(config-if)#no shut SZ(config)#int s0/0 SZ(config-if)#encapsulation frame-relay ietf SZ(config-if)#no shut SZ(config-if)#exit SZ(config)#int s0/0.1 point-to-point SZ(config-subif)#ip address SZ(config-subif)#frame-relay interface-dlci 250 SZ(config-fr-dlci)#exit SZ(config-subif)#exit SZ(config)#int s0/0.2 point-to-point SZ(config-subif)#ip address SZ(config-subif)#frame-relay interface-dlci 350

5 SZ(config-fr-dlci)#exit SZ(config-subif)#exit SZ(config)#exit Analog Wien, Linz und Graz 2) Netzdesign a) Ihnen steht der IP Adressbereich /29 zur Verfügung Es wurde angenommen, dass lediglich die Serverfarm in Graz öffentlich zugänglich sein muss und somit der Adressbereich / 29 für die Grazer Server verwendet wird. Die restlichen Adressen der Netze sind private Adressen. siehe 1.a) bzw. 2.b) b) öffentliche Serverfarm in Graz restliches Netz privat Wie bereits in 2.a) beschrieben wurde für die Serverfarm der gegebene Adressbereich / 29 verwendet. Weiters wurde auf den Standorten folgendes Adressschema angewandt:

6 siehe 1.a) c) Konfiguration der Loopbackinterfaces Beispiel in Zentrale Graz: G(config)#int loopback0 G(config-if)#ip address G(config-if)#no shut G(config-if)#exit Analog auf allen anderen verwendeten Routern im Netz. Vgl 1.a) d) Konfiguration von OSPF als internes Routing-Protokoll (Salzburg IS-IS) Die Zentralen in Graz, Wien und Salzburg bilden die Backbone Area (Area 0), sprich den ore unseres Netzes. Weiters bilden die internen Netze von Graz (Area 1),

7 Salzburg (Area 2) und Wien & Linz (Area 3) eigene Areas, wobei Area 3 als Stub Area fungiert. Diese 4 Areas bilden zusammen das Autonome System Die restlichen Autonomen Systeme wurden später konfiguriert. Graz G(config)#router ospf 1 G(config-router)#network area 0 G(config-router)#network area 0 G(config-router)#network area 0 G(config-router)#network area 0 G(config-router)#network area 1 G(config-router)#network area 1 G#show ip route O IA O IA O IA O O IA O O IA /30 is subnetted, 1 subnets is directly connected, Serial0/ /32 is subnetted, 1 subnets [110/65] via , 00:10:37, Serial0/ /24 is directly connected, Loopback /24 is subnetted, 5 subnets [110/845] via , 00:10:37, Serial0/ [110/1626] via , 00:10:37, Serial0/ is directly connected, Serial0/ is directly connected, Serial0/ [110/845] via , 00:10:38, Serial0/0.1 [110/845] via , 00:10:38, Serial0/ /32 is subnetted, 1 subnets [110/846] via , 00:10:39, Serial0/ /29 is subnetted, 1 subnets is directly connected, FastEthernet0/ /24 is subnetted, 3 subnets is directly connected, Serial0/ [110/65] via , 00:10:39, Serial0/0.1 [110/65] via , 00:10:39, Serial0/ is directly connected, FastEthernet0/ /32 is subnetted, 1 subnets [110/1627] via , 00:10:39, Serial0/0.1 Wien W(config)#router ospf 1 W(config-router)#network area 3 W(config-router)#network area 0 W(config-router)#network area 0 W(config-router)#network area 0 W(config-router)#network area 3 W(config-router)#exit W#show ip route /30 is subnetted, 1 subnets

8 O IA O O O O IA O O is directly connected, Serial0/ /24 is directly connected, Loopback /32 is subnetted, 1 subnets [110/66] via , 00:13:35, FastEthernet0/ /24 is subnetted, 5 subnets is directly connected, Serial0/ [110/1562] via , 00:17:01, Serial0/ is directly connected, Serial0/ [110/129] via , 00:13:36, FastEthernet0/ is directly connected, Serial0/ /32 is subnetted, 1 subnets [110/782] via , 00:17:02, Serial0/ /29 is subnetted, 1 subnets [110/66] via , 00:13:37, FastEthernet0/ /24 is subnetted, 3 subnets [110/65] via , 00:13:37, FastEthernet0/ is directly connected, FastEthernet0/ is directly connected, FastEthernet0/ /32 is subnetted, 1 subnets [110/1563] via , 00:17:03, Serial0/1 W#sh ip ospf database OSPF Router with ID ( ) (Process ID 1) Router Link States (Area 0) Link ID ADV Router Age Seq# hecksum Link count x xF x xFD x xDF50 7 Net Link States (Area 0) Link ID ADV Router Age Seq# hecksum x xB371 Summary Net Link States (Area 0) Link ID ADV Router Age Seq# hecksum x x x xB x x83E x x6B0E x x2FD x x x x3427 Router Link States (Area 3) Link ID ADV Router Age Seq# hecksum Link count x xFD x x x x6B02 5 Summary Net Link States (Area 3) Link ID ADV Router Age Seq# hecksum x xB19D x x26E x x97B x xB268

9 x xA x x2D5E x x619A x x66EF Summary ASB Link States (Area 3) Link ID ADV Router Age Seq# hecksum x xD07 W#sh ip ospf neighbor Neighbor ID Pri State Dead Time Address Interface FULL/ - 00:00: Serial0/ FULL/ - 00:00: Serial0/ FULL/BDR 00:00: FastEthernet0/ FULL/ - 00:00: Serial0/1 Einrichten der Totally Stub Area W(config-router)#area 3 stub no-summary W#show ip route /30 is subnetted, 1 subnets is directly connected, Serial0/ /24 is directly connected, Loopback /32 is subnetted, 1 subnets O IA [110/65] via , 00:00:31, Serial0/ /32 is subnetted, 1 subnets B [20/0] via , 01:16:55 O E /24 [110/20] via , 00:00:32, FastEthernet0/ /24 is subnetted, 8 subnets O [110/1563] via , 00:00:32, Serial0/ is directly connected, Serial0/1 O [110/1562] via , 00:00:33, Serial0/1 O E [110/21] via , 00:00:33, FastEthernet0/1 O E [110/21] via , 00:00:33, FastEthernet0/ is directly connected, Serial0/0.1 O [110/65] via , 00:05:48, FastEthernet0/ is directly connected, Serial0/ /32 is subnetted, 1 subnets O [110/782] via , 00:00:33, Serial0/1 O E /24 [110/20] via , 00:00:33, FastEthernet0/ /29 is subnetted, 1 subnets O IA [110/65] via , 00:00:33, Serial0/ /24 is subnetted, 3 subnets O [110/782] via , 00:05:48, FastEthernet0/ is directly connected, FastEthernet0/ is directly connected, FastEthernet0/0 O E /24 [110/21] via , 00:00:34, FastEthernet0/ /32 is subnetted, 1 subnets O [110/1563] via , 00:00:34, Serial0/ /29 is subnetted, 1 subnets Salzburg

10 SZ(config)#router ospf 1 SZ(config-router)#network area 0 SZ(config-router)#network area 0 SZ(config-router)#network area 0 SZ(config-router)#network area 0 Intern IS-IS Aktivierung Direkt am Router: SZ(config)#router isis SZ(config-router)#net SZ(config-router)#^Z SZ#conf t Anschließend an den einzelnen Interfaces aktivieren: SZ(config)#int s0/1 SZ(config-if)#ip router isis SZ(config-if)#exit SZ(config)#int s0/2 SZ(config-if)#ip router isis SZ(config-if)#exit In den Filialen von Salzburg wurden folgende ISIS Konfigurationen durchgeführt: SF1(config)#router isis SF1(config-router)#net SF1(config-router)#is-type level-1 SF1(config-router)#exit SF1(config)#int s0/0 SF1(config-if)#ip router isis SF1(config-if)#exit SF2(config)#router isis SF2(config-router)#net SF2(config-router)#is-type level-1 SF2(config-router)#exit SF2(config)#int s0/0 SF2(config-if)#ip router isis SF2(config-if)#exit Da wir nach einschlägiger Recherche nicht im Stande waren das Salzburg-interne IS-IS Netz in das bestehende OSPF Netz zu redistribuieren, haben wir uns mit Hilfe von statischen Routen in das Salzburg-Netz zutritt verschafft. Laut ISO liegt das Problem darin, dass es nicht möglich ist Router mit unterschiedlichen Leveln (sprich Level 2 und Level 1 Router) die direkt angeschlossen sind und gleichzeitig direkt am OSPF-Netz angeschlossen sind, gemeinsam zu redistrubieren. Es hätte als Abhilfe noch ein Level 2 Router zwischen der Zentrale in Salzburg und dem OSPF-Backbone dazwischengeschaltet werden müssen.

11 Theoretische Redistribuierung: SZ(config)#router ospf 1 SZ(config-router)#redistribute isis level-1-2 subnets e) Der ore ist aus Ausfallsicherheit vollvermascht Durch jeweils eine zusätzliche Verbindung pro Verbindung zu einem Standort wurde die Backbone-Area (Area 0) zwischen Graz-Wien, Wien-Salzburg und Salzburg-Graz die Ausfallsicherheit sichergestellt. Als Adressen wurden hierbei folgenden privaten IP-Adressen verwendet: Graz-Wien / 24 Salzburng-Graz / 24 Wien-Salzburg / 24 f) Wien soll als DHP Server für das gesamte Netz fungieren W(config)#ip dhcp pool sheva W(dhcp-config)#network Konfigurtion der Helper-Adresse auf lient: LZ(config-if)#ip helper LZ(config-if)#exit g) Verwenden Sie NAT um die privaten Adressen in offizielle umzusetzen G(config)#ip nat pool Internet netmask G(config)#int s0/0 G(config-if)#ip nat inside G(config-if)#exit G(config)#int s0/2 G(config-if)#ip nat inside G(config-if)#exit G(config)#int fa0/1 G(config-if)#ip nat outside G(config-if)#exit G(config)#exit Testen: G(config)#ip nat inside source list 1 pool Internet poolstart poolend G(config)#access-list 1 permit any Debugging:

12 *Mar 1 04:06:59.974: NAT: s= > , d= [86] *Mar 1 04:06:59.978: NAT*: s= , d= > [60809] *Mar 1 04:07:00.034: NAT*: s= > , d= [87] *Mar 1 04:07:00.034: NAT*: s= , d= > [60814] *Mar 1 04:07:00.090: NAT*: s= > , d= [88] *Mar 1 04:07:00.094: NAT*: s= , d= > [60815] *Mar 1 04:07:00.150: NAT*: s= > , d= [89] *Mar 1 04:07:00.150: NAT*: s= , d= > [60816] *Mar 1 04:07:00.206: NAT*: s= > , d= [90] *Mar 1 04:07:00.210: NAT*: s= , d= > [60817] *Mar 1 04:07:05.218: NAT: s= > , d= [3968] *Mar 1 04:07:15.218: NAT: s= > , d= [3972] *Mar 1 04:07:25.218: NAT: s= > , d= [3976] Graz h) Aktivieren Sie EBGP zwischen den AS G(config)#router bgp 2711 G(config-router)#neighbor remote-as 2 G(config-router)#network mask G(config-router)#exit G(config)#exit Wien W(config)#router bgp 2711 W(config-router)#neighbor remote-as 3 W(config-router)#network mask W(config-router)#exit W(config)#exit New York NY(config)#router bgp 1 NY(config-router)#neighbor remote-as 2 NY(config-router)#neighbor remote-as 3 NY(config-router)#network mask NY#show ip route /30 is subnetted, 1 subnets B [20/0] via , 00:08: /30 is subnetted, 1 subnets B [20/0] via , 00:12: /24 is subnetted, 2 subnets B [20/0] via , 00:08:39 B [20/0] via , 00:07: /24 is subnetted, 2 subnets B [20/0] via , 00:08:02 B [20/0] via , 00:08: /29 is subnetted, 1 subnets is directly connected, FastEthernet0/0 Paris

13 P(config)#router bgp 3 P(config-router)#neighbor remote-as 2711 P(config-router)#neighbor remote-as 1 P(config-router)#network mask Rom R(config)#router bgp 2 R(config-router)#neighbor remote-as 2711 R(config-router)#neighbor remote-as 1 R(config-router)#network mask Wien i) Aktivieren Sie IBGP zwischen Wien, Graz und Salzburg W(config)#router bgp 2711 W(config-router)#neighbor remote-as 2711 next-hop-self W(config-router)#neighbor remote-as 2711 next-hop-self W(config-router)#neighbor remote-as 2711 next-hop-self W(config-router)#neighbor remote-as 2711 next-hop-self Salzburg SZ(config)#router bgp 2711 SZ(config-router)#neighbor remote-as 2711 next-hop-self SZ(config-router)#neighbor remote-as 2711 next-hop-self SZ(config-router)#neighbor remote-as 2711 next-hop-self SZ(config-router)#neighbor remote-as 2711 next-hop-self Graz G(config)#router bgp 2711 G(config-router)#neighbor remote-as 2711 next-hop-self G(config-router)#neighbor remote-as 2711 next-hop-self G(config-router)#neighbor remote-as 2711 next-hop-self G(config-router)#neighbor remote-as 2711 next-hop-self 3) BGP Routensteuerung a) Traffic zum AS 1 soll ROM Leitung T3 verwenden Den ausgehenden Traffic kann man mit der Local Preference beeinflussen. Um den Traffic so umzuleiten, dass Traffic zum AS1 über ROM Leitung T3 verwendet, wird eine AS-Path AL erstellt, die von einer Route Map gematcht wird. Diese wird auf Graz gesetzt, wo die höhere Local Preference für AS 1 gesetzt wird und auf Wien, wo die höhere Local Preference für AS 2 und AS 3 gesetzt werden muss (Traffic über Wien)

14 Graz: ip as-path access-list 2 permit _1$ route-map ASROM permit 10 match as-path 2 set local-preference 200 route-map ASROM permit 20 neighbor route-map ASROM in Wien: ip as-path access-list 2 permit _2$ ip as-path access-list 2 permit _3$ route-map ASROM permit 10 match as-path 2 set local-preference 300 route-map AS1ROM permit 20 neighbor route-map ASROM in Hierbei wird geschaut, wer der Absender ist (über AS-PATH), und in der Route Map darauf gematcht. Falls die Bedingung zutrifft, wird die Local Preference auf einen höheren Wert gesetzt. Diese wird beim Nachbarn auf IN gesetzt, da jeder eingehende Verkehr überprüft werden muss. W#sh ip bgp BGP table version is 25, local router ID is Status codes: s suppressed, d damped, h history, * valid, > best, i - internal, r RIB-failure Origin codes: i - IGP, e - EGP,? - incomplete Network Next Hop Metric LocPrf Weight Path * i / i * i i *> i r>i / i r i i *> / i *> / i *>i / i * i i * i *> / i *> / i * i / i * i i *> i r>i / i r i i *> / i *> / i *>i / i * i i

15 b) Ausgehende Daten sollen sonst immer die Strecke Wien Paris verwenden Dieser Punkt war eigentlich nicht zu lösen. Es wurde versucht, den Punkt mithilfe der MED zu lösen, jedoch hat dies nicht zu einem befriedigenden Ergebnis geführt. W(config)#route-map ASWIEN permit 10 W(config-route-map)#match as-path 3 W(config-route-map)#set metric 10 W(config)#ip as-path access-list 3 permit _1$ W(config)#ip as-path access-list 3 permit _3$ W(config-router)#neighbor route-map ASWIEN out d) Unser AS 2711 darf keine Transitarea werden Transitarea bedeutet, dass durch das Autonome System Daten durchgehen werden können, die nicht für das AS, sondern für andere vorgesehen sind (unnötiger Traffic). Dies wird mithilfe einer as-path AL ermöglicht. Die Filter-List filtert Pakete, wo kein AS eingetragen ist (also eigenes AS). W(config)#ip as-path access-list 4 permit ^$ W(config-router)#neighbor filter-list 4 out 4) Tests a) Alle Netze müssen erreichbar sein W#ping Sending 5, 100-byte IMP Echos to , timeout is 2 seconds:!!!!! Success rate is 100 percent (5/5), round-trip min/avg/max = 28/28/32 ms W#ping Sending 5, 100-byte IMP Echos to , timeout is 2 seconds:!!!!! Success rate is 100 percent (5/5), round-trip min/avg/max = 28/29/32 ms traceroute Tracing the route to msec 0 msec 4 msec

16 msec 16 msec 12 msec [AS 3] 20 msec 16 msec * G#ping Sending 5, 100-byte IMP Echos to , timeout is 2 seconds:!!!!! Success rate is 100 percent (5/5), round-trip min/avg/max = 1/1/4 ms G#ping Sending 5, 100-byte IMP Echos to , timeout is 2 seconds:!!!!! Success rate is 100 percent (5/5), round-trip min/avg/max = 1/1/4 ms traceroute Tracing the route to msec 0 msec 4 msec msec 16 msec 12 msec [AS 3] 16 msec 16 msec * SZ#traceroute Tracing the route to msec 16 msec 16 msec msec 28 msec 28 msec msec 40 msec 44 msec msec * 40 msec SZ#traceroute Tracing the route to msec 16 msec 12 msec msec 28 msec 28 msec msec 40 msec 44 msec msec * 40 msec SZ#traceroute Tracing the route to msec 16 msec 16 msec msec 28 msec 28 msec msec * 40 msec

17 b) Überprüfen Sie die Routingtabellen bezüglich der richtigen Next Hops W#show ip route odes: - connected, S - static, I - IGRP, R - RIP, M - mobile, B - BGP D - EIGRP, EX - EIGRP external, O - OSPF, IA - OSPF inter area N1 - OSPF NSSA external type 1, N2 - OSPF NSSA external type 2 E1 - OSPF external type 1, E2 - OSPF external type 2, E - EGP i - IS-IS, L1 - IS-IS level-1, L2 - IS-IS level-2, ia - IS-IS inter area * - candidate default, U - per-user static route, o - ODR P - periodic downloaded static route Gateway of last resort is not set /30 is subnetted, 1 subnets B [20/0] via , 00:05: /30 is subnetted, 1 subnets is directly connected, Serial0/ /24 is directly connected, Loopback1 O IA /32 is subnetted, 1 subnets [110/65] via , 01:15:33, Serial0/ /32 is subnetted, 1 subnets B [20/0] via , 00:05:57 O E /24 [110/20] via , 01:15:34, FastEthernet0/ /24 is subnetted, 8 subnets O [110/1563] via , 01:15:34, Serial0/ is directly connected, Serial0/ [110/1562] via , 01:15:35, Serial0/1 O E [110/21] via , 01:15:35, FastEthernet0/1 O E [110/21] via , 01:15:35, FastEthernet0/ is directly connected, Serial0/0.1 O [110/65] via , 01:20:49, FastEthernet0/ is directly connected, Serial0/ /32 is subnetted, 1 subnets O [110/782] via , 01:15:35, Serial0/1 O E /24 [110/20] via , 01:15:35, FastEthernet0/ /29 is subnetted, 1 subnets O IA [110/65] via , 01:15:35, Serial0/ /32 is subnetted, 1 subnets B [200/0] via , 00:05: /24 is subnetted, 3 subnets O [110/782] via , 01:20:49, FastEthernet0/ is directly connected, FastEthernet0/ is directly connected, FastEthernet0/0 O E /24 [110/21] via , 01:15:36, FastEthernet0/ /32 is subnetted, 1 subnets O [110/1563] via , 01:15:36, Serial0/ /29 is subnetted, 1 subnets B [20/0] via , 00:06: /32 is subnetted, 1 subnets [20/0] via , 00:06:00

18 E_Rom#sh ip route odes: - connected, S - static, I - IGRP, R - RIP, M - mobile, B - BGP D - EIGRP, EX - EIGRP external, O - OSPF, IA - OSPF inter area N1 - OSPF NSSA external type 1, N2 - OSPF NSSA external type 2 E1 - OSPF external type 1, E2 - OSPF external type 2, E - EGP i - IS-IS, L1 - IS-IS level-1, L2 - IS-IS level-2, ia - IS-IS inter area * - candidate default, U - per-user static route, o - ODR P - periodic downloaded static route Gateway of last resort is not set /30 is subnetted, 1 subnets is directly connected, Serial0/ /30 is subnetted, 1 subnets B [20/0] via , 01:50:07 B /8 [20/0] via , 00:38: /8 is directly connected, Loopback0 B /8 [20/0] via , 00:38: /29 is subnetted, 1 subnets B [20/0] via , 00:43: /29 is subnetted, 1 subnets is directly connected, FastEthernet0/0 SZ#sh ip route bgp /30 is subnetted, 1 subnets B [200/0] via , 00:02: /30 is subnetted, 1 subnets B [200/0] via , 00:02: /29 is subnetted, 1 subnets B [200/0] via , 00:01:56 c) Deaktivierung von Leitungen und Überprüfung der Alternativen Deaktivieren von s0/0 in Rom R(config)#int s0/0 R(config-if)#shutdown vorher: D_Wien# traceroute Tracing the route to msec 16 msec 12 msec msec 28 msec 32 msec [AS 3] 32 msec 28 msec * Nachher: D_Wien#traceroute Tracing the route to msec 36 msec 16 msec [AS 3] 16 msec 16 msec *