KZTMBH12-LLD (1)

Табл. 17. Распределение значений Route-Target для услуги «Точное время»

Для предоставления услуг РТР на основе L3 VPN на устройствах подключения устройств Oscilloquartz используются следующие настройки (на примере alma- 073000-csg-1):

vrf definition PTP rd 9198:920500004

!

address-family ipv4

route-target export 9198:920500006 route-target import 9198:920500105

!exit-address-family

interface GigabitEthernet0/6 description Oscilloquartz PTP interface load-interval 30

media-type sfp

no negotiation auto cdp enable

service instance 20 ethernet encapsulation dot1q 20

rewrite ingress tag pop 1 symmetric bridge-domain 20

!

interface Vlan20 vrf forwarding PTP

ip address 10.238.6.6 255.255.255.248

!

router bgp 9198

!

address-family ipv4 vrf PTP redistribute connected exit-address-family

Для предоставления услуг РТР конечным потребителям (базовым станциям) на устройствах CSG используются следующие настройки (на примере alma-006001- csg-1):

6.6.7.2 ПРЕДОСТАВЛЕНИЕ УСЛУГИ «ТОЧНОЕ ВРЕМЯ» ОТ УСТРОЙСТВ

CSG

В случае предоставления услуги «Точное время» от устройств CSG само устройство CSG должно принимать точное время от вышестоящих устройств.

Для предоставления услуги «Точное время по протоколу РТР» адрес доступа к услуге - 10..238.6.1 - настраивается на интерфейсе Looback3 устройства CSG. Данный интерфейс доступен в рамках общей таблицы маршрутизации. Путевые данные о достижимости интерфейса не передаются.

Так как интерфейс Loopback3 находится в общей таблице маршрутизации (GRT), то обмен между БС и другими устройствами должен быть ограничен. Для этого используется список доступа ptp, позволяющий обмен данными только с адресом 10.238.6.1.

Для предоставления услуги «Точное время» на устройстве CSG используются следующие настройки (на примере устройства alma-006001-сsg-1):

interface Loopback2 description PTP Slave

ip address 10.238.240.78 255.255.255.255

!

interface Loopback3 description PTP Master

ip address 10.238.6.1 255.255.255.255

!

interface GigabitEthernet0/5 description to eNodeB AL001 load-interval 30 negotiation auto

cdp enable

service instance 3205 ethernet description Precision time

encapsulation dot1q 3205

rewrite ingress tag pop 1 symmetric ! bridge-domain 505

interface Vlan505

description Precision time subinterface for AL001 ip address 10.2.80.1 255.255.255.252

ip access-group ptp in

!

ip access-list extended ptp permit ip any host 10.238.6.1

!

ptp clock boundary domain 0 clock-port Lo2_Slave slave

transport ipv4 unicast interface Lo2 negotiation clock source 10.238.240.2

clock-port Lo3_Master master

transport ipv4 unicast interface Lo3 negotiation

6.6.8 УСЛУГА «ОПОРНАЯ ЧАСТОТА»

Услуга «Опорная частота» может быть предоставлена любым устройством МВН, участвующим в распространении опорной частоты.

Услуга заключается в выдаче частотного сигнала, привязанного тем или иным способом к первичному эталонному генератору. Частотный сигнал может быть выдан через:

—интерфейс BITS/Е1/Т1;

—интерфейс Gigabit Ethernet (оптическая и медная среда передачи);

—интерфейс 2МГц;

—интерфейс 10МГц.

Для предоставления услуги «Опорная частота» на устройстве CSG через интерфейс BITS используются следующие настройки:

network-clock output-source system 2 External 0/0/0 2048k

Для предоставления услуги «Опорная частота» на устройстве CSG через интерфейс Gigabit Ethernet используются следующие настройки:

interface GigabitEthernet0/7 synchronous mode

Для предоставления услуги «Опорная частота» на устройстве MASG/AGG через интерфейс BITS в режиме 2МГц используются следующие настройки:

clock-interface sync 0 location 0/RSP0/CPU0 port-parameters

bits-output 2m

7 ОПРЕДЕЛЕНИЕ КАЧЕСТВА ПРЕДОСТАВЛЕНИЯ УСЛУГ

Определение качества услуг может состоять из следующих задач:

—проверка достижимости;

—проверка задержки передачи и вариации задержки;

—проверка уровня потерь;

—извещение о уровне качества.

Взависимости от вида услуги - услуга L2 или L3 - данные задачи могут быть решены с использованием возможностей IPSLA (для услуг L3) или ОАМ (для услуг L2).

Сеть МВН позволяет использовать оба набора возможностей.

7.1IP SLA

Механизм IPSLA позволяет определять качество передачи данных через транспортную сеть и оценивать следующие величины:

—задержка передачи в одну сторону;

—задержка двусторонней передачи;

—вариация задержек;

—уровень потерь.

Данные величины могут быть получены как для транспортной сети для заданного класса обслуживания или для определённой услуги L3VPN для заданного класса обслуживания.

При переходе определённых отслеживаемых величин через допустимый порог возможна отправка сообщений syslog или snmp-trap.

Модель определения качества IPSLA предполагает наличие двух участников:

—устройство, осуществляющее посылку запросов и вычисляющее основные показатели;

—устройство отвечающие на приходящие запросы.

В рамках сети МВН в качестве устройства-опросчика используются устройства MASG, а в качестве устройств ответчиков устройства CSG.

Нахождение односторонней задержки передачи предполагает синхронизацию системных часов всех устройств сети.

Для проверки качества обслуживания для агрегированных классов QoS для устройств MASG используются следующие примерные настройки:

ipsla operation 1

type udp jitter

source address 10.238.0.0

destination address 10.238.0.202 packet count 10

packet interval 100 tos 184

datasize request 300 destination port 44444 frequency 60 verify-data

!

reaction operation 1 react timeout

action logging action trigger

!

react jitter-average action logging action trigger

threshold lower-limit 1 upper-limit 30

!

schedule operation 1 start-time now life 86400

На устройствах CSG включается режим ответа на запросы IP SLA:

ip sla responder

7.2 OAM

Кроме механизмов IP SLA, действующих на основе протокола IP, в сети МВН может быть использованы средства проверки связности и качества передачи на основе протоколов OAM Y.1731, IEEE 802.1AG, IEEE 802.3AH MPLS OAM.

Набор инструментов слежения качества обслуживания на основе ОАМ позволяют также использование совместно с СУ Cisco Prime.

8 ОБЕСПЕЧЕНИЕ НАДЁЖНОСТИ

Надёжность сети в целом достигается за счёт устойчивости используемого оборудования (устройств), надёжности отдельных узлов связи, топологии соединительных линий связи.

Для обнаружения единичных отказов в сети МВН используются встроенные механизмы протоколов маршрутизации и управления (обмен приветственными сообщения и слежение за состоянием соседнего устройства), специальные протоколы быстрого обнаружения отказов - BFD, механизмы физического уровня (пропадание сигнала в линии связи, пропадание отклика от основного управляющего модуля).

Для обработки отказов используются аппаратные возможности оборудования, запасные или параллельные линии связи, предварительно просчитанные топологические пути (Loop-free alternate, Prefix Independant convergence).

8.1 ОБЕСПЕЧЕНИЕ НАДЁЖНОСТИ ОБОРУДОВАНИЯ

Надёжность устройства или единицы оборудование достигается за счёт удвоения наиболее важных составных частей (дублирование, резервирование). В зависимости от устройства и уровня его применения могут дублироваться:

—модуль управления;

—модуль коммутации;

—блок питания.

8.1.1 НАДЁЖНОСТЬ УСТРОЙСТВ MASG/AGG

Устройства MASG/AGG являются главными устройствами сети МВН. Устройства MASG/AGG имеют следующие сдвоенные составные части:

—модуль управления со встроенным модулем коммутации;

—блоки питания.

Резервирование модуля управления позволяет переносить на запасной модуль управления состояния фабрики коммутации, протоколов управления и маршрутизации.

На платформе ASR9010 механизмы резервирования, связанные с резервирование модулей управления, включаются отдельно для каждого используемого протокола. В рамках построения сети МВН используются механизмы синхронизации состояний для протоколов IS-IS, BGP и LDP.

Для протокола BGP используется режим SSO, когда состояние всех протокольных соседств синхронизируется между основным и запасным модулями

ЗАО «AMT ГРУП» АО «Казахтелеком»

управления - режим non-stop routing. Для этого используются следующие настройки:

router bgp 9198 nsr

Для протокола LDP используется механизм в соответствии с RFC 3478 - Graceful Restart Mechanism for Label Distribution Protocol для поддержания протокольного соседства после переключения в рабочем состоянии и восстановления потерянных при переключении данных. Также используется механизм LDP Session protection для удержания меток, согласованных с соседним устройством в случае перезагрузки или данного устройства или кратковременной потери связи. Для этого используются следующие настройки:

mpls ldp nsr

graceful-restart session protection

Для протокола IS-IS используется режим переключения согласно внутреннему порядку Cisco - non-stop forwarding cisco. Для этого используются следующие настройки:

router isis core nsf cisco

Устройства MASG/AGG оснащаются тремя блоками питания каждое. Блоки питания устройств MASG/AGG работают в режиме разделения нагрузки: в случае выхода из строя одного из блоков питания, оставшиеся распределят нагрузку между собой. Дополнительных настроек не требуется.

8.1.2 НАДЁЖНОСТЬ УСТРОЙСТВ PRE-AGG

Так как, устройства предукрупнения (Pre-AGG) подключают до 30 устройств CSG, то выход устройства из строя приводит к значительным потерям. Поэтому, устройства предукрупнения оснащаются двумя модулями управления (со встроенной матрицей коммутации), а также двумя блоками питания.

Для платформы ASR903, на которой построены устройства предукрупнения, можно указать как общий механизм переключения, так и механизмы для выбранных протоколов управления и маршрутизации.

В рамках построения сети МВН для резервирования модулей управления используется механизм переключения Stateful SwitchOver (SSO), который обеспечивает меньшее время переключения, по сравнению со способом RouteProcessor Redundancy (RPR). Способ SSO предполагает, что оба модуля управления, основной и запасной, полностью готовы к работе и синхронизируют состояния служебных протоколов и протоколов маршрутизации между собой. При

SSO переключение на запасной/исправный модуль управления занимает несколько миллисекунд. В случае RPR только один из модулей управления полностью готов к работе и при переключении требуется загрузка и подготовка к работе запасного модуля, что может занимать до 10 минут.

Для включения механизма SSO используются следующие настройки:

redundancy mode sso

Механизмы резервирования также включаются для протоколов IS-IS, BGP, LDP.

Для протокола IS-IS используется режим переключения согласно внутреннему порядку Cisco - non-stop forwarding cisco. Для этого используются следующие настройки:

router isis core nsf cisco

Для протокола LDP используется механизм в соответствии с RFC 3478 - Graceful Restart Mechanism for Label Distribution Protocol для поддержания протокольного соседства после переключения в рабочем состоянии и восстановления потерянных при переключении данных. Также используется механизм LDP Session protection для удержания меток, согласованных с соседним устройством в случае перезагрузки или данного устройства или кратковременной потери связи. Для этого используются следующие настройки:

mpls label protocol ldp mpls ldp graceful-restart

mpls ldp session protection duration 900

Для протокола BGP используется механизм Graceful Restart Mechanism for BGP в соответствии с RFC 4724, а также механизм Stateful Switch Over (SSO). В

следствие ошибки CSCue65006, присутствующей в ПО IOS XE 3.7.2, в сторону устройств MASG/AGG используется подход SSO, когда состояние протокола BGP для выбранных соседей синхронизируется между основным и запасным модулями управления, а в сторону устройств CSG используется механизм Graceful-Restart, который предполагает дополнительный обмен сообщения для восстановления состояния. Так как к устройствам предукрупнения подключается большое количество устройств CSG, то данные настройки применяются через шаблоны peer-session (на примере устройства alma-006001-pagg-1):

router bgp 9198

template peer-session access_103 transport connection-mode passive ha-mode gracefyl-restart exit-peer-session

!

template peer-session upstream

Блоки питания устройств предукрупнения работают в режиме разделения нагрузки: в случае выхода из строя одного из блоков питания, оставшийся блок питания обеспечит бесперебойную работу. Дополнительных настроек не требуется.

8.1.3 НАДЁЖНОСТЬ УСТРОЙСТВ CSG

Устройства CSG предназначены для подключения небольшого (1-5) количества БС. Поэтому устройства обладают только сдвоенными блоками питания. Блоки питания работают в режиме распределения нагрузки. При выходе из строя одного из блоков питания устройство автоматически переключается на запасной. Дополнительных настроек не требуется.

Устройства ASR901, на основе которых созданы устройства CSG, не имеют встроенных аппаратных средств повышенной надёжности, но могут участвовать в восстановлении протокольных состояний в случае сбоя на устройстве предукрупнения (Pre-AGG). Возможность такой помощи включается для протоколов BGP и LDP. Для этого используются следующие настройки:

mpls label protocol ldp mpls ldp graceful-restart mpls ldp session protection router bgp 9198

bgp graceful-restart restart-time 120 bgp graceful-restart stalepath-time 360 bgp graceful-restart

8.2 ОБЕСПЕЧЕНИЕ НАДЁЖНОСТИ ПОДКЛЮЧЕНИЙ

Надёжность подключений достигается за счёт использования параллельных соединений или каналов связи.

Для защиты подключений в ядре сети МВН используются запасные каналы связи. В качестве запасных каналов связи используются каналы связи МСПД. МСПД обеспечивает поддержку следующих подключений:

—подключения между устройствами MASG в городе Алма-Ата;

—подключения между устройствами AGG в городе Астана;

—подключения между устройствами MASG/AGG между городами Астана и

Алма-Ата.

Для защиты подключений на уровне предукрупнения сети МВН используются резервирование подключений устройств Pre-AGG к устройствами MASG/AGG.

Каждое устройство преукрупнения (Pre-AGG) подключается обоим устройствам MASG/AGG города установки.

Нахождение пути в текущей топологии каналов связи обеспечивается протоколом внутренней маршрутизации (IGP IS-IS).

Резервирование каналов связи на уровне доступа, в виду их небольшой важности, не производится.

8.3 ОБНАРУЖЕНИЕ ОТКАЗОВ

Врамках проекта построения сети МВН используются следующие механизмы обнаружения отказов:

— потеря сигнала;

— потеря сообщений протокольных соседей;

— протокол определения двусторонней связности BFD.

Взависимости от возможностей или необходимости используются те или иные механизмы или их сочетания.

8.3.1 ПОТЕРЯ СИГНАЛА

Механизм обнаружения отказа канала связи основанный на пропадании сигнала в линии является основным механизмом обнаружения. Это механизм обладает наилучшим временем срабатывания, но может применяться только в случае непосредственного подключения двух устройств друг к другу, например, через оптоволоконную линию связи.

Механизм обнаружения «потеря сигнала» включён по умолчанию, однако также по умолчанию на оборудовании Cisco используется задержка в 2000мс между обнаружением события «потеря сигнала» и передачи сообщения об этом событии механизмом обработки отказов. В рамках проекта построения сети МВН задержка сообщения полностью выключается или вставляется минимально возможное событие.

Механизм «Потеря сигнала» используется на интерфейсах, соединяющих устройства MASG/AGG и устройства Pre-AGG.

На устройствах MASG/AGG используются следующие настройки:

interface TenGigE0/0/0/10 carrier-delay up 2000 down 1

На устройствах Pre-AGG используются следующие настройки:

interface TenGigabitEthernet0/0/0 carrier-delay up 1 carrier-delay down msec 0