4. Топология компьютерных сетей
Смешанная топология, которая используется в большинстве компьютерных сетей, строится на основе комбинации стандартных, например, несколько «звезд» объединяются «общей шиной».
5. Модель компьютерной сети
Модель сети предназначена для стандартизации подходов к разработке компьютерных сетей и унификации процесса передачи и приема данных. Первая версия модели была разработана в 1977 г. под названием Базовая модель взаимодействия открытых систем или семиуровневая модель OSI (Open System Interconnection). Доработанная в 1984 г. модель OSI была утверждена на уровне международного стандарта.
Модель OSI основана на уровневых протоколах, что позволяет упростить программу сложной сети путем её деления на простые части (уровни), ввести стандартные интерфейсы на каждом уровне и использовать общий язык для взаимопонимания разработчиков.
Для любого узла сети вводится 7 уровней обработки сообщения: прикладной, представления данных, сеансовый, транспортный, сетевой, канальный, физический. За каждым уровнем закреплена вполне определенная функция обработки и внесения соответствующих служебных данных. Например, на прикладном уровне определяется протокол передаваемых данных, а на физическом происходит преобразование закодированного сообщения в электрические импульсы. Таким образом, в процессе отправки полезная информация последовательно обрабатывается на всех уровнях и обрастает служебными данными, а при получении – освобождается от служебных данных, проходя уровни в обратном порядке.
Существование модели компьютерной сети упрощает процесс передачи данных между существующими сетями и обеспечивает возможность подключения новых сетей к глобальной системе.
Лекция 16. Глобальная компьютерная сеть Интернет
1. Определение сети Интернет
Интернет относится к глобальным компьютерным сетям. В топологии Интернета основной элементарной единицей является локальная сеть, поэтому Интернет иногда называют сетью сетей или Всемирной паутиной. С понятием Интернет тесно связано английское слово web – сеть, сплетение, паутина, от которого происходит сетевая терминология, например, веб-дизайн, веб-сайт, веб-камера.
Интернет – всемирная компьютерная сеть, состоящая из разнообразных компьютерных сетей, объединенных стандартными соглашениями о способах обмена информацией (протоколами) и единой системой адресации.
Топология Интернет аналогична сети транспортных магистралей, схема которых изображается на карте автомобильных или железных дорог. Используя аналогию, транспортные магистрали можно представить как каналы связи между сетями, почтовые адреса как систему адресации глобальной сети, а правила перевозки как протоколы обмена данными.
2. История Всемирной паутины
В истории сети Интернет выделяется 3 основные периода: этап экспериментальных работ, этап становления, этап коммерческого применения и совершенствования
Этап экспериментальных работ (60-70-е годы), выполненный в США с целью проверки основных теоретических предположений, включает:
- создание первой компьютерной сети под названием ARPANET (ARPA – Департамент техники обработки информации Министерства обороны США) в 1969 году;
- разработку и демонстрацию сети с большим количеством компьютеров, в том числе, с подключенными иностранными узлами;
- демонстрацию в 1977 году возможности объединения четырех различных компьютерных сетей.
- первое появление термина «Интернет» (1982 г.);
- перевод в 1982 г. сети ARPANET на протокол межсетевого взаимодействия TCP/IP;
- объединение 5 компьютерных центров США в новую сеть под название NSFNET с увеличением числа компьютеров в этой сети к 1989 году до 100 тыс. шт.
- разработку в 1989 г. технологии публикации гипертекстовых документов; автором разработки был инженер Церна Тим Бернес-Ли, создавший сетевой протокол HTTP, язык разметки сетевых документов HTML, систему адресации URL, которые со временем стали основой Всемирной паутины;
- реализацию в 1991 г. протокола WWW (World Wide Web) и создание первого сайта, который был посвящен описанию устройства сети Интернет;
- создание в 1994 г. Консорциума Всемирной паутины (W3C) для разработки и внедрения технологических стандартов Интернета;
- мощное развитие глобальной сети во второй половине 90-х, включающее появление сетевой операционной системы Windows 95, массовую разработку корпоративных сайтов, появление электронной коммерции и Интернет-магазинов.
Определение топологии сети на уровнях 2/3 модели OSI
Одной из важных технологий любой серьезной системы мониторинга сетей является метод обнаружения связей сетевых элементов на 2-м и 3-м уровне модели OSI.
С точки зрения алгоритмов эта задача является одной из самых интересных встреченных нами во время разработки нашей системы.
Мы решили немного поделиться нашим опытом, чтобы вы могли представить, каким образом красивый граф связей между узлами появляется на дэшбордах вашей системы мониторинга.
Топология сети — это способ описания конфигурации сети, схема расположения и соединения сетевых устройств. Мы будем рассматривать TCP/IP сеть, основу которой образуют сетевые устройства трёх типов: коммутаторы, маршрутизаторы и конечные станции. Мы также будем предполагать, что сетевые устройства, коммутаторы и маршрутизаторы, предоставляют открытый интерфейс для опроса по SNMP.
Для описания топологии удобно рассматривать OSI-модель сети как многоэтажное здание в основе которого лежит фундамент — это физический уровень, а этажи образуют канальный и сетевой уровни, каждый последующий уровень надстраивает здание и таким образом обеспечивает целостность и функциональность всей конструкции. Задача всего здания обеспечить его жителей, то есть различные приложения, связью друг с другом.
В Network Manager реализован алгоритм поиска связей между разнородными устройствами, поддерживающие различные протоколы конфигурации топологии сети, протокол связующего дерева (STP, Spanning Tree Protocol), протоколы LLDP (Link Layer Discovery Protocol) и CDP (Cisco Discovery Protocol). Архитектура программной системы позволяет реализовать поддержку новых протоколов для обнаружения как связей на 2-м и 3-м уровне модели OSI, так и любых других логических связей между элементами ИТ-инфраструктуры.
На канальном уровне связи между устройствами называются связями второго уровня (или L2-связи). Они могут быть заданы указанием пары портов двух непосредственно связанных коммутаторов, или коммутатора и конечной станции, или коммутатора и маршрутизатора.
Коммутаторы поддерживают динамическую таблицу переадресации (AFT, address forwarding table), хранящую соответствие MAC адреса узла порту коммутатора. Эта информация доступна через динамические таблицы доступные по SNMP в BRIDGE-MIB коммутатора (dot1dBasePortTable, dot1dTpFdbTable).
Будем говорить, что коммутатор видит на данном порту данное сетевое устройство, если в его динамической таблице переадресации содержится запись, которая указывает перенаправлять дейтаграммы предназначенные этому сетевому устройству через данный порт.
Для коммутатора с поддержкой базы данных BRIDGE-MIB можно, считывая dot1dBasePortTable, определить соответствие между номером интерфейса и номером порта, а доступные интерфейсы определяются базой данных MIB-II (таблица ifTable). Это позволяет единым образом рассматривать данные о связях 2-го и 3-го уровня.
Для хранения промежуточных результатов в Network Manager используется топологическая база данных, которая предоставляет общий интерфейс для работы с графом сети и его специализациями, предназначенными для работы на канальном и сетевом уровнях.
Автоматическое определение топологии сети разбивается на две фазы: сбор данных и их последующий анализ. Данные с сетевых устройств собираются в топологической базе данных, с помощью SNMP запросов к базам данных сетевых устройств, и определяются типы устройств и их сетевые интерфейсы.
На втором этапе, происходит анализ доступных данных по выбранным протоколам определения топологии сети, для реализации алгоритмов используются доступные в Интернет сети статьи 1, 2 и 5.
Сложность определения топологии разнородной сети состоит в том, что таблицы переадресации коммутаторов динамические, хранят запись соответствия МАС адреса назначения и соответствующего ему порта некоторое ограниченное время, заданное в конфигурации устройства и в общем случае, на момент исследования не все сетевые устройства обменялись дейтаграммами и как результат маршрутизаторы не могут иметь полной информации о всех доступных сетевых устройствах и их связях. Кроме того, во многих корпоративных сетях встречаются неуправляемые коммутаторы, а некоторые коммутаторы могут быть не подключены к системе мониторинга или некорректно поддерживать нужные SNMP MIBы. Однако, если существует сетевое устройство, видимое на всех коммутаторах сети, то по неполным таблицам переадресации можно однозначно восстановить конфигурацию сети (3).
Разнородность сети также влияет на интерпретацию данных полученных от коммутаторов, на которых настроена поддержка протоколов LLDP и CDP, потому что для их корректной работы необходимо, чтобы все ближайшие сетевые устройства поддерживали или LLDP, или CDP протокол. В итоге, информация, полученная из этих протоколов даёт лишь возможность заключить, что два данных сетевых устройства видят друг друга на определённых портах, но не даёт возможности непосредственно определить их как ближайших «соседей».
Алгоритм поиска топологии разнородной сети, реализованный в AggreGate Network Manager, в первую очередь определяет связи между коммутаторами. Общую суть алгоритма можно описать следующим образом:
Рассмотрим два коммутатора «А» и «Б», расположенные в одной подсети. Если коммутатор «А» видит на порту «а» коммутатор «Б», а коммутатор «Б» видит на порту «б» коммутатор «А» и в их таблицах нет другого сетевого устройства, которое одновременно видимо на портах «а» и «б», то коммутаторы «А» и «Б» соединены напрямую на канальном уровне (см. 1, 3 и 5). После нахождения связи мы убираем соответствующие ей интерфейсы из кэша таблиц форвардинга и продолжаем анализ оставшейся в таблицах информации, постепенно находя методом исключения остальные связи.
На следующем этапе определяются возможные связи между коммутаторами и конечными станциями. Для этого используется поиск ближайшего коммутатора: если коммутатор видит на данном порту конечную станцию и на том же самом порту он видит другой коммутатор, то, при отсутствие сетевых концентраторов, данный коммутатор не может быть ближайшим (см. 4). С другой стороны, если коммутатор на исследуемом порту видит только одну конечную станцию, то этот коммутатор и станция ближайшие соседи в нашей сети.
С топологией IP-уровня (L3) дела обстоят значительно проще. Линки 3-го уровня достаточно легко определяются по таблицам маршрутизации (ipRouteTable), также доступным по SNMP.
Понимая, что универсальность нашего продукта заставит нас в будущем иметь дело с самыми разными видами топологии, мы спроектировали визуальный компонент «граф топологии» таким образом, чтобы он мог работать с произвольными таблицами, содержащими описания узлов и ребер графа топологии. И, как обычно, при наличии инструмента быстро нашлись ему новые применения:
- Топология маршрутов EIGRP, OSPF, BPG и т.п.
- Визуализация путей в облаке MPLS
- SDH/PDH топология
- Визуализация связей между гипервизорами и работающими на них виртуальными машинами
- Добавленные вручную parent-child связи между узлами
- Граф зависимости компонентов ИТ-сервиса от элементов инфраструктуры
Все технологии, описанные в данной статье, протестированы и внедрены в нашем продукте AggreGate Network Manager. Работа алгоритмов определения связей в условиях недостаточности данных (не все коммутаторы и маршрутизаторы подключены по SNMP, некорректная поддержка нужных MIBов и т.д.) далеко не тривиальна, поэтому мы и по сей день продолжаем совершенствовать их.
- Topology Discovery in Heterogeneous IP Networks: The NetInventory System. Y.Breitbart, M.Garofalakis, B. Jai, C.Martin, R.Rastogi, and A.Silberschatz IEEE/ACM TRANSACTIONS ON NETWORKING, VOL. 12, NO. 3, JUNE 2004
- Layer-2 Path Discovery Using Spanning Tree MIBs. David T. Stott, Avaya Labs Research, Avaya Inc., Basking Ridge, NJ, Tech. Rep
- Finding Ethernet-Type Network Topology is Not Easy. H. Gobjuka, Y. Breitbart, Technical Report: TR-KSU-CS-2007-03, Kent State University, 2007.
- Автоматическое определение и описание сетевой инфраструктуры суперкомпьютеров. В. Воеводин, К. Стефанов, Вычислительные Методы и Программирование. 2014. Т. 15
- IP Network Topology Discovery Using SNMP. Suman Pandey, Mi-Jung Choi, Sung-Joo Lee, James W. Hong, Dept. of Computer Science and Engineering, POSTECH, Korea