РапидИО

РапидИО

RapidIO — унифицированная структура для вычислений, критически важных для производительности
Год создания	2000 ( 2000 )
Ширина в битах	Ширина портов: 1, 2, 4, 8 и 16 полос.
Количество устройств	Размеры 256, 65 536 и 4 294 967 296.
Скорость	По полосе (в каждом направлении): 1.x : 1,25, 2,5, 3,125 Гигабод 2.x : добавлены скорости 5 и 6,25 гигабод. 3.x : добавлена ​​скорость 10,3125 Гигабод. 4.x : добавлены скорости 12,5 и 25,3125 гигабод.
Стиль	Серийный
Интерфейс горячего подключения	Да
Внешний интерфейс	Да, чип-чип, плата-плата (объединительная плата), шасси-шасси
Веб-сайт	www .rapidio .org

Архитектура RapidIO представляет собой высокопроизводительную с коммутацией пакетов технологию электрических соединений . Он поддерживает обмен сообщениями, чтение/запись и семантику согласованности кэша . Основываясь на электрических спецификациях отраслевых стандартов, например, для Ethernet , RapidIO можно использовать в качестве межчипового соединения, межплатного соединения и межкорпусного соединения.

История

Протокол RapidIO был первоначально разработан Mercury Computer Systems и Motorola ( Freescale ) в качестве замены собственной шины Mercury RACEway и шины PowerPC Freescale. Торговая ассоциация RapidIO была создана в феврале 2000 года и включала в себя OEM-производителей телекоммуникаций и систем хранения данных, а также компании, производящие FPGA, процессоры и коммутаторы.

Релизы

Версия спецификации RapidIO 1.1 (3xN Gen1), выпущенная в марте 2001 года, определяла широкую параллельную шину. Эта спецификация не получила широкого коммерческого внедрения.

Версия спецификации RapidIO 1.2, выпущенная в июне 2002 г. определил последовательное соединение на основе физического уровня XAUI. Устройства, основанные на этой спецификации, добились значительного коммерческого успеха в беспроводной основной полосе частот. визуализация и военные вычисления.

Версия спецификации RapidIO 1.3 была выпущена в июне 2005 года.

Версия спецификации RapidIO 2.0 (6xN Gen2) была выпущена в марте 2008 года. Это увеличило ширину портов (2×, 8× и 16×) и увеличило максимальную скорость линии до 6,25 ГБд /5 Гбит/с.

Версия спецификации RapidIO 2.1 была выпущена в сентябре 2009 года.

Версия спецификации RapidIO 2.2 была выпущена в мае 2011 года.

Версия спецификации RapidIO 3.0 (10xN Gen3), выпущенная в октябре 2013 года. Были внесены следующие изменения:

• На основе стандартных электрических характеристик Ethernet 10GBASE-KR для приложений с коротким (20 см + разъем) и длинным (1 м + 2 разъема) расстоянием действия.
• Непосредственно использует схему обучения Ethernet 10GBASE-KR DME для оптимизации качества сигнала на больших расстояниях.
• Определяет схему кодирования 64b/67b (аналогично интерлакенскому стандарту) для поддержки как медных , так и оптических соединений и повышения эффективности использования полосы пропускания.
• Динамические асимметричные ссылки для экономии энергии (например, 4× в одном направлении, 1× в другом)
• Добавление возможности синхронизации времени, аналогичной IEEE 1588 , но гораздо менее дорогой в реализации.
• Поддержка 32-битных идентификаторов устройств, увеличивающая максимальный размер системы и обеспечивающая инновационную поддержку аппаратной виртуализации.
• Пересмотренная модель программирования таблицы маршрутизации упрощает программное обеспечение для управления сетью.
• Оптимизация протокола обмена пакетами

Версия спецификации RapidIO 3.1 была выпущена в октябре 2014 года. Он был разработан в результате сотрудничества Торговой ассоциации RapidIO и NGSIS. Версия 3.1 имеет следующие изменения по сравнению со спецификацией 3.0:

• Протокол синхронизации времени MECS для небольших встроенных систем. Синхронизация времени MECS поддерживает резервные источники времени. Этот протокол дешевле, чем протокол синхронизации временных меток, представленный в версии 3.0.
• Средства тестирования PRBS и стандартный интерфейс регистров.
• Структурно асимметричное определение поведения Link и стандартный интерфейс регистров. Эти структурно асимметричные каналы переносят гораздо больше данных в одном направлении, чем в другом, для таких приложений, как датчики или конвейеры обработки. В отличие от динамических асимметричных каналов, структурно асимметричные каналы позволяют разработчикам удалять дорожки на платах и ​​в кремнии, экономя размер, вес и мощность. Структурно асимметричные каналы также позволяют использовать альтернативные каналы в случае аппаратного сбоя многоканального порта.
• Расширенный журнал ошибок для регистрации серии ошибок в целях диагностики.
• Профили космических устройств для конечных точек и коммутаторов, которые определяют, что значит быть совместимым с пространством устройством RapidIO.

Версия спецификации RapidIO 3.2 была выпущена в феврале 2016 года.

Версия спецификации RapidIO 4.0 (25xN Gen4) была выпущена в июне 2016 года. По сравнению со спецификациями 3.x в нем были следующие изменения:

• Поддержка скорости передачи данных 25 Гбод и спецификации физического уровня с соответствующими изменениями модели программирования.
• Разрешить использование IDLE3 с любым классом скорости передачи данных с указанным согласованием последовательности IDLE.
• Максимальный размер пакета увеличен до 284 байт в ожидании спецификации Cache Coherency.
• Поддержка 16 приоритетов физического уровня.
• Поддержка «передачи без ошибок» для изохронной передачи информации с высокой пропускной способностью.

Версия спецификации RapidIO 4.1 была выпущена в июле 2017 года.

Беспроводная инфраструктура

Ткани RapidIO используются в сотовой инфраструктуре сетей 3G, 4G и LTE с миллионами поставленных портов RapidIO. в беспроводные базовые станции по всему миру. Фабрики RapidIO изначально были разработаны для поддержки объединения процессоров разных типов от разных производителей в единую систему. Эта гибкость привела к широкому использованию RapidIO в оборудовании беспроводной инфраструктуры, где существует необходимость объединить гетерогенные процессоры, DSP, FPGA и коммуникационные процессоры в тесно связанную систему с низкой задержкой и высокой надежностью.

Дата-центры

Центры обработки данных и аналитические системы HPC были развернуты с использованием 2D Torus Mesh Fabric RapidIO, который обеспечивает высокоскоростной интерфейс общего назначения между системными картриджами. Это позволяет использовать приложения, которым выгодна высокая пропускная способность и низкая задержка связи между узлами. Унифицированная фабрика RapidIO 2D Torus маршрутизируется в виде кольцевой конфигурации, соединяющей до 45 серверных картриджей. Следовательно, он способен обеспечить соединение со скоростью 5 Гбит/с на полосу в каждом направлении своим северным, южным, восточным и западным соседям. Это позволяет системе соответствовать многим уникальным приложениям HPC, где необходим эффективный локализованный трафик.

Кроме того, используя открытый модульный центр обработки данных и вычислительную платформу, гетерогенная система HPC продемонстрировала низкую задержку RapidIO, позволяющую осуществлять аналитику в реальном времени. В марте 2015 года было объявлено о выпуске коммутатора, устанавливаемого на верхнюю часть стойки, который позволит использовать RapidIO в основных приложениях центров обработки данных.

Аэрокосмическая промышленность

Межсоединение или «шина» — одна из важнейших технологий при проектировании и разработке бортовых систем космического корабля, определяющая его архитектуру и уровень сложности. Существует множество существующих архитектур, которые все еще используются, учитывая их уровень зрелости. Этих существующих систем достаточно для нужд и требований данного типа архитектуры. К сожалению, для миссий следующего поколения желательна более мощная архитектура авионики; что значительно превосходит возможности существующих архитектур. Жизнеспособным вариантом проектирования и разработки этих архитектур следующего поколения является использование существующих коммерческих протоколов, способных обеспечить высокие уровни передачи данных.

В 2012 году рабочая группа по стандарту межсоединения космических аппаратов следующего поколения (NGSIS) выбрала RapidIO в качестве основы для стандартных межсоединений связи, которые будут использоваться в космических кораблях. NGSIS — это комплексная разработка стандартов, включающая разработку RapidIO версии 3.1, а также разработка стандартов аппаратного уровня коробочного уровня в рамках VITA 78 под названием SpaceVPX или High ReliabilityVPX. Комитет по требованиям NGSIS разработал расширенные критерии требований, включающие 47 различных элементов для межсоединения NGSIS. Результаты независимого торгового исследования, проведенного компаниями-членами NGSIS, продемонстрировали превосходство RapidIO над другими существующими коммерческими протоколами, такими как InfiniBand, Fibre Channel и 10G Ethernet. В результате группа решила, что RapidIO предлагает лучшее межсетевое соединение для нужд космических кораблей следующего поколения.

Дорожная карта PHY

Дорожная карта RapidIO согласуется с разработкой Ethernet PHY. Спецификации RapidIO для каналов 50 ГБд и выше находятся на стадии изучения.

Терминология

Ссылка на партнера

Один конец канала RapidIO.

Конечная точка

Устройство, которое может создавать и/или завершать пакеты RapidIO.

Элемент обработки

Устройство, имеющее хотя бы один порт RapidIO.

Выключатель

Устройство, которое может маршрутизировать пакеты RapidIO.

Обзор протокола

Протокол RapidIO определен в трехуровневой спецификации:

• Физические: электрические характеристики, PCS/PMA, протокол канального уровня для надежного обмена пакетами.
• Транспорт: модель маршрутизации, многоадресной рассылки и программирования.
• Логический: логический ввод-вывод, обмен сообщениями, глобальная разделяемая память ( CC-NUMA ), управление потоком, потоковая передача данных.

Технические характеристики системы включают в себя:

• Инициализация системы
• Управление ошибками/горячая замена

Физический уровень

Электрические характеристики RapidIO основаны на отраслевых стандартах Ethernet и Optical Interconnect Forum:

• XAUI для скоростей 1,25, 2,5 и 3,125 ГБбод (1, 2 и 2,5 Гбит/с)
• OIF CEI 6+ Гбит/с для скоростей линий 5,0 и 6,25 ГБбод (4 и 5 Гбит/с)
• 10GBASE-KR 802.3-ap (большая дальность действия) и 802.3-ba (короткая зона действия) для скоростей линий 10,3125 ГБбод (9,85 Гбит/с)

Уровень RapidIO PCS/PMA поддерживает две формы кодирования/кадрирования:

• 8b/10b для скоростей до 6,25 Гбайт/с.
• 64b/67b, аналогичный тому, который используется Интерлакеном для скоростей движения более 6,25 ГБ/сут.

Каждый процессорный элемент RapidIO передает и получает три вида информации: пакеты, управляющие символы и последовательность простоя.

Пакеты

Каждый пакет имеет два значения, которые управляют обменом на физическом уровне этого пакета. Первым является идентификатор подтверждения (ackID), который представляет собой уникальное 5-, 6- или 12-битное значение, зависящее от канала, которое используется для отслеживания пакетов, которыми обмениваются по каналу. Пакеты передаются с последовательно возрастающими значениями ackID. Поскольку ackID специфичен для канала, он учитывается не CRC, а протоколом. Это позволяет ackID меняться при каждом прохождении канала, в то время как CRC пакета может оставаться постоянной сквозной проверкой целостности пакета. Когда пакет успешно получен, он подтверждается с использованием ackID пакета. Передатчик должен сохранять пакет до тех пор, пока он не будет успешно подтвержден партнером по каналу связи.

Второе значение — это физический приоритет пакета. Физический приоритет состоит из бита идентификатора виртуального канала (VC), бита приоритета и бита критического потока запросов (CRF). Бит VC определяет, идентифицируют ли биты Priority и CRF виртуальный канал от 1 до 8 или используются в качестве приоритета в виртуальном канале 0. Виртуальным каналам назначается гарантированная минимальная полоса пропускания. Внутри виртуального канала 0 пакеты с более высоким приоритетом могут передавать пакеты с более низким приоритетом. Пакеты ответов должны иметь физический приоритет выше, чем запросы, чтобы избежать тупиковой ситуации.

Вклад физического уровня в пакеты RapidIO — это 2-байтовый заголовок в начале каждого пакета, который включает в себя ackID и физический приоритет, а также последнее 2-байтовое значение CRC для проверки целостности пакета. Пакеты размером более 80 байт также имеют промежуточный CRC после первых 80 байт. За одним исключением, значение(я) CRC пакета действует как сквозная проверка целостности.

Символы управления

Символы управления RapidIO можно отправлять в любое время, в том числе внутри пакета. Это обеспечивает RapidIO минимально возможную задержку внутриполосного пути управления, позволяя протоколу достигать высокой пропускной способности с меньшими буферами, чем другие протоколы.

Управляющие символы используются для разграничения пакетов (Начало пакета, Конец пакета, Stomp), подтверждения пакетов (Подтверждение пакета, Пакет не подтвержден), сброса (Сброс устройства, Сброс порта) и для распределения событий внутри системы RapidIO (Событие многоадресной рассылки). Символ управления). Символы управления также используются для управления потоком данных (повторная попытка, состояние буфера, противодавление виртуальной очереди вывода) и для устранения ошибок.

Процедура устранения ошибки происходит очень быстро. Когда приемник обнаруживает ошибку передачи в принятом потоке данных, приемник заставляет связанный с ним передатчик отправить управляющий символ «Пакет не принят». Когда партнер по каналу получает контрольный символ «Пакет не принят», он прекращает передачу новых пакетов и отправляет контрольный символ «Запрос канала/состояние порта». Символ управления Link Response указывает идентификатор ackID, который должен использоваться для следующего передаваемого пакета. Передача пакетов затем возобновляется.

IDLE-последовательность

Последовательность IDLE используется во время инициализации канала для оптимизации качества сигнала. Он также передается, когда по каналу нет управляющих символов или пакетов для отправки.

Транспортный уровень

Каждая конечная точка RapidIO уникально идентифицируется идентификатором устройства (deviceID). Каждый пакет RapidIO содержит два идентификатора устройства. Первый — это идентификатор пункта назначения (destID), который указывает, куда следует направить пакет. Второй — это идентификатор источника (srcID), который указывает, откуда произошел пакет. Когда конечная точка получает пакет запроса RapidIO, требующий ответа, пакет ответа формируется путем замены srcID и destID запроса.

Коммутаторы RapidIO используют destID полученных пакетов для определения выходного порта или портов, которые должны пересылать пакет. Обычно destID используется для индексации массива контрольных значений. Операция индексирования выполняется быстро и недорого. Коммутаторы RapidIO поддерживают стандартную модель программирования таблицы маршрутизации, что упрощает управление системой.

Транспортный уровень RapidIO поддерживает любую топологию сети: от простых деревьев и сеток до n-мерных гиперкубов , многомерных тороидов и более экзотических архитектур, таких как запутанные сети.

Транспортный уровень RapidIO обеспечивает аппаратную виртуализацию (например, конечная точка RapidIO может поддерживать несколько идентификаторов устройств). Части идентификатора назначения каждого пакета можно использовать для идентификации конкретных частей виртуального оборудования в конечной точке.

Логический уровень

Логический уровень RapidIO состоит из нескольких спецификаций, каждая из которых предоставляет форматы пакетов и протоколы для различной семантики транзакций.

Логический ввод/вывод

Уровень логического ввода-вывода определяет форматы пакетов для чтения, записи, записи с ответом и различных атомарных транзакций. Примерами атомарных транзакций являются установка, очистка, увеличение, уменьшение, замена, проверка и замена и сравнение и замена.

Обмен сообщениями

Спецификация обмена сообщениями определяет дверные звонки и сообщения. Дверные звонки передают 16-битный код события. Сообщения передают до 4 КБ данных, сегментированных на 16 пакетов каждый с максимальной полезной нагрузкой 256 байт. Пакеты ответа должны быть отправлены для каждого запроса дверного звонка и сообщения. Значение состояния ответного пакета указывает на выполнение, ошибку или повторную попытку. Статус повторной попытки требует от отправителя запроса отправить пакет еще раз. Ответ повторной попытки логического уровня позволяет нескольким отправителям получить доступ к небольшому количеству общих ресурсов приема, что приводит к высокой пропускной способности при низком энергопотреблении.

Управление потоком

Спецификация управления потоком определяет форматы пакетов и протоколы для простых операций управления потоком XON/XOFF. Пакеты управления потоком могут создаваться коммутаторами и конечными точками. Прием пакета управления потоком XOFF останавливает передачу потока или потоков до тех пор, пока не будет получен пакет управления потоком XON или не истечет время ожидания. Пакеты управления потоком также можно использовать в качестве общего механизма управления системными ресурсами.

CC-NUMA

Спецификация Globally Shared Memory определяет форматы пакетов и протоколы для работы системы общей памяти с когерентным кэшем в сети RapidIO.

Потоковая передача данных

Спецификация потоковой передачи данных поддерживает обмен сообщениями с другими форматами пакетов и семантикой, чем спецификация обмена сообщениями. Форматы пакетов потоковой передачи данных поддерживают передачу до 64 КБ данных, сегментированных по нескольким пакетам. Каждая передача связана с классом обслуживания и идентификатором потока, что обеспечивает тысячи уникальных потоков между конечными точками.

Спецификация потоковой передачи данных также определяет форматы и семантику пакетов управления потоком расширенного заголовка для управления производительностью в системе клиент-сервер. Каждый клиент использует расширенные пакеты управления потоком заголовков, чтобы информировать сервер об объеме работы, который может быть отправлен на сервер. Сервер отвечает расширенными пакетами управления потоком заголовков, которые используют протоколы XON/XOFF, тарифные или кредитные протоколы для контроля того, как быстро и какой объем работы клиент отправляет на сервер.

Инициализация системы

Системы с известной топологией можно инициализировать особым образом, не влияя на совместимость. Спецификация инициализации системы RapidIO поддерживает инициализацию системы, когда топология системы неизвестна или динамична. Алгоритмы инициализации системы поддерживают наличие резервных хостов, поэтому при инициализации системы не должно быть единой точки отказа.

Каждый хост системы рекурсивно перечисляет структуру RapidIO, захватывая права собственности на устройства, распределяя идентификаторы устройств конечным точкам и обновляя таблицы маршрутизации коммутаторов. При возникновении конфликта владения побеждает хост системы с большим идентификатором устройства. «Проигравший» хост освобождает право владения своими устройствами и отступает, ожидая «победившего» хоста. Победивший хост завершает перечисление, включая захват владения проигравшим хостом. После завершения перечисления победивший хост освобождает право собственности на проигравший хост. Затем проигравший хост обнаруживает систему, читая таблицы маршрутизации коммутатора, и регистрируется на каждой конечной точке, чтобы узнать конфигурацию системы. Если хост-победитель не завершает перечисление за известный период времени, проигравший хост определяет, что хост-победитель потерпел неудачу, и завершает перечисление.

Системное перечисление поддерживается в Linux подсистемой RapidIO.

Управление ошибками

RapidIO поддерживает отказоустойчивую систему высокой доступности, включая горячую замену. Определены состояния ошибок, которые требуют обнаружения, и стандартные регистры для передачи информации о состоянии и ошибках. Также определен настраиваемый механизм изоляции, позволяющий в случае невозможности обмена пакетами по каналу отбрасываться, чтобы избежать перегрузки и обеспечить возможность диагностики и восстановления. Определены внутриполосные (пакеты записи в порт) и внеполосные (прерывания) механизмы уведомления.

Форм-факторы

Спецификация RapidIO не обсуждает вопросы форм-факторов и разъемов, оставляя это на усмотрение конкретных сообществ, ориентированных на приложения. RapidIO поддерживается следующими форм-факторами:

• Передовая телекоммуникационная вычислительная архитектура
• Расширенная мезонинная карта
• ХМС
• OpenVPX
• VXS

Программное обеспечение

Поддержка RapidIO, не зависящая от процессора, находится в ядре Linux.

Приложения

Соединение RapidIO широко используется в следующих приложениях. :

• Беспроводные базовые станции
• для аэрокосмической и военной промышленности Одноплатные компьютеры , а также радиолокационные, акустические системы и системы обработки изображений.
• Видео
• Хранилище
• Суперкомпьютеры
• Медицинская визуализация
• Приложения промышленного управления и передачи данных

RapidIO расширяет свою деятельность в области суперкомпьютерных, серверных и хранилищных приложений.

Конкурирующие протоколы

PCI Express ориентирован на рынок хостов и периферийных устройств, а не на рынок встраиваемых систем. В отличие от RapidIO, PCIe не оптимизирован для одноранговых многопроцессорных сетей. PCIe идеально подходит для связи между хостом и периферией. PCIe не так хорошо масштабируется в больших многопроцессорных одноранговых системах, поскольку базовое предположение PCIe о «корневом комплексе» создает проблемы отказоустойчивости и управления системой.

Другой альтернативной технологией межсоединений является Ethernet . Ethernet — это надежный подход к соединению компьютеров на больших географических территориях, где топология сети может неожиданно измениться, используемые протоколы постоянно меняются, а задержки соединения велики. Чтобы решить эти проблемы, системам на базе Ethernet требуется значительный объем вычислительной мощности, программного обеспечения и памяти во всей сети для реализации протоколов управления потоками, передачи данных и маршрутизации пакетов. RapidIO оптимизирован для энергоэффективной связи между процессорами с низкой задержкой в ​​отказоустойчивых встроенных системах, охватывающих географические области менее одного километра.

SpaceFibre — это конкурирующая технология для космических приложений.

Ethernet с синхронизацией по времени — это конкурирующая технология для более сложных объединительных плат (VPX) и магистральных приложений в космосе (пусковые установки и интегрированная авионика, рассчитанная на человека).

См. также

• Автобус (вычислительный)
• PCI Экспресс

Внешние ссылки

• RapidIO (домашний) .
• Технические характеристики (текущая ред.), RapidIO .
• RapidIO на GitHub
• RapidIO , Открытые ядра .