Интернет-трафик
 | Графики недоступны по техническим причинам. Дополнительную информацию можно найти на Phabricator и на MediaWiki.org . |
Интернет-трафик — это поток данных внутри всего Интернета или в определенных сетевых соединениях составляющих его сетей. Обычными измерениями трафика являются общий объем в единицах, кратных байту , или скорость передачи в байтах за определенные единицы времени.
Поскольку топология Интернета не является иерархической, единая точка измерения общего интернет-трафика невозможна. Данные о трафике можно получить от точек пиринга сетевых провайдеров первого уровня для определения объема и роста. Однако в такие данные не входит трафик, который остается в сети одного поставщика услуг, и трафик, пересекающий частные точки пиринга.
По состоянию на декабрь 2022 года почти половина (48%) интернет-трафика приходится на Индию и Китай , тогда как на Северную Америку и Европу приходится около четверти мирового интернет-трафика. [1]
Источники трафика
[ редактировать ]Совместное использование файлов составляет часть интернет-трафика. [2] Распространенной технологией обмена файлами является протокол BitTorrent , который представляет собой одноранговую (P2P) систему, работающую через индексирующие сайты, предоставляющие каталоги ресурсов. По данным Sandvine Research, в 2013 году доля Bit Torrent в интернет-трафике снизилась на 20% до 7,4% в целом по сравнению с 31% в 2008 году. [3]
По состоянию на 2023 год примерно 65% всего интернет-трафика приходилось на видеосайты . [4] по сравнению с 51% в 2016 году. [5]
По оценкам, в 2022 году примерно 47% всего трафика приходилось на автоматизированных ботов . [6]
Управление трафиком
[ редактировать ]
Управление интернет-трафиком, также известное как управление трафиком приложений.Интернет не использует никаких формально централизованных средств управления трафиком. Сети-прародители, особенно ARPANET, создали раннюю магистральную инфраструктуру, которая передавала трафик между основными центрами обмена трафиком, в результате чего возникла многоуровневая иерархическая система интернет-провайдеров (ISP), в которой сети уровня 1 обеспечивали обмен трафиком посредством пиринга без расчетов. и маршрутизация трафика на более низкие уровни интернет-провайдеров. Динамичный рост всемирной сети привел к постоянному увеличению межсоединений на всех пиринговых уровнях Интернета, поэтому была разработана надежная система, которая могла бы устранять сбои каналов, узкие места и другие перегрузки на многих уровнях. [ нужна ссылка ]
Экономическое управление трафиком (ETM) — это термин, который иногда используется для обозначения возможностей распространения как практики, которая способствует вкладу в одноранговый обмен файлами и распространение контента в цифровом мире в целом. [7]
Налог на использование Интернета
[ редактировать ]Запланированный налог на использование Интернета в Венгрии ввел налог в размере 150 форинтов (0,62 доллара США, 0,47 евро) за гигабайт трафика данных, что было сделано с целью сократить интернет-трафик, а также помочь компаниям компенсировать корпоративный подоходный налог в счет нового сбора. [8] В 2013 году Венгрия достигла 1,15 миллиарда гигабайт, а еще 18 миллионов гигабайт накопили мобильные устройства. По данным консалтинговой фирмы eNet, это привело бы к дополнительным доходам в размере 175 миллиардов форинтов в рамках нового налога. [8]
По данным Yahoo News, министр экономики Михай Варга поддержал этот шаг, заявив, что «налог был справедливым, поскольку он отражает переход потребителей к Интернету от телефонных линий» и что «150 форинтов за каждый переданный гигабайт данных - необходимо, чтобы заткнуть дыры». в бюджете 2015 года одной из стран ЕС с наибольшей задолженностью». [9]
страны Некоторые утверждают, что новый план налога на Интернет окажется невыгодным для экономического развития , ограничит доступ к информации и помешает свободе выражения мнений. [10] Около 36 000 человек зарегистрировались, чтобы принять участие в мероприятии в Facebook, которое пройдет возле Министерства экономики, в знак протеста против возможного налога. [9]
Классификация трафика
[ редактировать ]Классификация трафика описывает методы классификации трафика путем пассивного наблюдения за особенностями трафика и соответствия конкретным целям классификации. Могут быть такие, которые преследуют только вульгарную классификационную цель. Например, будь то массовая передача, одноранговый обмен файлами или транзакционная ориентация. Некоторые другие устанавливают более детальную цель классификации, например, точное количество приложений, представленных в трафике. Характеристики трафика включали номер порта, полезную нагрузку приложения, время, размер пакета и характеристики трафика. Существует широкий спектр методов распределения интернет-трафика, включая точный трафик, например, номер порта (компьютерной сети) , полезную нагрузку, эвристику или статистическое машинное обучение.
Точная классификация сетевого трафика является элементарной для многих действий в Интернете: от мониторинга безопасности до учета и от качества обслуживания до предоставления операторам полезных прогнозов для долгосрочного обеспечения. Тем не менее, схемы классификации чрезвычайно сложны для точной работы из-за нехватки доступных знаний о сети. Например, информации, связанной с заголовком пакета, всегда недостаточно для разработки точной методологии.
Методы байесовского анализа
[ редактировать ]Работа [11] включая контролируемое машинное обучение для классификации сетевого трафика. Данные вручную классифицируются (на основе содержимого потока) по одной из нескольких категорий. Для обучения классификатора используется комбинация категории набора данных (назначаемой вручную) и описаний классифицированных потоков (например, длина потока, номера портов, время между последовательными потоками). Чтобы лучше понять саму технику, сделаны первоначальные предположения, а также применяются два других метода в реальности. Один из них — улучшить качество и разделение входной информации, что приведет к повышению точности метода наивного байесовского классификатора .
Основой категориальной работы является классификация типа интернет-трафика; это делается путем помещения общих групп приложений в разные категории, например, «обычные» и «вредоносные», или путем более сложных определений, например, идентификации конкретных приложений или конкретных реализаций протокола управления передачей (TCP). [12] Адаптировано из Logg et al. [13]
Опрос
[ редактировать ]Классификация трафика является основным компонентом автоматизированных систем обнаружения вторжений. [14] [15] Они используются для выявления закономерностей, а также указания сетевых ресурсов для приоритетных клиентов или для выявления использования клиентом сетевых ресурсов, которое каким-либо образом противоречит условиям обслуживания оператора.Обычно используемые методы классификации трафика Интернет-протокола (IP) основаны примерно на прямой проверке содержимого каждого пакета в некоторой точке сети. Адрес источника, порт и адрес назначения включаются в последовательные IP-пакеты с похожим, если не одинаковым, пятикортежным типом протокола. ort считаются принадлежащими потоку, управляющее приложение которого мы хотим определить. Простая классификация позволяет определить личность управляющего приложения, предполагая, что большинство приложений постоянно используют известные номера портов TCP или UDP. Несмотря на это, многие кандидаты все чаще используют непредсказуемые номера портов. В результате более сложные методы классификации определяют типы приложений путем поиска данных, специфичных для приложения, в TCP или Полезные данные протокола пользовательских дейтаграмм (UDP). [16]
Глобальный интернет-трафик
[ редактировать ], крупная компания по производству сетевых систем, обобщив данные из нескольких источников и применив предположения об использовании и скорости передачи данных, Компания Cisco опубликовала следующие исторические данные об интернет-протоколе (IP) и интернет-трафике: [17]
| Год | IP-трафик ( ПБ /месяц) | Фиксированный интернет-трафик ( ПБ /месяц) | Мобильный интернет-трафик ( ПБ /месяц) |
|---|---|---|---|
| 1990 | 0.001 | 0.001 | н/д |
| 1991 | 0.002 | 0.002 | н/д |
| 1992 | 0.005 | 0.004 | н/д |
| 1993 | 0.01 | 0.01 | н/д |
| 1994 | 0.02 | 0.02 | н/д |
| 1995 | 0.18 | 0.17 | н/д |
| 1996 | 1.9 | 1.8 | н/д |
| 1997 | 5.4 | 5.0 | н/д |
| 1998 | 12 | 11 | н/д |
| 1999 | 28 | 26 | н/д |
| 2000 | 84 | 75 | н/д |
| 2001 | 197 | 175 | н/д |
| 2002 | 405 | 356 | н/д |
| 2003 | 784 | 681 | н/д |
| 2004 | 1,477 | 1,267 | н/д |
| 2005 | 2,426 | 2,055 | 0.9 |
| 2006 | 3,992 | 3,339 | 4 |
| 2007 | 6,430 | 5,219 | 15 |
| 2008 [18] | 10,174 | 8,140 | 33 |
| 2009 [19] | 14,686 | 10,942 | 91 |
| 2010 [20] | 20,151 | 14,955 | 237 |
| 2011 [21] | 30,734 | 23,288 | 597 |
| 2012 [22] [23] | 43,570 | 31,339 | 885 |
| 2013 [24] | 51,168 | 34,952 | 1,480 |
| 2014 [25] | 59,848 | 39,909 | 2,514 |
| 2015 [26] | 72,521 | 49,494 | 3,685 |
| 2016 [27] | 96,054 | 65,942 | 7,201 |
| 2017 [28] | 122,000 | 85,000 | 12,000 |
«Фиксированный интернет-трафик», возможно, относится к трафику от частных и коммерческих абонентов интернет-провайдерам, кабельным компаниям и другим поставщикам услуг. «Мобильный интернет-трафик», возможно, относится к транзитному трафику от вышек сотовой связи и провайдеров. Общие цифры «Интернет-трафика», которые могут быть на 30% выше, чем сумма двух других, возможно, учитывают трафик в ядре национальной магистральной сети, тогда как другие цифры, похоже, получены в основном из периферии сети.
Cisco также публикует пятилетние прогнозы.
| Год | Фиксированный интернет-трафик ( ЭБ /месяц) | Мобильный интернет-трафик ( ЭБ /месяц) |
|---|---|---|
| 2018 | 107 | 19 |
| 2019 | 137 | 29 |
| 2020 | 174 | 41 |
| 2021 | 219 | 57 |
| 2022 | 273 | 77 |
Магистральный интернет-трафик в США
[ редактировать ]Следующие данные по магистральной сети Интернета в США взяты из исследования интернет-трафика штата Миннесота (MINTS): [29]
| Год | Данные ( ТБ /месяц) |
|---|---|
| 1990 | 1 |
| 1991 | 2 |
| 1992 | 4 |
| 1993 | 8 |
| 1994 | 16 |
| 1995 | н/д |
| 1996 | 1,500 |
| 1997 | 2,500–4,000 |
| 1998 | 5,000–8,000 |
| 1999 | 10,000–16,000 |
| 2000 | 20,000–35,000 |
| 2001 | 40,000–70,000 |
| 2002 | 80,000–140,000 |
| 2003 | н/д |
| 2004 | н/д |
| 2005 | н/д |
| 2006 | 450,000–800,000 |
| 2007 | 750,000–1,250,000 |
| 2008 | 1,200,000–1,800,000 |
| 2009 | 1,900,000–2,400,000 |
| 2010 | 2,600,000–3,100,000 |
| 2011 | 3,400,000–4,100,000 |
Данные Cisco могут в семь раз превышать данные Миннесотского исследования интернет-трафика (MINTS) не только потому, что цифры Cisco являются оценками для глобального (а не только внутреннего США) Интернета, но и потому, что Cisco учитывает «общий IP-трафик (таким образом, включая закрытые сети, которые на самом деле не являются частью Интернета, но используют IP, интернет-протокол, например услуги IPTV различных телекоммуникационных компаний)». [30] Оценка MINTS национального магистрального трафика США за 2004 год, которую можно интерполировать как 200 петабайт в месяц, в три раза превышает объем трафика крупнейшего магистрального оператора США Level(3) Inc. , который заявляет о среднем трафике. уровень 60 петабайт/мес. [31]
Закон Эдгольма
[ редактировать ]В прошлом пропускная способность Интернета в телекоммуникационных сетях удваивалась каждые 18 месяцев, что выражено в законе Эдхольма . [32] Это следует за достижениями в области полупроводниковых технологий, таких как масштабирование металл-оксид-кремний (МОП) , примером которого является МОП-транзистор, который продемонстрировал аналогичное масштабирование, описанное законом Мура . В 1980-х годах волоконно-оптическая технология, использующая лазерный свет в качестве носителя информации, увеличила скорость передачи и пропускную способность телекоммуникационных цепей. Это привело к тому, что пропускная способность сетей связи достигла скорости передачи терабит в секунду . [33]
См. также
[ редактировать ]Ссылки
[ редактировать ]- ^ Кар, Аюши (04 декабря 2022 г.). «Конец американского интернета, на долю Индии и Китая приходится 50% мирового трафика данных» . www.thehindubusinessline.com . Проверено 24 декабря 2022 г.
- ^ «Объем данных о глобальном трафике обмена файлами с 2013 по 2018 год» . Статистика . 2014 . Проверено 18 октября 2014 г.
- ^ Пол Резеников (12 ноября 2013 г.). «Обмен файлами сейчас составляет менее 10% интернет-трафика США…» Проверено 18 октября 2014 г. .
- ^ «В 2022 году 65% всего интернет-трафика пришлось на видеосайты» . 20 января 2023 г.
- ^ «Результат онлайн-видео может снова утроить потребление полосы пропускания в ближайшие пять лет» . 8 июня 2017 г.
- ^ «47% всего интернет-трафика в 2022 году пришло от ботов | Журнал Security» .
- ^ Деспотович, З., Хоссфельд, Т., Келлерер, В., Леридер, Ф., Охснер, С., Мишель, М. (2011). Смягчение несправедливости в одноранговых сетях с учетом местоположения. Международный журнал сетевого управления
- ^ Перейти обратно: а б Мартон Дунай (2014). «Венгрия планирует новый налог на интернет-трафик, общественность призывает к митингу» .
- ^ Перейти обратно: а б «В Венгрии растет гнев по поводу налога на интернет» . Yahoo Новости . 25 октября 2014 года . Проверено 18 октября 2014 г.
- ^ Маргит Фехер (2014). «Общественное возмущение растет по поводу плана голода обложить налогом использование Интернета» . Проверено 18 октября 2014 г.
- ^ Денис Зуев (2013). «Классификация интернет-трафика с использованием метода байесовского анализа» (PDF) . Проверено 18 октября 2014 г.
- ^ Дж. Падхе; С.Флойд (июнь 2001 г.). «Определение поведения TCP веб-серверов». В материалах SIGCOMM 2011, Сан-Диего, Калифорния .
- ^ К.Логг; Л.Коттрелл (2003). «Национальная ускорительная лаборатория SLAC» . Архивировано из оригинала 13 июня 2008 года . Проверено 21 октября 2014 г.
- ^ Система обнаружения вторжений Bro – обзор Bro, http://bro-ids.org , по состоянию на 14 августа 2007 г.
- ^ В. Паксон, «Брат: система обнаружения сетевых злоумышленников в режиме реального времени», Computer Networks, № 31 (23–24), стр. 2435–2463, 1999.
- ^ С. Сенатор, О. Спатс Чек и Д. Ван, «Точная, масштабируемая сетевая идентификация P2P-трафика с использованием подписей приложений», в WWW2004, Нью-Йорк, штат Нью-Йорк, США, май 2004 г.
- ^ «Индекс визуальных сетей» , Cisco Systems
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2008–2013 гг .» (PDF), 9 июня 2009 г. Проверено 13 июня 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2009–2014 гг .» (PDF), 2 июня 2010 г. Проверено 13 июня 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2010–2015 гг .» (PDF), 1 июня 2011 г. Проверено 13 июня 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2011–2016 гг. Архивировано 9 августа 2020 г. в Wayback Machine » (PDF) , 30 мая 2012 г. Проверено 13 июня 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: обновление глобального прогноза мобильного трафика данных, 2012–2017 гг. Архивировано 12 августа 2016 г. на Wayback Machine » (PDF), 2 февраля 2013 г. Проверено 13 июня 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2012–2017 гг. » (PDF), 29 мая 2013 г. Получено с сайта archive.org, 28 августа 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2013–2018 гг. » (PDF), 10 июня 2014 г. Получено с сайта archive.org, 28 августа 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2014–2019 » (PDF), 27 мая 2015 г. Получено с сайта archive.org, 28 августа 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2015–2020 гг .» (PDF) 6 июня 2016 г. Проверено 13 июня 2016 г.
- ^ Cisco, « Индекс визуальных сетей Cisco: прогноз и методология, 2016–2021 гг .» (PDF) 6 июня 2017 г. Проверено 14 августа 2017 г.
- ^ Перейти обратно: а б Cisco, « Индекс визуальных сетей Cisco: прогноз и тенденции, 2017–2022 гг .» (PDF) 28 ноября 2018 г. Проверено 9 января 2019 г.
- ↑ Исследования интернет-трафика Миннесоты (MINTS). Архивировано 28 декабря 2017 г. в Wayback Machine , Университет Миннесоты.
- ^ «MINTS — Исследования интернет-трафика Миннесоты» . Проверено 16 апреля 2017 г.
- ^ Годовой отчет за 2004 г., уровень (3), апрель 2005 г., стр. 1.
- ^ Черри, Стивен (2004). «Закон полосы пропускания Эдхольма». IEEE-спектр . 41 (7): 58–60. дои : 10.1109/MSPEC.2004.1309810 . S2CID 27580722 .
- ^ Джиндал, Р.П. (2009). «От миллибитов до терабит в секунду и выше – более 60 лет инноваций» . 2009 2-й международный семинар по электронным устройствам и полупроводниковым технологиям . стр. 1–6. дои : 10.1109/EDST.2009.5166093 . ISBN 978-1-4244-3831-0 . S2CID 25112828 .
Дальнейшее чтение
[ редактировать ]- Уильямсон, Кэри (2001). «Измерение интернет-трафика». IEEE Интернет-вычисления . 5 (6): 70–74. дои : 10.1109/4236.968834 .
Внешние ссылки
[ редактировать ]- «Размер и темпы роста Интернета» , К.Г. Коффман и Эндрю Одлизки, Первый понедельник , Том 3, Номер 5, октябрь 1998 г.
- Отчет об интернет-трафике от AnalogX
- Отчет о состоянии Интернета от Keynote Systems
- Кооперативная ассоциация по анализу интернет-данных. Архивировано 14 мая 2014 г. в Wayback Machine (CAIDA), расположенном в Калифорнийского университета в Сан-Диего. суперкомпьютерном центре