В 2024 году глобальный интернет-трафик значительно вырос. Компания Cloudflare опубликовала свой ежегодный отчёт, в котором проанализировала изменения в предпочтениях и привычках пользователей интернета со всего мира, касающиеся платформ, мессенджеров и используемых устройств.

Источник изображения: Albert Stoynov / Unsplash

Согласно отчёту, Google сохранила свои позиции самого популярного интернет-сервиса в целом. OpenAI остался лидером в категории «Генеративный ИИ». Binance остался на ведущей позиции в категории «Криптовалюта», а WhatsApp лидирует в качестве платформы по обмену сообщениями. Здесь также отметим, что Telegram вышел на третье место по популярности среди мессенджеров во всём мире, обогнав, например, Viber и WeChat. Facebook✴ всё также является самой посещаемой социальной сетью, а YouTube — самой популярной видеоплатформой.

Отметился в статистике и «Яндекс» — его поисковый движок оказался вторым по популярности в мире после Google. Правда, доли их несопоставимо разнятся: Google контролирует 88,5 % мирового поиска, а «Яндекс» — всего 3,1 %. А «Яндекс Браузер» оказался третьим по популярности обозревателем на Android — с долей 1,4 %. Лидирует среди браузеров Google Chrome — 65.8 % всего рынка.

Хотя тот факт, что люди проводят много времени онлайн, не является новостью, Cloudflare представила статистику, демонстрирующую невероятный рост глобального интернет-трафика. «Несмотря на небольшие спады в конце февраля и летом, в последнем квартале наблюдался резкий скачок трафика», — говорится в отчёте. По состоянию на конец ноября общий годовой трафик увеличился на 17,2 %. Однако это увеличение распределено неравномерно. Например, в Гвинее рост составил колоссальные 350 %, отмечает издание PCWorld.

Почти в 100 регионах большая часть трафика приходится на мобильные устройства, а в мировом масштабе зафиксированы показатели в виде 41,3 %. Из них почти треть — это устройства Apple iOS. На Android приходится более 90 % трафика в 29 регионах. При этом пиковая доля трафика мобильных устройств iOS составляет более 60 % в восьми регионах.

Отчёт Cloudflare содержит и другие интересные показатели. В частности, в 2024 году было зафиксировано 225 крупных сбоев в работе интернета по всему миру. Системами безопасности Cloudflare было обезврежено 6,5 % мирового трафика, который был определён как потенциально опасным. В США эта цифра выросла до 5,1 %, а в Южной Корее она немного снизилась до 8,1 %. В 44 странах было обезврежено более 10 % трафика. Также зафиксировано, что в глобальном масштабе азартные игры стали наиболее атакованной отраслью, немного опередив самую пострадавшую в 2023 году отрасль — финансы.

Данные отчёта свидетельствуют ещё об одном любопытном факте. Развитие и доступность спутникового интернета стремительно набирает популярность в разных регионах мира. В частности, глобальный трафик Starlink вырос более чем на 330 % в 2024 году, в том числе за счёт запуска сервиса в Малави (Южная Африка) в июле 2023 года. Трафик Starlink из этой страны в 2024 году вырос в 38 раз.

Центр мониторинга и управления сетью связи общего пользования (ЦМУ ССОП, входит в Роскомнадзор) рекомендовал владельцам веб-ресурсов отказаться от использования CDN-сервиса CloudFlare. Это связано с тем, что американская компания с октября этого года использует на своих серверах расширение TLS ECH (Encrypted Client Hello) для обхода блокировок доступа к запрещённой в России информации, что является нарушением действующего в стране законодательства.

Источник изображения: Firmbee/Pixabay

«Американская компания CloudFlare, поставщик услуг CDN, включила в октябре применение по умолчанию на своих серверах расширения TLS ECH. Эта технология — средство обхода ограничений доступа к запрещённой в России информации. Его использование нарушает российское законодательство и ограничивается техническими средствами противодействия угрозам (ТСПУ)», — сказано в сообщении ЦМУ ССОП.

Владельцам веб-ресурсов в ведомстве рекомендовали отключить расширение TLS ECH или же перейти на использование отечественных CDN-сервисов, которые способны обеспечить надёжное функционирование площадок и защиту от кибератак. К примеру, защиту от DDoS-атак может обеспечить Национальная система противодействия DDoS-атакам (НСПА), которая за время работы с марта 2024 года отразила более 10,5 тыс. DDoS-атак.

В сообщении отмечается, что CloudFlare входит в число IT-компаний, представители которых в сентябре этого года принимали участие в заседании Госдепа США, в ходе которого обсуждалось комплексное и организованное противодействие странам, защищающим свой информационный суверенитет. Ранее в интернете также появлялась информация о блокировке Роскомнадзором CDN-сервиса CloudFlare из-за использования упомянутого протокола, позволяющего обходить блокировки.

В ночь на 6 ноября у россиян пропал доступ ко многим сайтам. Как сообщает ресурс Hi-Tech Mail, проблемы связаны с запуском Роскомнадзором блокировки всех сайтов с шифрованием ECH, число которых исчисляется сотнями тысяч. Поэтому многие сайты перестали открываться. Пока что ограничения не затронули мобильных операторов.

Источник изображения: Firmbee/Pixabay

В октябре 2024 сеть доставки контента (CDN) Cloudflare активировала на собственных серверах расширение TLS ECH (Encrypted Client Hello). Протокол ECH позволяет повысить конфиденциальность пользователей при установке HTTPS-соединений с помощью шифрования определённых метаданных, например, имени сайта (SNI), к которому они подключаются. Благодаря шифрованию не только содержимого соединения, но и самого сообщения Client Hello, которое включает в себя SNI, использование ECH затрудняет наблюдение за трафиком и помогает защитить приватность пользователя в Сети.

Роскомнадзор использует чтение и анализ SNI для выборочных блокировок сайтов с применением технических средств противодействия угрозам (ТСПУ). Поскольку ECH делает невозможными точечные запреты сетевых ресурсов, расположенных за CDN Cloudflare, в РКН решили полностью заблокировать подключение к сайтам с ECH от Cloudflare, пишет Hi-Tech Mail. В связи с этим для пользователей оказались недоступными многие популярные сайты, включая вполне легальные и безопасные, например, форумы и новостные ресурсы.

Чтобы решить проблему, по крайней мере, на данном этапе можно переключиться с домашнего на мобильный интернет.

Компания Cloudflare сообщила об успешном отражении рекордной по объёму DDoS-атаки со скоростью 3,8 Тбит/с. Этот инцидент превзошёл предыдущий рекорд, установленный в ноябре 2021 года, когда на Microsoft была осуществлена похожая DDoS-атака в 3,47 Тбит/с, цель которой состояла в исчерпании пропускной способности ресурса и недоступности его для пользователей.

Источник изображения: Copilot

По данным PCMag, атака стала частью масштабной хакерской кампании, продолжающейся уже более месяца, в ходе которой было зафиксировано более 100 крупных DDoS-атак, скорость которых превышала 3 Тбит/с. В Cloudflare отметили, что смогли отразить эту крупномасштабную атаку благодаря глобальной сети серверов, способной эффективно распределять входящий трафик. Этому также способствовала система, позволяющая в реальном времени анализировать и фильтровать вредоносные данные.

Источник изображения: Cloudflare

Cloudflare не раскрыла имена пострадавших клиентов, однако сообщила, что атаки были направлены на компании из финансового сектора, сферы телекоммуникаций и интернет-услуг. «Обнаружение и смягчение последствий было полностью автономным», — говорится в блоге компании.

В ходе расследования было установлено, что неправомерные действия были организованы с использованием ботнета, состоящего из взломанных интернет-устройств, включая маршрутизаторы Asus и MikroTik, DVR и веб-серверы. Захваченные устройства использовались для генерации огромного объёма трафика, направленного на целевые сайты и приложения. В данном случае ботнет применил протокол UDP (User Datagram Protocol), который позволяет быстро передавать данные, но может быть также использован для создания мощных DDoS-атак, известных как UDP flood.

Анализ непосредственно интернет-трафика показал, что захваченные устройства находились в таких странах, как Россия, Бразилия, Вьетнам, Испания и США. Cloudflare также добавила, что хакеры, вероятно, скомпрометировали домашние маршрутизаторы Asus через недавно обнаруженную уязвимость высокой степени опасности, затрагивающую около 157 000 моделей данных устройств.

Компания Cloudflare представила новый инструмент AI Audit, который позволит владельцам сайтов отслеживать использование их контента ИИ-ботами и либо блокировать им доступ к своей инфоромации, либо устанавливать цену за его использование.

Источник изображения: Copilot

Cloudflare ранее представила инструмент, который просто предотвращал сбор текстов и изображений для обучения ИИ — скрейпинг. Теперь, как сообщает издание SiliconANGLE, компания анонсировала расширение его функций, выпустив AI Audit — инструмент, предоставляющий набор возможностей, помогающих проанализировать действия ИИ-ботов и монетизировать контент.

Скрейпинг текстов и изображений стал обычной практикой в индустрии ИИ, так как интернет предоставляет огромное количество контента, который может использоваться для обучения моделей. Однако это вызывает споры, так как многие издатели считают, что такие действия несправедливы, особенно когда они не осведомлены о том, что их материалы (по сути нелегально) используются. При этом, ведущие компании, занимающиеся разработкой ИИ, такие как OpenAI, Google, Meta✴, Stability AI, IBM и Microsoft открыто признают, что используют контент издателей, ссылаясь на доктрину «добросовестного использования».

Однако критики утверждают, что скрейпинг негативно повлияет на издателей, поскольку приведёт к потере трафика и потенциальной прибыли. Например, сайт с кулинарными рецептами может потерять значительную часть аудитории из-за чат-ботов, которые используют его контент для ответов на запросы пользователей. Если пользователь получит информацию у искусственного интеллекта, то у него навряд ли появится стимул посещать сам сайт, даже если он указан в качестве источника.

Некоторые издатели уже начали блокировать доступ ИИ к своим ресурсам. Например, в прошлом месяце The New York Times и CNN официально заблокировали GPTBot от компании OpenAI. В то же время другие сайты, например Reddit, предлагают доступ к своему контенту за плату через специальные API, которые позволяют ИИ-компаниям оплачивать использование данных.

Cloudflare стремится дать возможность всем владельцам сайтов контролировать использование своего контента. AI Audit, включающий функцию блокировки доступа любых ИИ-ботов и аналитику, как раз и призван обеспечить прозрачность взаимодействия между создателями контента и ИИ-разработчиками. Инструмент поможет определить, когда, как часто и зачем ИИ-модели обращаются к страницам сайта, а также фиксировать ботов, которые указывают источник данных, и тех, которые этого не делают.

Кроме того, AI Audit поможет владельцам сайтов определить справедливую цену за доступ к контенту, основываясь на рыночных ставках, установленных крупными издателями, такими как Reddit. По словам представителей Cloudflare, это необходимо, поскольку у многих небольших сайтов нет ресурсов и опыта для оценки стоимости своего контента и ведения переговоров с ИИ-компаниями. При этом сами компании также не имеют возможности заключать отдельные соглашения с каждым из миллионов сайтов.

«Если создатели контента не будут иметь такого контроля, качество онлайн-информации ухудшится или она станет доступна только по платной подписке, — считает соучредитель и генеральный директор Cloudflare Мэтью Принс (Matthew Prince). — Благодаря масштабу и глобальной инфраструктуре Cloudflare мы можем предоставить инструменты и установить стандарты, которые дадут веб-сайтам, издателям и создателям контента контроль и справедливую компенсацию за их вклад в интернет, при этом позволяя поставщикам ИИ-моделей продолжать внедрять инновации».

Пользователи по всему миру столкнулись с ошибками подключения к сайтам, работающим через сервис услуг CDN и защиты от DDoS-атак Cloudflare. При этом проблемы с доступом варьируются в зависимости от региона. Сервис анализа сбоев Downdetector также зафиксировал рост жалоб на сбои у Cloudflare.

Источник изображения: Copilot

Cloudflare утверждает, что в настоящее время проводит плановое техническое обслуживание в Сингапуре и Нэшвилле (США), однако на странице статуса сервисов компании информация о каких-либо проблемах отсутствует. Тем не менее, многие пользователи по всему миру сообщают о проблемах с доступом к сайтам, которые используют Cloudflare. При попытке открыть такие сайты браузеры выдают сообщения об ошибке, свидетельствующие о проблемах с подключением к серверу.

О проблемах написал ресурс BleepingComputer, сайт которого также стал жертвой этого сбоя. «Наши пользователи испытывают проблемы с периодическим доступом к площадке. Однако инструменты мониторинга показывают, что мы по-прежнему принимаем трафик, что указывает на региональный характер сбоя», — говорится в сообщении. На момент публикации новости пользователи из США могут зайти на сайт, однако сотрудники ресурса, проживающие в других странах не могут получить к нему доступ.

Сервис Downdetector также зафиксировал рост числа жалоб на Cloudflare около 20:45 по московскому времени, что совпадает с моментом, когда BleepingComputer начал испытывать проблемы. Аналогичные сообщения поступают и из социальной сети X. Пользователи сообщают, что их сайты недоступны по протоколу IPv4, однако доступны через IPv6.

Сбой Cloudflare также затронул ресурс NodeJS. Организация сообщила, что проблема влияет на «возможность доступа к nodejs.org, включая доступ к загрузке пакетов Node.js». BleepingComputer обратился в Cloudflare за комментариями, но компания пока ответ не дала.

Компания Cloudflare запустила новый бесплатный инструмент для защиты веб-сайтов от ботов, которые извлекают данные для обучения моделей искусственного интеллекта без согласия владельцев сайтов.

Источник изображения: Cloudflare

Cloudflare, поставщик облачных услуг по предоставлению DNS и защиты от DDoS-атак, представила новое решение для борьбы с ботами искусственного интеллекта, которые несанкционированно занимаются сбором данных с веб-сайтов. Новый бесплатный инструмент защитит сайты, размещённые на платформе Cloudflare, от извлечения их контента для обучения ИИ-моделей.

Хотя некоторые крупные игроки в сфере ИИ, такие как Google, OpenAI и Apple, позволяют владельцам сайтов блокировать ботов через специальный файл robots.txt, далеко не все владельцы подобных ботов соблюдают эти правила. Cloudflare отмечает, что некоторые компании ИИ намеренно обходят ограничения доступа к контенту, постоянно адаптируясь и меняя свои алгоритмы, чтобы избежать обнаружения.

Чтобы решить эту проблему, Cloudflare проанализировала трафик краулеров и разработала автоматические модели их обнаружения, которые учитывают различные факторы, в том числе включая попытки ботов имитировать действия человека, использующего веб-браузер. Также создана специальная форма, позволяющая сообщать о подозрительных ботах и сканерах. На основе полученных данных Cloudflare будет вручную заносить ботов ИИ в черный список.

Проблема сбора данных ботами ИИ стала особенно актуальной на фоне бума генеративного ИИ. Многие сайты опасаются, что поставщики ИИ будут использовать их контент без разрешения и какой-либо компенсации. Согласно исследованию, около 26 % из 100 крупнейших новостных сайтов заблокировали бота OpenAI и 242 сайта из 1000 наиболее популярных также в настоящее время блокируют GPTBot. Другое исследование показало, что уже более 600 крупных новостных издателей заблокировали различных ботов.

Так как многие ИИ-боты игнорируют правила, прописанные в robots.txt, то приходится искать новые методы решения вопроса. Инструменты, подобные разработке Cloudflare, могут помочь в борьбе с несанкционированным сбором данных. Но насколько это окажется эффективным покажет время.

Cloudflare разрабатывает собственный межсетевой экран для генеративных ИИ-моделей с целью защитить их от потенциальных кибератак или других вредоносных угроз. Кроме поддержки современных стандартов сетевой безопасности, брандмауэр с помощью нейросети будет анализировать запросы, отправленные пользователями генеративного ИИ, чтобы попытаться заранее обнаружить потенциальные эксплойты.

Источник изображения: blog.cloudflare.com

«Некоторые уязвимости, затрагивающие традиционные веб-приложения и API-приложения, применимы и к миру LLM (больших языковых моделей), включая инъекции или кражу данных, — сообщил менеджер по продукту Cloudflare Group Даниэле Молтени (Daniele Molteni). — Однако существует новый набор угроз, которые теперь актуальны из-за того, как работают программы LLM».

Вводимые пользователем данные на сайтах и в инструментах ИИ сначала подвергнутся фильтрации через Cloudflare и лишь затем достигнут самого генеративного ИИ. Брандмауэр также сможет прерывать генеративные запросы ИИ и сканировать их на наличие потенциальных угроз. Данные, отправленные в общедоступные модели ИИ, такие как ChatGPT или Claude, могут быть доступны практически любому, поэтому брандмауэр Cloudflare будет очищать запросы пользователей от потенциально конфиденциальной информации.

Брандмауэр Cloudflare с ИИ может также подвергать цензуре вводимые пользователем данные другими способами. Брандмауэр разрабатывается для предотвращения «манипулирования» моделями ИИ с помощью входных данных, которые могут привести к галлюцинациям модели и другим ложным или опасным реакциям.

Согласно сообщению Cloudflare, клиенты также смогут «блокировать запросы, которые попадают в неуместные категории», если у них есть опасения, что такие запросы могут привести к тому, что ИИ будет использовать «токсичную, оскорбительную или проблемную лексику». Хотя компания называет такие случаи примерами «атак быстрого внедрения», неясно, в какой степени будут подвергаться цензуре подлинные запросы пользователей.

На этой неделе Cloudflare также представила сервис «Защитный искусственный интеллект» для бизнеса, который использует нейросеть для анализа веб-сайтов на предмет потенциальных угроз, основанных на искусственном интеллекте.

Объём мирового интернет-трафика вырос в этом году на 25 %, Google стала крупнейшим в мире поставщиком услуг общего назначения, а OpenAI оказалась крупнейшим поставщиком услуг генеративного искусственного интеллекта. Такие итоги года подвела компания Cloudflare.

Источник изображений: blog.cloudflare.com

Благодаря спутниковому провайдеру SpaceX Starlink быстрый интернет появился в регионах, которые ранее вообще не обслуживались, а трафик самого оператора по сравнению с прошлым годом утроился. Наиболее заметной эта тенденция оказалась в странах, которые только начали обслуживаться Starlink, например, в Бразилии трафик за год вырос в 17 раз. Самый качественный интернет оказался в Исландии, где есть разветвлённая оптоволоконная сеть.

Продолжая разговор о качестве связи, в Cloudflare выступили за внедрение новейшего протокола HTTP/3 или QUIC — этот протокол обслуживает уже пятую часть общего трафика, а наиболее распространён он в Непале, Малайзии, Таиланде и Шри-Ланке, где меньше устаревшего оборудования, работающего на старых протоколах. То же действительно для IPv6, который существует уже не первое десятилетие, но пока не используется повсеместно, зато широко применяется в Индии и Малайзии.

Распределение мобильного трафика по ОС в странах

Две трети мобильного трафика генерируют устройства под управлением Android; более чем в двух десятках регионов доля Android составляет более 90 % от всего мобильного трафика. Самые высокие показатели зафиксированы в Бангладеш и Папуа — Новой Гвинее, и в основном за счёт недорогих устройств. Их противоположностью являются Дания, Австралия и Япония, где до 70 % мобильного трафика приходятся на Apple iPhone.

В отчёте говорится о 180 инцидентах, связанных с масштабными отключениями интернета, многие из которых были санкционированы правительствами, например, в Мавритании и Габоне. Власти Ирака отключали интернет на несколько часов, чтобы не допустить списывания на экзаменах. Иногда отключения были вызваны природными катастрофами, например, тайфуном на Гуаме в мае.

Происхождение трафика ботов по странам

Глядя в перспективу Cloudflare отмечает, что почти 2 % всего трафика TLS 1.3 использует технологии постквантового шифрования — этот показатель будет интенсивно расти в будущем году по мере обновления Chrome и других браузеров. Компания также отметила, что киберпреступники начали менять стратегию: снижается процент писем с фишинговыми ссылками, но растёт доля вымогательств. Почти 12 % трафика вредоносных ботов происходит из инфраструктуры Amazon Web Services и 7 % — из Google. Почти треть от совокупного трафика ботов происходит из США.

По сообщениям сетевых источников, принадлежащая Илону Маску (Elon Musk) компания SpaceX сотрудничает с CDN-провайдером Cloudflare, чтобы повысить производительность своего спутникового интернет-сервиса Starlink. Об этом пишет издание The Information со ссылкой на собственный осведомлённый источник, принимающий непосредственное участие в данном проекте.

Источник изображения: starlink.com

В сообщении сказано, что компании работают над расширением сети мини-центров обработки данных Starlink по всему миру. За счёт этого SpaceX сумеет обеспечить более высокую пропускную способность для своих клиентов, являющихся пользователями сети Starlink. На фоне этой новости стоимость акций Cloudflare подскочила на 7,2 %.

Что касается сети Starlink, то в ней используются телекоммуникационный спутники, доставкой которых на орбиту активно занимается SpaceX. Помимо компании Илона Маска над созданием спутниковой сети для предоставления широкополосного доступа в интернет работают американская компания Amazon и британская OneWeb. Официальные представители SpaceX и Cloudflare пока воздерживаются от комментариев по вопросам, связанным с сотрудничеством компаний.

Cloudflare выступила против предложения Европейского союза о введении для крупнейших интернет-платформ обязательной платы за использование местных сети связи. Согласно предложению, платформы, которые генерируют основную массу интернет-трафика, должны будут помочь телекоммуникационным компаниям оплачивать модернизацию и расширение их сетей.

Источник изображения: Cloudflare

Большая часть контента, передаваемого по сетям операторов связи, поступает от поставщиков контента и приложений (CAP), таких как Netflix и YouTube, которые передают данные в мировые сети, оставляя операторам их доставку пользователям. Телекоммуникационные компании жалуются, что им приходится тратить миллиарды на новые сети, в то время как CAP получают прибыль. В феврале 2023 года ЕС начал консультации о том, должны ли CAP вносить вклад в строительство сетей, на которые они полагаются при предоставлении услуг потребителям.

В пяти крупнейших компаниях, — Google (Alphabet), Amazon, Facebook✴ (Meta✴), Apple и Microsoft — ожидаемо не поддерживают идею такой «платы за использование сети», утверждая, что они уже платят за подводные кабели и другую сетевую инфраструктуру. Возражение Cloudflare в отношении платы за использование сети связано с тем, что крупные телекоммуникационные компании Европы не практикуют открытый пиринг — добровольное бесплатное соединение с другими сетями. Cloudflare предполагает, что европейские операторы предпочитают платить транзитным сетям за передачу данных между сетями, что может привести к дополнительным сетевым переходам. В компании опасаются, что предложение ЕС об использовании сети фактически установит цену за транзит.

В заявлении Cloudflare говорится: «Мы считаем, что вмешательство регулирующих органов, которое вынуждает поставщиков контента и приложений заключать соглашения о платном пиринге, приведёт к тому, что весь остальной трафик будет переведён в медленную и перегруженную полосу. Кроме того, мы опасаемся, что это вмешательство ничего не сделает для достижения целей Европейского цифрового десятилетия, а вместо этого ухудшит работу в интернете для потребителей и малого бизнеса».

Представители компании отметили, что «их [Евросоюза] цели по обеспечению повсеместного подключения правильные, но подход, который они рассматривают, идёт в неправильном направлении».

На прошедших выходных американская компания Cloudflare отразила серию атак типа «отказ в обслуживании» (DDoS), включая «крупнейшую на сегодняшний день» DDoS-атаку. Согласно имеющимся данным, в пике мощность атаки превышала 71 млн запросов в секунду.

Источник изображения: Bleeping Computer

«Большинство атак достигали пика в пределах 50-70 млн запросов в секунду, а самая крупная из них превысила 71 млн запросов в секунду. Это крупнейшая HTTP DDoS-атака за всю историю, которая более чем на 35 % превышает зафиксированный в июне 2022 года рекорд в 46 млн запросов в секунду», — говорится в сообщении Cloudflare.

Специалисты компании подсчитали, что в ходе рекордной атаки запросы исходили от 30 тыс. IP-адресов, принадлежащих разным облачным провайдерам. Целями злоумышленников стали клиенты Cloudflare, включая провайдеров облачных игровых сервисов, платформы облачных вычислений, криптовалютные компании и хостинг-провайдеров.

Источник изображения: Cloudflare

Всё более мощные и частые DDoS-атаки согласуются с недавним отчётом Cloudflare об угрозах такого типа. В компании подсчитали, что количество HTTP DDoS-атак увеличилось на 79 % по сравнению с прошлым годом. Количество объёмных атак мощностью более 100 Гбит/с выросло на 67 % по сравнению с предыдущим кварталом. Количество DDoS-атак продолжительностью свыше 3 часов увеличилось на 87 % по сравнению с предыдущим кварталом.