telecom №99. DPDK и VPP

• В этом выпуске подкаста "Ринг Миап Телеком" будет обсуждаться тема Linux и разработки виртуальных маршрутизаторов и балансировщиков.  

• В гостях у ведущих будет Федор Казьмин, который работал в Яндексе и Яндекс-Облаке.  

• 1 июля в Москве состоится первый метап, посвященный Linux и технологиям.  

• Мероприятие будет проходить в лофт-холле, на нем будут представлены доклады и активности, такие как поиск ловкого парня, который умеет обжимать патчкорды, обед, мини-биинг, турнир по Mortal Kombat и мерч.  

• На мероприятии будет присутствовать Рома Козлов, который расскажет о роуте рое 7, Марат, который поделится анонсом своего доклада, и Дима Петров, который будет проводить мини-биинг.  

• Билеты стоят 2480 рублей, и автор объясняет, что это не дорого для мероприятия.  

• Билеты продаются успешно, и автор благодарит тех, кто поддерживает мероприятие на сайте патрион.  

• Федор рассказывает о своем опыте разработки сетевых вещей, начиная с дип системы и заканчивая юзер-спейсом.  

• В линуксе сетевой стек сделан с прерываниями и освобождением ресурсов, в то время как в юзер-спейсе пакеты пересылаются, а остальное делается быстро.  

• В классическом стеке одно ядро отвечает за все подряд, а в юзер-спейсе одно ядро полностью занято сетью.  

• В юзер-спейсе ядра полностью заняты сетью, что позволяет избежать проблем с латентностью.  

• В 2015 году Intel предложила технологию Deep Packet Inspection (DPI) для использования в своих продуктах.  

• Альтернативы DPI включают Pefring Ent и LIP-пикап, но они не так распространены.  

• Приложение полностью контролирует сетевую карту, используя кольцевой буфер для хранения полученных пакетов.  

• Приложение не знает о маршрутизации и IP-адресах, но может анализировать пакеты для определенных задач.  

• Веб-серверы с максимально ускоренной сетью, трафик-генераторы, виртуальные роутеры и другие специфические задачи.  

• DNS-серверы на Deep Packet Inspection могут быть созданы, но их использование может быть ограничено из-за сложности и стоимости.  

• В видео обсуждается использование дипидеки для записи и обработки сетевых пакетов.  

• Автор отмечает, что это может быть интересным академическим применением, но не практическим.  

• Обсуждаются фреймворки для работы с сетевыми пакетами, такие как пи-пи и другие.  

• Автор отмечает, что пи-пи является фреймворком для работы с сетевыми пакетами, но не является фреймворком в словарном смысле.  

• Гипертрейдинг используется для повышения плотности потока команд и избегания прерываний ядра.  

• Автор отмечает, что гипертрейдинг может быть полезен в некоторых случаях, но может быть вреден в других.  

• Ви-пи-пи - это фреймворк для работы с сетевыми пакетами, разработанный в ЦСК.  

• Основная особенность ви-пи-пи - разбиение обработки пакетов на много маленьких шагов для минимизации кэшмисов.  

• Видео обсуждает концепцию кэша мис, которая возникла из-за того, что память медленнее процессора.  

• В кэше мис данные не найдены, и приходится обращаться к медленной оперативной памяти.  

• В видео упоминается виртуальный маршрутизатор, который используется для доставки трафика к виртуальным машинам внутри одной машины.  

• Обсуждается использование нативных драйверов для доступа к карте памяти, и упоминается, что они могут быть заменены на менее прожорливые решения.  

• Обсуждается разница между подходами к обработке пакетов в классическом стеке и в нативном драйвере.  

• Нативный драйвер, ориентированный на прерывания, может быть лучше, чем нативное ядро, так как ядро должно быть универсальным и обеспечивать как пропускную способность, так и задержку.  

• В видео упоминается, что виртуальный маршрутизатор на основе нативного драйвера может иметь смысл, так как он может обеспечить большую пропускную способность и меньшую задержку.  

• Однако, автор видео не видел этот маршрутизатор вживую и не знает, что в итоге получилось.  

• Видео обсуждает использование пи-пи (процессорных ядер) в хостах с клиентской нагрузкой, где они обычно используются для обработки сетевого трафика.  

• Пи-пи могут быть использованы для виртуальных маршрутизаторов, так как они обрабатывают большой объем данных и могут быть более эффективными, чем обычные серверы.  

• Видео обсуждает возможность использования пи-пи в коммутаторах, но отмечает, что это может быть не так актуально из-за использования специальных асиков для обработки трафика.  

• Видео предполагает, что пи-пи в будущем могут быть использованы на хостовых машинах, возможно, с использованием нативных драйверов или других технологий.  

• В настоящее время пи-пи используют преимущественно депедикейные драйверы.  

• В видео обсуждаются проблемы, связанные с использованием VPP (Virtual Private Network) и их возможное решение.  

• Обсуждаются проблемы с хэшированием и балансировкой пакетов, а также с использованием прерываний для оптимизации работы.  

• Обсуждается сложность разработки и порог входа в VPP, а также проблемы, связанные с кодом и его читаемостью.  

• Упоминается необходимость использования сэмблера и базовых знаний для разработки на основе дипеде.  

• В видео делаются общие замечания о проблемах, связанных с разработкой VPP, и предлагаются возможные решения.  

• Обсуждается необходимость переиспользования существующего кода и оптимизации работы.  

• В видео обсуждается, как память в системе работает на двухголовых процессорах, и как это влияет на производительность.  

• Также обсуждается, как память связана с контроллерами и как это влияет на производительность.  

• В видео обсуждаются вопросы о контроле и контролерах, а также о том, как они влияют на производительность.  

• Обсуждается, как контроль может быть реализован в разных системах и как это влияет на производительность.  

• В видео обсуждаются вопросы о драйверах и аппаратных темах, а также о том, как они могут быть включены в систему.  

• Обсуждается, как аппаратные темы могут быть использованы в системе и как это влияет на производительность.  

• В видео обсуждается вопрос о том, могут ли криптошлюзы быть созданы с использованием оборудования, такого как ASIC.  

• Обсуждается вопрос о том, что если криптошлюзы не работают с использованием офло, это может быть связано с тем, что они не могут быть созданы с использованием ASIC.  

• В видео задаются вопросы о возможности включения лития на микротике и о том, что это может быть полезно для разработчиков.  

• Обсуждается возможность использования лития на микротике, но отмечается, что это может быть сложно из-за особенностей архитектуры микротика.  

• В видео даются рекомендации по обучению и обучению, включая использование вики и видеозаписей конференций.  

• Обсуждаются сложности, с которыми сталкиваются разработчики при работе с сетевыми технологиями, и важность получения базовых знаний в этой области.