Высоконагруженные системы — почему одного Go недостаточно? — Никита Галушко, VK

• Обсуждение работы на многоядерных системах с 28–56 ядрами.  

• Возможность использования всех ядер из коробки в Go.  

• Проблемы оптимизации процессов в Go.  

• Представление Никиты Галушки, старшего инженера ВКонтакте.  

• Тема доклада: разработка систем с большим количеством ядер.  

• Проблемы с кэшем и согласованностью данных между ядрами.  

• Необходимость оптимизации для максимальной производительности.  

• Простота работы с асинхронными задачами в Go.  

• Внутренний шедулер в Go автоматически распределяет задачи по ядрам.  

• Ограничения Go при работе с некоторыми задачами.  

• Важность кэша и архитектуры процессора.  

• Сложности эффективной работы с AMD процессорами.  

• Важность частого использования кэша для оптимизации производительности.  

• Протокол Messy обеспечивает согласованность кэша между ядрами, но замедляет выполнение кода.  

• Возможность управления кэшем через структуры данных.  

• Необходимость понимания работы компьютера и операционной системы.  

• Эффективное использование памяти и кэша в приложениях.  

• Проблемы с использованием read-write мьютексов при высокой нагрузке.  

• Алгоритмы, такие как Bravo, для улучшения коммуникации между ядрами.  

• Проблемы синхронизации данных между NUMA-нодами.  

• Синхронизация данных между NUMA-нодами через бриджву.  

• Медленная коммуникация между NUMA-нодами по сравнению с одной NUMA-нодой.  

• Первый шаг: понимание основ работы процессора, памяти и операционной системы.  

• Второй шаг: поиск современных исследований по проблеме.  

• Третий шаг: применение найденных решений на практике.  

• Исследования проводятся специалистами, которые получают за это деньги.  

• Задача разработчика — анализировать исследования и применять их на практике.  

• Не все исследования применимы на практике.