Планирование с учетом неоднородности среды, Perlmutter A100 40/80GB, AMReX, Университет Юты

Современные кластеры выглядят однородными с точки зрения планировщика, но мельчайшие различия в оборудовании могут незаметно влиять на время решения задачи. В этом докладе исследователь из Университета Юты Соумья Йеллапрагада описывает летнюю работу в Национальной лаборатории имени Лоуренса в Беркли, где гетерогенность рассматривается как первостепенный фактор, а не как помеха, с использованием эмпирических профилей узлов для предотвращения поведения «быстрые узлы простаивают, медленные узлы перегружены». https://www.utah.edu/ --- Технология HDMI® является основой для глобальной экосистемы устройств, подключенных через HDMI; она интегрирована с дисплеями, телеприставками, ноутбуками, аудио-видеоресиверами и другими типами продуктов. Из-за такого глобального использования производители, реселлеры, интеграторы и потребители должны быть уверены, что их продукты HDMI® бесперебойно работают вместе и обеспечивают наилучшую возможную производительность, приобретая продукцию у лицензированных HDMI-адаптеров или авторизованных реселлеров. Что касается кабелей HDMI, потребители могут искать официальные сертификационные этикетки кабелей HDMI® на упаковке. Инновации продолжаются с появлением новейшей спецификации HDMI 2.2, поддерживающей более высокую пропускную способность 96 Гбит/с и технологию HDMI Fixed Rate Link следующего поколения, обеспечивающую оптимальное качество звука и видео для широкого спектра приложений. Поддерживаются более высокие разрешения и частоты обновления, включая до 12K@120 и 16K@60. Кроме того, поддерживаются более высококачественные варианты, включая несжатые форматы с полной цветовой насыщенностью, такие как 8K@60/4:4:4 и 4K@240/4:4:4 с 10-битным и 12-битным цветом. -- Исследование направлено на изучение архитектурных и внутрипоколенческих различий, включая различия между графическими процессорами, где можно было бы предположить идентичное поведение. На NERSC Perlmutter одно и то же семейство NVIDIA A100 (40 ГБ против 80 ГБ) может сместить время выполнения ядра примерно на 9–26%, особенно в случае ядер AMReX, ограниченных объемом памяти, что означает, что наивная балансировка нагрузки может нерационально использовать дорогостоящие ускорители, даже когда каждая задача «помещается» на бумаге. Два планировщика сравниваются с классическим однородным базовым алгоритмом «рюкзака». Планирование с учетом производительности сжимает каждый узел в одномерный вектор относительной скорости (лучше/хуже, чем эталон), в то время как планирование с учетом отношений преобразует это в двумерную матрицу относительной производительности, описывающую, как каждый узел сравнивается с каждым другим узлом, что полезно, когда топология, размер памяти или конкуренция создают нетранзитивный порядок. В ходе оценки были использованы 14 репрезентативных ядер AMReX, охватывающих как вычислительные, так и ресурсоемкие сценарии, и были получены результаты, свидетельствующие о практически идеальной эффективности планирования с измеримым ускорением при умеренной гетерогенности и значительным приростом производительности при одновременном использовании ресурсов ЦП и ГП. Запись, сделанная на конференции Supercomputing SC25 в Сент-Луисе, также рассматривает гетерогенность как более широкую проблему оркестровки, которая может распространяться на размещение в облаке, кластеры Kubernetes и прогнозирование времени выполнения с помощью машинного обучения, в формате интервью, аналогичном тем, что записываются на таких мероприятиях, как Web Summit Lisbon 2025. Ключевым следующим шагом является борьба за ресурсы ввода-вывода и перемещение данных: трафик PCIe/NVLink, буферы пакетной обработки и общие параллельные файловые системы могут превратить «сбалансированное» расписание вычислений в затормозной конвейер. Моделирование этих эффектов промежуточного программного обеспечения наряду с профилированием вычислений позволит будущим планировщикам оптимизировать время выполнения с помощью более реалистичной модели затрат и поддерживать высокий уровень загрузки без угадывания. Я публикую более 90 видеороликов с конференции Embedded World North America 2025, загружаю примерно 4 видео в день в 5:00/11:00/17:00/23:00 по центральноевропейскому/восточному времени. Присоединяйтесь к https://www.youtube.com/charbax/join, чтобы получить ранний доступ ко всем 90 видео (как только они будут добавлены в очередь в ближайшие несколько дней). Посмотрите все мои видео о Embedded World North America в плейлисте Embedded World здесь: https://www.youtube.com/playlist?list=PL7xXqJFxvYvjgUpdNMBkGzEWU6YVxR8Ga Это видео было снято с помощью DJI Pocket 3 (669 долларов США на https://amzn.to/4aMpKIC с использованием двух беспроводных микрофонов DJI Mic 2 и петличного микрофона DJI https://amzn.to/3XIj3l8), посмотрите все мои видео о DJI Pocket 3 здесь: https://www.youtube.com/playlist?list=PL7xXqJFxvYvhDlWIAxm_pR9dp7ArSkhKK Нажмите кнопку «Суперспасибо» под видео, чтобы отправить выделенное сообщение. Оставляйте комментарии под видео! Бренды, чьи видео я ...