От UDF к Broadcast Join и обратно. История одной Spark-оптимизации / Павел Молчанов

Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем Saint HighLoad++ 2026 Подробнее: https://clck.ru/3QZHTb Июнь, 2026. Санкт-Петербург, DESIGN DISTRICT DAA in SPB  -------- Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем HighLoad++ 2024 2 и 3 декабря 2024. Москва, Кампус СКОЛКОВО Презентация и тезисы: https://highload.ru/moscow/2024/abstracts/13925 В докладе покажу пример поэтапного улучшения решения, на первый взгляд, несложной задачи, с сопутствующими «граблями», в ходе которого осваиваем понимание плана запроса, преодолеваем страх писать на Scala, даже если проект на PySpark, убеждаемся в такой себе производительности Python UDF. ... -------- Нашли ошибку в видео? Пишите нам на support@ontico.ru