Александр Токарев, Яндекс | Как добавить новую функциональность в Apache Spark, не форкая его

💡 F[Scala] 2024 — вторая конференция по Scala и функциональному программированию от Яндекс Вертикалей (Авто.ру, Яндекс Путешествия, Недвижимость и Аренда), которая прошла 30 ноября в Москве. Когда YTsaurus опубликовали в опенсорс, появились новые требования к SPYT — проекту, который помогает интегрировать платформу с Apache Spark™. Одно из требований — отказ от форкнутой версии Spark. Но как быть, если наши модификации уже просочились в самую глубь и мы не хотим от них отказываться? Тогда команда разработала способ для патчинга Apache Spark™ в рантайме. Этим опытом Саша поделился на своём выступлении. Присоединяйтесь к сообществу Scala-разработчиков Яндекс Вертикалей в телеграм