«Эффективный Spark. Масштабирование и оптимизация» — незаменимое практическое руководство для дата - инженеров и разработчиков, написанное признанными экспертами в области больших данных Холден Карау и Рейчел Уоррен. Эта книга создана для тех, кто уже знаком с базовыми принципами работы Apache Spark, но хочет выйти на профессиональный уровень и научиться выжимать из этого инструмента максимум производительности.

Основной фокус авторы делают на реальных проблемах, с которыми сталкиваются инженеры при масштабировании приложений: нехватка памяти, медленная сборка мусора, неоптимальное разбиение данных (partitioning) и неэффективные операции соединения (joins). В книге подробно разбирается, как устроен Spark под капотом, как правильно настраивать конфигурации кластера, профилировать код и избегать типичных ошибок, приводящих к падению задач по OOM (Out of Memory). Авторы делятся проверенными техниками оптимизации как для Spark Core, так и для Spark SQL, DataFrames и Datasets. По жанру издание относится к компьютерной литературе, базам данных, Big Data, дата - инженерии и руководствам по оптимизации ПО.