Управление кодом Spark-приложений. Статья Павла Симанихина для Habr

Есть множество подходов к созданию кода приложений, направленных на то, чтобы сложность проекта не росла со временем. Например, объектно-ориентированный подход и множество прилагаемых паттернов, позволяют если не удерживать сложность проекта на одном уровне, то хотя бы держать ее под контролем в ходе разработки, и делать код доступным для нового программиста в команде.

Как можно управлять сложностью проекта по разработке ETL-трансформаций на Spark?

Как удержать сложность проекта на приемлемом уровне?

Как применять подход Orc – Object Spark?

На эти и другие вопросы отвечаем в нашей новой статье на Habr.