Spark Developer от OTUS
Вы получите глубовое понимание инструментов и возможностей Spark, оркестрацию, тестирование и мониторинг приложений. Научитесь интегрировать Spark с различными источниками данных: SparkML, Работу с графами, Spark в Hadoop, Spark в Kubernetes, Hive. И изучите разработку собственных коннекторов и потоковую обработку данных: Scala, Spark API (RDD, DataFrame, Dataset), Apache Arrow и Pandas API, Форматы данных.