Партнерский материал - Скидка на обучение! [OTUS] Spark Developer

[Дева Мэриан]

Автор: OTUS
Название: Spark Developer

Описание:

Этот курс предназначен для Data инженеров, стремящихся углубленно освоить Spark.

Основные темы курса включают в себя:

• • Основы Scala.
• • Работа с Spark API: RDD, DataFrame, Dataset.
• • Введение в Apache Arrow и Pandas API.
• • Изучение форматов данных.
• • Интеграция Spark с разнообразными источниками данных.
• • Создание пользовательских коннекторов.
• • Поточная обработка данных с помощью Spark.
• • Применение SparkML для машинного обучения.
• • Работа с графовыми структурами в Spark.
• • Применение Spark в Hadoop и Kubernetes.
• • Основы работы с Hive.
• • Основы оркестрации процессов.
• • Тестирование и мониторинг Spark-приложений и многое другое.

Практическое применение навыков: На протяжении всего курса вы будете практиковаться, решая увлекательные и сложные домашние задания, а также работая над крупным выпускным проектом.

Сможете после курса:

• • Создавать приложения на базе Spark.
• • Выявлять и оптимизировать "узкие" места в приложениях.
• • Разрабатывать и внедрять в продакшн модели машинного обучения на Spark.
• • Запускать Spark в средах Hadoop и Kubernetes.
• • Писать тесты для приложений на Spark.
• • Применять Spark для обработки разнообразных данных: от табличных и потоковых до гео-данных и структур графов.
• • Настраивать системы мониторинга для приложений на Spark.

Изучить подробности и записаться на курс!
​

Данная публикация является партнерской. Доступ к материалу предоставляется после оплаты на сайте партнера.​

Реклама. ООО Отус онлайн-образование, ИНН 9705100963, erid: LdtCJyCA3​