Дева Мэриан
Дева Мэриан
Редактор
Награда за 5000 очков репутации
За шикарный аватар!
- Регистрация
- 19/01/2021
- Сообщения
- 6.614
- Репутация
- 20.542
Автор: OTUS
Название: Spark Developer
Описание:
Этот курс предназначен для Data инженеров, стремящихся углубленно освоить Spark.
Основные темы курса включают в себя:
Сможете после курса:
Название: Spark Developer
Описание:
Этот курс предназначен для Data инженеров, стремящихся углубленно освоить Spark.
Основные темы курса включают в себя:
- • Основы Scala.
- • Работа с Spark API: RDD, DataFrame, Dataset.
- • Введение в Apache Arrow и Pandas API.
- • Изучение форматов данных.
- • Интеграция Spark с разнообразными источниками данных.
- • Создание пользовательских коннекторов.
- • Поточная обработка данных с помощью Spark.
- • Применение SparkML для машинного обучения.
- • Работа с графовыми структурами в Spark.
- • Применение Spark в Hadoop и Kubernetes.
- • Основы работы с Hive.
- • Основы оркестрации процессов.
- • Тестирование и мониторинг Spark-приложений и многое другое.
Сможете после курса:
- • Создавать приложения на базе Spark.
- • Выявлять и оптимизировать "узкие" места в приложениях.
- • Разрабатывать и внедрять в продакшн модели машинного обучения на Spark.
- • Запускать Spark в средах Hadoop и Kubernetes.
- • Писать тесты для приложений на Spark.
- • Применять Spark для обработки разнообразных данных: от табличных и потоковых до гео-данных и структур графов.
- • Настраивать системы мониторинга для приложений на Spark.
Данная публикация является партнерской. Доступ к материалу предоставляется после оплаты на сайте партнера.
Реклама. ООО Отус онлайн-образование, ИНН 9705100963, erid: LdtCJyCA3