27.04.2024
Подписывайтесь на Telegram-канал по ссылке

Онлайн-митап про решение бизнес-задач с помощью данных

beeline data engineering meetup

18 июля 2023 года состоится бесплатный онлайн-митап, на котором расскажут, как решить задачи бизнеса, внедрив микросервисы на ETL-потоках, как оптимизировать параметры запуска приложения Spark и как выбрать и внедрить каталог для управления данными. Для участников митапа подготовлены призы – авторы лучших вопросов к каждому докладу получат в подарок классные поясные сумки. Регистрация на мероприятие доступна по ссылке.

Программа

  • ETL Pipelines как микросервисы. Расскажут об опыте внедрения микросервисов на ETL-потоках, а также о том, какие потребности бизнеса были выполнены при использовании такого подхода.
  • Как оптимизировать параметры запуска приложения Spark — ищем проблемы и повышаем производительность. Рассмотрят вопросы запуска приложения Spark в базовой и расширенной конфигурациях, разберут методы расчёта основных параметров работы приложения для производительности и эффективности использования доступных ресурсов кластера.
  • Как мы управляем данными с помощью каталога данных. Расскажут про то, как выбирался и внедрялся каталог данных: что от него ожидали и что фактически получилось.