ETL. Airflow. Luigi. Spark.

19:00 – 21:00

Место проведения:
Офис компании МегаФон,
Оружейный пер. 41, Москва
10 сентября 2019

Python для задач
Data Engineering

Мы используем файлы cookie, чтобы улучшить работу сайта, и показывать вам контент, согласно вашим интересам. Продолжая использовать сайт, вы соглашаетесь с условиями использования файлов cookie.
Да, соглашаюсь
Close
Мастер-класс
для выпускников Learn Python
Вы умеете программировать на Python, создавать чат-ботов, анализировать данные, разрабатывать сайты и веб-приложения, но интересно узнать, где еще могут быть востребованы ваши знания и навыки? На этом мастер-классе вы узнаете, как Python используется дата инженерами.
Что будет на мастер-классе?
На мастер-классе вы узнаете о том, как Python используется дата инженерами для решения различных задач. Речь пойдет о том, как этот язык программирования может использоваться в разных участках data-платформы. Мы обзорно пройдемся по основным инструментам и юзкейсам.
Мы рассмотрим следующие задачи и инструменты
Загрузка и валидация
Мы рассмотрим задачи загрузки и валидации данных клик-стрима (данных о посещении пользователями разных страниц, а также их действий).
ETL-задачи на Python
Мы обсудим, как ETL-задачи (Extract, Transform, Load) могут быть решены при помощи средств Python.
Шедулеры
Мы рассмотрим задачи, требующие запуска по расписанию. Они решаются при помощи шедулеров (schedulers), некоторые из них обладают нативны для Python.
Apache Spark
Apache Spark стал основным инструментом в обработке больших объемов данных как в batch-режиме, так и near real-time режиме. У этого инструмента есть хорошее Python API, благодаря которому порог для входа в этот инструмент низкий.
Спикер мероприятия

Павел Тарасов
Руководитель отдела машинного обучения,,
ЦИАН
Об организаторе мастер-класса
New Professions Lab – школа по обучению работе с данными. Занимается этим направлением с 2015 г. Имеет самую широкую линейку программ про данные, покрывающую большое количество навыков и профессий.

За это время выпустила более 400 выпускников на открытых программах и обучила около 400 сотрудников в рамках корпоративного формата.
F.A.Q.
Мероприятие бесплатное?
Да, но количество мест ограничено. Требуется регистрация.
Будет ли онлайн-трансляция?
Да, онлайн-трансляция будет, но доступ зарегистрированным участникам.
Есть ли бесплатная парковка?
Бесплатной парковки нет, но на ул. Краснопролетарская в 3 мин от здания будут места.
Остались вопросы?
Задайте их, и мы с радостью вам ответим
Оставьте контакты ниже
Мы с вами свяжемся
Отправляя данную форму, вы подтверждаете свое согласие на обработку персональных данных, которая осуществляется в целях предоставления дополнительной информации об образовательных услугах, а также для записи на программы. Мы гарантируем конфиденциальность получаемой нами информации.
Оставьте свой вопрос и контакты ниже
Мы с вами свяжемся
Отправляя данную форму, вы подтверждаете свое согласие на обработку персональных данных, которая осуществляется в целях предоставления дополнительной информации об образовательных услугах, а также для записи на программы. Мы гарантируем конфиденциальность получаемой нами информации.