Практический курс Big Data
Возможность трудоустройства по окончании курса. Лучшим студентам организуем собеседования.
При успешном прохождении курса свидетельство установленного образца о повышении квалификации.
Возможность прийти со своим проектом с целью его развития. Рецензии и рекомендации от преподавателей курса.
Более 40 ак. часов аудиторных занятий с лучшими преподавателями-практиками.
И еще столько же на самостоятельную работу.
Консультации и чат с преподавателями курса на протяжении всего обучения. Слушателям доступны все лекции в PDF, а также видеозаписи занятий.
Проверенная и современная программа с реальными кейсами из индустрии. Отработка практических навыков.
Успей записаться на курс!
• Группа до 20 человек, осталось 9 мест
• Очное и дистанционное обучение
• Рассрочка платежа
Дней
Часов
Минут
Секунд
Почему надо пойти к нам?
съемки онлайн-курса
Индивидуальный подход
Каждый наш курс переработан в соотвествии с потребностями и ожиданиями слушателей. Мы учитываем опыт прошлых курсов и ситуацию в мире IT.
Команда
Каждый наш преподаватель является практикующим специалистом и имеет солидный опыт работы. Мы знаем об актуальных инструментах и обучаем тому, что применяем на практике. И самое главное - мы умеем рассказывать о сложных вещах простым и понятным языком.
Поддержка
Есть вопрос по содержанию программы или сложности в домашнем задании? Мы оперативно отвечаем на любые вопросы и всегда готовы помочь.
Нам доверяют
Качество наших курсов подтверждается тем, что мы проводим обучение по Machine Learning и Big Data в ведущих технических вузах (МФТИ, МГУ, ВШЭ, Harbour.Space University) и для таких компаний как Сбербанк, МегаФон и Х5 Retail Group. Мы являемся образовательными партнерами Университета НТИ 20.35, где отвечали за технологическое направление на интенсиве для CDO "Остров 10.21". А также партнерами Яндекс по запуску онлайн-курсов по Big Data на Coursera.
съемки онлайн-курса
Преподаватели
Алексей Драль
Founder & СEO, BigData Team
10 лет в ИТ (Amazon AWS, Rambler, Yandex)
Руководит и преподает Big Data в МГУ, ВШЭ, МФТИ, Сбербанк, МегаФон, ...
Руководитель специализации "Big Data for Data Engineers" на Coursera (совместный проект с Яндекс)
Артём Выборнов
Big Data Instructor
Head of Big Data Dev, Rambler Group
Соавтор специализации по большим данным "Big Data for Data Engineers" на Coursera (совместный проект с Яндекс)
Павел Клеменков
Chief Data Scientist (Data Platform), NVIDIA.
Основатель комьюнити Moscow Spark
Соавтор специализации по большим данным (Big Data for Data Engineers) на Coursera (совместный проект с Яндекс)
Андрей Титов
Есть вопросы? Нужна рассрочка платежа?
Выслать счет для оплаты на email?
Хотите узнать о новых запусках, мероприятиях, курсах?
Оставляйте контакты и мы обязательно свяжемся!
Заполняя форму, вы даете согласие на обработку персональных данных
Учебная программа
знакомство
знакомство
Организационная встреча
пн, 11.11
19:00 - 22:00
пн, 11.11
19:00 - 22:00
Введение в Большие Данные (Big Data) + Распределенные файловые системы, Workshop
Алексей Драль

- Вводная часть занятия. О чем курс, знакомство со слушателями (уровень подготовки, рабочие задачи, которые хотят научиться решать), какие будут формы контроля, как сдавать домашнее задание.
- Распределенные файловые системы (GFS, HDFS). Ее составляющие. Их достоинства, недостатки и сфера применения.
- Чтение и запись в HDFS. HDFS APIs: Web, shell.


чт, 14.11
19:00 - 22:00
чт, 14.11
19:00 - 22:00
Hadoop экосистема, MapReduce и не только
Алексей Драль
- Hadoop Streaming.
- Элементы Hadoop-задачи (Mapper, reducer, combiner, partitioner, comparator).
пн, 18.11
19:00 - 22:00
пн, 18.11
19:00 - 22:00
Оптимизация MapReduce вычислений
Алексей Драль
- Приложения с несколькими Hadoop-задачами.
- Тюнинг Hadoop-job (настройка партиционирования, сложные ключи, uber jobs).
- Задачи с несколькими входами. Joins в Hadoop.
чт, 21.11
19:00 - 22:00
чт, 21.11
19:00 - 22:00
SQL поверх больших данных (Hive)
Алексей Драль
- Архитектура Hive, виды таблиц, форматы хранения данных.
- Трансляция Hive-запросов в MapReduce-задачи.
- Сериализация и десериализация.
- Тюнинг Join'ов в Hive.
- Партиционирование, бакетирование, семплирование.
- User defined functions, Hive Streaming.


пн, 25.11
19:00 - 22:00
пн, 25.11
19:00 - 22:00
Модель вычислений Spark: RDD
Павел Клеменков
- Схема выполнения задачи в Spark.
- Основные термины Spark (job, task, stage).
- Представление вычислений в виде графа. Spark Python API. Spark RDD API.
- Broadcast-сообщения и счетчики.
чт, 28.11
19:00 - 22:00
чт, 28.11
19:00 - 22:00
Spark DataFrames, Spark SQL
Павел Клеменков
- Взаимодействие Hive и Spark SQL.
- Отличия DF от RDD.
пн, 02.12
19:00 - 22:00
пн, 02.12
19:00 - 22:00
Оптимизация Spark вычислений
Павел Клеменков
- Spark on YARN.
- Типы stage в Spark.
- Оптимизация операции shuffle.
- Настройка Garbage Collection, тюнинг потребления памяти.
чт, 05.12
19:00 - 22:00
чт, 05.12
19:00 - 22:00
Потоковая обработка данных (Kafka, Spark Streaming)
Артём Выборнов
- Подходы к Realtime-обработке.
- Гарантии обработки. Переход от одной гарантии к другой. Архитектуры "Лямбда" и "Каппа".
- Spark Streaming vs. Spark RDD, Spark Structured Streaming vs. Spark DataFrames, DStream.
- Архитектура Kafka, Kafka Streams, репликация в Kafka. Отличие Kafka от классических очередей.
- Семантики доставки сообщений. Сжатие данных в kafka. Синхронная и асинхронная репликация.


пн, 09.12
19:00 - 22:00
пн, 09.12
19:00 - 22:00
NoSQL поверх больших данных: HBase, Cassandra
Павел Клеменков
- Отличия Key-value хранилищ от Реляционных БД.
- Архитектуры HBase и Cassandra. Их различия.
- Обеспечение надёжности и высокодоступности в Key-value хранилищах.
- Компактификация и её виды. CQLSH, HBase shell.
- Взаимодействие хранилищ (Cassandra и Hbase) со Spark и Hadoop.
19:00 - 22:00
19:00 - 22:00
Финальная защита проектов
Финальная защита проектов будет специализирована под потребности слушателей.
Отзывы наших слушателей
Click to order
Cart
Total: 
ФИО
Email
Телефон
Проводим очное и дистанционное обучение
Будет проходить по адресу:
Москва, ул. Александра Солженицына, 23а, с1, офис компании SkyEng
Передать привет или задать вопрос:

+7 920 149 40 50
study@bigdatateam.org
Если этот курс вам кажется полезным, расскажите о нем друзьям!
Юридическая информация
Публичная оферта на заключение возмездного Договора об оказании консультационных услуг дистанционным способом

Общество с ограниченной ответственностью
«ЦЕНТР ПРИКЛАДНОГО ОБРАЗОВАНИЯ»

Адрес юридический (покупателя и грузополучателя):
150022, Ярославская обл, Ярославль г., Тормозное шоссе, д.1, литер А, оф.17

Почтовый адрес:
150022, Ярославская обл, Ярославль г., Тормозное шоссе, д.1, литер А, оф.17

ИНН 760 432 6255
КПП 760 401 001

р/с 407 028 102 000 700 344 70
р/с 407 028 108 401 000 344 70
в ПАО АКБ «АВАНГАРД» г.Москва
БИК 044 525 201
к/с 301 018 100 000 000 002 01

ОГРН 117 762 701 7501
Свидетельство от 26.05.2017г. выдано Межрайонной инспекцией Федеральной налоговой службы № 7 по Ярославской области

ОКПО 15807292
ОКВЭД 62.01

e-mail: finance@bigdatateam.org

Генеральный директор Драль Алексей Александрович,
действует на основании Устава
Политика конфидециальности
Платежная информация
Банковской картой
Для выбора оплаты товара с помощью банковской карты на соответствующей странице необходимо нажать кнопку «Оплата заказа банковской картой».
Оплата происходит через ПАО СБЕРБАНК с использованием Банковских карт следующих платежных систем:

МИР

VISA International

Mastercard Worldwide

ОПИСАНИЕ ПРОЦЕССА ПЕРЕДАЧИ ДАННЫХ
Для оплаты (ввода реквизитов Вашей карты) Вы будете перенаправлены на платежный шлюз ПАО СБЕРБАНК. Соединение с платежным шлюзом и передача информации осуществляется в защищенном режиме с использованием протокола шифрования SSL. В случае если Ваш банк поддерживает технологию безопасного проведения интернет-платежей Verified By Visa или MasterCard SecureCode для проведения платежа также может потребоваться ввод специального пароля. Настоящий сайт поддерживает 256-битное шифрование. Конфиденциальность сообщаемой персональной информации обеспечивается ПАО СБЕРБАНК. Введенная информация не будет предоставлена третьим лицам за исключением случаев, предусмотренных законодательством РФ. Проведение платежей по банковским картам осуществляется в строгом соответствии с требованиями платежных систем МИР, Visa Int. и MasterCard Europe Sprl.

Возврат переведенных средств, производится на Ваш банковский счет в течение 5—30 рабочих дней (срок зависит от Банка, который выдал Вашу банковскую карту).