Погружение в HDFS

Оставьте заявку, чтобы узнать дату следующего запуска
Научитесь работать с распределенными файловыми системами GFS и HDFS. Познакомитесь с их составляющими и сферами применения.
Проходит онлайн

Кому подойдет этот курс

  • Разработчики и системные администраторы
    Хотите переквалифицироваться и перейти в сферу работы с большими данными?
    Этот курс — отличная отправная точка.
  • Data Engineers
    Работа с распределенными файловыми системами — основа профессии Data Engineer. Если вы только начинаете свой путь или хотите освежить базовые знания, этот курс для вас.
  • Data Scientists & Data Analysts
    Все чаще приходится обрабатывать большие массивы информации, которые не помещаются
    в память одного (даже мощного) компьютера? Этот курс для вас.

Кому подойдет этот курс

  • Разработчики и системные администраторы
    Хотите переквалифицироваться и перейти в сферу работы с большими данными?
    Этот курс — отличная отправная точка.
  • Data Engineers
    Работа с распределенными файловыми системами — основа профессии Data Engineer. Если вы только начинаете свой путь или хотите освежить базовые знания, этот курс для вас.
  • Data Scientists & Data Analysts
    Все чаще приходится обрабатывать большие массивы информации, которые не помещаются
    в память одного (даже мощного) компьютера? Этот курс для вас.
Вы научитесь и узнаете
После завершения этого курса вы узнаете и сможете уверенно работать с распределенной файловой системой HDFS

  • Создавать, читать, обновлять и удалять файлы в HDFS
  • Как балансируется нагрузка на использование различных компонент вычислительного кластера
  • Изменять коэффициент репликации данных в HDFS
  • Как происходит запись данных в HDFS, какие состояния бывают у блоков на Namenode и реплик на Datanode
  • Авторизовывать запрос на изменение данных через WebHDFS
  • Почему Secondary Namenode не лучшее название и что означает Checkpoint Namenode

Создавать, читать, обновлять и удалять файлы в HDFS
Как балансируется нагрузка на использование различных компонент вычислительного кластера
Изменять коэффициент репликации данных в HDFS
Как происходит запись данных в HDFS, какие состояния бывают у блоков на Namenode и реплик на Datanode
Авторизовывать запрос на изменение данных через WebHDFS
Почему Secondary Namenode не лучшее название и что означает Checkpoint Namenode
Что входит в программу
58 минут видеолекций
Погружение в большие данные: 9 видеолекций,
на погружение теоретического материала рекомендуем планировать 3 часа.

1 практическое задание
Вас ждет 1 практическое задание для отработки новых знаний на практике. На практическую работу рекомендуем планировать 6 часов.

12 часов менторской поддержки
2 раза в неделю по вечерам вам будет помогать ментор.

58 минут видеолекций
Погружение в большие данные: 9 видеолекций,
на погружение теоретического материала рекомендуем планировать 3 часа.

1 практическое задание
Вас ждет 1 практическое задание для отработки новых знаний на практике. На практическую работу рекомендуем планировать 6 часов.

12 часов менторской поддержки
2 раза в неделю по вечерам вам будет помогать ментор.

Преподаватель курса

Больше 10 лет Алексей работал в ведущих IT-компаниях: Amazon AWS, Yandex, Rambler. Возглавлял обучение Data-профессиям в Корпоративном Университете Сбербанка.

Алексей — автор учебных программ по Machine Learning, Big Data, CDO программ для Chief Data Officers. Он преподает в МГУ, ВШЭ, МФТИ, ШАД, Harbour. Space University, Университете НТИ 20.35.

В рамках совместного проекта с Яндексом, Алексей руководит международным онлайн-курсом
Big Data for Data Engineers на Coursera, у которого уже более 100 000 слушателей.
Алексей Драль
Основатель и CEO, BigData Team

Стоимость курса

Обучение в Docker’e

Обучение с доступом на кластер
на две недели

4 200 руб.

6 000 руб.

В связи с открытием BigData Team KZ, для слушателей из Казахстана мы подготовили специальный бонус. Цены в тенге со скидкой для слушателей из Казахстана указаны ниже.

Обучение с доступом на кластер
на две недели

29 400 тенге

42 000 тенге

29 400 тенге

Обучение в Docker’e

Что надо знать для успешного прохождения курса

Курс не требует навыков программирования

Базовый Linux

Для выполнения практического домашнего задания надо будет работать с командной строкой (Linux / Unix CLI). Вы не должны бояться команд ssh, scp, cd, ls, cat, head, tail, find.

F.A.Q.

Оставьте заявку на обучение
или задайте вопрос

Если у вас остались вопросы, возникла нестандартная ситуация, мы всегда готовы помочь. Заполните эту форму и мы вернемся с ответом в ближайшее время.
Порекомендуем материалы для подготовки к курсу
Поможем с оформлением рассрочки
Примем заявку на обучение для бизнеса
Поймем ваши цели и запрос
Click to order
Обучение
Документы
© 2017 - 2023 BigData Team
Подписаться
Illustrations designed by Freepik