EN

Погружение в HDFS

Записаться на курс

Оставьте заявку, чтобы узнать дату следующего запуска

Содержание курса

Научитесь работать с распределенными файловыми системами GFS и HDFS. Познакомитесь с их составляющими и сферами применения.

Проходит онлайн

Кому подойдет этот курс

Разработчики и системные администраторы
Хотите переквалифицироваться и перейти в сферу работы с большими данными?
Этот курс — отличная отправная точка.
Data Engineers
Работа с распределенными файловыми системами — основа профессии Data Engineer. Если вы только начинаете свой путь или хотите освежить базовые знания, этот курс для вас.
Data Scientists & Data Analysts
Все чаще приходится обрабатывать большие массивы информации, которые не помещаются
в память одного (даже мощного) компьютера? Этот курс для вас.

Кому подойдет этот курс

Разработчики и системные администраторы
Хотите переквалифицироваться и перейти в сферу работы с большими данными?
Этот курс — отличная отправная точка.
Data Engineers
Работа с распределенными файловыми системами — основа профессии Data Engineer. Если вы только начинаете свой путь или хотите освежить базовые знания, этот курс для вас.
Data Scientists & Data Analysts
Все чаще приходится обрабатывать большие массивы информации, которые не помещаются
в память одного (даже мощного) компьютера? Этот курс для вас.

Вы научитесь и узнаете

После завершения этого курса вы узнаете и сможете уверенно работать с распределенной файловой системой HDFS

Создавать, читать, обновлять и удалять файлы в HDFS
Как балансируется нагрузка на использование различных компонент вычислительного кластера
Изменять коэффициент репликации данных в HDFS
Как происходит запись данных в HDFS, какие состояния бывают у блоков на Namenode и реплик на Datanode
Авторизовывать запрос на изменение данных через WebHDFS
Почему Secondary Namenode не лучшее название и что означает Checkpoint Namenode

Создавать, читать, обновлять и удалять файлы в HDFS

Как балансируется нагрузка на использование различных компонент вычислительного кластера

Изменять коэффициент репликации данных в HDFS

Как происходит запись данных в HDFS, какие состояния бывают у блоков на Namenode и реплик на Datanode

Авторизовывать запрос на изменение данных через WebHDFS

Почему Secondary Namenode не лучшее название и что означает Checkpoint Namenode

Что входит в программу

58 минут видеолекций
Погружение в большие данные: 9 видеолекций,
на погружение теоретического материала рекомендуем планировать 3 часа.

1 практическое задание
Вас ждет 1 практическое задание для отработки новых знаний на практике. На практическую работу рекомендуем планировать 6 часов.

12 часов менторской поддержки
2 раза в неделю по вечерам вам будет помогать ментор.

Преподаватель курса

О преподавателе →

Больше 10 лет Алексей работал в ведущих IT-компаниях: Amazon AWS, Yandex, Rambler. Возглавлял обучение Data-профессиям в Корпоративном Университете Сбербанка.

Алексей — автор учебных программ по Machine Learning, Big Data, CDO программ для Chief Data Officers. Он преподает в МГУ, ВШЭ, МФТИ, ШАД, Harbour. Space University, Университете НТИ 20.35.

В рамках совместного проекта с Яндексом, Алексей руководит международным онлайн-курсом
Big Data for Data Engineers на Coursera, у которого уже более 100 000 слушателей.

Алексей Драль

Основатель и CEO, BigData Team

Стоимость курса

Обучение в Docker’e

Обучение с доступом на кластер
на две недели

Оставить заявку

4 200 руб.

6 000 руб.

В связи с открытием BigData Team KZ, для слушателей из Казахстана мы подготовили специальный бонус. Цены в тенге со скидкой для слушателей из Казахстана указаны ниже.

Обучение с доступом на кластер
на две недели

Оставить заявку

29 400 тенге

42 000 тенге

29 400 тенге

Оставить заявку

Обучение в Docker’e

Что надо знать для успешного прохождения курса

Курс не требует навыков программирования

Базовый Linux

Для выполнения практического домашнего задания надо будет работать с командной строкой (Linux / Unix CLI). Вы не должны бояться команд ssh, scp, cd, ls, cat, head, tail, find.