Курс «Data-инженер» подойдёт аналитикам данных, разработчикам и администраторам баз данных. Он охватывает темы, такие как создание дата-пайплайнов, работа с базами данных (SQL, NoSQL), оптимизация данных, использование инструментов (Python, AirFlow, Hadoop, Kafka) и многое другое. Практические задания, работа в группах и консультации экспертов помогут студентам освоить профессию Data-инженера.
Программа:
1. Введение.
2. Python и терминал для задач Data Engineering.
- Установочная сессия.
3. Распределенные файловые системы. Hadoop. Map-Reduce.
4. Spark for Data Engineering.
- Встреча по темам 2-4.
5. Реляционные базы данных.
6. NOSQL базы данных и введение в методологии построения хранилищ.
7. Процессинг и перекладывание (перекладка) данных.
8. Оркестраторы данных. AirFlow.
- Встреча по темам 5-8.
9. Шины данных. Kafka. Принципы построения систем потоковой аналитики.
10. ETL-инструменты. NiFi.
11. Архитектура хранилищ данных.
12. Аналитика. Жизненный цикл данных и оценка data quality.
- Встреча по темам 9-12.
13. Работа с собственным проектом в финальном модуле.
14. Заключение
Информация о видео Название: Data-инженер Автор: Николай Марков, Николай Акимов, Ася Гайламазян Год выхода: 2024 Жанр: Видеокурс Язык: Русский Выпущено: Россия Продолжительность: 30:07:22
Материалы на сайте опубликованы пользователями для обмена и ознакомления, администрация не несёт ответственности за их содержание.
Мы не храним никаких нелегальных материалов, а также материалов охраняемых авторским правом. На страницах сайта выложены только ссылки на файлы.
Если вы являетесь правообладателем какого либо контента и не желаете его распространения, сообщите нам и нарушение будет устранено.