Реализация хранилищ данных в Microsoft SQL Server
20463

Этот курс предназначен для профессионалов, создающих и поддерживающих различные хранилища данных, настраивающих загрузку и преобразование данных, проверяющих целостность данных и обеспечивающих очистку устаревшей информации. Цель курса: предоставить слушателям знания и навыки, необходимые для реализации хранилища данных для поддержки BI-решений. Курс рассказывает как создать хранилище данных в Microsoft SQL Server 2014, как использовать ETL со службами интеграции SQL Server, как проверить и очистить данные с SQL Server Data Quality Services и SQL Server Master Data Services. 

Результат обучения

По окончании курса слушатели смогут: 

  • Представлять концепцию и архитектуру хранилища данных 
  • Выбирать подходящую аппаратную платформу для хранилищ данных
  • Планировать и создавать хранилища данных
  • Реализовывать потоки данных в SSIS пакетах
  • Производить отладку и устранение неполадок SSIS пакетов
  • Реализовывать ETL решение, которое поддерживает инкрементную загрузку хранилища и изменение данных 
  • Осуществлять интеграцию данных из облака в хранилище данных.
  • Реализовывать очистку данных с помощью службы Microsoft Data Quality. 
  • Реализовывать Master Data Services для обеспечения целостности данных. 
  • Расширять пакеты SSIS пользовательскими скриптами и компонентами. 
  • Разворачивать и настраивать пакеты SSIS. 
  • Описать роль хранилища данных в работе BI-решений. 
Предварительный уровень подготовки

Для эффективного обучения на курсе слушатели должны обладать следующими знаниями и навыками: 

  • Минимум 2 года опыта работы с реляционными базами данных 
  • Опыт проектирования нормализованных баз данных 
  • Опыт создания таблиц и связей • Опыт написания запросов на Transact-SQL 
  • Знание базовых структур программирования (как ветвление и циклы) 
  • Понимание ключевых приоритетов бизнеса – доход, прибыль, финансовые исчисления.
Программа курса

Модуль 1:  (4 ак. часа) Введение в хранилища данных 

  • Описание концепции и архитектуры хранилища данных 
  • Решение для хранилища данных 
  • Лабораторная работа: Изучение решения для хранилища данных 
  • Изучение источников данных
  • Изучение процессов ETL 
  • Изучение хранилищ данных 

Модуль 2:  (3 ак. часа) Планирование инфраструктуры хранилищ данных

  • Рекомендации по созданию инфраструктуры хранилищ данных 
  • Планирование аппаратного обеспечения для хранилища данных

Лабораторная работа:

  • Планирование инфраструктуры хранилищ данных
  • Планирование аппаратного обеспечения для хранилища данных 

Модуль 3: (3 ак. часа) Проектирование и реализация хранилищ данных Темы 

  • Проектирование хранилища данных
  • Проектирование таблицы времени 
  • Проектирование таблицы фактов 
  • Физическая реализация хранилища данных 

Лабораторная работа: 

  • Реализация схемы хранилища данных
  • Реализация схемы Звезда 
  • Реализация схемы Снежинка 
  • Реализация таблицы измерений

Модуль 4:  (3 ак. часа) Разработка и внедрение схемы для хранилища данных Темы

  • Введение в ETL с SSIS
  • Изучение источников данных 
  • Реализация потока данных Лабораторная работа: Реализация потока данных в пакете служб SSIS 
  • Изучение источников данных 
  • Передача данных с помощью задачи потока данных 
  • Использование преобразования в потоке данных 

Модуль 5: (3 ак. часа) Реализация потока управления в пакете SSIS Темы 

  • Введение в поток управления 
  • Создание динамических пакетов 
  • Использование контейнеров 
  • Управление согласованностью 

Лабораторная работа: Реализация потока управления в пакете SSIS 

  • Использование задач и очередность в потоке управления 
  • Использование переменных и параметров 
  • Использование контейнеров Лабораторная работа:
  • Использование транзакций и контрольных точек 
  • Использование транзакций 
  • Использование контрольных точек 

Модуль 6:   (3 ак. часа) Отладка и устранение неполадок служб SSIS Темы

  • Отладка пакетов служб SSIS 
  • Ведение журнала событий пакетов служб SSIS 
  • Обработка ошибок в пакете служб SSIS Лабораторная работа:
  • Отладка и устранение неполадок пакетов служб SSIS 
  • Отладка пакетов служб SSIS 
  • Ведение журнала выполнения пакетов служб SSIS 
  • Реализация обработчиков событий 
  • Обработка ошибок в потоке данных 

Модуль 7:   (3 ак. часа) Реализация решений извлечения данных Темы 

  • Планирование извлечения данных 
  • Извлечение измененных данных 

Лабораторная работа: Извлечение измененных данных 

  • Использование столбца даты и времени 
  • Использование записи изменения данных 
  • Использование задач управления CDC 
  • Использование отслеживания изменений 

Модуль 8:   (3 ак. часа) Загрузка данных в хранилище данных Темы 

  • Планирование загрузки данных 
  • Использование SSIS для инкрементальной загрузки 
  • Использование инструментов загрузки Transact-SQL Лабораторная работа: 
  • Загрузка данных в хранилище данных 
  • Загрузка данных из таблиц вывода CDC 
  • Использование циклов для ввода и обновления измерений данных 
  • Реализация медленно меняющихся измерений 
  • Использование выражения MERGE 

Модуль 9:  (3 ак. часа) Обеспечение качества данных Темы 

  • Введение в очистку данных 
  • Использование Data Quality Services для очистки данных 
  • Использование Data Quality Services для соответствия данных Лабораторная работа: Очистка данных 
  • Создание базы знаний DQS 
  • Очистка данных с помощью проекта DQS 
  • Использование DQS в SSIS пакете 

Модуль 10:   (3 ак. часа) Использование Master Data Services Темы 

  • Основные понятия Master Data Services
  • Реализация модели Master Data Services 
  • Управление основными данными 
  • Создание концентратор основных данных Лабораторная работа: Реализация Master Data Services 
  • Создание базовой модели MDS 
  • Редактирование моделей MDS с помощью Excel 
  • Применение бизнес-правил 
  • Загрузка данных в MDS 
  • Получение Master Data Services данных 

Модуль 11:   (3 ак. часа) Расширение SSIS Темы • Использование сценариев в SSIS 

  • Использование пользовательских компонентов в SSIS Лабораторная работа:
  • Использование скриптов и пользовательских компонентов 
  • Использование Задачи сценарий (Script Task) 

Модуль 12:   (3 ак. часа) Развертывание и настройка пакетов служб SSIS Темы 

  • Обзор развертывания 
  • Развертывание проектов служб SSIS 
  • Планирование выполнения пакетов служб SSIS Лабораторная работа: 
  • Развертывание и настройка пакетов служб SSIS 
  • Создание каталога SSIS 
  • Развертывание SSIS проекта 
  • Запуск пакетов служб SSIS в SQL Server Management Studio 
  • Запуск пакетов SSIS по расписанию агентом SQL Server 

Модуль 13:  (3 ак. часа) Использование данных в хранилище Темы 

  • Введение в бизнес аналитику (BI) 
  • Корпоративная бизнес аналитика 
  • Самообслуживание BI и большие данные 

Лабораторная работа: Использование хранилища данных 

  • Изучение решений корпоративной бизнес аналитики BI

Ближайшие курсы

PG_DBA1 23.12 - 25.12.2024

Администрирование PostgreSQL 16. Базовый курс

Стоимость обучения в группе

29 900 ₽

Стоимость индивидуального обучения

48 000 ₽

Длительность

3 дня (24 ак. ч.)

10961 23.12 - 27.12.2024

Автоматизация администрирования с Windows PowerShell

Стоимость обучения в группе

41 000 ₽

Стоимость индивидуального обучения

65 000 ₽

Длительность

5 дней (40 ак. ч.)

PG_миграция 09.01 - 10.01.2025

Миграция на Postgres: Подходы, проблемы и решения

Стоимость обучения в группе

32 170 ₽

Стоимость индивидуального обучения

77 000 ₽

Длительность

2 дня (16 ак. ч.)

Or_Lin 09.01 - 10.01.2025

Oracle Database 11g: Особенности администрирования баз данных Oracle в среде Linux

Стоимость обучения в группе

35 200 ₽

Стоимость индивидуального обучения

58 500 ₽

Длительность

2 дня (16 ак. ч.)

ROS-101 09.01 - 10.01.2025

Основы работы в РЕД ОС

Стоимость обучения в группе

17 000 ₽

Стоимость индивидуального обучения

26 000 ₽

Длительность

2 дня (16 ак. часов)

55165 10.01 - 10.01.2025

Microsoft Excel 2016. Уровень 1

Стоимость обучения в группе

6 645 ₽

Стоимость индивидуального обучения

19 500 ₽

Длительность

1 день (8 ак. ч.)

55271 10.01 - 10.01.2025

Microsoft Excel 2019. Уровень 1

Стоимость обучения в группе

6 644 ₽

Стоимость индивидуального обучения

18 500 ₽

Длительность

1 день (8 ак. ч.)

MS.NET 13.01 - 15.01.2025

Продвинутая разработка в Microsoft.NET

Стоимость обучения в группе

30 900 ₽

Стоимость индивидуального обучения

40 170 ₽

Длительность

3 дня (24 ак. ч.)

PG_DBA1 13.01 - 15.01.2025

Администрирование PostgreSQL 16. Базовый курс

Стоимость обучения в группе

29 900 ₽

Стоимость индивидуального обучения

48 000 ₽

Длительность

3 дня (24 ак. ч.)

55160 13.01 - 15.01.2025

Microsoft Excel 2016 Уровень 2. Расширенный

Стоимость обучения в группе

17 595 ₽

Стоимость индивидуального обучения

23 500 ₽

Длительность

3 дня (24 ак. ч.)

NC1 13.01 - 16.01.2025

Проектирование в nanoCAD. Базовый курс

Стоимость обучения в группе

36 385 ₽

Стоимость индивидуального обучения

105 400 ₽

Длительность

4 дня (32 ак. ч.)

Р7_П 13.01 - 16.01.2025

Офис-Р7. Полный

Стоимость обучения в группе

18 480 ₽

Стоимость индивидуального обучения

27 500 ₽

Длительность

4 дня (32 ак. часа)

10961 13.01 - 17.01.2025

Автоматизация администрирования с Windows PowerShell

Стоимость обучения в группе

41 000 ₽

Стоимость индивидуального обучения

65 000 ₽

Длительность

5 дней (40 ак. ч.)

БТ04 13.01 - 17.01.2025

Защита информации в компьютерных сетях

Стоимость обучения в группе

52 075 ₽

Стоимость индивидуального обучения

95 500 ₽

Длительность

5 дней (40 ак. ч.)

20764 13.01 - 17.01.2025

Администрирование инфраструктуры базы данных SQL

Стоимость обучения в группе

40 350 ₽

Стоимость индивидуального обучения

65 300 ₽

Длительность

5 дней (40 ак. ч.)

20740 13.01 - 17.01.2025

Установка, организация хранилища и работа в Windows Server 2016

Стоимость обучения в группе

39 100 ₽

Стоимость индивидуального обучения

65 000 ₽

Длительность

5 дней (40 ак. ч.)

LPI-101 13.01 - 17.01.2025

Администрирование GNU/Linux

Стоимость обучения в группе

36 960 ₽

Стоимость индивидуального обучения

55 500 ₽

Длительность

5 дней (40 ак. ч.)

WS-011T00 13.01 - 17.01.2025

Администрирование Windows Server 2019/2022

Стоимость обучения в группе

45 550 ₽

Стоимость индивидуального обучения

65 000 ₽

Длительность

5 дней (40 ак. ч.)

55166 16.01 - 17.01.2025

Microsoft Excel 2016. Уровень 2

Стоимость обучения в группе

14 405 ₽

Стоимость индивидуального обучения

18 650 ₽

Длительность

2 дня (16 ак. ч.)

IT-02 20.01 - 22.01.2025

Основы ITIL

Стоимость обучения в группе

31 750 ₽

Стоимость индивидуального обучения

60 500 ₽

Длительность

3 дня (24 ак. ч.)

RDS 20.01 - 22.01.2025

Планирование, развёртывание и управление Remote Desktop Services

Стоимость обучения в группе

41 300 ₽

Стоимость индивидуального обучения

107 500 ₽

Длительность

3 дня (24 ак. ч.)

PG_DBA2 20.01 - 23.01.2025

Администрирование PostgreSQL. Настройка и мониторинг

Стоимость обучения в группе

39 830 ₽

Стоимость индивидуального обучения

58 500 ₽

Длительность

4 дня (32 ак. ч.)

NC2 20.01 - 23.01.2025

NanoCAD. Переподготовка для уверенных пользователей САПР

Стоимость обучения в группе

33 985 ₽

Стоимость индивидуального обучения

105 000 ₽

Длительность

3 дня (24 ак. ч.)

NC3 20.01 - 23.01.2025

Проектирование в nanoCAD BIM Конструкции

Стоимость обучения в группе

36 385 ₽

Стоимость индивидуального обучения

105 000 ₽

Длительность

4 дня (32 ак. ч.)

Compas 20.01 - 23.01.2025

Компас 3D

Стоимость обучения в группе

32 300 ₽

Стоимость индивидуального обучения

42 000 ₽

Длительность

3 дня (24 ак. ч.)

20462 20.01 - 24.01.2025

Администрирование баз данных Microsoft SQL Server

Стоимость обучения в группе

39 250 ₽

Стоимость индивидуального обучения

65 500 ₽

Длительность

5 дней (40 ак. ч.)

10965 20.01 - 24.01.2025

Управление ИТ-службами с помощью System Center Manager

Стоимость обучения в группе

37 850 ₽

Стоимость индивидуального обучения

68 000 ₽

Длительность

5 дней (40 ак. ч.)

CCNA_speeded 20.01 - 24.01.2025

Ускоренная программа для специалистов по сетевым технологиям Cisco

Стоимость обучения в группе

87 650 ₽

Стоимость индивидуального обучения

105 000 ₽

Длительность

5 дней/ 48 ак. часов

20461 20.01 - 24.01.2025

Создание запросов к Microsoft SQL Server

Стоимость обучения в группе

39 250 ₽

Стоимость индивидуального обучения

65 500 ₽

Длительность

5 дней (40 ак. ч.)

HCIA_DC 20.01 - 31.01.2025

Курс подготовки специалиста Huawei по технологиям и оборудованию передачи данных. Базовый уровень.

Стоимость обучения в группе

136 400 ₽

Стоимость индивидуального обучения

155 000 ₽

Длительность

80 ак. ч.