Разработка и эксплуатация хранилищ данных на SQL Server 2016
20767

Цель курса:
Предоставить слушателям знания и навыки, необходимые для реализации хранилища данных для поддержки BI-решений. Курс рассказывает как создать хранилище данных в Microsoft SQL Server 2016, как использовать ETL со службами интеграции SQL Server, как проверить и очистить данные с SQL Server Data Quality Services и SQL Server Master Data Services.


 

Аудитория

Этот курс предназначен для профессионалов, создающих и поддерживающих различные хранилища данных, настраивающих загрузку и преобразование данных, проверяющих целостность данных и обеспечивающих очистку устаревшей информации.

Результат обучения

По окончании курса слушатели смогут:

  • Представлять концепцию и архитектуру хранилища данных
  • Выбирать подходящую аппаратную платформу для хранилищ данных
  • Планировать и создавать хранилища данных
  • Реализовывать потоки данных в SSIS пакетах
  • Производить отладку и устранение неполадок SSIS пакетов
  • Реализовывать ETL решение, которое поддерживает инкрементную загрузку хранилища и изменение данных
  • Осуществлять интеграцию данных из облака в хранилище данных.
  • Реализовывать очистку данных с помощью службы Microsoft Data Quality.
  • Реализовывать Master Data Services для обеспечения целостности данных.
  • Расширять пакеты SSIS пользовательскими скриптами и компонентами.
  • Разворачивать и настраивать пакеты SSIS.
  • Описать роль хранилища данных в работе BI-решений
Предварительный уровень подготовки

Для эффективного обучения на курсе слушатели должны обладать следующими знаниями и навыками:

  • Минимум 2 года опыта работы с реляционными базами данных
  • Опыт проектирования нормализованных баз данных
  • Опыт создания таблиц и связей
  • Опыт написания запросов на Transact-SQL
  • Знание базовых структур программирования (как ветвление и циклы)
  • Понимание ключевых приоритетов бизнеса – доход, прибыль, финансовые исчисления
Программа курса

Модуль 1: Введение в хранилища данных (2 ак.часа)
• Описание концепции и архитектуры хранилища данных
• Решение для хранилища данных
Лабораторная работа: Изучение решения для хранилища данных

Модуль 2: Планирование инфраструктуры хранилищ данных  (3 ак.часа)
• Рекомендации по созданию инфраструктуры хранилищ данных
• Планирование аппаратного обеспечения для хранилища данных
Лабораторная работа: Планирование инфраструктуры хранилищ данных

Модуль 3: Проектирование и реализация хранилищ данных (3 ак.часа)
• Проектирование логической инфраструктуры хранилища данных
• Проектирование физической инфраструктуры хранилища данных
Лабораторная работа: Реализация схемы хранилища данных

Модуль 4: Индексы колоночного хранения (columnstore) (3 ак.часа)
• Введение в индексы columnstore
• Создание columnstore индексов
• Работа с columnstore индексами
Лабораторная работа: Использование columnstore индексов

Модуль 5: Реализация хранилища данных в Azure (2 ак.часа)
• Преимущество хранилища данных в Azure
• Реализация хранилища данных в Azure
• Разработка хранилища данных в Azure
• Миграция данных в хранилище Azure
Лабораторная работа: Реализация хранилища данных в Azure

Модуль 6: Создание ETL решения (2 ак.часа)
• Введение в ETL с SSIS
• Изучение источников данных
• Реализация потока данных
Лабораторная работа: Реализация потока данных в пакете служб SSIS

Модуль 7: Реализация потока управления в пакете SSIS (3 ак.часа)
• Введение в поток управления
• Создание динамических пакетов
• Использование контейнеров
Лабораторная работа: Реализация потока управления в пакете SSIS
Лабораторная работа: Использование транзакций и контрольных точек

Модуль 8: Отладка и устранение неполадок служб SSIS (2 ак.часа)
• Отладка пакетов служб SSIS
• Ведение журнала событий пакетов служб SSIS
• Обработка ошибок в пакете служб SSIS
Лабораторная работа: Отладка и устранение неполадок пакетов служб SSIS

Модуль 9: Реализация инкрементального ETL-процесса загрузки данных (2 ак.часа)
• Основы инкрементальной загрузки данных
• Извлечение измененных данных
• Использование временных таблиц
Лабораторная работа: Извлечение измененных данных
Лабораторная работа: Загрузка данных в хранилище данных

Модуль 10: Обеспечение качества данных (2 ак.часа)
• Введение в качество данных
• Использование Data Quality Services для очистки данных
• Использование Data Quality Services для сведения данных
Лабораторная работа: Очистка данных
Лабораторная работа: Исключение дублирования данных

Модуль 11: Использование Master Data Services (2 ак.часа)
• Основные понятия Master Data Services
• Реализация модели Master Data Services
• Управление основными данными
• Создание концентратор основных данных
Лабораторная работа: Реализация Master Data Services

Модуль 12: Расширение SSIS  (2 ак.часа)
• Использование пользовательских компонентов в SSIS
• Использование сценариев в SSIS
Лабораторная работа: Использование скриптов и пользовательских компонентов

Модуль 13: Развертывание и настройка пакетов служб SSIS  (2 ак.часа)
• Обзор развертывания
• Развертывание проектов служб SSIS
• Планирование выполнения пакетов служб SSIS
Лабораторная работа: Развертывание и настройка пакетов служб SSIS

Модуль 14: Использование данных в хранилище  (2 ак.часа)
• Введение в бизнес аналитику (BI)
• Введение в системы отчетности
• Введение в анализ данных
• Анализ данных с использованием хранилища Azure
Лабораторная работа: Использование средств бизнес аналитики

Ближайшие курсы

Or19c_NFA 04.03 - 05.03.2024

Новые возможности для администраторов баз данных

Стоимость обучения в группе

57 160 ₽

Стоимость индивидуального обучения

74 850 ₽

Длительность

2 дня (16 ак. ч.)

AL-1701ю 04.03 - 05.03.2024

Astra Linux Special Edition 1.7 для пользователей

Стоимость обучения в группе

21 000 ₽

Стоимость индивидуального обучения

40 500 ₽

Длительность

2 дня (16 ак. часа)

БТ08 04.03 - 05.03.2024

Управление рисками безопасности информационной инфраструктуры организации

Стоимость обучения в группе

19 990 ₽

Стоимость индивидуального обучения

33 500 ₽

Длительность

2 дня (16 ак. ч.)

БТ12 04.03 - 05.03.2024

Безопасность Web-приложений

Стоимость обучения в группе

20 935 ₽

Стоимость индивидуального обучения

33 500 ₽

Длительность

2 дня (16 ак. ч.)

X4 04.03 - 05.03.2024

Работа с XML, XSD XSLT, Xpath

Стоимость обучения в группе

20 840 ₽

Стоимость индивидуального обучения

34 000 ₽

Длительность

2 дня (16 ак. ч.)

132_2 04.03 - 06.03.2024

Макросы в Excel: практическое программирование. Уровень II.

Стоимость обучения в группе

29 545 ₽

Стоимость индивидуального обучения

45 500 ₽

Длительность

3 дня (24 ак. ч.)

Or12c_NFD 04.03 - 06.03.2024

Новые особенности Oracle 12c для разработчиков SQL запросов и PL/SQL модулей

Стоимость обучения в группе

52 645 ₽

Стоимость индивидуального обучения

93 500 ₽

Длительность

3 дня (24 ак. ч.)

IPMA 04.03 - 06.03.2024

Основы управления проектами

Стоимость обучения в группе

35 485 ₽

Стоимость индивидуального обучения

81 585 ₽

Длительность

3 дня (24 ак. ч.)

ICND 1 v3.0 04.03 - 07.03.2024

Использование сетевого оборудования Cisco (часть I) v3.0

Стоимость обучения в группе

46 395 ₽

Стоимость индивидуального обучения

80 500 ₽

Длительность

5 дней (40 ак. ч.)

PG_DBA2 04.03 - 07.03.2024

Администрирование PostgreSQL. Настройка и мониторинг

Стоимость обучения в группе

36 210 ₽

Стоимость индивидуального обучения

53 500 ₽

Длительность

4 дня (32 ак. ч.)

БТ04 04.03 - 08.03.2024

Защита информации в компьютерных сетях

Стоимость обучения в группе

47 340 ₽

Стоимость индивидуального обучения

89 500 ₽

Длительность

5 дней (40 ак. ч.)

PG_DBA3 11.03 - 12.03.2024

Администрирование PostgreSQL. Резервное копирование и репликация

Стоимость обучения в группе

23 665 ₽

Стоимость индивидуального обучения

37 000 ₽

Длительность

2 дня (16 ак. ч.)

Blender-Base 11.03 - 13.03.2024

Базовое моделирование и визуализация

Стоимость обучения в группе

34 075 ₽

Стоимость индивидуального обучения

37 500 ₽

Длительность

3 дня (24 ак. ч.)

БТ-КИИ 11.03 - 13.03.2024

Обеспечение безопасности объектов критической информационной инфраструктуры

Стоимость обучения в группе

35 160 ₽

Стоимость индивидуального обучения

53 100 ₽

Длительность

3 дня (24 ак. ч.)

10987 11.03 - 14.03.2024

Настройка производительности и оптимизации баз данных SQL

Стоимость обучения в группе

34 635 ₽

Стоимость индивидуального обучения

49 500 ₽

Длительность

4 дня (32 ак. ч.)

JS_Hadoop 11.03 - 14.03.2024

Основы Hadoop и обработка больших данных

Стоимость обучения в группе

37 330 ₽

Стоимость индивидуального обучения

65 000 ₽

Длительность

4 дня (32 ак. ч.)

Asterisk_1 11.03 - 15.03.2024

Использование Asterisk в качестве профессиональной АТС

Стоимость обучения в группе

45 370 ₽

Стоимость индивидуального обучения

81 000 ₽

Длительность

5 дней (40 ак. ч.)

20412 11.03 - 15.03.2024

Настройка дополнительных сервисов Windows Server 2012 R2

Стоимость обучения в группе

34 480 ₽

Стоимость индивидуального обучения

60 000 ₽

Длительность

5 дней (40 ак. ч.)

LPI-102 11.03 - 15.03.2024

Сетевое администрирование GNU/Linux

Стоимость обучения в группе

33 600 ₽

Стоимость индивидуального обучения

51 350 ₽

Длительность

5 дней (40 ак. ч.)

БТ17 11.03 - 15.03.2024

Расследование компьютерных инцидентов. Компьютерная криминалистика

Стоимость обучения в группе

47 500 ₽

Стоимость индивидуального обучения

72 900 ₽

Длительность

5 дней (40 ак. ч.)

VM2 v.7.0/6.5 11.03 - 15.03.2024

Продвинутый курс по оптимизации и решению проблем виртуальных сред VMware vSphere

Стоимость обучения в группе

70 545 ₽

Стоимость индивидуального обучения

108 050 ₽

Длительность

5 дней (40 ак. ч.)

Java_base 11.03 - 15.03.2024

Язык программирования Java.

Стоимость обучения в группе

46 765 ₽

Стоимость индивидуального обучения

56 118 ₽

Длительность

5 дней (40 ак. часов)

20486 11.03 - 15.03.2024

Разработка Web приложений с использованием ASP.NET 4.5 MVC 4

Стоимость обучения в группе

35 160 ₽

Стоимость индивидуального обучения

63 000 ₽

Длительность

5 дней (40 ак. ч.)

TSHOOT 11.03 - 15.03.2024

Диагностика и поддержка IP-сетей Cisco

Стоимость обучения в группе

62 985 ₽

Стоимость индивидуального обучения

81 880 ₽

Длительность

5 дней (40 ак. ч.)

20467 11.03 - 15.03.2024

Проектирование BI - решений на платформе Microsoft SQL Server 2014

Стоимость обучения в группе

35 160 ₽

Стоимость индивидуального обучения

59 500 ₽

Длительность

5 дней (40 ак. ч.)

ICND 2 v3.0 11.03 - 15.03.2024

Использование сетевого оборудования Cisco (часть II) v3.0

Стоимость обучения в группе

46 395 ₽

Стоимость индивидуального обучения

80 500 ₽

Длительность

5 дней (40 ак. ч.)

AACM 11.03 - 15.03.2024

Базовое администрирование АТС Avaya Aura Communication Manager 7

Стоимость обучения в группе

57 735 ₽

Стоимость индивидуального обучения

81 400 ₽

Длительность

5 дней (40 ак. ч.)

WS-011T00 11.03 - 15.03.2024

Администрирование Windows Server 2019

Стоимость обучения в группе

41 410 ₽

Стоимость индивидуального обучения

61 500 ₽

Длительность

5 дней (40 ак. ч.)

AL-1702ю 18.03 - 21.03.2024

Администрирование ОС Astra Linux Special Edition 1.7

Стоимость обучения в группе

42 000 ₽

Стоимость индивидуального обучения

60 500 ₽

Длительность

4 дня (32 ак. часа)

10969 18.03 - 22.03.2024

Cлужбы Active Directory в Windows Server 2012 R2

Стоимость обучения в группе

35 160 ₽

Стоимость индивидуального обучения

59 500 ₽

Длительность

5 дней (40 ак. ч.)

20339-1 18.03 - 22.03.2024

Планирование и администрирование SharePoint 2016

Стоимость обучения в группе

37 260 ₽

Стоимость индивидуального обучения

63 500 ₽

Длительность

5 дней (40 ак. ч.)

РЕДОС-102 18.03 - 22.03.2024

Сетевое администрирование РЕД ОС

Стоимость обучения в группе

34 000 ₽

Стоимость индивидуального обучения

59 850 ₽

Длительность

5 дней (40 ак. ч.)

LPI-201 18.03 - 22.03.2024

Углубленное администрирование GNU/Linux

Стоимость обучения в группе

33 600 ₽

Стоимость индивидуального обучения

51 350 ₽

Длительность

5 дней (40 ак. ч.)

Node_base 18.03 - 22.03.2024

Node.js

Стоимость обучения в группе

46 765 ₽

Стоимость индивидуального обучения

56 118 ₽

Длительность

5 дней (40 ак. часов)

SUSE-201 18.03 - 22.03.2024

Углубленное администрирование SUSE

Стоимость обучения в группе

33 600 ₽

Стоимость индивидуального обучения

51 350 ₽

Длительность

5 дней (40 ак. ч.)

SWITCH 18.03 - 22.03.2024

Развертывание коммутируемых IP-сетей Cisco v2.0

Стоимость обучения в группе

62 250 ₽

Стоимость индивидуального обучения

80 925 ₽

Длительность

5 дней (40 ак. ч.)

UCP-201 18.03 - 22.03.2024

Углубленное администрирование Ubuntu

Стоимость обучения в группе

33 600 ₽

Стоимость индивидуального обучения

51 350 ₽

Длительность

5 дней (40 ак. ч.)

FBD-201 18.03 - 22.03.2024

Углубленное администрирование FreeBSD

Стоимость обучения в группе

33 600 ₽

Стоимость индивидуального обучения

51 350 ₽

Длительность

5 дней (40 ак. ч.)

Python-3 18.03 - 22.03.2024

Разработка веб - приложений в Django. Уровень 3.

Стоимость обучения в группе

48 520 ₽

Стоимость индивидуального обучения

90 580 ₽

Длительность

5 дней (40 ак. ч.)

ARH-0131 18.03 - 22.03.2024

Системное администрирование Red Hat Linux

Стоимость обучения в группе

44 610 ₽

Стоимость индивидуального обучения

73 500 ₽

Длительность

5 дней (40 ак. ч.)

20767 18.03 - 22.03.2024

Разработка и эксплуатация хранилищ данных на SQL Server 2016

Стоимость обучения в группе

36 685 ₽

Стоимость индивидуального обучения

63 000 ₽

Длительность

5 дней (40 ак. ч.)

ЗПДн 25.03 - 27.03.2024

Обеспечение безопасности персональных данных при обработке в информационных системах персональных данных

Стоимость обучения в группе

32 010 ₽

Стоимость индивидуального обучения

53 100 ₽

Длительность

3 дня (72 ак. ч.)

ViPNet 4 25.03 - 27.03.2024

Администрирование системы защиты информации ViPNet 4 (Программно-аппаратные комплексы VipNet)

Стоимость обучения в группе

30 960 ₽

Стоимость индивидуального обучения

53 100 ₽

Длительность

3 дня (72 ак. ч.)

DA-100T00 25.03 - 28.03.2024

Анализ данных с помощью Power BI

Стоимость обучения в группе

34 435 ₽

Стоимость индивидуального обучения

47 950 ₽

Длительность

4 дня (32 ак. ч.)

20413 25.03 - 29.03.2024

Проектирование и внедрение серверной инфраструктуры

Стоимость обучения в группе

34 480 ₽

Стоимость индивидуального обучения

63 000 ₽

Длительность

5 дней (40 ак. ч.)

20339-2 25.03 - 29.03.2024

Передовые технологии SharePoint 2016

Стоимость обучения в группе

37 260 ₽

Стоимость индивидуального обучения

63 500 ₽

Длительность

5 дней (40 ак. ч.)

РЕДОС-103 25.03 - 29.03.2024

Расширенное администрирование РЕД ОС

Стоимость обучения в группе

34 000 ₽

Стоимость индивидуального обучения

44 200 ₽

Длительность

5 дней (40 ак. часов)

VSFT6.5 25.03 - 29.03.2024

VMWare vSphere: Fast Track

Стоимость обучения в группе

81 885 ₽

Стоимость индивидуального обучения

159 500 ₽

Длительность

5 дней (40 ак. ч.)

Alt_Linux 25.03 - 29.03.2024

Администрирование ОС "Альт"

Стоимость обучения в группе

33 600 ₽

Стоимость индивидуального обучения

45 000 ₽

Длительность

5 дней (40 ак. ч.)

LPI-Zabbix 25.03 - 29.03.2024

Zabbix. Мониторинг IT инфраструктуры предприятия

Стоимость обучения в группе

41 635 ₽

Стоимость индивидуального обучения

48 500 ₽

Длительность

5 дней (40 ак. ч.)

Java_web_app 25.03 - 29.03.2024

Использование языка Java для создания корпоративных WEB-приложений

Стоимость обучения в группе

46 765 ₽

Стоимость индивидуального обучения

56 118 ₽

Длительность

5 дней (40 ак. часов)

VM1 v.8.0/7.0/6.5 25.03 - 29.03.2024

Построение виртуальной инфраструктуры с помощью VMware ESXi 8.0/7.0/6.5 и VMware vCenter Server 8.0/7.0/6.5

Стоимость обучения в группе

69 025 ₽

Стоимость индивидуального обучения

99 450 ₽

Длительность

5 дней (40 ак. ч.)