Інженер з великих даних та спеціаліст зі штучного інтелекту

Безкоштовно для вас

через просування

Курс охоплює сферу інженерії даних, обробку та обчислення великих обсягів даних. Він також охоплює основи машинного навчання та методи глибокого навчання. Також пояснюється використання штучного інтелекту (ШІ) в цій галузі.
  • Тип ступеня: Сертифікат "Big Data Engineer"
    Сертифікат "Спеціаліст зі штучного інтелекту"
  • Додаткові кваліфікації: Сертифікат "Інженер з обробки даних
    Сертифікат "Спеціаліст з великих даних"
    Сертифікат "Машинне навчання
    Сертифікат "Глибинне навчання
  • Підсумковий іспит: Практична робота над проектами з фінальними презентаціями
  • Час занять: Повна зайнятість
    З понеділка по п'ятницю з 8:30 до 15:35 (у святкові дні з 8:30 до 17:10)
  • Мова викладання: Німецька
  • Тривалість: 16 Тижні

Інженер з обробки даних

Основи бізнес-аналітики (близько 2 днів)

Сфери застосування, виміри архітектури BI

Основи бізнес-аналітики, OLAP, OLTP, завдання інженерів даних

Сховища даних (DWH): обробка структурованих, напівструктурованих та неструктурованих даних


Управління вимогами (приблизно 2 дні)

Завдання, цілі та процедури в аналізі вимог

Моделювання даних, введення/моделювання за допомогою ERM

Введення / моделювання в UML

- Діаграми класів

- Аналіз варіантів використання

- Діаграми діяльності


Штучний інтелект (ШІ) в робочому процесі

Презентація конкретних технологій ШІ

та можливих застосувань у професійному середовищі


Бази даних (близько 3 днів)

Основи систем управління базами даних

Архітектура систем управління базами даних

Застосування СКБД

Реалізація моделі даних в СКБД, нормальні форми

Практичний та теоретичний вступ до SQL

Обмеження реляційних баз даних, csv, json


Сховище даних (приблизно 4 дні)

Зіркова схема

Моделювання даних

Створення зоряної схеми в СКБД

Схема "сніжинка", основи, моделювання даних

Створення схеми "сніжинка" в СКБД

Схема галактики: основи, моделювання даних

Повільно змінні розмірності типів 1-5 - переформулювання, укладання, реорганізація, міні-розмірність та тип 5

Вступ до нормальних, причинно-наслідкових, міні- та монстр-вимірів, гетерогенних та під-вимірів

Порівняння орієнтованих на стан і на транзакцію

Таблиці фактів DWH, щільність та зберігання


ETL (близько 4 днів)

Очищення даних

- Нульові значення

- Підготовка даних

- Гармонізація даних

- Застосування регулярних виразів

Розуміння даних

- Перевірка даних

- Статистичний аналіз даних

Захист даних, безпека даних

Практична структура ETL маршрутів

Data Vault 2.0, основи, хаби, лінки, сателіти, хеш-ключ, хеш-диф.

Моделювання даних у Data Vault

Практична структура моделі Data Vault - Raw Vault, практична реалізація хеш-процедур


Робота над проектом (близько 5 днів)

Закріплення вивченого матеріалу

Презентація результатів проекту

Спеціаліст з великих даних

Що таке великі дані? (приблизно 1 день)

Обсяг, швидкість, різноманітність, цінність, достовірність

Можливості та ризики великих обсягів даних

Диференціація: бізнес-аналітика, аналітика даних, наука про дані

Що таке інтелектуальний аналіз даних?


Вступ до фреймворків Apache (приблизно 2 дні)

Рішення для великих даних у хмарі

Моделі доступу до даних

Зберігання даних


MapReduce (приблизно 3 дні)

Філософія MapReduce

Кластер Hadoop

Ланцюжок завдань MapReduce


Штучний інтелект (ШІ) в робочому процесі

Презентація конкретних технологій ШІ

та можливих застосувань у професійному середовищі


Компоненти (приблизно 3 дні)

Коротка презентація різних інструментів

Передача даних

YARN додатки

Hadoop JAVA API

Apache Spark


NoSQL та HBase (близько 3 днів)

CAP теорема

КИСЛОТА і БАЗА

Типи баз даних

HBase


Візуалізаціявеликих даних (близько 3 днів)

Теорії візуалізації

Вибір діаграм

Нові типи діаграм

Інструменти для візуалізації даних


Робота над проектом (близько 5 днів)

Закріплення вивченого матеріалу

Презентація результатів проекту

Машинне навчання

Вступ до машинного навчання (близько 5 днів)

Чому машинне навчання?

Приклади застосування

Навчання під контролем, навчання без контролю, частково контрольоване навчання, навчання з підкріпленням

Приклади наборів даних

Знайомство з даними

Навчальні, валідаційні та тестові дані

Перегляд даних

Прогнозування


Навчання під наглядом (приблизно 5 днів)

Класифікація та регресія

Узагальнення, надмірна та недостатня підгонка

Розмір набору даних

Алгоритми для керованого навчання

Лінійні моделі

Байєсівські класифікатори

Дерева рішень

Випадковий ліс

Градієнтний бустінг

k-найближчих сусідів

Машини опорних векторів

Умовне випадкове поле

Нейронні мережі та глибоке навчання

Ймовірності


Самостійне навчання (близько 5 днів)

Типи самостійного навчання

Попередня обробка та масштабування

Перетворення даних

Масштабування навчальних і тестових даних

Зменшення розмірності

Інженерія особливостей

Навчання на множині

Декомпозиція головних компонент (PCA)

Невід'ємна матрична факторизація (NMF)

Навчання на множині з t-SNE

Кластерний аналіз

Кластеризація k-середніх

Агломеративна кластеризація

Ієрархічний кластерний аналіз

DBSCAN

Кластерні алгоритми


Оцінка та вдосконалення (приблизно 2 дні)

Вибір моделі та оцінка моделі

Налаштування гіперпараметрів оцінювача

Перехресна перевірка

Пошук по сітці

Метрики оцінки

Класифікація


Робота над проектом (близько 3 днів)

Закріплення вивченого матеріалу

Презентація результатів проекту

Глибоке навчання

Вступ до глибокого навчання (приблизно 1 день)

Глибинне навчання як різновид машинного навчання


Основи нейронних мереж (близько 4 днів)

Персептрон

Розрахунок нейронних мереж

Оптимізація параметрів моделі, регресія

Бібліотеки глибокого навчання

Регресія проти класифікації

Криві навчання, перенавчання та регуляризація

Гіперпараметрична оптимізація

Стохастичний градієнтний спуск (SGD)

Momentum, Adam Optimiser

Швидкість навчання


Згорткова нейронна мережа (CNN) (приблизно 2 дні)

Класифікація зображень

Згорткові шари, об'єднання шарів

Переформування шарів, згладжування, глобальне середнє об'єднання

Архітектури CNN ImageNet-Competition

Глибокі нейронні мережі, зникаючі градієнти, пропуск зв'язків, пакетна нормалізація


Трансферне навчання (приблизно 1 день)

Адаптація моделей

Попереднє навчання без нагляду

Доповнення даних зображення, зрозумілий ШІ


Регіональний CNN (приблизно 1 день)

Локалізація об'єктів

Регресійні задачі

Розгалужені нейронні мережі


Методи створення креативного іміджу (близько 1 дня)

Генеративні мережі суперництва (GAN)

Deepfakes

Дифузійні моделі


Рекурентні нейронні мережі (приблизно 2 дні)

Аналіз послідовностей

Рекурентні шари

Поширення в часі (BPTT)

Аналіз часових рядів

Проблеми градієнта, що вибухає та зникає

LSTM (Довга короткочасна пам'ять)

GRU (Gated Recurrent Unit)

Глибокий RNN

Deep LSTM


Обробка тексту за допомогою нейронних мереж (близько 2 днів)

Попередня обробка тексту

Вбудовування шарів

Класифікація тексту

Аналіз настрою

Трансферне навчання в NLP

Переклади

Метод "від послідовності до послідовності", архітектура кодер-декодер


Мовні моделі (приблизно 1 день)

BERT, GPT

Шари уваги, трансформатори

Конвеєри генерації тексту

Підсумовування

чат-боти


Навчання з глибоким підкріпленням (приблизно 1 день)

Управління динамічними системами

Агентні системи

Навчання через винагороду

Градієнти політики

Глибоке Q-навчання


Байєсівські нейронні мережі (приблизно 1 день)

Невизначеності в нейронних мережах

Статистична оцінка прогнозів

Достовірність, середньоквадратичне відхилення

Незбалансовані дані

Методи вибірки


Робота над проектом (близько 3 днів)

Закріплення вивченого матеріалу

Презентація результатів проекту



Можливі зміни. Зміст курсу регулярно оновлюється.

Навички програмування на Python та досвід роботи з базами даних (SQL) є обов'язковими, рекомендуються попередні знання у сфері аналітики даних.

Ви добре володієте процесами, пов'язаними зі збором, підготовкою, збагаченням та пересиланням даних. Ви також можете обробляти великі неструктуровані обсяги даних за допомогою галузевого програмного забезпечення. Ви знаєте фреймворк Apache та вмієте візуалізувати дані у привабливий спосіб.

Ви також маєте відповідні знання про машинне навчання та глибоке навчання. Ви знаєте найважливіші причини використання машинного навчання, сфери його застосування, а також різні категорії та концепції машинного навчання. Ви також розумієте сфери застосування глибокого навчання і те, як працюють нейронні мережі. Ви зможете забезпечити машинне навчання та документувати процеси.

Курс орієнтований на осіб з вищою освітою в галузі комп'ютерних наук, бізнес-інформатики, бізнес-адміністрування, математики або аналогічною кваліфікацією.

Великі дані використовуються в компаніях для міждисциплінарного аналізу та проектування ІТ-рішень у співпраці з командами розробників та операційних відділів. Інженери з великих даних користуються попитом як у великих, так і в середніх компаніях у промисловості, торгівлі, сфері послуг та фінансів.

Як фахівець зі штучного інтелекту в галузі машинного та глибокого навчання, ви також маєте високу кваліфікацію, можете працювати в усіх галузях промисловості і тому користуєтеся високим попитом на ринку праці. Ви можете аналізувати великі обсяги даних для виявлення закономірностей і моделей. Глибоке навчання часто використовується в контексті штучного інтелекту для розпізнавання облич, об'єктів або мови.

Ваш змістовний сертифікат дає детальне уявлення про отриману кваліфікацію та покращує ваші кар'єрні перспективи.

Дидактична концепція

Ваші викладачі мають високу професійну та дидактичну кваліфікацію і навчатимуть вас від першого до останнього дня (без системи самонавчання).

Ви будете навчатися в ефективних малих групах. Курси зазвичай складаються з 6-25 учасників. Загальні заняття доповнюються численними практичними вправами з усіх модулів курсу. Практичний етап є важливою частиною курсу, оскільки саме в цей час ви опрацьовуєте вивчене, набуваєте впевненості та рутинності в його застосуванні. Заключний розділ курсу передбачає виконання проекту, кейс-стаді або підсумковий іспит.

 

Віртуальний клас alfaview®

BildungszentrumЗаняття проходять з використанням сучасної відеотехнології alfaview® - або з комфорту вашого власного будинку, або в нашому приміщенні за адресою . Весь курс може бачити один одного віч-на-віч через alfaview®, спілкуватися один з одним в якості голосу, синхронізованого по губах, і працювати над спільними проектами. Звичайно, ви також можете бачитись і спілкуватись зі своїми тренерами наживо в будь-який час, і протягом усього курсу викладачі навчатимуть вас у режимі реального часу. Уроки не є електронним навчанням, а справжнім живим викладанням віч-на-віч за допомогою відеотехнологій.

 

alfatraining Agentur für Arbeit Навчальні курси субсидуються та сертифікуються відповідно до положення про затвердження AZAV. Bildungsgutschein Aktivierungs- und VermittlungsgutscheinЯкщо ви подаєте заявку на або , всі витрати на курс, як правило, покриває організація, яка його фінансує.
Europäischen Sozialfonds Deutsche Rentenversicherung Фінансування також можливе через (ESF), (DRV) або регіональні програми фінансування. Berufsförderungsdienst Як військовослужбовець строкової служби, ви можете відвідувати курси підвищення кваліфікації через (BFD). Agentur für Arbeit (Qualifizierungschancengesetz) Компанії також можуть підвищити кваліфікацію своїх працівників за допомогою програми фінансування від .

Ми будемо раді проконсультувати вас безкоштовно. 0800 3456-500 Пн - Пт з 8:00 до 17:00
безкоштовно з усіх німецьких мереж.
Зв'яжіться з нами
Ми будемо раді проконсультувати вас безкоштовно. 0800 3456-500 Пн - Пт з 8:00 до 17:00 безкоштовно з усіх німецьких мереж.