Розробник машинного навчання з підкріпленням

Вступ до аналізу даних (приблизно 1 день)

Завдання, сфери застосування та типові приклади використання аналітики даних

Процеси аналізу даних та CRISP-DM

Роль аналітика даних та відмінності від таких галузей, як наука про дані, інженерія даних та бізнес-аналітика

Місце штучного інтелекту та машинного навчання в цій галузі

Python для аналізу даних (приблизно 1 день)

Робота з Jupyter Notebooks

NumPy та Pandas для аналізу даних

Імпорт та експорт даних із різних джерел, наприклад, Excel та CSV

Відбір та перетворення даних

Підготовка даних та експлоративний аналіз даних (приблизно 3 дні)

Очищення та перетворення даних за допомогою Pandas

Робота з відсутніми, помилковими та аномальними даними

Об’єднання, групування та агрегування даних

Експлоративний аналіз даних та отримання перших висновків

Основи статистичного аналізу

SQL та управління даними (приблизно 2 дні)

Реляційні бази даних та моделі даних

Запити та обробка даних за допомогою SQL

З'єднання, агрегації та аналітичні запити

Взаємодія SQL та Python в аналізі даних

Якість даних та захист даних

Підключення та використання різних джерел даних і систем баз даних

Візуалізація даних та розповідь історій на основі даних (приблизно 2 дні)

Візуалізація за допомогою Matplotlib, Seaborn та Plotly

Вибір відповідних діаграм та форм візуалізації

Опрацювання та інтерпретація результатів аналізу

Розповідь на основі даних та комунікація, орієнтована на цільову аудиторію

Power BI та інтерактивні інформаційні панелі (приблизно 2 дні)

Імпорт та обробка даних за допомогою Power Query

Моделювання даних та взаємозв’язки

Основи DAX та ключові показники

Створення інтерактивних звітів та інформаційних панелей

Візуалізація та комунікація бізнес-показників

Огляд альтернативних рішень у сфері бізнес-аналітики та візуалізації

Аналіз даних із використанням штучного інтелекту (приблизно 2 дні)

Застосування генеративної штучної інтелекту в робочому процесі аналізу даних

Підготовка, аналіз та візуалізація даних за допомогою штучного інтелекту

Допомога у створенні запитів на Python та SQL

Формування запитів для аналізу даних та інтерпретація результатів

Критична оцінка джерел даних, а також виявлення синтетичних та неправдоподібних даних

Забезпечення якості, захист даних та відповідальне використання штучного інтелекту

Бізнес-аналітика та основи статистики (приблизно 2 дні)

Показники та KPI в контексті підприємства

Описова статистика та статистичні залежності

Кореляція, причинно-наслідковий зв’язок та прості регресійні аналізи

Основи довірчих інтервалів та перевірки гіпотез

Інтерпретація результатів аналізу та формулювання рекомендацій щодо дій на основі даних

Робота над проектом (близько 5 днів)

Закріплення вивченого матеріалу

Презентація результатів проекту

Вступ до машинного навчання та робочого процесу ML (приблизно 3 дні)

Основи, сфери застосування та види машинного навчання

Систематизація сучасних методів штучного інтелекту та машинного навчання

Робочий процес машинного навчання з використанням scikit-learn

Дані для навчання, валідації та тестування

Недостатнє пристосування, надмірне пристосування та оцінка моделей

Перехресна валідація

Підготовка даних та інженерія ознак (приблизно 2 дні)

Якість даних та попередня обробка даних

Масштабування, нормалізація та кодування

Інженерія ознак та вибір ознак

Робота з відсутніми значеннями, випадаючими значеннями та незбалансованими наборами даних

Навчання з наглядом — регресія та класифікація (приблизно 5 днів)

Методи регресії та класифікації

Лінійні та регуляризовані моделі

Методи, засновані на відстані, ймовірності та деревах

Ансамблеві та бустінгові методи

Порівняння моделей та оптимізація гіперпараметрів

Показники оцінки та ймовірнісні прогнози

Важливість ознак та пояснювана штучна інтелігенція 

Автономне навчання (приблизно 2 дні)

Зменшення розмірності та виокремлення ознак

Методи кластеризації та оцінка результатів кластеризації

Виявлення аномалій

Аналіз часових рядів та прогнози (приблизно 1 день)

Основи та аналіз даних часових рядів

Методи прогнозування та машинне навчання для часових рядів

Нейронні мережі та сучасний штучний інтелект (приблизно 2 дні)

Основи нейронних мереж та глибокого навчання

Машинне навчання для текстових даних та обробка природної мови

Базові моделі, великі мовні моделі та генеративний штучний інтелект

Розгортання моделей машинного навчання (приблизно 1 день)

Зберігання та надання навчених моделей

Розробка простих додатків машинного навчання

Інтерфейси та платформи для моделей машинного навчання

Робота над проектом (приблизно 4 дні)

Закріплення вивченого матеріалу

Презентація результатів проекту

Вступ до глибокого навчання (приблизно 1 день)

Глибинне навчання як різновид машинного навчання

Основи нейронних мереж (близько 4 днів)

Багатошарові персептрони

Розрахунок нейронних мереж

Оптимізація параметрів моделі, регресія

Бібліотеки глибокого навчання

Регресія проти класифікації

Типові функції втрат та активації

Оцінка прогнозу моделі за допомогою метрик

Метрики регресії та класифікації

Криві навчання, перенавчання та регуляризація

Гіперпараметрична оптимізація

L1/12 регуляризація

Відсіювання

Рання зупинка

Стохастичний градієнтний спуск (SGD)

Momentum, Adam Optimiser

Оптимізація швидкості навчання

Динамічне регулювання швидкості навчання

Зменшення швидкості навчання на плато

Оптимізація швидкості навчання за допомогою TensorBoard

Контролюйте процес підгонки за допомогою зворотних дзвінків

Збереження та завантаження моделей

Згорткова нейронна мережа (CNN) (приблизно 2 дні)

Класифікація зображень

Згорткові шари, об'єднання шарів

Переформування шарів, згладжування, глобальне середнє об'єднання

Архітектури CNN ImageNet-Competition

Глибокі нейронні мережі, зникаючі градієнти, пропуск зв'язків, пакетна нормалізація

Трансферне навчання (приблизно 1 день)

Адаптація та комбінування моделей

Попереднє навчання без нагляду

Доповнення даних зображень, зрозумілий ШІ

Завантажувач даних

Регіональний CNN (приблизно 1 день)

Локалізація об'єктів

Семантична сегментація

Регресійні задачі

Розгалужені нейронні мережі

Архітектура YOLO

U-Net моделі

Методи створення креативного іміджу (близько 1 дня)

Генеративні мережі суперництва (GAN)

Deepfakes

Дифузійні моделі

Надвисока роздільна здатність

Доповнення областей зображення

Нанесення базових моделей від Hugging Face

Мультимодальні моделі

LoRA-Fine-Tuning

Області застосування генеративних моделей

Юридичні обмеження

Рекурентні нейронні мережі (приблизно 2 дні)

Аналіз послідовностей

Рекурентні шари

Поширення в часі (BPTT)

Аналіз часових рядів

Проблеми градієнта, що вибухає та зникає

LSTM (Довга короткочасна пам'ять)

GRU (Gated Recurrent Unit)

Глибокий RNN

Deep LSTM

Обробка тексту за допомогою нейронних мереж (близько 2 днів)

Попередня обробка тексту

Вбудовування шарів

Класифікація тексту

Аналіз настрою

Обробка природної мови (NLP)

Переклади

Генерація тексту

Метод "від послідовності до послідовності", архітектура кодер-декодер

Моделі тільки кодера та тільки декодера

Локальне застосування великих мовних моделей

Мовні моделі (приблизно 1 день)

Архітектура трансфомерів

Увага та багатоголова увага

Позиційні кодування

Тонке налаштування великих мовних моделей

Підказки

Конвеєри генерації тексту

Підсумовування

Чат-боти

Пошукове доповнене покоління

Агенти штучного інтелекту

Навчання з глибоким підкріпленням (приблизно 1 день)

Управління динамічними системами

Агентні системи

Навчання через винагороду

Градієнти політики

Глибоке Q-навчання

Байєсівські нейронні мережі (приблизно 1 день)

Невизначеності в нейронних мережах

Статистична оцінка прогнозів

Достовірність, середньоквадратичне відхилення

Незбалансовані дані

Методи вибірки

Робота над проектом (близько 3 днів)

Закріплення вивченого матеріалу

Презентація результатів проекту

Вступ до навчання з підкріпленням (приблизно 1 день)

Визначення та основні поняття

Відмінності від інших методів навчання

Сфери застосування та приклади

Марковські процеси прийняття рішень (МПР) (приблизно 2 дні)

Визначення та властивості ПДП

Функції цінності та політика

Рівняння Беллмана

Підхід динамічного програмування

Q-навчання (приблизно 2 дні)

Визначення та алгоритм

Розвідка проти експлуатації

Властивості збіжності та оптимізації

Застосування в іграх, робототехніці та інших сферах

Глибоке навчання з підкріпленням (близько 3 днів)

Глибоке Q-навчання

Глибокі детерміновані градієнти політики (DDPG)

Акторно-критичні методи

Методи градієнта політики

Поглиблені теми (приблизно 4 дні)

Навчання з підкріпленням на основі моделей

Багатоагентне навчання з підкріпленням

Зворотне навчання з підкріпленням

Метанавчання з підкріпленням

Практичне застосування (близько 3 днів)

Реалізація алгоритмів навчання з підкріпленням

Застосування до вибраних проблем та кейсів

Оцінка та налаштування алгоритмів

Підсумки та перспективи (приблизно 2 дні)

Короткий виклад найважливіших концепцій та результатів

Виклики та майбутні розробки в навчанні з підкріпленням

Робота над проектом (близько 3 днів)

Закріплення вивченого матеріалу

Презентація результатів проекту