Темы 1‑oй части курса

  1. Машинное обучение
  2. Полносвязные нейросети
  3. Сверточные нейросети
  4. Сегментация изображений
  5. Детекция объектов
  6. Генерация изображений

Темы 3‑ей части курса

  1. Vision transformers
  2. CLIP model
  3. SSL for training fundamental models, DINO
  4. VLM
  5. Знакомство с диффузионными моделями, диффузионные модели в непрерывном пространстве
  6. Flow matching
  7. Современные архитектуры и применение

Темы 2‑ой части курса

  1. Основы обработки текста
  2. Векторные представления слов
  3. Рекуррентные нейросети
  4. Языковые модели и машинный перевод
  5. Механизм внимания и Трансформеры
  6. Большие языковые модели: ChatGPT, GPT‑4 и др.
  7. Задачи NLP

Темы курса Speech Processing

  1. Введение в аудио, спектрограммы, mel‑спектрограммы
  2. SSL для аудио
  3. Кодеки для аудио
  4. Распознавание речи
  5. Основы генерации речи
  6. Дипфейки и их детекция
  7. Voice assistant pipeline
  8. Low‑resource языки и non‑English языки
  9. Speech LLMs

Темы 1‑oй части курса

  1. Машинное обучение
  2. Полносвязные нейросети
  3. Сверточные нейросети
  4. Сегментация изображений
  5. Детекция объектов
  6. Генерация изображений

Темы 3‑ей части курса

  1. Vision transformers
  2. CLIP model
  3. SSL for training fundamental models, DINO
  4. VLM
  5. Знакомство с диффузионными моделями, диффузионные модели в непрерывном пространстве
  6. Flow matching
  7. Современные архитектуры и применение

Темы 2‑ой части курса

  1. Основы обработки текста
  2. Векторные представления слов
  3. Рекуррентные нейросети
  4. Языковые модели и машинный перевод
  5. Механизм внимания и Трансформеры
  6. Большие языковые модели: ChatGPT, GPT‑4 и др.
  7. Задачи NLP

Темы курса Speech Processing

  1. Введение в аудио, спектрограммы, mel‑спектрограммы
  2. SSL для аудио
  3. Кодеки для аудио
  4. Распознавание речи
  5. Основы генерации речи
  6. Дипфейки и их детекция
  7. Voice assistant pipeline
  8. Low‑resource языки и non‑English языки
  9. Speech LLMs