Цели и задачи дисциплины
Сформировать представление у магистранта о многообразии нейросетевых технологий в различных задачах синтетических (генеративных) медиа. Научить на практике решать задачи синтеза изображений с использованием генеративных-состязательных сетей, анализа и генерации видеоконтента, задачи распознавания и синтеза речи, синтеза и реконструкции лиц для создания deepfake, генерации текста с помощью генеративных нейросетевых моделей.
Краткое содержание дисциплины
В рамках дисциплины дается комплексное понимание технологий генеративно-состязательных нейронных сетей для создания виртуальных (цифровых) персонажей и других актуальных задач синтетических медиа. Нейронные сети в распознавании и синтезе речи. Анализ и синтез изображений и видео по содержанию по заданным параметрам. Синтез лица, создание deepfake с нейросетевыми технологиями замены лиц – face swap, реконструкции лиц – reenactment, синхронизации лица спикера и речи – lip-sync. Генерация текста с использование GAN, моделей GPT.