Бакалавриат 2025/2026

Искусственный интеллект в мультимедиа

Статус: Курс обязательный (Информатика и вычислительная техника)

Кто читает: Департамент компьютерной инженерии

Когда читается: 4-й курс, 1-3 модуль

Охват аудитории: для всех кампусов НИУ ВШЭ

Преподаватели: Рыбаков Петр Владимирович

Язык: русский

Программа дисциплины

Аннотация

Курс "Искусственный интеллект в мультимедиа" представляет собой углубленное изучение современных методов и алгоритмов, используемых в области компьютерного зрения, обработки изображений, звука и видео. В рамках курса будут рассмотрены как классические подходы, так и новейшие нейросетевые решения для анализа и генерации мультимедийного контента.Основные темы курса включают: Классические алгоритмы компьютерного зрения: Изучение основ компьютерного зрения, включая алгоритмы обработки изображений и базовые методы анализа сцены. Задачи компьютерного зрения: Рассмотрение ключевых задач, таких как обнаружение, классификация и сегментация объектов, а также трекинг и оптическое распознавание символов (OCR). Нейросетевые алгоритмы для решения задач обнаружения объектов, классификации и сегментации: Овладение современными методами глубокого обучения, включая сверточные нейронные сети (CNN), для анализа изображений. Задача трекинга объектов: Изучение алгоритмов и моделей, используемых для отслеживания движущихся объектов в видео. Оптическое распознавание символов (OCR): Ознакомление с методами извлечения текстовой информации из изображений и документов. Порождающие модели (GAN, VAE, Diffusion): Обзор и применение продвинутых генеративных моделей для создания изображений, видео и других типов данных. Промышленное применение компьютерного зрения: Примеры использования компьютерного зрения в различных отраслях, таких как медицина, производство и безопасность. 3D-реконструкция: Изучение методов восстановления трёхмерных моделей объектов по их двумерным изображениям. Генерация видео: Рассмотрение алгоритмов и технологий, позволяющих создавать видео с использованием нейросетевых моделей. Обработка звука нейросетевыми методами: Освоение методов обработки звуковых сигналов, включая подавление шумов, отделение речи и разделение инструментальных дорожек. Генерация и распознавание речи: Изучение технологий синтеза и распознавания речи с применением нейросетей. Курс предназначен для студентов, интересующихся применением искусственного интеллекта в области мультимедийных технологий, и охватывает как теоретические основы, так и практические аспекты разработки и внедрения AI-решений в мультимедиа. В ходе обучения слушатели получат навыки работы с современными инструментами и библиотеками, такими как Ultralytics, OpenCV, PIL, PyTorch и освоят техники, применимые в реальных проектах.