Открыть меню
683
286
3
15 тыс.
Wiki - Факультет компьютерных наук
Переключить меню настроек
Открыть персональное меню
Вы не представились системе
Ваш IP-адрес будет виден всем, если вы внесёте какие-либо изменения.

Мультимодальные нейронные сети (ИИ24, 6 модуль)

Материал из Wiki - Факультет компьютерных наук

О курсе

Занятия проводятся в Zoom по вторникам в 18:10.


Контакты

Чат курса в TG: Телеграм-чат


Преподаватели:

Жестков Борис Григорьевич @BoryaZh

Бурлова Альбина Сергеевна @planqua


Ассистент Контакты
Никита @amapassenger
Александр @wolf_golfa
Данил @shishiga_ceo
Игорь @Igkart


Материалы курса


}

Формула оценивания

Оценка = 0.3 * ДЗ1 + 0.3 * ДЗ2 + 0.4 * ДЗ3; максимум = 10 баллов


Домашние задания

  1. ДЗ1. CLAP. Обучение проекции из аудио в текстовое пространство CLIP
  2. ДЗ2. Мультимодальный адаптер к Qwen3-0.6B
  3. ДЗ3. VQA Challenge (Kaggle-соревнование)

Литература

Занятие Тема Дата Материалы для самоподготовки к семинарам Дополнительные материалы
1 [[1]] [Введение] 05.11.2025
2 [[2]] [Контрастивное обучение] 15.11.2025
3 [[3]] [Энкодеры] 18.11.2025
4 [[4]] [Мультимодальное слияние и совместные энкодеры] 03.12.2025
5 [[5]] [Мультимодальные языковые модели] 09.12.2025
6 [[6]] [Q-Former и методы фьюжна ] 12.12.2025
7 [[7]] [Мультимодальные бенчмарки ] 16.12.2025
8 [[8]] Генеративные модели для изображений и видео 20.12.2025