[LP Morency] Lecture 5.1 - Multimodal Transformers - Part1 (CMU Multimodal Machine Learning, Fall 2023)

🎯 Загружено автоматически через бота: 🚫 Оригинал видео: 📺 Данное видео принадлежит каналу «LP Morency» (@LPMorency). Оно представлено в нашем сообществе исключительно в информационных, научных, образовательных или культурных целях. Наше сообщество не утверждает никаких прав на данное видео. Пожалуйста, поддержите автора, посетив его оригинальный канал. ✉️ Если у вас есть претензии к авторским правам на данное видео, пожалуйста, свяжитесь с нами по почте support@, и мы немедленно удалим его. 📃 Оригинальное описание: Lecture 5.1 - Multimodal Transformers - Part1 (CMU Multimodal Machine Learning, Fall 2023) Topics: language pretraining, multimodal transformer, transformer architecture ---------------------------------------------------------------------------------------------------------------- Carnegie Mellon University, 11-777 Multimodal Machine Learning, 2023 Fall Website: Instructor: Louis-Philippe Morency Co-lecturer: Paul Liang This revised version of CMU Multimodal Machine Learning course presents the fundamental mathematical concepts in machine learning and deep learning relevant to the six main challenges in multimodal research: (1) representation, (2) alignment, (3) reasoning, (4) generation, (5) transference and (6) quantification. This revised course is based on the new taxonomy introduced in this survey paper: