Ready to level up your GenAI skills? Step into the exciting world of multimodal AI, where language, images, and speech come together to build smarter, more interactive applications.



Build Multimodal Generative AI Applications
Ce cours fait partie de IBM RAG and Agentic AI Certificat Professionnel


Instructeurs : Hailey Quach
Inclus avec
Expérience recommandée
Ce que vous apprendrez
Build the job-ready skills you need to build multimodal generative AI applications in just 3 weeks
Understand the fundamental concepts and challenges in multimodal AI, including the integration of text, speech, images, and video
Build multimodal AI applications using state-of-the-art models and frameworks such as IBM’s Granite, Meta’s Llama, OpenAI’s Whisper, DALL·E and Sora
Develop multimodal AI solutions, including chatbots and image/video generation models, using IBM watsonx.ai, Hugging Face, Flask and Gradio
Compétences que vous acquerrez
- Catégorie : Web Applications
- Catégorie : Flask (Web Framework)
- Catégorie : OpenAI
- Catégorie : Image Analysis
- Catégorie : PyTorch (Machine Learning Library)
- Catégorie : Large Language Modeling
- Catégorie : Artificial Intelligence
- Catégorie : Tensorflow
- Catégorie : Prompt Engineering
- Catégorie : Generative AI
- Catégorie : Application Development
- Catégorie : Natural Language Processing
- Catégorie : Computer Vision
Détails à connaître

Ajouter à votre profil LinkedIn
mai 2025
6 devoirs
Découvrez comment les employés des entreprises prestigieuses maîtrisent des compétences recherchées

Élaborez votre expertise en Software Development
- Apprenez de nouveaux concepts auprès d'experts du secteur
- Acquérez une compréhension de base d'un sujet ou d'un outil
- Développez des compétences professionnelles avec des projets pratiques
- Obtenez un certificat professionnel partageable auprès de IBM


Obtenez un certificat professionnel
Ajoutez cette qualification à votre profil LinkedIn ou à votre CV
Partagez-le sur les réseaux sociaux et dans votre évaluation de performance

Il y a 3 modules dans ce cours
This module provides an in-depth introduction to multimodal AI, focusing on how AI systems process and integrate multiple data types, including text, speech, and images. You will explore core concepts and some of the challenges you will face in multimodal AI, gaining foundational skills with text and speech processing techniques. Through hands-on labs, you will apply AI-powered storytelling, speech-to-text transcription, and text-to-speech synthesis to real-world applications, such as AI-generated audiobooks and automated meeting assistants.
Inclus
4 vidéos2 lectures2 devoirs2 éléments d'application6 plugins
This module explores how AI processes generate visual data by integrating images and videos with text. You will examine text-to-image/image-to-text and text-to-video/video-to-text models, image captioning, and the fusion techniques necessary for effective multimodal AI systems. Through hands-on labs, you will apply state-of-the-art models like DALL·E and Sora to generate images and videos from text prompts. Additionally, you will implement an image captioning system using Meta’s Llama 4, gaining practical experience in combining vision and language models for real-world applications.
Inclus
2 vidéos1 lecture2 devoirs2 éléments d'application3 plugins
The final module explores advanced multimodal AI applications, integrating image, text, and retrieval-based systems to build innovative solutions. You will dive into multimodal retrieval and search, multimodal Question Answering (QA), and chatbots, learning how cross-modal retrieval techniques enhance search engines and recommendation systems. Additionally, you will learn how integrating visual and textual data improves chatbot interactions. Through hands-on labs, you will build fully functional web applications with multimodal capabilities using Flask, applying state-of-the-art models and frameworks.
Inclus
3 vidéos3 lectures2 devoirs2 éléments d'application1 plugin
Offert par
En savoir plus sur Software Development
Pour quelles raisons les étudiants sur Coursera nous choisissent-ils pour leur carrière ?





Ouvrez de nouvelles portes avec Coursera Plus
Accès illimité à 10,000+ cours de niveau international, projets pratiques et programmes de certification prêts à l'emploi - tous inclus dans votre abonnement.
Faites progresser votre carrière avec un diplôme en ligne
Obtenez un diplôme auprès d’universités de renommée mondiale - 100 % en ligne
Rejoignez plus de 3 400 entreprises mondiales qui ont choisi Coursera pour les affaires
Améliorez les compétences de vos employés pour exceller dans l’économie numérique
Foire Aux Questions
Skills in multimodal generative AI, where systems integrate text, speech, images, and video, are in high demand for roles such as AI developer, machine learning engineer, multimodal AI researcher, and full-stack developer specializing in AI-powered user experiences.
Not necessarily. If you’re a Python developer, you can start building with generative AI using tools like IBM watsonx.ai, Flask, and Gradio—no advanced ML background required.
Multimodal AI apps go beyond typical app development by incorporating multimodal large language models (MLLMs) and media-based inputs like speech, images, and video. You’ll still use familiar tools like Python, Flask and Gradio, but you’ll also learn to integrate and orchestrate models for tasks like transcription, image generation, and AI-powered storytelling.
Plus de questions
Aide financière disponible,