Aus dem Kurs: Datenanalyse mit KI
Erhalten Sie Zugriff auf diesen Kurs – mit einer kostenlosen Probeversion
Werden Sie noch heute Mitglied und erhalten Sie Zugriff auf mehr als 24.700 Kurse von Branchenfachleuten.
Theorie: Multimodalität bei LLMs
Aus dem Kurs: Datenanalyse mit KI
Theorie: Multimodalität bei LLMs
Menschen verstehen ihre Umgebung durch eine Kombination verschiedener Sinne. Wir sprechen, wir hören, sehen und gestikulieren gleichzeitig, um Informationen zu erfassen und zu interpretieren. Moderne LLMs erweitern ihre Fähigkeit, um mehrere Modalitäten gleichzeitig zu verarbeiten. Dabei werden verschiedene Datentypen wie Text, Bilder, Sprache, Audio oder Video miteinander kombiniert und in einen gemeinsamen Kontext gebracht. Warum ist Multimodalität wichtig? Menschen nutzen ebenfalls simultan mehrere Modalitäten. Beim Sprechen verwenden wir Gestik und Mimik, beim Lernen lesen wir Text, hören Audio und sehen Bilder. Multimodale LLMs ahmen also exakt dieses Verhalten nach und ermöglichen es, komplexe Problemstellungen zu lösen, bei denen unterschiedliche Datenquellen zusammengeführt werden. Welche Vorteile bringt also Multimodalität mit sich? Bildinhalte, Sprachverarbeitung und Textinformationen können also gemeinsam analysiert werden. So können also Informationen aus verschiedenen…
Üben mit Projektdateien
Laden Sie die Dateien herunter, die von den Trainer:innen verwendet werden. So können Sie mitlesen und durch Ansehen, Zuhören und Üben lernen.
Inhalt
-
-
-
Theorie: Datenanalyse mit KI kennenlernen5 Min. 1 Sek.
-
(Gesperrt)
Theorie: Large Language Models (LLMs) kennenlernen3 Min. 6 Sek.
-
(Gesperrt)
Theorie: Tokenisierung verstehen5 Min. 15 Sek.
-
(Gesperrt)
OpenAI Tokenizer verwenden3 Min. 38 Sek.
-
Theorie: Transformer-Architektur in LLMs kennenlernen4 Min. 28 Sek.
-
(Gesperrt)
Theorie: Prompt Engineering kennenlernen5 Min. 10 Sek.
-
(Gesperrt)
Theorie: Multimodalität bei LLMs2 Min. 44 Sek.
-
(Gesperrt)
Theorie: Parameter in LLMs verstehen5 Min. 1 Sek.
-
Theorie: Zukunftsentwicklung von LLMs und mooresches Gesetz3 Min. 41 Sek.
-
-
-
-
-
-
-
-
-
-