Video-Chatbot: Gezielt nach offenen Lernvideos mit Zeitstempel suchen
Einen frei zugänglichen Chatbot, der nach einem Prompt fünf geeignete Empfehlungen zu offenen Lernvideos und exaktem Zeitpunkt ausgibt, dies hat nun das Landesportal ORCA.nrw in Zusammenarbeit mit dem KI-Servicezentrum West AI an den Start gebracht. Ein mühseliges Durchsuchen einzelner Videos nach geeigneten Passagen würde somit entfallen.
Das obere Video zeigt den Chatbot im Einsatz, der recht einfach zu bedienen ist. Einen Prompt zu einem Thema eingegeben und schon wird dieses kurz zusammengefasst und unten drunter zusätzlich fünf externe Verlinkungen zum TIB AV-Portal ausgegeben. Die TIB – Leibniz-Informationszentrum Technik und Naturwissenschaften und Universitätsbibliothek versorgt Wissenschaft, Forschung, Industrie und Wirtschaft mit Literatur und Information und bietet auch ein umfassendes Video-Archiv zu diversen Tech-Themen an.
Sie suchen etwas Bestimmtes, wollen aber nicht sechs Stunden Videomaterial durchsuchen? Dann sind Sie hier genau richtig. Der Videochatbot von ORCA.nrw hilft Ihnen rund 1.500 Videos zu durchsuchen, die auf dem TIB-AV-Portal durch ORCA.nrw veröffentlicht wurden. So ist eine gezielte Erschließung der Videoinhalte möglich. Zu jeder Ihrer Anfragen erhalten Sie eine Auswahl von fünf Videos oder Videozeitmarken, die zur Anfrage in Bezug stehen. Quelle: Orca.nrw
Im oberen Screenshot ist eine Zusammenfassung zum Themenbereich „Neurale Netze“ dargestellt. Für die Nutzung des Video-Chatbots benötigt es übrigens keine Anmeldung und technisch betrachtet setzen die Beteiligten komplett auf Open-Source-Anwendungen.
Technisch basiert es auf bewährten Open-Source-Komponenten: Das Embedding-Modell Snowflake Arctic wandelt Text in mathematische „Fingerabdrücke“ um, um Ähnlichkeiten zu finden; das Sprachmodell llama-3.3-70b-instruct generiert Antworten. Alles läuft in einer Docker-Umgebung – einer standardisierten Software-Hülle für einfache Installation. Der Code ist frei verfügbar auf GitHub unter MIT-Lizenz. Quelle: West AI
Im folgenden Screenshot sind fünf externe Verlinkungen mit themenrelevanten Titeln und Videos verfügbar. Nach einem Linksklick wird man direkt zum Video auf dem TIB AV-Portal weitergeleitet und dort startet das Video mit passendem Zeitstempel bei zum Beispiel 06:44 Minuten. Um dies zu gewährleisten, wurden dem Embedding-Modell alle Untertitel und Zeitangaben zugeführt, wodurch dann diese exakte Weiterleitung über das offene Sprachmodell Llama-3.3-70B möglich ist.
Es lassen sich über das TIB AV-Portal nicht nur die einzelnen Videos anschauen, sondern rechts über die Reiter wird ebenfalls ein Transkript ausgegeben sowie Annotationen (Markierungen) zu Text & Sprache. Handelt es sich beim Lernvideo um einen Bestandteil einer ganzen Serie, so sind ebenfalls die weiteren Videos eingebunden. Dies wirkt alles sehr geordnet.
In der unteren Abbildung sieht man auf der rechten Seite das Transkript, also den gesamten Text des Videos, der sich nun komplett durchgehen lässt. Auch eine Weiterverarbeitung etwa zu einem KI-Podcast ist so sehr schnell möglich. Man könnte hier von einem KI-Workflow sprechen.
Im Weiteren habe ich auf den Reiter „Annotationen“ geklickt, um dann nach einzelnen Begriffen mit Zeitstempeln suchen zu lassen. Nach einem Klick auf ein Schlagwort, wird das Video dann exakt zu dieser Zeit abgespielt. Sehr praktisch. Im Beispiel habe ich auf das Schlagwort „Pixel“ geklickt und schon wird mir eine passende Stelle im Video mit einem Bild und dem Zusammenhang von Pixeln bzw. einer Erklärung dazu angezeigt und zwar genau bei 02:31 Minuten.
Das ist es eigentlich schon gewesen mit dem Video-Chatbot und dem, wie ich finde, flexiblen, aber einfachen Handling. Das Hosting des Chatbots läuft über die GWDG Göttingen, bei der es sich um ein Kompetenzzentrum handelt, das wissenschaftlichen Einrichtungen wie Hochschulen kostenfrei Zugang zu offenen Sprachmodellen wie Llama oder Mistral anbietet. Insgesamt ein tolles Projekt und ein super KI-Use-Case! 
Die obere Abbildung zeigt den offiziellen Account von ORCA.nrw auf dem TIB AV-Portal und die frei verfügbaren Lernvideos. Unten gibt es eine allgemeine Erklärung rund um das TIB AV-Portal.
Zum Chatbot für Videos auf Orca NRW
Autor
