VIDEOSPACE ist seit mehr als einem Jahrzehnt in der professionellen Videoproduktion tätig. In den letzten Jahren haben wir uns voll und ganz auf Technologien gestützt, die auf künstlicher Intelligenz basieren. Dadurch können wir schneller, präziser und in mehreren Sprachen gleichzeitig produzieren. Mit dieser Entwicklung kam jedoch ein spezifisches Problem auf: Wie können wir automatisch Gesten im Filmmaterial erkennen, um den Schnitt zu beschleunigen und das Video besser mit der KI-Voice-Over zu synchronisieren?
Warum wurde der Gesture Clip Analyzer entwickelt?
Herkömmliche Montagewerkzeuge bieten keine Lösungen zur automatischen Gestenerkennung. Das manuelle Analysieren und Schneiden des Materials war nicht nur zeitaufwändig, sondern auch ineffizient. Daher haben wir unsere eigene Lösung entwickelt - Gesture Clip Analyzer, eine Desktop-Anwendung für macOS.
Das Programm analysiert die Videodatei (MP4) und erkennt Momente, in denen bestimmte Gesten auftreten, wie z. B.:
gespreizte Hände,
Zeigen,
eine Geste des Nachdenkens,
eine neutrale Haltung.
Sobald die Analyse abgeschlossen ist, erstellt die Anwendung eine Datei markers.jsonin dem die Daten gespeichert sind:
genaue Zeitcodes der erkannten Gesten,
die der Geste zugewiesenen Etiketten,
Dauer und Farbe der Markierung.
Integration mit Adobe Premiere Pro
Die einfache Erkennung von Gesten ist nur der erste Schritt. Um das Potenzial voll auszuschöpfen, haben wir ein zweites Tool entwickelt - GestureMarkers UXP v0.1.6 für Adobe Premiere Pro (getestet in Beta-Version 25.4 build 99).
Dieses Panel ermöglicht:
Datei-Import
markers.json,automatisches Hinzufügen von Markern zur Sequenz,
Farbmarkierungen je nach Art der Geste,
um das Material automatisch an den erkannten Punkten zu schneiden,
Verschieben von Fragmenten in ausgewählte Bins (z. B. die ersten 5 Gesten in den Ordner "Cuts 1").
Dadurch wird der gesamte KI-Film-Postproduktionsprozess viel schneller, präziser und einfacher zu automatisieren.
Der Einsatz von AI-Video in der Produktion
Wir verwenden Gesture Clip Analyzer und GestureMarkers UXP in unserer täglichen Arbeit:
Online-Kurse und -Tutorials (modularer Aufbau unter KI-Voiceover),
Produktvideos (dynamische, dem Inhalt angepasste Schnitte),
mehrsprachige Inhalte (einfache Synchronisation mit AI-Synchronisation).
Es handelt sich um Lösungen, die aus einem echten Bedürfnis heraus entstanden sind und die heute ein fester Bestandteil unseres Workflows bei VIDEOSPACE sind.
Unsere Tools herunterladen
Möchten Sie den Gesture Clip Analyzer und das Panel für Adobe Premiere Pro testen? Wir haben sie in einem Open-Source-Repository verfügbar gemacht:
