Eliza
Facetracking-Avatar einer Sukkubus
Hierbei handelt es sich um einen Facetracking-Avatar, der mit Hilfe von Live2D Cubism erstellt wurde. Die Zeichnung wurde vorher in Photoshop angefertigt, anschließend für das Rigging vorbereitet und dann in Live2D geriggt für die Markführer-Facetracking-Software VTube Studio.
Der Avatar folgt den Bewegungen des Steuernden vor der Webcam, um eine Art virtuellen Live-Avatar zu erzeugen, den man als Content-Creator benutzen kann.
Entstehungsprozess
Ein ausführliches Making Of gibt es als Video hier: Making of Eliza. Bei diesem Projekt habe ich vom Charakter-Design bis zum Tracking-Setup alles eigenständig umgesetzt.
Vom Charakter existierten bereits einige Zeichnungen, sodass ich das Design für den Avatar lediglich etwas angepasst bzw. aktualisiert habe.
Tracking-Avatare haben einige ganz spezielle Voraussetzungen an die vorausgehende Illustration. Mit einer Skizze kann man aber erstmal ganz normal anfangen. Die Zeichnung symmetrisch anzulegen, spart einem später einiges an Arbeit, ist aber nicht zwingend notwendig.
Bei einem Facetracking-Avatar müssen alle Einzelteile auf einer separaten Ebene komplett gezeichnet werden, auch und gerade da, wo sie sich mit anderen Teilen überlappen. Nach der Skizze habe ich also die Konturen aller Einzelteile auf eine eigene Ebene eingezeichnet, was erstmal sehr chaotisch aussieht. Sobald unter der Kontur eine Fläche angelegt ist, sieht man wo es hingehen soll.
Die Einzelteile werden dann wie bei einer "normalen" Manga-Zeichnung schattiert, wobei aber jedes Teil auf seinen eigenen Ebenen bleiben muss. Ich organisiere meine Ebenen (über 600 für diese Figur) daher meistens in eingefärbten Ebenengruppen. Nach der Fertigstellung der Zeichnung wird die Datei auf den Export nach Live2D zum Riggen vorbereitet.
In Live2D wird zunächst ein Texturen-Atlas mit allen Einzelteilen angelegt. Da die Figur eine Bikini-, Nackt- und Uniform-Version hatte, mussten alle untergebracht werden.
In Live2D habe ich dann Bewegungen in Parametern mit sogenannten Verformern (quasi Verzerrungs-Ebenen) angelegt. (Im Screenshot links unten) Dabei werden bestimmte Verformungen an Parameter gebunden (links Mitte) und die Software interpoliert die Zwischenschritte.
Die Figur besteht aus 160 dieser Verformern und ist in der Lage, die Augen zu schließen, den Körper, Augenbrauen, Mund und den Kopf zu bewegen. Darüber hinaus gibt es einen "Erröten" und einen "Wütend"-Modus. Die gesamte Figur ist mit Physik ausgestattet (fliegende Haare, Wimpern, Flügel etc.). Die Parameter können dann anschließend in der Facetracking-Software mit Bewegungen des Gesichts vor der Webcam synchronisiert (siehe erste Videos) oder via Parameter händisch animiert werden (siehe folgendes Showcase-Video).
