hat Ein Projekt für künstliche Intelligenz, mit dem jeder seine Kritzeleien zum Leben erwecken kann. Das Unternehmen hofft, dass andere Entwickler durch das Angebot von Animated Drawings als Open-Source-Projekt in der Lage sein werden, neue, reichhaltigere Erfahrungen zu schaffen.
Das Team von Fundamental AI Research (FAIR) veröffentlichte ursprünglich a webbasierte Version des Tools im Jahr 2021. Es fordert die Benutzer auf, eine Zeichnung einer einzelnen menschenähnlichen Figur hochzuladen oder eine Demofigur auszuwählen. Wenn Sie Ihr eigenes Doodle verwenden, sehen Sie ein Einwilligungsformular, in dem Sie gefragt werden, ob Meta Ihre Zeichnung verwenden darf, um seine Modelle zu trainieren. Sie müssen keine Einwilligung erteilen, um das Tool weiterhin zu verwenden.
Als Nächstes müssen Sie die Größe eines Capture-Felds ändern, damit es genau um Ihre Kreation passt. Das Werkzeug gibt Ihnen einen Stift und einen Radiergummi, um die Zeichnung zu optimieren, bevor Sie anpassen, wo die Gelenke sein sollten. Danach sehen Sie eine animierte Version Ihrer Skizze. Sie können aus einer Vielzahl voreingestellter Animationen aus vier Kategorien auswählen: Tanzen, Lustig, Springen und Gehen.
Animated Drawings nutzt Objekterkennungsmodelle, Posenschätzungsmodelle und bildverarbeitungsbasierte Segmentierungsmethoden, um eine digitale Version einer Zeichnung zu erfassen. Anschließend werden traditionelle Computergrafiktechniken verwendet, um das Bild zu verformen und zu animieren.
Innerhalb weniger Monate hatten Benutzer Meta die Erlaubnis erteilt, mehr als 1,6 Millionen Bilder für Schulungszwecke zu verwenden. Einige Leute haben Bilder von Firmenlogos, Anime-Charakteren, Fischen und ausgestopften Tieren hochgeladen, obwohl das Tool vorschrieb, dass nur menschliche Figuren funktionieren würden.
Neben Anfragen nach einem umfassenderen Toolset, das Soundeffekte und Textüberlagerungen enthält, deutete die Reihe von Bildern, die die Leute in das Tool hochgeladen hatten, auf ein breites Interesse an umfassenderen Zeichen-zu-Animations-Erfahrungen hin. Dies führte zum Teil dazu, dass Meta das Projekt mit einem Datensatz von rund 180.000 Zeichnungen als Open Source verfügbar machte. „Durch die Veröffentlichung der Modelle und des Codes als Open Source bietet das Projekt einen Ausgangspunkt für Entwickler, um auf dem Projekt aufzubauen und es zu erweitern und eine Kultur der Innovation und Zusammenarbeit innerhalb der Open-Source-Community zu fördern“, schrieb Meta in einem Blogbeitrag.