Gesichtserkennung und -erkennung

Question

Ich arbeite in Unity3D und möchte eine App wie this eins machen. Um das zu tun, brauche ich eine nette und glatte SDK/Bibliothek/was auch immer, die es mir ermöglicht, die Gesichtsposition mit allen Gesichtsmarkierungen (Augen, Nase, Mund) zu verfolgen und Landmarkenpositionsänderungen zu erkennen.

Bis jetzt habe ich OpenCV Plugin versucht, aber es scheint nicht zu genau zu arbeiten. Beispielsweise. Wenn ich die Demoszene spiele, verfolgt sie das Gesicht, aber das Gesicht ovale Größe wird sehr leicht und schnell verzerrt, ebenso wie Landmarkenpositionen, die sogar von Anfang an verzerrt sind.

Ich habe auch XZIMG Plugin versucht, aber es verfolgt keine Landmarken überhaupt. Wenn ich etwas falsch mache, bitte korrigieren Sie mich.

Ich bin auf der Suche nach einem geeigneten Tool, das mir das gewünschte Ergebnis auf Android und iOS-Geräten geben kann. Ich habe mich mit Google Mobile Vision beschäftigt, aber bisher bin ich mir nicht sicher, ob es einfach in Unity integriert und in iOS-Projekten verwendet werden kann.

Answer 1

Bildverarbeitung ist ein fortgeschrittenes Thema. Es ist gut zu verstehen, wie die verwendete Bibliothek funktioniert, bevor Sie sie verwenden.

Apropos Tracking ist langsam, das ist normal, weil es CPU-intensiv ist und es auf mobilen Geräten läuft, ist ein anderes Problem.

Um beheben langsam Probleme,

.Sie ein Bild zu nehmen, sendet es zu einem Server (am Computer nicht mobiles Gerät). Der Server macht alle die Verarbeitung und zurück das Ergebnis zurück zu mobile Gerät.

.Try Vuforia. Es ist nicht kostenlos, aber es funktioniert mit Unity.

.Go Native und verwerfen die Verwendung von Unity. Sie benötigen mehr Frames und die Verwendung von Unity wird einige Frames entfernen. Verwenden Sie für Android C++ NDK und OpenCV C++. Für iOS verwende Objective-C und OpenCV. Die Bildverarbeitung ist einer der Fälle, in denen die Verwendung von nativem Code empfohlen wird, um die höchste Bildrate wie möglich zu erhalten.