Hallo. Mein Name ist Dyadichenko Grigory und ich liebe es zu verfolgen. In den letzten Jahren haben sich Tracking-Technologien sprunghaft weiterentwickelt und sind immer demokratischer geworden. Viele Technologien eines ganz anderen Plans sind erschienen. Ich hatte das Glück, mit einer Vielzahl von Technologien verschiedener Art zu arbeiten, deshalb möchte ich dieses Wissen etwas strukturieren. Zum größten Teil werden wir Tracking-Technologien untersuchen, die mit Unity oder dem Web kompatibel sind. Also, wenn Sie dieses Thema interessiert. Willkommen unter dem Schnitt!
— . , . Face Landmark Recognition. , , Face Recognition FaceID , , , .
AR
AR . , , AR. — . Instagram TikTok. . .
Face Tracking
2020 . , , , . , . Motion Capture , Faceware, . FaceRig VTuber’. , . , - , ARKit. , , . Faceware .
AR
, . - . . :
https://player.vimeo.com/video/220504292
https://mixr.ru/2021/01/20/trollo/
AR . , , .
Unity, , . , SDK , SDK , ( ).
SparkAR
:
: Android/IOS
Unity: ,
:
https://sparkar.facebook.com/ar-studio/
, Spark. — , Instagram . — , . , .. . , .
, , , - . , , Spark AR Studio .
ARFoundation (ARKit/ARCore)
:
: Android/IOS
Unity:
SDK : 2
:
https://docs.unity3d.com/Packages/com.unity.xr.arfoundation@4.1/manual/
ARFoundation 4.1 Face tracking ARCore ARKit ( ARFoundation ARCore). , , , API AR Foundation. Unity , , . .
SDK, , , . , .
OpenCV + Dlib
: / Unity 135$ (https://assetstore.unity.com/packages/tools/integration/opencv-for-unity-21088 + https://assetstore.unity.com/packages/tools/integration/dlib-facelandmark-detector-64314 )
: Android/IOS/WebGL/Win/Mac/Linux/Hololens/MagicLeap
Unity:
SDK : 9 ( , )
:
. , , Python, . — . Unity - , . OpenCV Dlib, . . . , . Python , Unity SDK.
- . , OpenCV - . -, OpenCV . -, , Unity, Unity . C , . , . 2 FPS, 30, 60 SDK .
XZIMG
: 2100€
: Android/IOS/WebGL/Win
SDK : 2
Unity:
:
https://www.xzimg.com/Products?nav=product-XMF
SDK - , . , , . , , . , MOTOROLA G5S. Android 4.1 - . , - . , . OpenCV .
ARGear
: / 25$
: Android/IOS
Unity:
SDK : 9
:
, XZIMG. Xiaomi Redmi Note 8T. . . , , , - . , , sample project Unity, sdk. - .
BRFv5
:
: Web/Android(Chrome)/IOS(Safari)
Unity:
https://github.com/Tastenkunst/brfv5-browser
SDK , . . . (: ) , 68 — . . . , Media Pipe .
, , Banuba Deepar. , . Deepar SDK Unity, .
, . . . . , OpenCV , , , , . , , .
, . , SLAM, ..