こんにちは。私の名前はDyadichenkoGrigoryで、追跡が大好きです。近年、追跡技術は飛躍的に進化し、ますます民主的になっています。非常に異なる計画の多くの技術が登場しました。いろいろな種類の技術をたくさん使って仕事ができてラッキーだったので、この知識を少し構造化していきたいと思います。ほとんどの場合、UnityまたはWebと互換性のある追跡テクノロジーを検討します。したがって、このトピックに興味がある場合。カットの下でようこそ！
一般的に追跡は非常に膨大なトピックです。このシリーズの記事で話したい追跡技術はたくさんあります。しかし、今日は顔のランドマーク認識についてお話したいと思います。一般に、顔認識に関しては、FaceIDでの同じ顔認識や同様のセキュリティケースなど、解決する他の多くの優れたテクノロジーやタスクがありますが、グラフィックスやインタラクティブな視覚化を使用する場合、おそらく最も興味深いものです。顔の要点を決める技術です。
ARマスクの適用
AR . , , AR. — . Instagram TikTok. . .
Face Tracking
2020 . , , , . , . Motion Capture , Faceware, . FaceRig VTuber’. , . , - , ARKit. , , . Faceware .
AR
, . - . . :
https://player.vimeo.com/video/220504292
https://mixr.ru/2021/01/20/trollo/
AR . , , .
Unity, , . , SDK , SDK , ( ).
SparkAR
:
: Android/IOS
Unity: ,
:
https://sparkar.facebook.com/ar-studio/
, Spark. — , Instagram . — , . , .. . , .
, , , - . , , Spark AR Studio .
ARFoundation (ARKit/ARCore)
:
: Android/IOS
Unity:
SDK : 2
:
https://docs.unity3d.com/Packages/com.unity.xr.arfoundation@4.1/manual/
ARFoundation 4.1 Face tracking ARCore ARKit ( ARFoundation ARCore). , , , API AR Foundation. Unity , , . .
SDK, , , . , .
OpenCV + Dlib
: / Unity 135$ (https://assetstore.unity.com/packages/tools/integration/opencv-for-unity-21088 + https://assetstore.unity.com/packages/tools/integration/dlib-facelandmark-detector-64314 )
: Android/IOS/WebGL/Win/Mac/Linux/Hololens/MagicLeap
Unity:
SDK : 9 ( , )
:
. , , Python, . — . Unity - , . OpenCV Dlib, . . . , . Python , Unity SDK.
- . , OpenCV - . -, OpenCV . -, , Unity, Unity . C , . , . 2 FPS, 30, 60 SDK .
XZIMG
: 2100€
: Android/IOS/WebGL/Win
SDK : 2
Unity:
:
https://www.xzimg.com/Products?nav=product-XMF
SDK - , . , , . , , . , MOTOROLA G5S. Android 4.1 - . , - . , . OpenCV .
ARGear
: / 25$
: Android/IOS
Unity:
SDK : 9
:
, XZIMG. Xiaomi Redmi Note 8T. . . , , , - . , , sample project Unity, sdk. - .
BRFv5
:
: Web/Android(Chrome)/IOS(Safari)
Unity:
https://github.com/Tastenkunst/brfv5-browser
SDK , . . . (: ) , 68 — . . . , Media Pipe .
, , Banuba Deepar. , . Deepar SDK Unity, .
, . . . . , OpenCV , , , , . , , .
, . , SLAM, ..