Зазвичай, якщо ви хочете створити реалістичну тривимірну цифрову модель чийогось обличчя, потрібен 3D-сканер та / або кілька камерВсе починається з використання смартфона для зйомки 15-20 секунд відео голови суб'єкта, при цьому відеооператор рухається навколо людини - з одного боку, спереду, з іншого боку - як вони це роблять.
Використовували iPhone X для налаштування повільного руху, щоб зібрати якомога більше візуальних даних завдяки більшій частоті кадрів.Потім для визначення основної геометрії обличчя використовується існуюча методика, відома як візуальна одночасна локалізація та відображення (SLAM). Це робиться шляхом тріангуляції точок на поверхні обличчя, щоб обчислити як його форму, так і положення смартфона камери щодо неї.Далі алгоритми на основі глибокого навчання використовуються для ідентифікації профілю обличчя суб'єкта, а також відносних місць орієнтирів, таких як їх очі, вуха та ніс.
Однак, це все ще залишає деякі інформаційні прогалини, які традиційні методи комп’ютерного зору використовуються для заповнення сітки.Весь процес займає від 30 до 40 хвилин, і його можна виконати повністю на смартфоні. Це призводить до 3D-моделей, які, як стверджується, дуже деталізовані (до рівня міліметра) і реалістичні - тим більше, ніж раніше розроблені подібні установки .Можна сподіватися, що система в кінцевому рахунку може знайти застосування в таких додатках, як створення біометрична ідентифікація або в галузі медицини.
