Французский разработчик Сирил Диане создал проект приложения, которое с помощью технологии дополненной реальности (AR) может «копировать» объекты физического окружения — с помощью камеры — и вставлять их в цифровом формате на другом устройстве.
Об этом Диане рассказал в своем Twitter-аккаунте.
На опубликованном видео видно, что камера смартфона фиксирует вазу, книгу и манекен, сохраняет их отделенные от фона изображения на экране. Затем через камеру они вставляются в приложение Photoshop на ноутбуке.
Как пояснил сам французский программист, для достижения такого эффекта созданная им программа состоит из нескольких частей. Одна с помощью машинного обучения отделяет захвачен камерой объект от его фона, а другая — фиксирует момент, когда камера смартфона наведена на экран ноутбука.
4/10 - Cut & paste your surroundings to Photoshop
— Cyril Diagne (@cyrildiagne) May 3, 2020
Code: https://t.co/cVddH3u3ik
Book: @HOLOmagazine
Garment: SS17 by @thekarentopacio
Type: Sainte Colombe by @MinetYoann @ProductionType
Technical Insights: ↓#ML #AR #AI #AIUX #Adobe #Photoshop pic.twitter.com/LkTBe0t0rF
Приложение называется AR Cut&Paste. Сейчас на копирование объекта тратится 2,5 секунды, а на его вставку — четыре, но это время теоретически можно даже уменьшить: все желающие могут самостоятельно отредактировать код, который Диане выложил на GitHub.
Right now, latency is about ~2.5s for cut and ~4s for paste.
— Cyril Diagne (@cyrildiagne) May 3, 2020
There are tons of ways to speed up the whole flow but that weekend just went too fast
Anyway that’s it for now. Let me know if you have any question. Otherwise see you next week for another AI+UX prototype! pic.twitter.com/hyArPgy2Bq
Как сообщал Realist, американские разработчики представили открытый алгоритм, превращающий фотографии в трехмерные с реалистично дорисованным нейросетью фоном. Диане использовал код этого алгоритма и создал расширение для браузера Google Chrome, преобразующего посты в Instagram из обычных в трехмерные и анимированные.