За последние несколько лет компьютерное зрение и технология дополненной реальности достигли невероятных успехов. Один из самых наглядных примеров — способность сервиса Google Lens распознавать текст в реальной жизни и копировать его на устройство. Программист Сирил Диань (Cyril Diagne) пошёл ещё дальше и создал приложение, которое может делать то же самое, но с объектами. Проще говоря, с помощью смартфона можно переносить любой объект на компьютер.
Программа называется AR Cut & Paste, она позволяет «вырезать» реальные объекты из фона, переносить на компьютер и вставлять готовые изображения в Photoshop. Для этого используется машинное обучение, компьютерное зрение и дополненная реальность, что значительно упрощает этот процесс.
Ниже на видео Сирил Диань продемонстрировал, как это делается всего лишь в два клика и занимает несколько секунд. По словам автора программы, на вырезание объекта уходит примерно 2,5 секунды, а на вставку — 4 секунды. Диань утверждает, что есть много способов ускорить этот процесс, и этим он намерен заняться в ближайшее время.
4/10 — Cut & paste your surroundings to Photoshop
Code: https://t.co/cVddH3u3ik
Book: @HOLOmagazine
Garment: SS17 by @thekarentopacio
Type: Sainte Colombe by @MinetYoann @ProductionType
Technical Insights: ↓#ML #AR #AI #AIUX #Adobe #Photoshop pic.twitter.com/LkTBe0t0rF— Cyril Diagne (@cyrildiagne) May 3, 2020
Разработчик не уточнил, появится ли такое приложение на коммерческой основе. Пока это только прототип. В любом случае, AR Cut & Paste — это потрясающая демонстрация возможностей дополненной реальности и компьютерного зрения. Сам проект и все прилагающиеся к нему инструкции опубликованы на GitHub.
