Компания надеется, что, предлагая Animated Drawings в качестве проекта с открытым исходным кодом, другие разработчики смогут создавать новые, более крутые приложения.
Команда Fundamental AI Research (FAIR) первоначально выпустила веб-версию инструмента в 2021 году. Она просит пользователей загрузить рисунок одного человека, похожего на персонажа, или выбрать демонстрационную фигуру. Если вы используете свой собственный рисунок, вы увидите форму согласия, в которой спрашивается, может ли Meta* использовать ваш рисунок для обучения своих моделей. Вам не нужно давать согласие на дальнейшее использование инструмента.
Затем вам нужно изменить размер окна захвата, чтобы оно плотно прилегало к вашему творению. Инструмент дает вам ручку и ластик, чтобы настроить рисунок перед корректировкой того, где должны быть суставы модели. После всего этого вы увидите анимированную версию вашего эскиза. Вы можете выбрать из множества предустановленных анимаций из четырех категорий: танец, веселье, прыжки и ходьбу.
Animated Drawings использует модели обнаружения объектов, модели оценки позы и методы сегментации на основе обработки изображений для захвата цифровой версии рисунка. Затем он использует традиционные методы компьютерной графики для деформации и анимации изображения.
В течение нескольких месяцев после запуска демоверсии пользователи предоставили Meta* разрешение на использование более 1,6 миллиона изображений в учебных целях. Некоторые люди загружали изображения логотипов компаний, персонажей аниме, рыб и мягких игрушек, несмотря на то, что инструмент оговаривал, что будут работать только человеческие фигуры.
Наряду с просьбами о более подробном наборе инструментов, включающем звуковые эффекты и текстовые наложения, массив изображений, которые люди загружали в инструмент, свидетельствовал о широком интересе к более обширным возможностям рисования и анимации. Отчасти это привело к тому, что Meta* открыла исходный код проекта с набором данных, содержащим около 180 000 рисунков.
«Выпуская модели и код с открытым исходным кодом, проект предоставляет разработчикам отправную точку для развития и расширения проекта, способствуя развитию культуры инноваций и сотрудничества в сообществе с открытым исходным кодом», — написала Meta* в своем блоге.
*Meta – запрещенная на территории России организация.
Подписывайтесь на T4S.TECH в Telegram. Публикуем новости, обзоры и забавные факты о технологиях.
