Теперь можно смело сказать, что SketchAR – это полноценный инструмент для обучения рисованию с помощью дополненной реальности!
Когда мы придумывали изначальную идею SketchAR, мы понимали, что у приложения будут десятки способов применения: на бумаге, на стенах, для художников или новичков, которые хотят развивать свои навыки рисования. Возможно, вы уже замечали, что мы избегали формулировки «учиться рисовать». На то были причины. Несмотря на очевидный потенциал приложения как обучающего инструмента, некоторые пользователи восприняли его иначе и решили, что оно создано только для обводки изображений. Возможно, в этом была доля правды применительно к первой версии приложения. Процесс обводки полезен профессиональным художникам как простой и удобный способ перенести набросок на нужную поверхность. Но широкая публика, вероятно, не осознавала, насколько разнообразным может быть использование SketchAR.

Пошаговое рисование с дополненной реальностью. SketchAR
Так или иначе, идём дальше: новое обновление включает множество новых и интересных функций. Вот они:
1. SketchAR School
Учитесь рисовать легко, шаг за шагом, с помощью дополненной реальности.
Школа – это раздел с коллекцией различных уроков рисования. Уникальная особенность обучения заключается в самой главной функции приложения: обучении рисованию с использованием AR. Это происходит через следование пошаговым руководствам и копирование линий.

Пошаговое рисование с дополненной реальностью. SketchAR
После нанесения меток на бумагу (четыре плюсика) пользователь получает подсказки на каждом следующем этапе рисования. Более того, каждый шаг сопровождается текстовым описанием.

Новые метки, которые нужно нарисовать на бумаге.
2. Упростили метки. От «нуля» до «плюса».
Мы уже писали о том, как выбирали метки. Для первой версии SketchAR мы выбрали круг, потому что он позволял избежать некоторых сложностей.
Плюс (+ или X) проще нарисовать пользователю, но технически его сложнее обнаружить и распознать камерой. В итоге мы улучшили методы и перешли на метки в виде «плюса».
3. Улучшения внутри.
Большинство нововведений скрыты от глаз. Важным шагом стала интеграция нашего метода «прогрессивных меток». Этот метод улучшил распознавание процесса в отношении всего, что рисует пользователь. Все эти данные постоянно совершенствуют работу приложения и, в свою очередь, помогают рекомендовать алгоритмы, подходящие под конкретные потребности каждого рисующего.
Описание методов можно найти на английском и русском языках.
4. Искусственный интеллект
Мы используем машинное обучение как важную часть роли SketchAR в качестве помощника, который подсказывает пользователю, как нарисовать тот или иной объект, и учитывает его привычки в рисовании. Используя эту информацию, уникальный алгоритм для каждого пользователя должен помочь ему достичь своих целей в искусстве рисования благодаря индивидуально подобранной помощи.
5. Нейронные сети
Подход на основе свёрточных нейронных сетей – очень перспективное улучшение ядра приложения. Сеть обучается на большом наборе реальных примеров, взятых у людей, которые пользовались SketchAR. Затем эти данные используются для поиска оптимального алгоритма размещения виртуального наброска на реальной поверхности. Сеть сама учится, используя всю доступную информацию для этой задачи, что приводит к большей стабильности алгоритма. Мы уже видим неплохие результаты, и с увеличением объёма обучающих данных этот алгоритм станет универсальным.
Всё, что вы видите здесь, – лишь один из первых шагов. Качество самой технологии, а также количество и разнообразие уроков будут расти.
Скачивайте приложения на iOS, Android и MS Hololens.
Оставайтесь на связи!

