Nous pouvons désormais affirmer que SketchAR est un outil à part entière pour apprendre à dessiner grâce à la réalité augmentée !
Lorsque nous avons imaginé l'idée initiale de SketchAR, nous savions qu'il y aurait des dizaines de façons de l'utiliser : sur papier, sur un mur, par des artistes ou des débutants souhaitant développer leurs compétences en dessin. Vous avez peut-être remarqué que nous avons évité l'expression « apprendre à dessiner ». Il y avait des raisons à cela. Malgré le potentiel évident de cette application en tant qu'outil d'apprentissage, certains utilisateurs ont mal interprété son objectif et ont pensé qu'elle avait été créée uniquement pour décalquer des images. Il y avait peut-être une part de vérité dans cela concernant la première version de l'application. Le processus de décalquage est utile pour les artistes professionnels, car c'est un moyen simple et pratique de reporter une esquisse sur la surface souhaitée. Mais le grand public n'avait peut-être pas conscience de la diversité des usages possibles de SketchAR.
Dessin pas à pas en réalité augmentée. SketchAR
Quoi qu'il en soit, poursuivons : la nouvelle mise à jour apporte de nombreuses fonctionnalités passionnantes. Les voici :
1. SketchAR School
Apprenez à dessiner facilement, étape par étape, grâce à la réalité augmentée.
La School est une section regroupant différentes leçons de dessin. La particularité de cette expérience d'apprentissage réside dans la fonction principale de l'application elle-même : apprendre à utiliser la RA pour dessiner. Cela se fait en suivant des guides pas à pas et en reproduisant les lignes affichées.
Dessin pas à pas en réalité augmentée. SketchAR
Après avoir dessiné des marqueurs sur une feuille de papier (quatre croix), l'utilisateur est guidé à travers chaque étape suivante du dessin. De plus, chaque étape est accompagnée d'une description textuelle.
Les nouveaux marqueurs à dessiner sur le papier.
2. Des marqueurs simplifiés. Du « zéro » à la « croix ».
Nous avons déjà expliqué comment nous avions choisi nos marqueurs. Nous avions opté pour un cercle dans la première version de SketchAR, car cela nous permettait d'éviter certaines complications.
La croix (+ ou X) est plus facile à dessiner pour l'utilisateur, mais techniquement plus difficile à détecter et à reconnaître par la caméra. Nous avons finalement amélioré nos méthodes et sommes passés aux marqueurs en forme de croix.
3. Des améliorations en coulisses.
La plupart des innovations sont invisibles. Une étape importante a été franchie avec l'intégration de notre méthode des « marqueurs progressifs ». Cette méthode a permis d'améliorer la reconnaissance de tout ce que l'utilisateur dessine. Toutes ces données modifient continuellement le fonctionnement de l'application et permettent en retour de recommander des algorithmes adaptés aux besoins spécifiques de chaque dessinateur.
Voici une description de ces méthodes en anglais et en russe.
4. Intelligence artificielle
Nous utilisons l'apprentissage automatique comme un élément clé du rôle d'assistant de SketchAR, qui aide l'utilisateur à comprendre comment dessiner un objet particulier et quelles sont ses habitudes de dessin. Grâce à ces informations, l'algorithme unique de chaque utilisateur devrait l'aider à atteindre ses objectifs dans l'art du dessin, avec une assistance sur mesure.
5. Réseaux de neurones
L'approche par réseau de neurones convolutif constitue une amélioration très prometteuse du cœur de l'application. Le réseau s'entraîne sur un large ensemble d'exemples réels issus des utilisateurs de SketchAR. Ces données sont ensuite utilisées pour trouver l'algorithme optimal permettant de placer une esquisse virtuelle sur une surface réelle. Il apprend par lui-même en exploitant toutes les informations disponibles pour cette tâche, ce qui conduit à une plus grande stabilité de l'algorithme. Nous avons déjà obtenu de bons résultats, et avec davantage de données d'entraînement, cet algorithme deviendra universel.
Tout ce que vous voyez ici n'est qu'une des premières étapes. La qualité de la technologie elle-même, ainsi que le nombre et la variété des leçons, ne feront que croître.
Téléchargez les applications sur iOS, Android et MS Hololens.
Restons en contact !
