Leren tekenen is nog nooit zo eenvoudig en interessant geweest. De innovatieve mobiele app SketchAR doet dit door gebruik te maken van augmented reality, machinaal leren en neurale netwerken. Het is de eerste assistent voor het tekenen met behulp van augmented reality power, mogelijk gemaakt met kunstmatige intelligentie.
Het beste aan de Litouwse start-up is dat je kunt tekenen op papier, maar ook op muren, zodat je geweldige muurschilderingen kunt maken. Dus, de app zet virtuele beelden op een papier of een muur, zodat je tekeningen vanaf je telefoon kunt naschilderen.
Maar hoe werkt het?
Houd gewoon je telefoon omhoog en kijk hoe virtuele beelden boven je omgeving verschijnen. De app werkt beter op A4/A5-papier. Maar je kunt ook elk beeld op een muur zetten en het vervolgens traceren. Merk op dat je voor het schilderen op een muur smartphones met ARKit en ARCore moet gebruiken.
Natuurlijk zijn augmented reality brillen de beste manier om onbeperkt te tekenen, en er kan echte synergie ontstaan met de combinatie van verschillende dingen, zoals kunst en technologie.
Innovation Origins had een kort interview met oprichter, CEO en muurschilder Andrey Drobitko.
Hoe kwamen jullie op het idee voor SketchAR?
Het oorspronkelijke idee was als een hulpmiddel voor kunstenaars zoals ikzelf; een handige en eenvoudige manier om schetsen op een groot oppervlak te tekenen. Later ontdekten we dat voor degenen die op zoek zijn naar nieuwe levensvaardigheden – ‘leren tekenen’ is een van de meest voorkomende zoekopdrachten.
Denken jullie er veel start-ups zijn die zich met hetzelfde probleem bezighouden?
Wij denken van niet. We weten dat we de enige app in dit domein zijn, vanwege de technologie die we hebben ontwikkeld om in vlakke witte vlakken te werken.
Wat maakt SketchAR zo anders?
We hebben zowel verstand van kunst als van techniek. Daarnaast hebben we de Markerless CV-tracking van vlakke oppervlakken die aangedreven worden door machinaal leren en neurale netwerken. We analyseerden honderdduizenden video’s van onze gebruikers (met hun toestemming). De ideeën waren om verschillende soorten oppervlakken, handen, papier en hun structuur te ‘zien’.
En zoals ik al zei, er is geen andere app die lesgeeft met behulp van AR, en die geen markers (zoals QR-codes) gebruikt.
Hoe kan je je technologie uitleggen?
Een verbeterde realiteit is de meest eenvoudige manier om de eerste stap te zetten. De eerste lijn die je trekt zal je naar de eindeloze groei leiden.
Heb je zelf de technologie gecreëerd die in SketchAR wordt gebruikt?
Ja, sinds 2016 hebben we ons alleen nog maar gericht op hoe we de camera zo’n complex oppervlak als een wit stuk papier of een muur kunnen laten begrijpen.
Wat is het grootste obstakel geweest dat je gedurende het hele SketchAR-proces hebt moeten overwinnen?
De angst voor een witboek’ is niet alleen de angst van onze gebruikers, maar een van de fundamentele problemen van het computervisieproces. Er was geen oplossing toen we begonnen. We moesten het zelf creëren. Zelfs software zoals ARKit of ARCore kan er niet mee werken. We spenderen meer dan drie jaar aan dit onderwerp en richten ons alleen op dit onderwerp.
Was er een moment waarop je erover dacht om het op te geven?
Ik heb er nooit aan gedacht om het op te geven. Alleen rock’n’roll.
Wat is het meest bevredigende moment geweest?
Elke keer als ik gebruikers zie die iets hebben gemaakt met SketchAR, ben ik trots op het product en ons team. Het hele product gaat over een nieuw tijdperk van kunst, educatie, creativiteit, enz. Elke dag is een avontuur. En uiteraard die keer toen we de meest prestigieuze prijs voor digitale producten wonnen, de Webby Awards. SketchAR werd bekroond als het beste gebruik van Augmented Reality product van 2018.
Wat kunnen we verwachten van het komende jaar?
We verwachten miljarden dollars, Lamborghini, en een jacht van 100m lang (grapje). Eigenlijk bereiden we iets heel groots voor. U zult het zien. Binnen de komende 5 jaar zijn we een virtuele assistent voor creativiteit, zeer gepersonaliseerd; en SketchAR zal de krachtigste CV-technologie zijn op het gebied van milieu.
Wie is de klant van SketchAR?
Beginnende tekenaars, voornamelijk tussen 20 en 35 jaar oud. Het zijn mensen die altijd al hebben willen tekenen, maar niet konden beginnen met tekenen.
Kun je me iets vertellen over de feedback die je hebt gekregen?
De belangrijkste feedback is natuurlijk dat mensen SketchAR met AR-bril willen gebruiken. Maar niet iedereen heeft een smartphone, en als er een AR-bril op de massamarkt is, hebben we de meest persoonlijke assistent, omdat we al gegevens verzamelen met behulp van smartphones.
Waarom zou je je focussen op tekenen?
Omdat kunst en techniek is onze passie zijn. Ook ben ik een vrij bekende muurschilderkunstenaar.
Inspiratie nodig? Al onze eerdere Start-ups of the Day zijn hier verzameld.