Black Friday: 50 % Rabatt ab 27. NovemberBlack Friday: jetzt 50 % Rabatt

00:00:00 Angebot sichern
Sketchar
Ein heller Holzschreibtisch mit einem leeren Blatt Papier und einem Bleistift

Sketchar Long Read · 10 Minuten · alles zum Anfassen

Die Geschichte der Augmented Reality

Von einem Prisma über einem Blatt Papier im Jahr 1806 bis zum Smartphone in Ihrer Hand. Scrollen Sie, schalten Sie die Ebenen um, zeichnen Sie darauf.

Erst die kurze Antwort

Bewegen Sie das Handy über das Blatt: So zeigt Sketchar die Skizze

Die kurze Antwort

Was ist Augmented Reality?

Zuerst die Definition, dann zwei Jahrhunderte Geschichte zum Anfassen.

Augmented Reality (AR, erweiterte Realität) ist eine Technologie, die computergenerierte Bilder in Ihren Blick auf die reale Welt einfügt, in Echtzeit und fest verankert, sodass die virtuelle Ebene wie ein Teil der Szene wirkt.

Drei Merkmale von AR

Dieser dreiteilige Test stammt aus Ronald Azumas Übersichtsarbeit von 1997 und gilt bis heute als Standarddefinition. Virtual Reality ersetzt die Welt, Augmented Reality behält sie bei und ergänzt sie. Als funktionierende Technik gibt es AR seit 1968, als Ivan Sutherlands Head-mounted Display erstmals Computergrafik über einen realen Raum legte. Der Name ist jünger: Tom Caudell prägte den Begriff „Augmented Reality“ 1990 bei Boeing.

  1. Real und virtuell zugleichSie sehen weiterhin die reale Welt. Die virtuelle Ebene liegt darüber.
  2. Interaktiv in EchtzeitDas Bild reagiert auf Ihre Bewegungen, ohne spürbare Verzögerung.
  3. Räumlich verankertVirtuelle Objekte bleiben an realen Orten, Flächen und Dingen fixiert.
Ein Künstlertisch aus Sicht des Zeichners: in der Ferne ein Stillleben, das messinggefasste Prisma einer Camera lucida hängt tief über einem leeren Blatt Papier Vor dem Künstler Im Prisma: die Szene über dem Papier Auf dem Papier: nur Ihre Zeichnung

1806London

Die erste Überlagerung war aus Glas

Lange vor den Computern wollten Künstler, was AR uns heute bietet: ein Bild, das über der realen Welt liegt.

Blicken Sie ins Prisma: Dort liegt das Stillleben über dem Papier, und die Hand darin folgt Ihrer. Zeichnen Sie es nach. Auf dem Blatt selbst steht nur, was Sie zeichnen. Illustrationen für diese Seite erstellt.

1806 ließ sich der englische Naturforscher William Hyde Wollaston die Camera lucida patentieren: ein kleines vierseitiges Prisma an einem Stab. Wer von oben über seine Kante blickt, sieht zweierlei zugleich, die Szene vor sich und das Blatt Papier unter der Hand. Man muss nur noch nachzeichnen.

Projiziert wird nichts. Das Bild existiert nur im Auge des Zeichners, deshalb braucht das Gerät keinen dunklen Raum und passt in die Tasche. Der Astronom John Herschel skizzierte damit Landschaften. Henry Fox Talbot war mit seinen eigenen Camera-lucida-Zeichnungen so unzufrieden, dass er die Natur sich selbst zeichnen lassen wollte, und erfand dabei die Fotografie.

Eine viktorianische Theaterbühne mit einer blassen, gespiegelten Gestalt zwischen den Möbeln

1862London

Ein Geist auf einer echten Bühne

Eine Glasscheibe, ein versteckter Schauspieler und eine Lampe: die erste erweiterte Szene vor zahlendem Publikum.

Lampe 70 %
Drehen Sie die Lampe auf und ab: Der Geist ist nur die Spiegelung eines beleuchteten Schauspielers. Illustration für diese Seite erstellt.

Am 24. Dezember 1862 zeigte die Royal Polytechnic Institution in London eine Szene aus Charles Dickens’ „The Haunted Man“. Zwischen den lebenden Schauspielern erschien eine blasse Gestalt, ging durch die Möbel hindurch und verblasste. Der Effekt wurde als Pepper's Ghost bekannt.

Die Idee stammte vom Ingenieur Henry Dircks, der Dozent John Henry Pepper brachte sie auf die Bühne und gab ihr den Namen. Zwischen Schauspielern und Publikum stand schräg eine große Glasscheibe. Ein unter der Bühne versteckter Darsteller wurde von einer starken Lampe angestrahlt, und das Glas spiegelte seine Gestalt in die Szene. Dreht man die Lampe herunter, ist der Geist verschwunden.

1900Dublin

Eine Marke, die über dem Ziel schwebt

Die nächste Überlagerung kam aus der Zieloptik: eine leuchtende Marke, die auf dem Ziel bleibt, wenn sich der Kopf bewegt.

Der Blick aus einem Jagdflugzeug-Cockpit: blauer Himmel, Wolken darunter und ein Flugzeug voraus, gesehen durch das Glas eines Visiers
Das Fadenkreuz bleibt auf dem Ziel
Bewegen Sie den Zeiger oder ziehen Sie, um den Kopf zu verschieben. Eine auf das Glas gemalte Marke rutscht vom Flugzeug, die gespiegelte bleibt darauf. Illustration für diese Seite erstellt.

1900 ließ sich der Dubliner Teleskopbauer Howard Grubb das Reflexvisier patentieren. Ein beleuchtetes Fadenkreuz spiegelt sich in einer schrägen Glasscheibe und ist auf unendlich fokussiert, sodass es in der Ferne über dem Ziel zu schweben scheint.

Im Zweiten Weltkrieg gehörten Reflexvisiere zur Standardausrüstung von Jagdflugzeugen. Später ergänzten Ingenieure auf demselben Glas Geschwindigkeit, Höhe und Horizont, und aus dem Visier wurde das Head-up-Display. Die britische Blackburn Buccaneer, die 1958 zum ersten Mal flog, war eines der ersten Flugzeuge damit. Es waren Informationen, über die reale Welt gezeichnet, Jahrzehnte bevor jemand von AR sprach.

Ein Computerlabor der 1960er-Jahre mit einem mechanischen Arm, der von der Decke hängt

1968Cambridge, Massachusetts

Das erste Headset zeichnet einen Würfel in den Raum

Diesen Moment meinen die meisten Historiker, wenn sie von der Erfindung der Augmented Reality sprechen.

Bewegen Sie den Zeiger oder ziehen Sie: Der Würfel bleibt fest im Raum, während sich Ihr Blick dreht. Das Drahtgitter wird live gezeichnet, wie 1968. Hintergrundillustration für diese Seite erstellt.

1968 stellten Ivan Sutherland und sein Student Bob Sproull in Harvard ein Head-mounted Display vor. Zwei kleine Kathodenstrahlröhren saßen an den Schläfen des Trägers, und halbdurchlässige Spiegel legten ihr Bild über das reale Labor: einen Drahtgitterwürfel, der in der Luft schwebte.

Der Schlüssel war das Tracking. Ein mechanischer Arm hing von der Decke, maß, wohin der Kopf gerichtet war, und zeichnete den Würfel entsprechend neu, sodass er an seinem Platz blieb, während sich der Träger umsah. Dieser Arm über dem Kopf des Nutzers brachte dem System den Spitznamen Damoklesschwert ein. Drei Jahre zuvor hatte Sutherland das Ziel in einem Essay mit dem Titel „The Ultimate Display“ beschrieben.

1990Seattle

Die Idee bekommt einen Namen

Zwanzig Jahre lang hatte die Technik keinen gemeinsamen Namen. Ein Flugzeugwerk gab ihr einen.

Ein Montagebrett aus Sperrholz auf einem Werkstatttisch
Drücken Sie die Taste: Das Headset zeigt, wo das nächste Kabel verläuft. Schema über einer für diese Seite erstellten Illustration.

1990 suchte der Boeing-Forscher Tom Caudell zusammen mit David Mizell nach einem besseren Weg, Kabelbäume für die 777 zu fertigen. Die Arbeiter verlegten jedes Kabel auf großen Brettern nach Papierplänen. Caudell schlug ein durchsichtiges Headset vor, das den Verlauf des nächsten Kabels direkt auf das Brett zeichnen sollte, und nannte den Ansatz Augmented Reality. Gedruckt erschien der Begriff erstmals in ihrem Fachartikel von 1992.

Im folgenden Jahrzehnt wurde aus dem Namen ein Forschungsfeld. 1992 baute Louis Rosenberg in einem Labor der US Air Force Virtual Fixtures, ein frühes interaktives AR-System. 1993 zeigte ein Team der Columbia University KARMA, ein Headset, das seinen Träger durch die Wartung eines Laserdruckers führte. 1997 veröffentlichte Ronald Azuma die dreiteilige Definition, die oben auf dieser Seite zitiert ist.

Ein American-Football-Feld aus Sicht einer Fernsehkamera, mit aufgestellten Spielern

1998Baltimore

Eine gelbe Linie, die nicht auf dem Feld ist

Millionen Menschen sahen Augmented Reality zum ersten Mal, ohne zu wissen, dass sie einen Namen hatte.

Die Linie wandert beim Scrollen mit, mit dem Schieberegler setzen Sie sie selbst. Die Spieler bleiben davor, weil nur die Farben des Rasens übermalt werden. Illustration für diese Seite erstellt.

Am 27. September 1998 übertrug ESPN ein Spiel der Cincinnati Bengals gegen die Baltimore Ravens mit einer Neuheit: einer gelben First-down-Linie quer über das Feld. Auf dem Rasen war sie nicht. Das System 1st & Ten von Sportvision zeichnete sie ins Livebild.

Der Trick: Die Spieler laufen über die Linie, nicht unter ihr hindurch. Das System kennt zwei Farbpaletten: die Grüntöne des Rasens, die gelb übermalt werden, und die Farben von Trikots und Haut, die nie übermalt werden. Zum Start brauchte es einen Lkw voller Technik und eine vierköpfige Crew und kostete 25.000 bis 30.000 Dollar pro Spiel.

1999Seattle

Ein gedrucktes Quadrat wird zum Anker

Um ein virtuelles Objekt zu platzieren, muss ein Computer genau wissen, wo sich die Kamera befindet. Ein schwarzes Quadrat löste das Problem.

Ein Holztisch am Fenster, schräg von der Seite
Ziehen Sie die Karte über den Tisch, drehen Sie sie mit dem Schieberegler und verdecken Sie sie dann. Illustration für diese Seite erstellt.

1999 stellte Hirokazu Kato gemeinsam mit Mark Billinghurst am HIT Lab der University of Washington ARToolKit vor. Damit konnte eine gewöhnliche Kamera einen gedruckten schwarzen Quadratmarker finden und ihre eigene Position relativ dazu bestimmen, viele Male pro Sekunde.

Sobald die Software weiß, wo der Marker liegt, kann sie ein 3D-Objekt darauf stellen. Verschiebt oder dreht man die Karte, folgt das Objekt. Verdeckt man den Marker, verschwindet es. ARToolKit wurde später als Open Source veröffentlicht und zum Ausgangspunkt einer ganzen Generation von AR-Projekten, darunter ARQuake, eine 2000 entwickelte Outdoor-Version des Spiels Quake.

Eine europäische Stadtstraße bei Tageslicht

2008Salzburg · Amsterdam

AR wandert in die Hosentasche

Ein Handy mit Kamera, GPS und Kompass konnte endlich, was die Headsets konnten: Informationen dort zeigen, wo sie hingehören.

Bewegen Sie das Handy die Straße entlang: Die Beschriftungen gibt es nur auf seinem Bildschirm. Illustration für diese Seite erstellt.

Im Oktober 2008 veröffentlichte das österreichische Unternehmen Mobilizy Wikitude für das T-Mobile G1, das erste Android-Smartphone. Richtete man die Kamera auf eine Straße, erschienen Beschriftungen für Orte in der Nähe über dem Bild. Im Juni 2009 folgte Layar aus Amsterdam mit einem „AR-Browser“ nach demselben Prinzip.

Die folgenden Jahre waren voller Experimente. Esquire brachte im Dezember 2009 eine AR-Ausgabe heraus. Google stellte im April 2012 Project Glass vor und verkaufte die Explorer Edition ab 2013 für 1.500 Dollar, bis das Programm im Januar 2015 eingestellt wurde. 2013 ließ IKEA Menschen Möbel aus seinem Katalog in die eigenen vier Wände stellen.

2016Redmond

Ein Headset heftet Hologramme an den Raum

Das erste eigenständige Headset, das den Raum selbst vermaß und virtuelle Dinge genau dort hielt, wo man sie zurückgelassen hatte.

Ein helles Wohnzimmer mit Sofa und großem Fenster
Hologramme
Schalten Sie die Hologramme im Menü ein und aus und ziehen Sie sie durch den Raum: Jedes bleibt dort, wo Sie es loslassen. Illustration für diese Seite erstellt.

Microsoft stellte HoloLens am 21. Januar 2015 vor und lieferte die Development Edition ab dem 30. März 2016 für 3.000 Dollar aus. Sie braucht kein Handy, keinen Computer und keine Marker. Kameras und Tiefensensor scannen den Raum, erstellen eine Karte davon und heften Hologramme an reale Orte: Lassen Sie ein Fenster an einer Wand, gehen Sie weg, kommen Sie zurück, und es ist immer noch da. Microsoft nannte sie den ersten vollständig kabellosen holografischen Computer.

Im Juli 2017 kam Sketchar auf HoloLens. Die Skizze hängt an der Wand oder auf dem Blatt vor Ihnen, und beide Hände bleiben zum Zeichnen frei. Headsets sind seither denselben Weg gegangen: Die Apple Vision Pro kam am 2. Februar 2024 für 3.499 Dollar in den Handel, und im September 2025 begann Meta, die Brille Ray-Ban Display für 799 Dollar zu verkaufen. Die Richtung ist die, die Sutherland 1968 vorgab: Grafik, die in der Welt lebt, nicht in einem Rechteck.

Sketchar auf HoloLens: die Geschichte in unserem Blog

2016Weltweit

AR wird etwas, das jeder schon ausprobiert hat

Zwei Apps machten aus einer Labortechnik eine alltägliche Gewohnheit.

130Mio.

Downloads von Pokémon GO im ersten Monat, Juli 2016

500Mio.

Downloads bis September 2016, zwei Monate nach dem Start

1Mrd.

Downloads bis Juli 2019

Am 15. September 2015 startete Snapchat die Lenses: Gesichtsfilter, die Ihre Gesichtszüge verfolgen und live neu zeichnen. Eine virtuelle Maske aufzusetzen wurde für viele Menschen alltäglich.

Am 6. Juli 2016 veröffentlichte Niantic Pokémon GO. Die Spieler liefen durch echte Straßen, um Wesen zu finden, die auf einer Karte und durch die Kamera erschienen. Das Spiel wurde im ersten Monat 130 Millionen Mal heruntergeladen, spielte in diesem Monat 206,5 Millionen Dollar ein und machte „Augmented Reality“ zu einem geläufigen Begriff.

Ein Holztisch mit einem Blatt Papier darauf

2016–2017Vilnius

Das Blatt selbst wird zum Anker

Bevor es ARKit gab, brachte Sketchar einer Kamera bei, sich an einem leeren Blatt Papier festzuhalten.

Ziehen und drehen Sie das Blatt und wechseln Sie dann zwischen den beiden Arten des Trackings. Illustration für diese Seite erstellt.

Ein leeres weißes Blatt ist für eine Kamera am schwersten festzuhalten. Es hat keine Textur, und die zeichnende Hand verdeckt den größten Teil davon. Das Team von Sketchar nahm sich dieses Problems 2016 an, ein Jahr bevor ARKit angekündigt wurde, und entwickelte 2016–2017 ein markerloses Tracking. Keine gedruckten Marker, nur ein weißes Blatt: Die Kamera ermittelt seine Perspektive und wie es zum Smartphone hin gedreht ist.

Der Ansatz ist ein anderer als der, den ARKit später brachte. ARKit fixiert ein Bild im Raum, Sketchar heftet die virtuelle Skizze an das Papier selbst. Heben Sie das Blatt an, drehen Sie es, bewegen Sie gleichzeitig das Smartphone: Die Linien bleiben, wo sie hingehören, selbst wenn Ihre Hand den größten Teil des Blatts verdeckt. Bei den Nutzern kam das in zwei Schritten an: Die erste öffentliche Version im April 2017 verlangte noch ein paar von Hand gezeichnete Kreise als Basis, Sketchar 5.0 braucht seit Mai 2019 nur noch das Blatt. Das Verfahren ist durch das US-Patent 11,030,754 B2 geschützt. Ende 2018 gab Huawei eine strategische Partnerschaft mit Sketchar bekannt.

So funktioniert das Tracking von Sketchar

2017Cupertino · Mountain View

Smartphones lernen, Flächen zu sehen

Marker waren nicht mehr nötig. Das Smartphone selbst begann, den Raum zu verstehen.

Derselbe Holztisch, bereit zum Scannen
Fahren Sie über den Tisch, um ihn zu scannen. Sobald die Fläche erkannt ist, tippen Sie, um Objekte darauf zu stellen. Illustration für diese Seite erstellt.

Apple kündigte ARKit am 5. Juni 2017 an und lieferte es am 19. September mit iOS 11 aus. Google stellte ARCore am 29. August 2017 als Vorschau vor und veröffentlichte im Februar 2018 die Version 1.0 für rund 100 Millionen Android-Smartphones.

Beide erledigen dieselbe Aufgabe. Das Smartphone beobachtet, wie sich markante Punkte im Bild bei Bewegung verschieben, verknüpft das mit seinen Bewegungssensoren und bestimmt so seine Position. Dann findet es ebene Flächen, einen Boden oder einen Tisch, und kann virtuelle Objekte in der richtigen Größe darauf stellen. Auf dieser Technik beruhen heute die meisten AR-Apps, auch das Zeichnen auf Papier.

Ein Schreibtisch von oben mit einem leeren Blatt Papier Eine Hand mit einem Bleistift
Ein Smartphone in einer Halterung über dem Blatt
Auf dem Handybildschirm: blaue Hilfslinien einer einfachen Katzenzeichnung

2012San Francisco

AR-Zeichnen: Die Überlagerung kehrt aufs Papier zurück

Die Vorlage existiert nur auf dem Handybildschirm. Schauen Sie auf das Handy und führen Sie die Hand über das Papier, oder zeichnen Sie direkt auf dem Handy. Illustrationen für diese Seite erstellt.

Sketchar

Die Geschichte begann mit Künstlern, die durch ein Prisma abzeichneten. Sie kehrt zum selben Blatt Papier zurück, jetzt durch ein Smartphone.

AR-Zeichnen funktioniert wie eine Camera lucida mit einem Computer darin. Sie wählen ein Bild, richten Ihr Smartphone auf ein Blatt Papier, und auf dem Bildschirm erscheinen die Linien auf dem Blatt. Sketchar verfolgt das Papier selbst, sodass die Linien an ihrem Platz bleiben, wenn Sie die Hand, das Handy oder das Blatt bewegen. Sie zeichnen sie mit einem echten Bleistift nach und haben am Ende eine echte Zeichnung.

Probieren Sie es oben aus: Schauen Sie auf das Handy, führen Sie die Hand, schalten Sie dann die Vorlage aus und sehen Sie, was von Ihnen stammt.

Das Sketchar-Team in blauen T-Shirts auf der AWE-Messe in Dongguan, 2017

Der Gründer von Sketchar erdachte das AR-Zeichnen 2012 und brachte 2016 die erste AR-Zeichen-App heraus

Im Juni 2012 war Andrey Drobitko, der später Sketchar gründete, mit einem Freund in San Francisco unterwegs, als ihm die Idee kam: den virtuellen Linien einer Zeichnung auf einer realen Fläche zu folgen und sie dabei durch eine Handykamera zu sehen. Der erste Prototyp wurde am 22. Juni 2012 getestet.

Die Smartphones jener Zeit konnten AR noch nicht gut genug darstellen, deshalb begann die Entwicklung der App erst im August 2016. Am 30. Dezember 2016 startete Sketchar, die erste AR-Zeichen-App, auf Product Hunt, und mehr als 5.000 Menschen meldeten sich für den Early Access an. Die erste iOS-Version erschien am 17. April 2017.

Die Geschichte im Sketchar-Blog lesen

Weiterlesen

Fragen zu Augmented Reality

Augmented Reality fügt computergenerierte Bilder in Ihren Blick auf die reale Welt ein, in Echtzeit und fest verankert. Sie sehen weiterhin den Raum, die Straße oder das Blatt Papier vor sich, mit einer virtuellen Ebene darüber.

Meist wird Ivan Sutherland genannt. 1968 baute er das erste Head-mounted Display, das Computergrafik über einen realen Raum legte. Der Begriff „Augmented Reality“ kam später: Tom Caudell prägte ihn 1990 bei Boeing.

Als funktionierende Technik 1968. Der Name stammt von 1990, die Standarddefinition von 1997. Optische Vorläufer wie die Camera lucida (1806) und Pepper's Ghost (1862) sind viel älter.

Ivan Sutherlands Head-mounted Display von 1968, wegen des Tracking-Arms über dem Kopf des Nutzers Damoklesschwert genannt.

Virtual Reality ersetzt, was Sie sehen, durch eine computergenerierte Welt. Augmented Reality lässt die reale Welt im Blick und ergänzt sie.

Das Smartphone bestimmt seine eigene Position anhand des Kamerabilds und seiner Bewegungssensoren, findet ebene Flächen und zeichnet virtuelle Objekte so, dass sie an diesen Flächen fixiert bleiben, während Sie sich bewegen.

Beim AR-Zeichnen erscheinen die Linien eines Bildes über die Handykamera auf Ihrem Papier, sodass Sie sie mit einem echten Bleistift nachzeichnen können. Es ist die moderne Version der Camera lucida.

Die Idee hinter Sketchar kam dem Gründer Andrey Drobitko im Juni 2012 in San Francisco, und der erste Prototyp wurde am 22. Juni 2012 getestet.

Sketchar. Die App startete am 30. Dezember 2016 auf Product Hunt, ihre erste iOS-Version erschien am 17. April 2017.

Ein Tracking, das ohne gedruckte oder gezeichnete Marker auskommt: Die Kamera erkennt das leere Blatt Papier selbst und hält die virtuelle Zeichnung darauf fest, auch wenn sich Blatt und Smartphone gleichzeitig bewegen. Das Team von Sketchar entwickelte es 2016–2017, bevor ARKit angekündigt wurde, brachte es im Mai 2019 mit Version 5.0 zu allen Nutzern und hält für das Verfahren das US-Patent 11,030,754 B2.

Diesen Longread teilen

Black Friday: 50 % Rabatt ab 27. NovemberBlack Friday: jetzt 50 % Rabatt

00:00:00 Angebot sichern