ブラックフライデー:11月27日から50%オフブラックフライデー:今なら50%オフ

Sketchar
白い紙と鉛筆が置かれた明るい木の机

Sketchar ロングリード · 10分 · すべて触れます

拡張現実の 歴史

1806年、紙の上のプリズムから、いま手の中にあるスマートフォンまで。スクロールし、レイヤーを切り替え、実際に描いてみてください。

まずは短い答えから

スマートフォンを紙の上で動かしてみてください。Sketcharはこうして下絵を見せます

短い答え

拡張現実とは?

まず定義を、それから触れられる200年の歴史を。

拡張現実(AR)とは、現実世界の見え方にコンピューターで生成した画像を重ねる技術です。画像はリアルタイムで位置が固定されるため、仮想のレイヤーが風景の一部のように見えます。

ARの3つの条件

この3つの条件は、ロナルド・アズマが1997年に発表したサーベイ論文によるもので、いまも標準的な定義です。仮想現実は世界を置き換え、拡張現実は世界を残したまま何かを加えます。実際に動く技術としてのARは1968年にさかのぼります。この年、アイバン・サザランドのヘッドマウントディスプレイが、初めて現実の部屋にコンピューターグラフィックスを重ねました。名前はもっと新しく、1990年にボーイングのトム・コーデルが「拡張現実」という言葉を生み出しました。

  1. 現実と仮想の共存現実世界は見えたまま。その上に仮想のレイヤーが加わります。
  2. リアルタイムの反応動きに合わせて、目立った遅れなく映像が変わります。
  3. 3次元での位置合わせ仮想の物体は、現実の場所や面、物に固定されたままです。
画家の席から見た机:奥に静物、白い紙の上に低く吊られたカメラ・ルシダの真鍮枠のプリズム 画家の目の前 プリズムの中:紙に重なる風景 紙の上:あなたの絵だけ

1806ロンドン

最初のオーバーレイはガラスでできていた

コンピューターが生まれるずっと前から、画家たちはARがいま与えてくれるものを求めていました。現実世界に重なる絵です。

プリズムをのぞくと、静物が紙の上に重なり、その中の手があなたの手と同じように動きます。なぞってみてください。紙そのものには、あなたが描いたものしかありません。イラストはこのページのために制作したものです。

1806年、イギリスの科学者ウィリアム・ハイド・ウォラストンがカメラ・ルシダの特許を取りました。棒の先についた小さな四面のプリズムです。その縁から見下ろすと、目の前の風景と、手元の紙の2つが同時に見えます。あとはなぞるだけです。

何も投影はされません。像は画家の目の中にしか存在しないため、暗室もいらず、ポケットに入ります。天文学者ジョン・ハーシェルはこれで風景をスケッチしました。ヘンリー・フォックス・タルボットは、カメラ・ルシダで描いた自分の絵にあまりに不満だったため、自然に自らを描かせる方法を探し始め、ついには写真を発明しました。

ヴィクトリア朝の劇場の舞台。家具のあいだに、反射した青白い人影が立っている

1862ロンドン

本物の舞台を幽霊が歩く

1枚のガラス、隠れた役者、そしてランプ。料金を払った観客に初めて見せた拡張された舞台です。

ランプ 70%
ランプを明るくしたり暗くしたりしてみてください。幽霊は照らされた役者の反射にすぎません。イラストはこのページのために制作したものです。

1862年12月24日、ロンドンの王立科学技術会館で、チャールズ・ディケンズの『憑かれた男』の一場面が上演されました。生身の役者たちのあいだに青白い人影が現れ、家具をすり抜けて歩き、消えていきました。この効果はペッパーズ・ゴーストとして知られるようになります。

考案したのは技師のヘンリー・ダークス。講師のジョン・ヘンリー・ペッパーが舞台で実現させ、名前を得ました。役者と観客のあいだに大きなガラス板が斜めに立てられ、舞台下に隠れた演者が強いランプで照らされると、ガラスがその姿を舞台に映し出します。ランプを落とせば、幽霊は消えます。

1900ダブリン

標的の上に浮かぶマーク

次のオーバーレイは照準用の光学機器から生まれました。頭を動かしても標的から外れない、光るマークです。

戦闘機のコックピットからの眺め:照準器のガラス越しに見える青空、眼下の雲、前方の航空機
レティクルは標的から外れない
ポインターを動かすかドラッグして、頭の位置を変えてみてください。ガラスに描いたマークは航空機からずれますが、反射したマークは外れません。イラストはこのページのために制作したものです。

1900年、ダブリンの望遠鏡職人ハワード・グラブが反射式照準器の特許を取りました。光るレティクルを斜めのガラスに映し、焦点を無限遠に合わせることで、狙っているものの上、はるか遠くに浮かんでいるように見せます。

第二次世界大戦のころには、反射式照準器は戦闘機の標準装備になっていました。やがて技術者たちは同じガラスに速度、高度、水平線を加え、照準器はヘッドアップディスプレイになります。1958年に初飛行したイギリスのブラックバーン・バッカニアは、これを搭載した最初期の機体のひとつです。ARと呼ばれる何十年も前から、それは現実世界に重ねて描かれた情報でした。

天井から機械式のアームが吊り下がった1960年代のコンピューター研究室

1968マサチューセッツ州ケンブリッジ

最初のヘッドセットが部屋に立方体を描く

多くの歴史家が「拡張現実が発明された」と言うとき、指しているのはこの瞬間です。

ポインターを動かすかドラッグしてみてください。視点が回っても、立方体は部屋の中に固定されたままです。ワイヤーフレームは1968年と同じくリアルタイムで描画しています。背景のイラストはこのページのために制作したものです。

1968年、アイバン・サザランドと学生のボブ・スプロールが、ハーバード大学でヘッドマウントディスプレイを公開しました。装着者のこめかみの横に小さなブラウン管が2つあり、ハーフミラーがその映像を実際の研究室に重ねます。宙に浮かぶワイヤーフレームの立方体です。

鍵はトラッキングでした。天井から吊られた機械式のアームが頭の向きを測り、それに合わせて立方体を描き直すので、装着者が見回しても立方体はその場にとどまります。利用者の頭上に吊られたこのアームから、装置はダモクレスの剣というあだ名で呼ばれました。その3年前、サザランドは「究極のディスプレイ」という論考でこの目標を描いています。

1990シアトル

アイデアに名前がつく

20年ものあいだ、この技術には共通の呼び名がありませんでした。名前をつけたのは航空機工場です。

作業台の上の合板の組立ボード
ボタンを押すと、ヘッドセットが次の配線の位置を示します。図はこのページのために制作したイラストに重ねています。

1990年、ボーイングの研究者トム・コーデルはデビッド・ミゼルとともに、777のワイヤーハーネスをもっとうまく組み立てる方法を探していました。作業員は紙の図面を見ながら、大きなボードに配線を1本ずつ並べていました。コーデルは、次の配線の経路をボードの上に直接描くシースルー型ヘッドセットを提案し、この手法を拡張現実と名づけます。この言葉が初めて活字になったのは、2人の1992年の論文でした。

続く10年で、名前はひとつの分野になりました。1992年、ルイス・ローゼンバーグが米空軍の研究所で、初期の対話型ARシステム「Virtual Fixtures」を開発。1993年にはコロンビア大学のチームが、装着者にレーザープリンターの保守手順を案内するヘッドセット「KARMA」を発表しました。そして1997年、ロナルド・アズマが、このページの冒頭で紹介した3つの条件からなる定義を発表します。

中継カメラから見たアメリカンフットボールのフィールドと、並んだ選手たち

1998ボルチモア

フィールドにない黄色い線

何百万人もの人が、名前があることも知らずに、初めて拡張現実を目にしました。

スクロールに合わせてラインが動きます。スライダーをドラッグして自分で置くこともできます。芝の色だけを塗り替えているので、選手はラインの手前に残ります。イラストはこのページのために制作したものです。

1998年9月27日、ESPNはシンシナティ・ベンガルズとボルチモア・レイブンズの試合を、新しい要素とともに放送しました。フィールドを横切る黄色いファーストダウンラインです。実際にはそこに線はありません。スポーツビジョン社の「1st & Ten」システムが生中継の映像に描き込んだものでした。

ポイントは、選手が線の下ではなく上を走って見えることです。システムは2つの色のパレットを持っています。黄色に塗り替える芝の緑と、決して塗り替えないユニフォームや肌の色です。導入当初は機材を積んだトラック1台と4人のスタッフが必要で、1試合あたり2万5,000~3万ドルかかりました。

1999シアトル

印刷された四角が目印になる

仮想の物体を置くには、コンピューターがカメラの位置を正確に知る必要があります。それを解決したのが黒い四角でした。

斜めから見た、窓辺の木のテーブル
カードをテーブルの上でドラッグし、スライダーで回してから、隠してみてください。イラストはこのページのために制作したものです。

1999年、ワシントン大学HIT Labでマーク・ビリングハーストと研究していた加藤博一がARToolKitを発表しました。普通のカメラが印刷された黒い四角のマーカーを見つけ、それに対する自分の位置を1秒間に何度も割り出せるようにしたのです。

マーカーの位置がわかれば、その上に立つ3Dの物体を描けます。カードを動かしたり回したりすると物体がついてきて、マーカーを隠すと物体は消えます。ARToolKitはのちにオープンソースとして公開され、一世代分のARプロジェクトの出発点になりました。そのひとつが、2000年に作られたゲーム『Quake』の屋外版「ARQuake」です。

昼間のヨーロッパの街並み

2008ザルツブルク · アムステルダム

ARがポケットに入る

カメラ、GPS、コンパスを備えたスマートフォンが、ついにヘッドセットと同じことをできるようになりました。情報を、あるべき場所に表示することです。

スマートフォンを通りに沿って動かしてみてください。ラベルは画面の中にしか存在しません。イラストはこのページのために制作したものです。

2008年10月、オーストリアのMobilizy社が、最初のAndroidスマートフォンT-Mobile G1向けにWikitudeをリリースしました。カメラを通りに向けると、近くの場所のラベルが映像の上に現れます。2009年6月にはアムステルダムのLayarが、同じ発想にもとづく「ARブラウザー」で続きました。

その後の数年は実験の連続でした。2009年12月には『エスクァイア』がAR号を発行。2012年4月にGoogleがProject Glassを発表し、2013年から2015年1月のプログラム終了まで、Explorer Editionを1,500ドルで販売しました。2013年にはIKEAが、カタログの家具を自分の部屋に置いてみられるようにしました。

2016レドモンド

ヘッドセットがホログラムを部屋に固定する

自分で部屋をマッピングし、置いた仮想の物をその場所に正確に保つ、初の自己完結型ヘッドセットです。

ソファと大きな窓のある明るいリビングルーム
ホログラム
メニューでホログラムのオンとオフを切り替え、部屋の中でドラッグしてみてください。どれも置いた場所にとどまります。イラストはこのページのために制作したものです。

Microsoftは2015年1月21日にHoloLensを発表し、2016年3月30日に開発者向けのDevelopment Editionを3,000ドルで出荷し始めました。スマートフォンもコンピューターもマーカーもいりません。カメラと深度センサーが部屋をスキャンしてマップを作り、ホログラムを現実の場所に固定します。壁にウィンドウを置いて立ち去り、戻ってきても、まだそこにあります。Microsoftはこれを、初の完全にケーブルレスなホログラフィックコンピューターと呼びました。

2017年7月、SketcharがHoloLensに登場しました。下絵は壁や目の前の紙に浮かび、両手は描くために自由に使えます。その後のヘッドセットも同じ道をたどっています。Apple Vision Proは2024年2月2日に3,499ドルで発売され、2025年9月にはMetaがRay-Ban Displayグラスを799ドルで売り出しました。方向性は、サザランドが1968年に定めたものと同じです。長方形の画面の中ではなく、世界の中に存在するグラフィックスです。

HoloLens版Sketchar:ブログで読む

2016世界中

ARが誰もが試したものになる

2つのアプリが、研究室の技術を日常の習慣に変えました。

1.3億

2016年7月、配信開始から1か月間のPokémon GOのダウンロード数

5億

配信から2か月後、2016年9月までのダウンロード数

10億

2019年7月までのダウンロード数

2015年9月15日、SnapchatがLensesを公開しました。顔のパーツを追跡し、リアルタイムで描き変える顔フィルターです。仮想のマスクをかぶることが、毎日の当たり前になりました。

2016年7月6日、NianticがPokémon GOをリリースしました。プレイヤーは本物の通りを歩き、地図上やカメラ越しに現れるモンスターを探します。最初の1か月で1億3,000万回ダウンロードされ、その月だけで2億650万ドルを売り上げ、「拡張現実」を誰もが知る言葉にしました。

紙が1枚置かれた木のテーブル

2016–2017ビリニュス

紙そのものが目印になる

ARKitが登場する前に、Sketcharはカメラが白い紙をとらえ続けられるようにしました。

紙をドラッグして回し、2つのトラッキング方式を切り替えてみてください。イラストはこのページのために制作したものです。

真っ白な紙は、カメラにとって最もとらえにくいものです。模様がなく、描いている手が大部分を覆ってしまいます。Sketcharのチームは、ARKitが発表される1年前の2016年にこの問題に取り組み、2016~2017年にマーカーレストラッキングを開発しました。印刷したマーカーはいらず、白い紙だけ。カメラが紙の遠近と、スマートフォンに対する向きを割り出します。

この発想は、のちにARKitがもたらすものとは違います。ARKitは絵を部屋に固定し、Sketcharは仮想の下絵を紙そのものに貼りつけます。紙を持ち上げても、回しても、同時にスマートフォンを動かしても、線はあるべき場所にとどまります。手が紙の大部分を隠していても同じです。ユーザーへの提供は2段階でした。2017年4月の最初の公開版では、土台として手描きの円をいくつか描く必要がありましたが、2019年5月のSketchar 5.0では紙だけで十分です。この手法は米国特許11,030,754 B2で保護されています。2018年末には、ファーウェイがSketcharとの戦略的パートナーシップを発表しました。

Sketcharのトラッキングのしくみ

2017クパチーノ · マウンテンビュー

スマートフォンが平面を見分ける

マーカーはもう必要ありません。スマートフォン自身が部屋を理解し始めました。

スキャンを待つ、同じ木のテーブル
テーブルの上を動かしてスキャンしてください。平面が見つかったら、タップして物体を置けます。イラストはこのページのために制作したものです。

Appleは2017年6月5日にARKitを発表し、9月19日にiOS 11とともに提供を始めました。Googleは2017年8月29日にARCoreのプレビュー版を公開し、2018年2月に約1億台のAndroidスマートフォン向けにバージョン1.0をリリースしました。

どちらも役割は同じです。スマートフォンは、動きに合わせて映像の中の特徴的な点がどうずれるかを観察し、それをモーションセンサーの情報と組み合わせて、自分の位置を割り出します。次に床やテーブルなどの平らな面を見つけ、その上に仮想の物体を正しい大きさで置けるようにします。紙の上に描く用途も含め、今日のほとんどのARアプリを支えているのがこの技術です。

真上から見た机と白い紙 鉛筆を持つ手
紙の上のホルダーに置かれたスマートフォン
スマートフォンの画面:シンプルな猫の絵の青いガイド線

2012サンフランシスコ

ARドローイング:オーバーレイが紙に戻る

テンプレートはスマートフォンの画面の中にしか存在しません。スマートフォンを見ながら紙の上で手を動かすか、スマートフォンに直接描いてください。イラストはこのページのために制作したものです。

Sketchar

物語は、プリズム越しになぞる画家たちから始まりました。そして同じ1枚の紙に戻ってきます。いまはスマートフォンを通して。

ARドローイングは、コンピューターを内蔵したカメラ・ルシダのようなものです。絵を選び、スマートフォンを紙に向けると、画面の中の紙の上に線が現れます。Sketcharは紙そのものを追跡するので、手やスマートフォン、紙を動かしても線はその場にとどまります。本物の鉛筆でなぞれば、本物の絵が残ります。

上で試してみてください。スマートフォンを見ながら手を動かし、最後にテンプレートをオフにして、あなたが描いたものを見てみましょう。

2017年、東莞のAWE展示会で青いTシャツを着たSketcharのチーム

Sketcharの創業者は2012年にARドローイングを考案し、2016年に初のARドローイングアプリを公開した

2012年6月、のちにSketcharを創業するアンドレイ・ドロビトコは、友人とサンフランシスコを歩いているときにあるアイデアを思いつきました。スマートフォンのカメラ越しに見える絵の仮想の線を、現実の面の上でなぞるというものです。最初のプロトタイプは2012年6月22日にテストされました。

当時のスマートフォンはまだARを十分に動かせなかったため、アプリの開発が始まったのは2016年8月でした。2016年12月30日、初のARドローイングアプリSketcharがProduct Huntで公開され、5,000人以上が早期アクセスに登録しました。最初のiOS版は2017年4月17日にリリースされています。

Sketcharブログで経緯を読む

あわせて読みたい

拡張現実についてのよくある質問

拡張現実は、現実世界の見え方にコンピューターで生成した画像を、リアルタイムで位置を固定して重ねる技術です。目の前の部屋や通り、紙は見えたまま、その上に仮想のレイヤーが加わります。

最もよく名前が挙がるのはアイバン・サザランドです。1968年、彼は現実の部屋にコンピューターグラフィックスを重ねる初のヘッドマウントディスプレイを作りました。「拡張現実」という言葉はその後、1990年にボーイングのトム・コーデルが生み出しました。

実際に動く技術としては1968年です。名前は1990年、標準的な定義は1997年に生まれました。カメラ・ルシダ(1806年)やペッパーズ・ゴースト(1862年)のような光学的な先駆けは、それよりずっと古いものです。

1968年のアイバン・サザランドのヘッドマウントディスプレイです。利用者の頭上に吊られたトラッキング用のアームから、「ダモクレスの剣」というあだ名がつきました。

仮想現実は、見えるものをコンピューターが生成した世界に置き換えます。拡張現実は現実世界を視界に残したまま、そこに何かを加えます。

スマートフォンはカメラの映像とモーションセンサーから自分の位置を割り出し、平らな面を見つけ、動いても仮想の物体がその面に固定されたままになるよう描画します。

ARドローイングは、スマートフォンのカメラを通して絵の線を紙の上に重ねて見せ、本物の鉛筆でなぞれるようにするものです。カメラ・ルシダの現代版と言えます。

Sketcharのアイデアは、2012年6月にサンフランシスコで創業者のアンドレイ・ドロビトコが思いつきました。最初のプロトタイプは2012年6月22日にテストされました。

Sketcharです。2016年12月30日にProduct Huntで公開され、最初のiOS版は2017年4月17日にリリースされました。

印刷したマーカーや手描きの目印を必要としないトラッキングです。カメラが白い紙そのものを認識し、紙とスマートフォンの両方が動いても、仮想の絵を紙に貼りつけたように保ちます。Sketcharのチームは、ARKitが発表される前の2016~2017年にこれを開発し、2019年5月のバージョン5.0ですべてのユーザーに提供しました。この手法は米国特許11,030,754 B2を取得しています。

この記事をシェア

ブラックフライデー:11月27日から50%オフブラックフライデー:今なら50%オフ