ニュース

May 18, 2023

AR/VR ヘッドセット: これまでにわかっていることすべて

Iscriviti a MacRumors per ricevere notizie regolari e informazioni sulle prossime cuffie AR/VR.Apple lo è

MacRumors の定期ニュースと今後のニュースを購読してくださいAR/VR ヘッドセット情報。

Apple は、特許申請に基づいてほぼ 20 年間、仮想現実と拡張現実の技術を実験してきましたが、ARKit の発売で仮想現実と拡張現実の人気が爆発的に高まっているため、Apple の取り組みはさらに深刻になり、初のウェアラブルの開発につながると予想されていますAR/VR 2023 年の Apple デバイス。

Apple では、数百人の従業員が AR と VR に取り組み、新しいテクノロジーを将来の Apple 製品で使用できる方法を模索している調査があります。 AR/VR の採用はここ数年で増加しており、Apple は AR/VR 分野での取り組みを進めるために複数の AR/VR 企業を買収しました。

Appleは少なくとも開発中二複合現実ヘッドセットを含む AR/VR デバイスは 2023 年にリリースされ、その後、より手頃な価格のバージョンがリリースされる予定です。 Appleのヘッドセットは度重なる遅れに直面しており、同社は当初2022年に発売したいと考えていたが、それは不可能だった。 2023年の発売が予想されており、AppleはWWDCでウェアラブルを発表する予定だ。 廉価版は2024年か2025年に登場する可能性があり、複数の第2世代モデルが登場する可能性がある。

AR/VR ヘッドセットは Apple シリコン チップを搭載したスタンドアロン デバイスとなり、Apple の Mac と同等のパフォーマンスを発揮します。 内部には複雑なタスクの実行と仮想現実機能の処理を可能にする 2 つのチップが搭載されており、さらに iPhone や Mac から独立して動作できるようになります。 ペアリングを行うと、iPhone をキーボードとして使用したり、データを転送したりできるようになりますが、必須ではありません。

デザイン的には、このヘッドセットは Facebook Oculus Quest などの市販の他のヘッドセットと似ていますが、より洗練された外観と快適さを確保するための軽量構造が特徴です。 Appleは、デバイスに内蔵された内蔵バッテリーではなく、腰に装着する外部バッテリーパックを使用することでヘッドセットの重量を軽減する予定だ。

1 インチあたり最大 3,000 ピクセルの高解像度 4K マイクロ OLED ディスプレイ 2 台が、没入型の視聴体験を提供します。 Apple は手の動きやジェスチャーを追跡するためにヘッドセットに十数台のカメラを組み込んでおり、これは視線追跡と並ぶ制御方法の 1 つとなります。 ユーザーはディスプレイ上の項目を見て選択し、手のジェスチャーを使用して項目を操作することができます。

手のジェスチャーや着用者の周囲にある物体を検出するために複数の 3D センシング モジュールが組み込まれ、音声制御、肌検出、空間検出、表情検出をサポートします。 内蔵スピーカーが含まれますが、より優れた空間オーディオを使用するにはペアリングされた AirPods が必要です。

Apple はヘッドセット用の App Store を設計しており、コンテンツはゲーム、ストリーミングビデオ、ビデオ会議に重点を置く予定です。 ヘッドセット専用に設計された新しいオペレーティングシステム「xrOS」が実行されます。 FaceTime エクスペリエンスでは、カメラを使用して人の顔全体と体全体を仮想環境に投影し、1 対 1 で通話します。また、カレンダー、メール、Safari などの他のアプリも利用できます。

このヘッドセットは、iPhone や iPad ユーザーにとってすぐに馴染みやすい iOS のようなインターフェイスを備えており、さまざまなアプリやウィジェットを収容する専用のホーム画面が備えられています。 また、Mac のマウスとキーボードを入力デバイスとして使用し、接続された Mac のディスプレイとしても使用できます。

AR/VR ヘッドセットは最先端のテクノロジーを採用したまったく新しい製品カテゴリーであるため、決して安くはありません。 噂によると、価格は約3,000ドルになる可能性があります。

このヘッドセットは VR に重点を置いていますが、拡張現実機能も備えています。 ユーザーは、Digital Crown のような制御メカニズムを通じて VR から AR に切り替えることができ、AR 機能では外部カメラを使用してユーザーの周囲をヘッドセット内に表示します。

注: このまとめにエラーがあるか、フィードバックを提供したいですか? こちらからメールをお送りください。

Apple の最初のヘッドセットは、通常「複合現実」と呼ばれるテクノロジーである AR と VR の両方の機能をサポートします。 拡張現実 (AR) と仮想現実 (VR) は似たテクノロジーですが、潜在的な用途は大きく異なります。

仮想現実は仮想世界での完全な没入体験を指しますが、拡張現実は現実世界の変更されたビューを指します。 VR 体験では、完全な仮想体験に集中するために現実世界のほとんどが遮断されますが、拡張現実は現実世界のビューに仮想要素を重ね合わせます。

現在はほとんど廃止されている Google 製品である Google Glass は頭に装着する拡張現実デバイスの一例であり、Oculus と PlayStation VR は頭に装着する仮想現実デバイスの例です。 Apple はこれら両方のテクノロジーに取り組んでいますが、最初の製品は Google Glass よりも Oculus に似たものになるでしょう。

仮想現実は、着用者が視覚、触覚、および音声のフィードバックを通じて、シミュレートされた世界で何が起こっているかを実際に体験しているように感じられるため、没入型のコンテンツ消費に特に焦点を当てています。 仮想現実は現在ゲームに関連付けられていますが、教育やトレーニングの目的で現実世界の体験を再現する可能性もあります。

拡張現実は没入型コンテンツに左右されません。現実を置き換えるのではなく拡張するため、あまり刺激的ではありませんが、より広範囲の潜在的なアプリケーションがあり、Apple が最終的に最も興味を持っていると思われるテクノロジーです。Apple のヘッドセットは両方をサポートします。 AR と VR は複合現実と呼ばれ、Microsoft の HoloLens などの製品で見られるものです。 ユーザーは、デバイスの側面にある Digital Crown を使用して、仮想現実と拡張現実を切り替えることができます。

複合現実は、現実世界のコンテンツと仮想コンテンツを結合して、物理オブジェクトとデジタル オブジェクトを一緒に表示および操作できる新しい環境を生成します。 実際のところ、Apple のヘッドセットがどのようなエクスペリエンスを正確に提供するのかはまだわかりませんが、没入型ゲーム、よりインタラクティブな FaceTime やチャット エクスペリエンス、新しい学習ツールが期待できます。

商標申請によると、Appleは現在開発中の複合現実ヘッドセットを「Reality Pro」または「Reality One」と呼ぶ可能性があるという。 Apple は「Reality Processor」に加えてこれらの名前を商標登録しているので、現実をテーマにしたネーミングが得られそうです。

Apple は、ダミー会社を利用して、米国、英国、カナダ、オーストラリア、ニュージーランド、サウジアラビア、コスタリカ、ウルグアイでこれらの名前を商標登録しています。

Apple はここ数週間で、xrOS、xrProOS、realityproOS、realOS の商標を申請したようです。 Apple は AR/VR ヘッドセットのオペレーティング システム名に xrOS を使用すると予想されていますが、その他の名前は念のためのプレースホルダーになる可能性があります。

Apple の AR/VR ヘッドセットは、市場にある他の VR ヘッドセットと同様に見え、Facebook Oculus Quest 仮想現実ヘッドセットからそれほど遠くないデザインが特徴です。 デザインの詳細のいくつかは噂で明らかにされており、The Information はプロトタイプさえ見たので、何が期待できるかについてはよくわかります。

ヘッドセットにはアルミニウム、ガラス、カーボンファイバーが使用され、重量と薄型を維持します。 「メッシュ素材で顔に取り付けられた滑らかな湾曲したバイザー」を備えていると説明されています。 デザイナー Ian Zelbo による以下のレンダリングは、これらのヘッドセットの説明に基づいています。

Apple Watch のバンドと同様の素材で作られた後部のバンドがヘッドセットを着用者の頭に固定し、柔らかいメッシュが顔の前面に快適にフィットします。 初期の噂ではヘッドバンドが交換可能であることが示唆されていましたが、新しい情報によると、それはもはや事実ではありません。 ヘッドバンドは柔らかい素材で作られており、こめかみに左右のスピーカーを備えた 2 つのスポットがあると説明されています。 ヘッドセットの背面に取り付ける取り外し可能な柔らかいカバーがあり、より快適に着用できます。

Appleは、サラウンドサウンドのような体験や、外出時のバッテリー寿命の延長を目的として、AirPods Proのような空間オーディオ技術を搭載したヘッドバンドを開発中だったと言われているが、これらのアイデアは破棄された可能性がある。 現在、Apple がさまざまなヘッドバンドを開発しているとの噂があり、1 つはスピーカー内蔵の Apple Watch バンドのような素材で作られた消費者向けで、もう 1 つは開発者向けです。

ヘッドセットの設計は、装着者の視野に光が漏れるのを防ぐために周辺視野を遮断することを目的としており、グラフィックスを他の人に見せるための外側に面したディスプレイが搭載されます。

2022年3月のプロトタイプの重量は約200～300グラムと言われているが、Appleは技術的な問題が解決できれば最終重量を100～200グラムに減らすことを目指しており、これによりヘッドセットが既存のVRデバイスより軽くなるという。

仮想現実と現実世界を切り替えるために、Apple はヘッドセットの右側に小さな Digital Crown のようなダイヤルを搭載しています。 触覚フィードバックは含まれませんが、モード間を移行するために回転させることができます。

最初にリークされた AR/VR ヘッドセットのコンポーネントは 3 月にリークされ、デバイスの内部構造が明らかになりました。 リボンケーブルはヘッドセット用に設計されたと言われており、以前の Apple 製品で使用されていたケーブルとは似ていないようです。

ケーブルはユーザーの目の周りに沿って輪郭を描いているように見え、ディスプレイ コンポーネントをボードに接続するために使用できる可能性があります。

噂によると、AR/VR ヘッドセットには 2 ～ 3 つのディスプレイが搭載される予定です。 1 インチあたり最大 3,000 ピクセルの高解像度 4K マイクロ OLED ディスプレイが 2 台搭載され、合計解像度は 8K になります。 ソニーはアップルが使用するディスプレイモジュールを供給するとみられているが、アップルはサムスンの一部のOLEDディスプレイも使用する可能性がある。

マイクロ OLED ディスプレイは、ガラス基板ではなくチップ ウェーハ上に直接構築されているため、ディスプレイがより薄く、より小さく、電力効率が高くなります。 標準的な OLED パネルのピクセル サイズは 40 ～ 300 マイクロメートルですが、ピクセル サイズは 4 ～ 20 マイクロメートルの範囲で可能であり、さらにマイクロ秒の応答時間が速いため、拡張現実 (AR) および仮想現実 (VR) アプリケーションに最適です。 。

ディスプレイ アナリストのロス ヤング氏によると、AR/VR ヘッドセット ディスプレイは対角 1.41 インチで、輝度 5000 ニト、1 インチあたり 4,000 ピクセルを備えています。 5,000 ニトの輝度を備えた AR/VR ヘッドセットは、HDR コンテンツのサポートを提供し、市場の他のヘッドセットの機能をはるかに上回ります。

AR/VR ヘッドセットには、LG ディスプレイが提供する標準的な OLED ディスプレイとなる外側の外部ディスプレイも含まれます。 標準の OLED ディスプレイは、ディナー ディスプレイに使用される高品質のマイクロ OLED テクノロジーを必要としない、シンプルな外部インジケーター ディスプレイになります。

外側を向いたディスプレイは、ヘッドセットの装着者の表情を周囲の人々に見せることができ、デバイス使用時に感じる孤立感を軽減するとされている。 ディスプレイのリフレッシュ レートは非常に低く、バッテリーの消耗を防ぐために消費電力が削減されます。

Appleは、薄くて軽量なデザインを可能にする「パンケーキ」レンズを使用しています。 パンケーキ レンズは、他の VR ヘッドセットに使用されているフレネル レンズ テクノロジーよりも高価ですが、デバイスはより薄くなります。

ヘッドセットが顔にぴったりとフィットするため、ユーザーは眼鏡を着用できません。そのため、画面の上に度付きレンズを挿入するオプションが用意されています。 度付きレンズは磁石を使用してヘッドセットに取り付けることができます。

AR/VR ヘッドセットは、Valve Index と同様に 120 度の視野を備え、Meta Quest Pro の 106 度の視野よりも広くなります。

さらに、Apple は小型モーターを使用して内部レンズを装着者の瞳孔間距離に合わせて調整し、各個人に可能な限り最大の視野を提供する予定です。

Apple は AR/VR ヘッドセットにスタンドアロンのバッテリー パックを使用することを計画していると噂されており、これにより軽量化が可能になります。 この情報によると、バッテリーは腰に装着され、ヘッドバンドに接続された MagSafe のような電源ケーブルを介してヘッドセットに接続されるようです。

バッテリーは、iPhone 14 Pro Max モデルを 2 台重ねたくらいのサイズで、ヘッドセットに約 2 時間電力を供給します。 外部バッテリーを使用すると、ユーザーは 1 つのバッテリーを交換し、別のバッテリーを充電して、デバイスを長期間使用できます。

バッテリーパックをヘッドセットに接続するために、Appleは、使用中にケーブルが外れないように、回転してヘッドセットに固定される丸い先端を備えた独自の充電ケーブルを使用する予定です。 ケーブル自体はバッテリーパックに接続されており、取り外しはできません。

ヘッドセットをバッテリー パックに接続するケーブルは Apple Watch の充電パックに似ており、ヘッドセットの左側のこめかみに取り付けられます。 ヘッドセットには、データ転送用の USB-C ケーブルも付属します。

Appleはバッテリーパックの充電に96Wの電源アダプターを採用すると報じられている。

このヘッドセットには、手の動きを追跡し、環境をマッピングし、顔の特徴や体の動きをキャプチャし、視覚体験を投影するための十数個の光学カメラが搭載されます。 ヘッドセットの目玉機能の 1 つは、付属のカメラで正確な顔の特徴をキャプチャした本物そっくりのアバターであ​​ると言われています。

それぞれの目は少なくとも 1 台のカメラで追跡され、ヘッドセットがアバター上のユーザーの視線を正確に表示できるようになります。 正確な視線追跡により、ヘッドセットは中心窩レンダリングを実行して、ユーザーが見ている場所に直接フル解像度で画像のみをレンダリングすることで電力を節約できます。

目と手の追跡は AR/VR ヘッドセットの主な制御方法となり、Apple は目と手を監視するためにカメラを使用します。 装着者は、たとえば画面上の項目を見て選択し、ピンチなどの手のジェスチャーを使用して画面上の項目をアクティブにすることで、ヘッドセットを制御できます。

伝えられるところによると、8 つのカメラモジュールはユーザーのシースルー拡張現実体験に使用され、さらに 6 つのモジュールは「革新的な生体認証」に使用される予定です。 1 台のカメラも環境検出に使用できます。 噂によると、このヘッドセットは、短距離および長距離の LiDAR スキャナーを使用して、部屋の表面、端、寸法を正確にマッピングできるようになるという。

プライバシーとセキュリティを確保するため、AR/VR ヘッドセットにはユーザーの目のパターンを読み取る虹彩スキャナーが統合され、虹彩スキャンをパスワードの代わりや支払い認証に使用できるようになります。

AR/VR ヘッドセットでの虹彩スキャンは、iPhone、iPad、Mac の Face ID や Touch ID に似ています。 これにより 2 人が同じヘッドセットを使用できるようになりますが、これは Meta の新しい Quest Pro のような競合ヘッドセットでは利用できない機能です。

AR/VR ヘッドセット用のウェアラブル制御デバイスは存在せず、代わりに Apple はデバイス上の無数のカメラによって検出される手のジェスチャーに依存します。

たとえば、タイピングは目の動きと手のジェスチャーによる「空中」方式で行われます。 ユーザーは、iPhone を Apple TV で使用する場合と同様に、iPhone をペアリングして iPhone のキーボードをデバイスで使用することもできます。

AR/VR ヘッドセットには 2 つの Mac レベルの M2 プロセッサが搭載され、ウェアラブル デバイスで前例のないコンピューティング パワーを実現します。Apple は MacBook Air でデビューしたのと同じチップを使用します。 チップには、CPU、GPU、メモリ、専用の画像信号プロセッサを備えたメイン SoC が含まれます。

このチップは 5 ナノメートルプロセスで製造されており、Apple が 2023 年後半に発売するデバイスに使用する予定の 3nm プロセスでは製造されません。ヘッドセットの処理能力は iPhone や Mac に依存しません。独立した電源とストレージを備えています。

許容できない遅延のため、Apple はチップ間の通信を可能にする独自のカスタム ストリーミング コーデックを作成しました。専用の ISP は、外部カメラでキャプチャされた歪んだ画像を低遅延でユーザーの周囲の忠実なビデオ表現に変換できます。 このヘッドセットには、第 2 世代 AirPods Pro および将来の AirPods モデルとの超低遅延接続を可能にする H2 チップも含まれます。 サードパーティ製のイヤホンは遅延の問題でうまく機能しないため、Apple は最高のオーディオ体験を得るためにヘッドセットに AirPods を必須にすることさえ検討しています。 このデバイスには 3.5 mm ヘッドフォン ジャックはありません。

AppleはAR/VRヘッドセット用SoCの開発を完了しており、ワイヤレスデータ送信、ビデオの圧縮と解凍、バッテリー寿命を最大化するための電力効率を最適化する予定だが、Appleの他のチップのようなニューラルエンジンは搭載していない。

AppleはAR/VRヘッドセット上で動作するソフトウェアを「xrOS」と呼ぶ予定で、これは「拡張現実」を意味する。 拡張現実は、ヘッドセットがサポートする拡張現実と仮想現実の両方の機能を表します。

この名前は Apple 内部情報筋によって確認されており、また Apple は隠れたダミー会社を通じて xrOS を商標登録している。 「xrOS」に関する Apple の商標出願がニュージーランドで発見され、Apple がヘッドセット上で動作するオペレーティング システムに実際に xrOS の名前を使用することを示唆しています。

Apple は開発中、ヘッドセット ソフトウェアを社内で「Reality OS」または「rOS」と呼んでいましたが、発売が近づくにつれ、公開名をより一般的ではない「xrOS」という名前に更新することを決定しました。

Apple は AR/VR ヘッドセット用のさまざまなアプリの開発に取り組んでおり、スポーツ、ストリーミングビデオコンテンツ、ゲーム、フィットネス、ウェルネス、コラボレーションに重点を置く予定です。 Apple はヘッドセット用の App Store を作成しています。

xrOS には、Safari、写真、メッセージ、マップ、Apple TV+、Apple Music、Podcasts、カレンダーなどの iOS アプリに加え、ヘッドセット用にカスタマイズされた FaceTime アプリが含まれます。

Apple は最近、iPad 用の Final Cut Pro および Logic Pro アプリを発表しましたが、これらのアプリは最終的にはヘッドセットにも搭載され、オーディオおよびビデオ コンテンツのクリエイターがヘッドセット上で直接編集できるようになる可能性があります。

Apple は iPad アプリをヘッドセットに適合させることを計画しており、ユーザーはデバイスの 3D インターフェイスを通じて既存の App Store コンテンツにアクセスできるようになります。 Safari、カレンダー、連絡先、ホーム、ファイル、メッセージ、メモ、写真、音楽、リマインダー、その他の組み込みアプリなどの Apple が設計したアプリは、デバイスに合わせて最適化されます。 複数のアプリを同時に実行できるようになり、ユーザーが別の部屋にいるときにアプリ間を切り替えるための地理位置情報の機能も追加されます。

Fitness+ アプリを使用すると、ユーザーは仮想現実設定で Fitness+ インストラクターを見ながら運動できるようになります。また、グラフィック、サウンド、ナレーションでユーザーを瞑想に導くためのヘルス アプリもあります。

Apple のスポーツへの取り組みの深化に伴い、MLB および MLS コンテンツの没入型視聴体験に重点が置かれることになるほか、仮想現実環境でビデオを視聴するための専用 TV アプリも登場する予定です。

Appleはビデオコンテンツに関してDisneyやDolbyなどの企業と提携しており、さらにApple TV+の番組や映画をこのデバイスで動作するように更新している。 Appleは、砂漠や宇宙などの特殊な環境で巨大なスクリーンを見る体験をユーザーに提供したいと考えていると言われている。

専用の FaceTime エクスペリエンスがあり、ユーザーの実際の顔と体を特徴とするリアルなアバターを使用して 1 対 1 のチャットが可能になります。 この機能はプロセッサを大量に消費するため、個人対個人のチャットに限定されており、複数人でのチャットでは代わりにミー文字などの詳細度の低いアイコンが使用されます。

カメラ アプリはヘッドセットのカメラから画像を取得できるようになり、Freeform のバージョンは他のユーザーとの共同プロジェクトに取り組むための 3D インターフェイスに適応されます。

Apple は、既存のコンテンツを Mixed Reality 向けに更新できるよう、選ばれた数のゲーム開発者と協力してきました。Apple は、AR/VR エクスペリエンスの作成に利用できる強力なツール セットも用意する予定です。

iPhone、iPad、または Mac のキーボードと同様に、Siri をテキスト入力に使用できるようになります。 Apple は空中タイピング機能の開発に取り組んでいますが、発売時点では少し初歩的なものになると予想されており、時間の経過とともに顕著な改善が行われる予定です。

Apple は、開発者と顧客が AR/VR ヘッドセット用の拡張現実アプリを作成できるようにするソフトウェア ツールを開発しています。

顧客は、コーディングの経験がなくても、Siri 音声コマンドを使用して AR アプリやエクスペリエンスを作成およびリリースできる場合があります。 この機能に関するレポートでは、この機能を、プレイヤーが独自の体験を作成できるツールを備えたゲームである Minecraft や Roblox と比較しています。

AppleのAR/VRヘッドセットは機能するためにiPhoneを必要とせず、単独で使用できるようになる。 セットアップに iPhone は必要なく、データは iCloud 経由でダウンロードできますが、データ転送のためにセットアップ時に iPhone をペアリングするオプションがあります。

ジェスチャーベースのタイピングシステムが含まれていますが、必要に応じて iPhone を接続してヘッドセットのキーボードとして機能させることもできます。

Apple の今後の複合現実ヘッドセットは、最新の WiFi 仕様である WiFi 6E のサポートを提供します。 Apple は、安定したワイヤレス接続によるハイエンドの没入型エクスペリエンスを提供するために WiFi 6E の実装を計画していると言われています。 WiFi 6E は WiFi 6 の利点をすべて備えていますが、2.4 GHz および 5 GHz 帯域に加えて 6 GHz スペクトルを追加して、帯域幅を増やし、デバイス間の干渉を減らします。

Appleは克服すべき開発上の問題に直面しているため、AppleのAR/VRヘッドセットはさらに遅れに直面する可能性がある。 ブルームバーグによると、アップルはこれまでにヘッドセットの発売計画を何度も延期しているという。 Appleは当初、このヘッドセットを2021年に発売し、2022年に出荷する予定だったが、それを2022年のWWDCまで延期し、その後さらにデバイスの発売を2023年まで延期した。

ヘッドセット用に設計されたチップの少なくとも 1 つは、最新の MacBook Pro モデルの M1 Pro と同等であり、チップの熱要求により放熱の問題が発生しています。 遅れにより、Apple は 2023 年の世界開発者会議でヘッドセットに焦点を当てる予定です。 Appleは開発者に対し、「rOS」App Store向けの拡張現実アプリや仮想現実アプリの構築を開始するよう奨励する予定だ。

Apple は長年にわたって拡張現実および仮想現実技術に取り組んでおり、頭部装着型 AR/VR 製品を開発する大規模な従業員チームを抱えています。 将来的には、AR/VR デバイスが iPhone に取って代わると考えられており、早ければ 10 年後にはそうなる可能性があります。

iPhone は Apple にとって最も収益性が高く重要な製品であるため、AR/VR ヘッドセット技術が iPhone に取って代わるということは、それが Apple の将来にとってどれほど重要であるかをある程度知ることができます。

噂によると、元のヘッドセットの設計にはファンと強力なプロセッサが含まれていましたが、デバイスが重すぎました。 また、初期の設計では、接続された iPhone または Mac の処理能力をヘッドセットに使用する必要がありましたが、Apple は設計を変更し、ヘッドセット自体にハイエンドチップを追加しました。

初期のプロトタイプは、各目に8Kディスプレイを備えていると説明されており、ヘッドセットは60GHz WiGigと呼ばれる高速短距離無線技術を使用して「専用ボックス」に接続されるという噂もありました。 このボックスには、「現在入手可能なものよりも強力な」カスタム 5 ナノメートル Apple プロセッサが搭載される予定です。 この箱は明らかに PC タワーに似ていますが、「実際の Mac コンピュータではないでしょう」。

内部の意見の相違により、時間の経過とともに Apple の AR ヘッドセットの目標が形成され、変更されました。噂では、Apple が「ボックス」デザインを採用しなかったのは、元 Apple デザイナーのジョニー・アイブが、別途固定の追加を必要とするデバイスを販売したくなかったことが示唆されています。完全な機能。

私は、デバイスに直接埋め込むことができる、それほど強力ではないテクノロジーを搭載したヘッドセットを望んでいましたが、AR/VR チームのリーダーであるマイク ロックウェルは、より強力なデバイスを望んでいました。 この対立は何か月も続いたが、ティム・クック氏は最終的にアイブ氏の側に立って、Appleのヘッドセット設計の方向性を変えた。

Apple従業員の中にはAR/VRヘッドセットの有用性とその価格の高さを懸念している人もいると言われている。 その可能性に疑問を抱いてプロジェクトから離脱する社員もおり、「問題探しの解決策」ではないかとの懸念もある。

あるリーカーによると、このヘッドセットを使用したApple社内のテスターは、Appleがここ数カ月で開発に大きな飛躍を遂げ、ヘッドセットの機能に「驚かされた」と述べたという。 「（昨年末）以来の彼らの飛躍は巨大だ」と関係者は語った。 「私はとても懐疑的でした。今では、『お金を横取りするようなやり方で』とびっくりしています。」

AR/VR の話題に関して、ティム・クック氏は最近、AR/VR が「人々のコミュニケーションを大幅に強化し、人々がこれまで達成できなかったことを達成できるようにする」可能性があるとコメントし、また、コラボレーションやアイデア出しにも良いだろうと示唆しました。アイデアがあれば、創造性が加速する可能性があると考えています。

クック氏は、アップルのこれまでの取り組みには「多くの懐疑論者」がいると述べ、将来的にはアップルがAR/VRヘッドセットで「主要技術をコントロールする」だろうとほのめかした。

AppleはWorldwide Developers Conferenceでこのヘッドセットをデビューさせ、今年後半に販売を開始すると予想されている。 今年の 2023 WWDC 基調イベントは 6 月 5 日月曜日に開催される予定です。

このヘッドセットが販売されるのは2023年後半になる見通しだ。噂によると、Appleは10月にこのデバイスの量産を開始し、12月の休暇に間に合うようにユニットが入手できるようになるという。

ヘッドセットの価格は約3,000ドルから始まる可能性があり、iPhoneよりもはるかに高価になります。 そもそも一般消費者向けではなく、開発者やコンテンツ制作者、専門家向けのデバイスとして位置づけられる予定だ。

伝えられるところによると、Apple の AR/VR ヘッドセットの製造コストは単独で約 1,500 ドルであり、部品コストはデバイス価格の上昇につながります。 microOLED ディスプレイは、AR/VR ヘッドセット内の最も高価なコンポーネントであり、約 280 ～ 320 ドルです。 カメラモジュールの価格は約160ドル、メインプロセッサと画像信号プロセッサの価格は約120〜140ドルです。

Appleは、ヘッドセットを小売店ごとに1日あたり1台のみ販売すると予想しており、発売初年度には700万～1,000万台の販売が見込まれるとサプライヤーに伝えている。

Apple はすでに、より手頃な価格の AR/VR ヘッドセットのバージョンの開発に取り組んでいます。 最初の AR/VR ヘッドセットの価格は約 3,000 ドルですが、Apple は iPhone に近い価格のモデルを開発したいと考えています。

Appleのエンジニアは、より手頃な価格のコンポーネントを使用して価格を下げることを計画していますが、低価格のヘッドセットには、2023年に発売されるヘッドセットと同じ一般的なAR/VR「複合現実」機能が搭載されます。デバイスのチップは同等のものになります。最初の AR/VR ヘッドセットで使用されていた Mac レベルのチップではなく iPhone が使用され、Apple は低解像度の内部ディスプレイや安価な素材も使用する可能性があります。

現時点では、より手頃な価格のヘッドセットの開発は初期段階にあり、Apple は実用的なプロトタイプを作成していません。 このようなヘッドセットは2025年に発売される可能性があり、フォックスコンはすでにそれに取り組んでいる。

Appleのアナリスト、ミンチー・クオ氏によると、第2世代のAR/VRヘッドセットはiPhoneと同様にハイエンドモデルとローエンドモデルの両方で提供される予定だという。 Appleは、より手頃な価格のモデルと、よりハイエンドで高価な第1世代モデルの後継となるモデルを1つ提供すると予想されている。

Apple の仮想現実と拡張現実への取り組みは数年前に遡りますが、噂が広まり始めたのは 2015 年 3 月、Apple が拡張現実に取り組む少数のチームを擁しているというニュースが流れた時でした。 2015 年から 2016 年初頭にかけて、Apple は AR/VR テクノロジーの専門知識を持つ従業員を雇用し、関連する複数の買収を行ったため、チームは成長しました。

Apple の AR/VR チームには、Apple 全体から数百名のエンジニアが所属しており、全員が仮想現実と拡張現実の専門知識を持っています。 チームはクパチーノとサニーベールのオフィスパーク全体で活動しており、Appleはコード名「T288」の下でいくつかのハードウェアおよびソフトウェアのプロジェクトを検討している。

Appleの拡張現実チームは「ハードウェアとソフトウェアのベテランの力」を結集しており、ドルビー出身のマイク・ロックウェル氏が率いる。 Oculus、Amazon (VR チーム)、Lytro、Microsoft、3D アニメーション会社 Weta Digital、Lucasfilm などの企業の元従業員が Apple で AR に取り組んでいます。

Appleの元ハードウェアエンジニアリング責任者のダン・リッチョ氏は2021年1月、AR/VRヘッドセットに関するAppleの取り組みを監督する新しい役職に異動した。 このプロジェクトは開発上の課題に直面しており、アップル幹部らはリッチョ氏の注力が役立つかもしれないと信じている。

Apple ソフトウェア幹部の Kim Vorrath 氏も拡張現実チームに所属しており、彼女はバグを見つけ出しながら従業員が期限を守るようにする「強力な部隊」であると言われています。

Appleは、コンピュータサイエンス教授のDoug Bowman氏、元Magic LeapエンジニアのZeyu Li氏、元Oculusの研究科学者Yury Petrov氏、ARの専門家で元NASA職員のJeff Norris氏、VRアプリの専門家であるSterling Crispin氏など、著名なAR/VRおよびAIの専門家を多数雇用している。 VRカメラメーカーのアーサー・ヴァン・ホフ氏。

Apple の AR/VR チームのメンバーの多くは、買収によって同社に加わった可能性があります。 2015 年以来、Apple は AR/VR 関連製品を開発する複数の企業を買収しており、AR/VR 買収の一部は数年前に遡るものもあります。

アコニア ホログラフィックス

Appleは2018年8月、拡張現実メガネ用のレンズを製造する新興企業Akonia Holographicsを買収した。 Akonia Holographics は、「スマート グラスの透明ディスプレイ要素用の世界初の市販の体積ホログラフィック反射光学および導波路光学系」を宣伝しています。

同社が製造するディスプレイには、同社の HoloMirror 技術が採用されており、「超鮮明なフルカラー性能」を実現し、「世界で最も薄く、最軽量のヘッド装着型ディスプレイ」を実現しているという。

ヴルヴァーナ

2017 年 11 月、Apple は Totem と呼ばれる複合現実ヘッドセットを開発した会社 Vrvana を買収しました。 Totem は一般にはリリースされませんでしたが、拡張現実技術と仮想現実技術の両方を 1 つのヘッドセットに組み込むように設計されており、完全な VR 機能とパススルー カメラを統合して、画面ベースの拡張現実機能を有効にします。

Totem は基本的に一連のカメラを使用して、内蔵 1440p OLED ディスプレイに現実世界の画像を投影しました。これは、透明ディスプレイを使用して仮想現実と拡張現実を組み合わせる Microsoft の HoloLens などの競合製品とは一線を画す、ややユニークなアプローチです。 Appleは将来の製品にTotemの技術の一部を使用することを計画している可能性がある。

プライムセンス

Appleは2013年にイスラエルに本拠を置く3Dボディセンシング企業PrimeSenseを買収し、モーションベースの機能がApple TVに実装されるのではないかという憶測を引き起こした。 PrimeSense の 3D 深度テクノロジーとモーション センシング機能は、Microsoft の初期の Kinect プラットフォームで使用されました。

PrimeSense は、近赤外光を使用して部屋またはシーンに不可視の光を投影し、その光を CMOS イメージ センサーで読み取って、物体または人物の仮想画像を作成します。 これにより、ソフトウェア インターフェイスのモーション ベースの制御が可能になるだけでなく、仮想オブジェクトの測定や相対的な距離やサイズの提供なども実行でき、インタラクティブ ゲーム、屋内マッピングなどの拡張現実アプリケーションに役立ちます。 PrimeSense テクノロジーは、人や物体の高精度 360 度スキャンを作成することもでき、仮想現実アプリケーションに役立つ可能性があります。

メタイオ

Apple は、2015 年 5 月に拡張現実のスタートアップ Metaio を買収しました。Metaio は、わずか数分で拡張現実のシナリオを作成できる Metaio Creator と呼ばれる製品を開発しました。 Metaio のソフトウェアは、Apple に買収される前は、拡張現実のショールームを作成したフェラーリなどの企業によって使用されていました。

Metaio テクノロジーはベルリンでも使用され、ベルリンの壁の跡地を訪れた人々がスマートフォンやタブレットを使用して、ベルリンの壁がまだ立っていた頃のその地域の様子を確認できるようにしました。 Metaio のテクノロジーは、マップなどの Apple アプリに拡張現実機能を実装するために使用できる可能性があります。

フェイスシフト

Apple は 2015 年 8 月に Faceshift を買収し、2015 年に 2 回目の拡張現実買収を行いました。Apple に買収される前、Faceshift はゲーム スタジオやアニメーション スタジオと協力して、3D センサーを使用して顔の表情を迅速かつ正確にキャプチャし、アニメーションの顔に変換するように設計された技術を開発していました。リアルタイム。 Faceshift は、Skype でリアルタイムに自分の顔を漫画やモンスターの顔に変形できる消費者向け製品の開発にも取り組んでいました。

Faceshift の技術には幅広い使用例が考えられ、Apple はこの機能を前面 TrueDepth カメラ システムを搭載した iPhone でアニ文字を強化するために使用しているようです。

感情的

表情分析ツールを構築する企業である Emotient は、2016 年 1 月に Apple に買収されました。Emotient のテクノロジーは、人工知能と機械学習を使用して人間の感情を読み取り、広告主が現実世界で感情的な反応を判断するために使用してきた機能です。広告。

写真アプリでの顔検出の向上から、Apple 小売店での顧客の感情の分析、iOS デバイスのロック解除まで、Apple が Emotient でできることは数十ありますが、AR/VR での利用の可能性もあります。 Faceshift と同様に、Emotient のテクノロジーは、ソーシャル メディアやゲームに役立つ仮想アバターを作成するために顔の表情を分析および変換するために使用できます。 エモーティエント技術はアニ文字に使用された可能性があります。

フライバイメディア

2016 年初めに買収された Flyby Media も、拡張現実に取り組んだ企業です。 Flybyは、Googleの3Dセンサーを搭載したスマートフォン「Project Tango」と連携するアプリを作成し、メッセージを現実世界の物体に添付して、Googleのデバイスの1つを使って他の人が閲覧できるようにした。

たとえば、人はサンフランシスコのゴールデン ゲート ブリッジのようなランドマークを「スキャン」し、それに添付されたメッセージを書き込むことができます。 後で橋を訪れる人は、Flyby アプリで橋をスキャンしてメッセージを確認できるようになります。 Flyby アプリが Apple の注目を集めた理由は、スキャンされたさまざまなオブジェクトを認識して理解することができ、この技術を Apple が写真や地図などのアプリでさまざまな方法で使用できるためであると考えられます。

リアルフェイス

2017 年 2 月、Apple は、将来の拡張現実機能に使用される可能性がある顔認識技術を専門とするサイバーセキュリティおよび機械学習会社 RealFace を買収しました。

RealFace は、人工知能を統合した摩擦のない顔認識テクノロジーを開発しました。 RealFace テクノロジーは、Face ID の形式で顔認識機能を備えた Apple の最初のスマートフォンである iPhone X に採用された可能性があります。

NextVR

Appleは2020年5月に、仮想現実とスポーツ、音楽、エンターテイメントを組み合わせ、PlayStation、HTC、Oculus、Google、MicrosoftなどのメーカーのVRヘッドセットでライブイベントを視聴するためのVR体験を提供する、カリフォルニアに本拠を置く企業NextVRを買収した。

スペース

アップルは2020年8月、ショッピングモールなどで人々が体験できる「ターミネーター・サルベーション：未来への戦い」などの仮想現実体験を設計するVRスタートアップのスペースズを買収した。 Spaces は、Zoom などのビデオ通信アプリ向けの仮想現実体験も作成しました。これは、Apple が将来の AR/VR 製品に組み込む可能性があります。

バルブ

台湾のサイトDigiTimesによると、Appleは噂のARヘッドセットに関してゲーム開発会社Valveと提携しているとのこと。 Valve は、2019 年 4 月に初の VR ヘッドセットである Valve Index をリリースしました。

Valve は以前 Apple と協力して、Mac バージョンの SteamVR ソフトウェアでの eGPU サポートを活用して、macOS High Sierra にネイティブ VR ヘッドセット サポートを導入しました。

Apple は、仮想現実ヘッドセットに直接関連する複数の特許を申請しており、それらはすべて数年前にさかのぼります。 テクノロジーはこれらを超えて多少進歩している可能性がありますが、これらは Apple が過去に検討してきたアイデアを興味深い視点で示しています。

2008 年の特許出願では、ビデオを見るときに映画館にいるような体験を模倣するように設計された、かなり基本的な「パーソナル ディスプレイ システム」を取り上げていました。

2番目の特許には、眼鏡のように目に装着される透明なガラスディスプレイに画像を投影する「レーザーエンジン」を備えた「ヘッドマウントディスプレイシステム」について記載されていた。 この構成では、ヘッドセットは iPod などのハンドヘルド ビデオ プレーヤーに接続され、処理能力を提供します。

2008 年に最初に申請された 3 番目の特許も同様の設計で、ユーザーが映画やその他のコンテンツを視聴できるように設計されたゴーグルのようなビデオ ヘッドセットを対象としていました。 ユーザーの目の位置に合わせて並べられた 2 つの調整可能な光学モジュールの概要が説明されており、これにより視力補正が可能になり、3D コンテンツの視聴が可能になります。 Apple はこれを個人的なメディア視聴体験の提供であると説明しました。

2008 年の 4 番目の特許は、Google Glass に似たビデオ ヘッドセット フレームを対象としており、ユーザーは iPhone または iPod をヘッドセットにスライドさせてビデオを提供できるようになります。 このヘッドセットは、ユーザーが周囲に目を向けながらビデオを見たり電子メールをチェックしたりできる拡張現実製品であると説明されています。

ヘッドセット関連の特許以外にも、Apple は仮想現実および拡張現実の機能を自社のデバイスに実装する他の方法を説明する特許も申請しています。 たとえば、2009 年の特許出願では、ユーザーの相対位置に基づいて視点が変化するカメラ搭載 3D ディスプレイが取り上げられています。

このようなディスプレイは頭の動きを検出するため、ユーザーは頭を動かしてさまざまな角度から 3D 画像を見ることができると同時に、ユーザーの環境の要素も組み込むことができます。

2010 年と 2012 年の特許では、拡張現実技術を使用して iOS デバイス用の 3D インターフェイスを作成するためのモーション センサーの使用について説明されています。 Apple は、このインターフェースを、内蔵センサーまたはジェスチャーを通じてデバイスの向きを操作することでナビゲートされる「仮想部屋」であると説明しました。

2011 年、Apple は、注目すべきランドマークまでの距離のマッピングに関連する、マップ アプリの拡張現実機能に関する特許を申請しました。 カメラを使用すると、ユーザーは周囲のエリアを確認し、関連情報のオーバーレイとともに 2 点間の距離をリアルタイムで推定できます。

2014 年に出願され、2017 年に付与された特許は、環境内のオブジェクトを検出し、カメラ、スクリーン、ユーザー インターフェイスを使用してそれらに仮想情報をオーバーレイできるモバイル拡張現実システムを対象としています。 Apple はこのシステムがヘッドマウントディスプレイに最適であると説明していますが、スマートフォンでも使用されていることも示しています。

Appleは自動運転車内で使用できる仮想現実技術の開発に取り組んでいる。 Apple のいくつかの特許には、エンターテイメントを提供し、車両の走行中に読書や仕事などの作業による車酔いを軽減するために装着される VR ヘッドセットを備えた車内仮想現実システムを含むシステムが記載されています。

2020年7月の特許出願では、Apple Glassesで考えられる入力方法について取り上げており、眼鏡が赤外線熱感知を使用して誰かが現実世界の物体に触れたことを検出し、眼鏡が現実世界の表面にコントロールを投影できるようにするシステムについて説明している。

この方法を使用すると、Apple Glasses は AR コントロール インターフェイスで現実世界の実際のオブジェクトに投影し、複合現実オーバーレイのような効果を得ることができます。

Appleは2021年2月、噂の複合現実ヘッドセットに関する同社の研究に関連する多数の特許を申請しており、その特許にはデザイン要素、レンズ調整、視線追跡技術、ソフトウェアが含まれている。

Apple は、ヘッドセットの安全性を維持し、光を遮断しながら、ヘッドセットの装着感をより快適にするためのいくつかの方法を開発しました。さらに、流体を使用してレンズをシームレスに移動させ、各ユーザーに合わせてフィット感をカスタマイズする詳細なレンズ調整システムもあります。

Apple はまた、赤外線を使用して位置を検出する視線追跡システムについても詳しく説明しており、ヘッドセットとジェスチャ検出を使用して仮想 3D 空間で文書を編集する方法に関する特許も取得しています。

Apple は、ヘッドセットからビデオを録画するシステムの特許を取得しています。このシステムでは、内蔵の視線追跡センサーが人が現在どこを見ているかを示すことができ、内蔵カメラにユーザーの目の位置のシーンを録画するように指示できます。ユーザーの目の前にあるものを単に記録するのではなく。

2021年2月に提出された別の特許出願では、Appleが複合現実ヘッドセットの制御デバイスとして使用される、一連のセンサーと触覚フィードバックを備えた指装着型デバイスを研究していることが示されている。

このコントロールデバイスは、ユーザーが周囲の物体を自然に感じることができる形状をしており、ユーザーが指を動かし、表面をどのように操作しているかを正確に把握できます。 このシステムは非常に正確であるため、ユーザーが表面を押す強さとその力の正確な方向を検出し、それに応じて触覚フィードバックを提供できると言われています。

Apple は、AR または VR ヘッドセットと組み合わせることで、この指に取り付けるデバイスによって、「ユーザーがテーブル表面を指でタップしているときに、物理キーボードを操作しているような感覚をユーザーに提供できる」、または「ユーザーがジョイスティックを使用できるようにする」可能性があると述べています。指先の動きだけでゲームを楽しめる「タイプ入力」。

Appleのアナリスト、ミンチー・クオ氏は、アップルが2030年代のいつか発売する可能性のある拡張現実「コンタクトレンズ」を計画している可能性があると考えている。クオ氏によると、このレンズはエレクトロニクスを「見えるコンピューティング」の時代から「目に見えないコンピューティング」の時代にもたらすだろうという。 現時点ではコンタクトレンズについては「見通しが立っておらず」、Appleが開発するという保証もない。

Appleは拡張現実「Apple Glasses」も開発中で、ヘッドセットの1年ほど後に発売される予定だったが、同社が代わりにAR/VRヘッドセットの廉価版に注力できるよう、プロジェクトは保留になっている。 Apple Glassesは早ければ2027年に発売される予定だ。

AR/VR ヘッドセットの将来のバージョンには、目の病気や視覚の問題に苦しむ人々を支援するように設計されたアクセシビリティ設定が搭載される可能性があります。