JP2022052750A - 歪められた３次元モデルに基づいて拡張現実コンテンツを生成するためのシステムおよび方法 - Google Patents

Abstract

【課題】歪められた３次元モデルに基づいて拡張現実コンテンツを生成するためのシステムおよび方法の提供。【解決手段】ＡＲコンテンツを生成して実世界アイテムを仮想的に変更するためのシステムおよび方法が提供される。実世界アイテムは、１つ以上の可撓性表面を含む変形可能なアイテムであり得る。ある実施形態によると、方法は、実世界アイテム上の複数の点の相対位置を決定することを含む。仮想アイテムの歪められた３Ｄモデルを生み出すように、仮想アイテムの３Ｄモデルが複数の点の相対位置に基づいて歪められる。歪められた３Ｄモデルは、実世界アイテムと実質的に同一の形状を有し得る。そして、ＡＲコンテンツが、歪められた３次元モデルに基づいて生成される。【選択図】なし

Description

本願は、拡張現実（ＡＲ）に関しており、特定の実施形態では、ＡＲコンテンツの生成に関している。

ＡＲは、コンピュータ生成コンテンツまたは仮想コンテンツを使用した実世界体験の強化に関している。いくつかの場合、ＡＲは、物理的実世界コンテンツの上に仮想コンテンツを重ね合わせることを伴う。この重ね合わせは、建設的であるかまたは非建設的であるかのいずれかであり得る。建設的ＡＲは、実世界体験にコンテンツを追加する一方、非建設的ＡＲは、実世界体験におけるコンテンツを隠す。いくつかの場合、所与のＡＲ体験は、建設的ＡＲと非建設的ＡＲとの組み合わせから成る。ＡＲは、仮想現実（ＶＲ）と異なる。ＶＲは、完全な仮想体験の作成に関する一方で、ＡＲおよびより最新のバリエーションである複合現実（ＭＲ）は、実世界体験の少なくとも一部を維持するが、仮想コンテンツを使用してその実世界体験の知覚を変更する。

本開示のいくつかの側面は、３次元（３Ｄ）モデルを使用して、実世界アイテムの外観を変更するＡＲコンテンツを生成することに関している。３Ｄモデルは、実世界アイテムのための特定の色、模様、および／またはグラフィックを提供し得、これらは、ＡＲ体験において実世界アイテム上に重ねられると、実世界アイテムの外観を変更する。いくつかの場合、実世界アイテムは、１つ以上の可撓性表面を含み得、従って、実世界アイテムの形状が経時的に変化し得る。例えば、実世界アイテムは、ユーザによって着用される衣料であり得る。ユーザが動くと、衣料は、結果的に、流れ、しわを寄せ、かつ／または折れ曲がり得る。実世界アイテムが形状を変化させている間に実世界アイテムの物理的外観を変更することは、ＡＲシステムが直面する難題である。

いくつかの実施形態では、ＡＲを使用して実世界アイテムの外観を変更するために、システムは、実世界アイテムの形状を決定し、実世界アイテムの形状に合致するようにアイテムの３Ｄモデルを歪め、歪められた３Ｄモデルに基づいてＡＲコンテンツを生成する。ＡＲコンテンツは、実世界アイテムの画像上に重ねられる歪められた３Ｄモデルのレンダリング表現を含み得、これは、ＡＲコンテンツを視認しているユーザの視点からの実世界アイテムの外観を変更し得る。このようにして、ＡＲコンテンツは、実世界アイテムのリアルタイムの形状に適合し得る。

本開示のある側面は、コンピュータ実装方法であり、コンピュータ実装方法は、実世界アイテム上の複数の点の相対位置を決定することと、複数の点の相対位置に基づいて、仮想アイテムの３Ｄモデルを歪め、仮想アイテムの歪められた３Ｄモデルを生み出すこととを含む。方法は、提示のために拡張現実（ＡＲ）コンテンツを生成することをさらに含む。このＡＲコンテンツは、歪められた３Ｄモデルに基づき得る。いくつかの場合、実世界アイテムは、可撓性表面を含み得、かつ／または衣料であり得るか、もしくは衣料を含み得る。さらに、３Ｄモデルは、実世界アイテムのための視覚的外観を含み得る。

いくつかの実施形態では、ＡＲコンテンツを生成することは、歪められた３Ｄモデルをレンダリングすることを含む。随意に、歪められた３Ｄモデルは、実世界アイテムの捕捉された画像に対応する視座からレンダリングされる。ＡＲコンテンツを生成することは、実世界アイテムに重ねるようにレンダリング表現を画像と合成することをさらに含み得る。

いくつかの実施形態では、方法は、実世界アイテムに対するユーザの位置を決定することをさらに含む。歪められた３Ｄモデルは、ユーザのこの位置に基づいてレンダリングされ得る。そして、レンダリング表現は、例えば透明ディスプレイを通して実世界アイテムのユーザの視座に重ねられ得る。

いくつかの実施形態では、複数の点の相対位置に基づいて仮想アイテムの３Ｄモデルを歪めることは、３Ｄモデルを修正し、複数の点の相対位置に対応する相対位置であるように３Ｄモデル内の点を位置変更することを含む。

いくつかの実施形態では、実世界アイテムは、複数のマーカを含み、複数のマーカの各々は、実世界アイテム上の複数の点のうちのそれぞれの異なる点である。そして、実世界アイテム上の複数の点の相対位置を決定することは、複数のマーカの相対位置を決定することを含み得る。いくつかの実施形態では、複数のマーカは、光学マーカを含み、方法は、実世界アイテムの少なくとも１つの画像を取得することをさらに含む。そして、複数のマーカの相対位置を決定することは、少なくとも１つの画像に画像分析を実施し、光学マーカを検出することを含み得る。

いくつかの実施形態では、実世界アイテム上の複数の点の相対位置を決定することは、実世界アイテムの測定値を取得することと、測定値を機械学習（ＭＬ）モデルに入力することと、ＭＬモデルの出力を取得することを含み、実世界アイテム上の複数の点の相対位置は、ＭＬモデルの出力に基づいている。

いくつかの実施形態では、複数の点の相対位置は、複数の点の第１の相対位置であり、仮想アイテムの歪められたモデルは、仮想アイテムの第１の歪められたモデルであり、ＡＲコンテンツは、第１のＡＲコンテンツである。複数の点の第１の相対位置は、第１の形状である実世界アイテムに対応する。方法は、実世界アイテム上の複数の点の第２の相対位置を決定することであって、第２の相対位置は、第２の形状である実世界アイテムに対応する、ことと、複数の点の第２の相対位置に基づいて、仮想アイテムの３Ｄモデルを歪め、仮想アイテムの第２の歪められた３Ｄモデルを生み出すことと、提示のために第２のＡＲコンテンツを生成することとをさらに含み得、第２のＡＲコンテンツは、第２の歪められた３Ｄモデルに基づいている。

いくつかの実施形態では、実世界アイテム上の複数の点の相対位置は、デバイスから取得された測定値に基づいており、ＡＲコンテンツは、そのデバイスにおける提示のためのものである。

いくつかの実施形態では、仮想アイテムの３Ｄモデルは、仮想アイテムの第１の３Ｄモデルであり、複数の点の相対位置は、複数の点の第１の相対位置であり、ＡＲコンテンツは、第１のＡＲコンテンツである。方法は、仮想アイテムの第１の３Ｄモデルを仮想アイテムの第２の３Ｄモデルと取り替えるための命令を取得することであって、命令は、デバイスにおけるユーザ入力に由来する、ことと、実世界アイテム上の複数の点の第２の相対位置を決定することと、複数の点の第２の相対位置に基づいて、仮想アイテムの第２の３Ｄモデルを歪め、仮想アイテムの歪められた第２の３Ｄモデルを生み出すことと、提示のために第２のＡＲコンテンツを生成することとをさらに含み得、第２のＡＲコンテンツは、歪められた第２の３Ｄモデルに基づいている。

本開示の別の側面によると、システムが提供され、システムは、例えば、モデル、測定値、位置、および／または命令を記憶するためのメモリと、本明細書中で開示されるいずれかの方法を実行するように構成される１つ以上のプロセッサとを含む。

本開示のさらなる側面によると、コンピュータ実行可能な命令を記憶している非一過性のコンピュータ読み取り可能な媒体が提供され、コンピュータ実行可能な命令は、コンピュータによって実行されると、コンピュータに本明細書中で開示されるいずれかの方法を実施させる。
本発明は、例えば以下を提供する。
（項目Ａ１）
コンピュータ実装方法であって、前記コンピュータ実装方法は、
ユーザデバイスのディスプレイ上に表示された実世界アイテムを識別する入力を受信することと、
前記識別された実世界アイテム上の複数の所定の点の相対位置を決定することと、
前記複数の所定の点の前記決定された相対位置に基づいて、仮想アイテムの３次元モデルを歪め、前記仮想アイテムの歪められた３次元モデルを生み出すことであって、前記歪められた３次元モデルは、前記複数の所定の点の間の相対距離を維持している、ことと、
提示のために拡張現実（ＡＲ）コンテンツを生成することであって、前記ＡＲコンテンツは、前記歪められた３次元モデルに基づいている、ことと
を含む、コンピュータ実装方法。
（項目Ａ２）
前記複数の所定の点の前記相対位置は、前記複数の点の第１の相対位置であり、前記仮想アイテムの前記歪められたモデルは、前記仮想アイテムの第１の歪められたモデルであり、前記ＡＲコンテンツは、第１のＡＲコンテンツであり、
前記複数の点の前記第１の相対位置は、第１の寸法を有する第１の形状である前記実世界アイテムに対応する、上記項目に記載のコンピュータ実装方法。
（項目Ａ３）
前記実世界アイテム上の前記複数の点の第２の相対位置を決定することであって、前記第２の相対位置は、第２の寸法を有する第２の形状である前記実世界アイテムに対応し、前記第２の寸法は、前記第１の寸法と異なる、ことをさらに含み、
随意に、前記複数の点の前記第２の相対位置に基づいて、前記仮想アイテムの前記３次元モデルを歪め、前記仮想アイテムの第２の歪められた３次元モデルを生み出すことと、
提示のために第２のＡＲコンテンツを生成することであって、前記第２のＡＲコンテンツは、前記第２の歪められた３次元モデルに基づいている、ことと
をさらに含む、上記項目のいずれかに記載の方法。
（項目Ａ４）
前記ＡＲコンテンツの生成後、前記表示された実世界アイテムに重ねるように前記ＡＲコンテンツをレンダリングすることを含む、上記項目のいずれかに記載の方法。
（項目Ａ５）
前記デバイスの移動を監視することと、前記レンダリングされたＡＲコンテンツが前記デバイスの視点からの前記実世界アイテムのサイズおよび向きに合致するように、前記実世界アイテムに対して前記デバイスが動いたときに前記ＡＲコンテンツを動的に更新することとをさらに含む、上記項目のいずれかに記載の方法。
（項目Ａ６）
前記ＡＲコンテンツを生成することは、前記歪められた３次元モデルをレンダリングすることを含み、
前記歪められた３次元モデルは、前記実世界アイテムの捕捉された画像に対応する視座からレンダリングされ、
前記ＡＲコンテンツを生成することは、前記実世界アイテムに重ねるように前記レンダリング表現を前記画像と合成することをさらに含む、上記項目のいずれかに記載のコンピュータ実装方法。
（項目Ａ７）
前記実世界アイテムに対するユーザの位置を決定することをさらに含み、前記歪められた３次元モデルは、前記ユーザの前記位置に基づいてレンダリングされる、上記項目のいずれかに記載のコンピュータ実装方法。
（項目Ａ８）
前記複数の点の前記相対位置に基づいて前記仮想アイテムの前記３次元モデルを歪めることは、前記３次元モデルを修正し、前記複数の点の前記相対位置に対応する相対位置であるように前記３次元モデル内の点を位置変更することを含む、上記項目のいずれかに記載のコンピュータ実装方法。
（項目Ａ９）
前記実世界アイテムは、複数の識別可能なマーカを備え、前記複数のマーカの各々は、前記実世界アイテム上の前記複数の点のうちのそれぞれの異なる点であり、
前記実世界アイテム上の前記複数の点の前記相対位置を決定することは、前記複数のマーカの相対位置を決定することを含む、上記項目のいずれかに記載のコンピュータ実装方法。
（項目Ａ１０）
前記複数の識別可能なマーカは、光学マーカを備え、
前記方法は、前記実世界アイテムの少なくとも１つの画像を取得することをさらに含み、
前記複数のマーカの前記相対位置を決定することは、前記少なくとも１つの画像に画像分析を実施し、前記光学マーカを検出することを含む、上記項目のいずれかに記載のコンピュータ実装方法。
（項目Ａ１１）
前記実世界アイテム上の前記複数の点の前記相対位置を決定することは、
前記実世界アイテムの測定値を取得することと、
前記測定値を機械学習（ＭＬ）モデルに入力することと、
前記ＭＬモデルの出力を取得することであって、前記実世界アイテム上の前記複数の点の前記相対位置は、前記ＭＬモデルの前記出力に基づいている、ことと
を含む、上記項目のいずれかに記載のコンピュータ実装方法。
（項目Ａ１２）
前記実世界アイテム上の前記複数の点の前記相対位置は、デバイスから取得された測定値に基づいており、
前記ＡＲコンテンツは、前記デバイスにおける提示のためのものである、上記項目のいずれかに記載のコンピュータ実装方法。
（項目Ａ１３）
前記仮想アイテムの前記３次元モデルは、前記仮想アイテムの第１の３次元モデルであり、前記複数の点の前記相対位置は、前記複数の点の第１の相対位置であり、前記ＡＲコンテンツは、第１のＡＲコンテンツであり、前記方法は、
前記仮想アイテムの前記第１の３次元モデルを前記仮想アイテムの第２の３次元モデルと取り替えるための命令を取得することであって、前記命令は、デバイスにおけるユーザ入力に由来する、ことと、
前記実世界アイテム上の前記複数の点の第２の相対位置を決定することと、
前記複数の点の前記第２の相対位置に基づいて、前記仮想アイテムの前記第２の３次元モデルを歪め、前記仮想アイテムの歪められた第２の３次元モデルを生み出すことと、
提示のために第２のＡＲコンテンツを生成することであって、前記第２のＡＲコンテンツは、前記歪められた第２の３次元モデルに基づいている、ことと
をさらに含む、上記項目のいずれかに記載のコンピュータ実装方法。
（項目Ａ１４）
実世界アイテム上の複数の点の相対位置を記憶するためのメモリと、
上記項目のいずれかに記載の方法を実行するように構成される少なくとも１つのプロセッサと
を備える、システム。
（項目Ａ１５）
コンピュータプログラムであって、前記コンピュータプログラムは、コンピュータによって実行されると、前記コンピュータに上記項目のいずれかに記載の方法を実施させる、コンピュータプログラム。
（摘要）
ＡＲコンテンツを生成して実世界アイテムを仮想的に変更するためのシステムおよび方法が提供される。実世界アイテムは、１つ以上の可撓性表面を含む変形可能なアイテムであり得る。ある実施形態によると、方法は、実世界アイテム上の複数の点の相対位置を決定することを含む。仮想アイテムの歪められた３Ｄモデルを生み出すように、仮想アイテムの３Ｄモデルが複数の点の相対位置に基づいて歪められる。歪められた３Ｄモデルは、実世界アイテムと実質的に同一の形状を有し得る。そして、ＡＲコンテンツが、歪められた３次元モデルに基づいて生成される。

実施形態は、添付の図面を参照して、単に例として説明される。

図１は、ある実施形態によるｅコマースプラットフォームのブロック図である。

図２は、ある実施形態によるアドミニストレータのホームページのある例である。

図３は、図１のｅコマースプラットフォームであるがＡＲエンジンを含むものを例証している。

図４は、ある実施形態による第１の時点におけるドレスを着用しているユーザを例証し、図５は、ある実施形態による第２の時点におけるドレスを着用しているユーザを例証している。 図４は、ある実施形態による第１の時点におけるドレスを着用しているユーザを例証し、図５は、ある実施形態による第２の時点におけるドレスを着用しているユーザを例証している。

図６は、第１の時点における図４のドレスを着用しているユーザを例証し、図７は、第２の時点における図５のドレスを着用しているユーザを例証しているが、ドレス上に仮想模様が重ねられている。 図６は、第１の時点における図４のドレスを着用しているユーザを例証し、図７は、第２の時点における図５のドレスを着用しているユーザを例証しているが、ドレス上に仮想模様が重ねられている。

図８は、ある実施形態による歪められた３Ｄモデルを使用してＡＲコンテンツを生成するためのシステムを例証するブロック図である。

図９は、ある実施形態による歪められた３Ｄモデルを使用してＡＲコンテンツを生成するための方法を例証するフロー図である。

図１０は、ある実施形態によるスクリーンページを表示するユーザデバイスを例証している。

図１１は、図１０のスクリーンページにおけるオプションのユーザ選択に応答して生成される仮想座標系内に画定される歪められた３Ｄモデルを例証している。

図１２は、図１１の歪められた３Ｄモデルに基づくＡＲコンテンツを含むスクリーンページを表示する図１０のユーザデバイスを例証している。

図１３は、図１１の歪められた３Ｄモデルと、図１１の仮想座標系内の図１０のユーザデバイスの新たな位置とを例証している。

図１４は、図１３に示される仮想座標系内のユーザデバイスの新たな位置に基づく更新されたＡＲコンテンツを含むスクリーンページを表示する図１０のユーザデバイスを例証している。

図１５は、図１１の仮想座標系内に画定される別の歪められた３Ｄモデルを例証している。

図１６は、図１５の歪められた３Ｄモデルに基づく更新されたＡＲコンテンツを含むスクリーンページを表示する図１０のユーザデバイスを例証している。

図１７は、図１２のスクリーンページにおけるオプションのユーザ選択に応答して生成されるさらに歪められた３Ｄモデルを例証している。

図１８は、図１７の歪められた３Ｄモデルに基づくＡＲコンテンツを含むスクリーンページを表示する図１０のユーザデバイスを例証している。

例証目的のために、ここで、特定の例示的実施形態が、図面と併せて以下により詳細に説明される。
例示的ｅコマースプラットフォーム

いくつかの実施形態では、本明細書中で開示される方法は、コマースプラットフォーム上で、またはそれに関連付けられて実施され得、コマースプラットフォームは、本明細書中でｅコマースプラットフォームと称される。従って、ｅコマースプラットフォームのある例が説明される。

図１は、一実施形態によるｅコマースプラットフォーム１００を例証している。ｅコマースプラットフォーム１００は、商人の製品およびサービスを顧客に提供するために用いられ得る。本開示は、製品およびサービスを購入するための装置、システムおよびプロセスを用いることを想定しているが、本明細書中の説明は、単純化のため、製品に言及する。この開示全体にわたる製品への全ての言及は、物理的製品、デジタルコンテンツ、チケット、サブスクリプション、提供されるサービス等を含む製品および／またはサービスにも言及していることを理解されるべきである。

本開示は、全体にわたって、「商人」および「顧客」は、個人より多いこともあることを構想しているが、単純化のため、本明細書中の説明は、概してそのように商人および顧客に言及する。商人および顧客への全ての言及が、この開示全体にわたって、個人、会社、企業、コンピューティングエンティティ等の群に言及し、製品の営利または非営利の交換を表し得ることも理解されるべきである。さらに、本開示は、全体にわたって、「商人」および「顧客」に言及し、そのように彼らの役割を説明するが、ｅコマースプラットフォーム１００は、ｅコマース環境においてユーザをより一般的にサポートすることを理解されるべきであり、この開示全体にわたる商人および顧客への全ての言及は、ユーザが、商人ユーザ（例えば、製品の売り手、小売業者、卸売業者、またはプロバイダ）、顧客ユーザ（例えば、製品の買い手、購入エージェント、または製品のユーザ）、潜在的ユーザ（例えば、閲覧しているユーザおよびまだ購入を確約していないユーザ、製品をマーケティングし販売することにおける潜在的な使用についてｅコマースプラットフォーム１００を評価するユーザ等）、サービスプロバイダユーザ（例えば、配送プロバイダ１１２、金融プロバイダ等）、会社ユーザまたは企業ユーザ（例えば、製品の購入、販売、または使用を代表する会社、事業者ユーザ、顧客関連または顧客管理の代理人等）、情報テクノロジーユーザ、コンピューティングエンティティユーザ（例えば、製品の購入、販売、または使用のためのコンピューティングボット）である場合等のユーザに言及していることも理解されるべきである。

ｅコマースプラットフォーム１００は、商人に彼らのビジネスを管理するためのオンラインリソースおよびオンラインファシリティを提供する集中型システムを提供し得る。本明細書中で説明されるファシリティは、プラットフォーム１００の一部または外部であり得る１つ以上のプロセッサにおいてコンピュータソフトウェア、モジュール、プログラムコード、および／または命令を実行する機械を通じて部分的または全体的に展開され得る。商人は、例えば、オンライン店舗１３８を通じて、チャンネル１１０Ａ－Ｂを通じて、物理的場所にあるＰＯＳデバイス１５２（例えば、キオスク、端末、リーダ、プリンタ、３Ｄプリンタ等を通じて物理的な店頭または他の場所）を通じて、顧客におけるｅコマース体験を実装することによって、ｅコマースプラットフォーム１００を通じて彼らのビジネスを管理することによって、ｅコマースプラットフォーム１００の通信ファシリティ１２９を通じて顧客と相互作用することによって、またはこれらの任意の組み合わせによって、顧客とのコマースを管理するために、ｅコマースプラットフォーム１００を活用し得る。商人は、顧客との唯一のコマースプレゼンスとして、または物理的店舗（例えば、「ブリックアンドモルタル」小売店）、プラットフォーム外の商人のウェブサイト１０４（例えば、コマースインターネットウェブサイト、またはｅコマースプラットフォームとは別個で商人によって、またはその代理でサポートされた他のインターネットもしくはウェブプロパティまたはアセット）を通じて等、他の商人コマースファシリティと共にｅコマースプラットフォーム１００を活用し得る。しかしながら、これらの「他の」商人コマースファシリティも、ｅコマースプラットフォーム内に統合され得る（例えば、商人の物理的店舗内のＰＯＳデバイス１５２がｅコマースプラットフォーム１００につながれる場合、プラットフォーム外の商人のウェブサイト１０４からオンライン店舗１３８にコンテンツをつなぐ「買うボタン」を通じて、プラットフォーム外の商人のウェブサイト１０４がｅコマースプラットフォーム１００内に結び付けられている場合等）。

オンライン店舗１３８は、複数の仮想的店頭を備えているマルチテナントファシリティを表し得る。実施形態では、商人は、例えば商人デバイス１０２（例えば、コンピュータ、ラップトップコンピュータ、モバイルコンピューティングデバイス等）を通じて、オンライン店舗１３８内の１つ以上の店頭を管理し、数多くの異なるチャンネル１１０Ａ－Ｂ（例えば、オンライン店舗１３８、ＰＯＳデバイス１５２を通じた物理的店頭、（ソーシャルネットワーク、ソーシャルメディアページ、ソーシャルメディアメッセージシステム等のウェブサイトまたはソーシャルメディアチャンネルに統合された電子的買うボタンを通じた電子的市場等）を通じて製品を顧客に提供し得る。商人は、チャンネル１１０Ａ－Ｂを横断して販売し、そして、ｅコマースプラットフォーム１００を通じて彼らの販売を管理し得、チャンネル１１０Ａは、ｅコマースプラットフォーム１００の内部に、またはｅコマースチャンネル１１０Ｂの外部から提供され得る。商人は、例えば彼らの物理的小売店で販売し、ポップアップで販売し、卸売りを通して販売し、電話で販売し、そして、ｅコマースプラットフォーム１００を通じて彼らの販売を管理し得る。商人は、これらの全てまたは任意の組み合わせを使用し、ＰＯＳデバイス１５２を活用している物理的店頭を通してビジネスを維持し、オンライン店舗１３８を通じて仮想的店頭を維持し、顧客相互作用に影響を与えるために通信ファシリティ１２９を活用し、販売の利益を向上させるために分析１３２を活用し得る。この開示全体にわたって、オンライン店舗１３８および店頭という語は、同義的に、ｅコマースプラットフォーム１００を通じた商人のオンラインｅコマース提供主体を指すために用いられ得、オンライン店舗１３８は、（例えば、複数の商人のための）ｅコマースプラットフォーム１００によってサポートされた店頭のマルチテナント集合体、または個々の商人の店頭（例えば、商人のオンライン店舗）を指し得る。

いくつかの実施形態では、顧客は、顧客デバイス１５０（例えば、コンピュータ、ラップトップコンピュータ、モバイルコンピューティングデバイス等）、ＰＯＳデバイス１５２（例えば、小売りデバイス、キオスク、自動勘定システム等）、または業界で知られている任意の他のコマースインタフェースデバイスを通じて相互作用し得る。ｅコマースプラットフォーム１００は、オンライン店舗１３８を通じて、物理的場所（例えば、商人の店頭または他の場所）にあるＰＯＳデバイス１５２を通じて、顧客に到達すること、電気通信ファシリティ１２９を介した顧客との対話を通じて顧客とのコマースを促進すること等を可能にし得、顧客に到達し顧客と相互作用するために利用可能な実通路または仮想通路に関して、顧客に到達し商人サービスを促進するためのシステムを提供する。

いくつかの実施形態では、本明細書中でさらに説明されるように、ｅコマースプラットフォーム１００は、プロセッサおよびメモリを含む処理ファシリティを通じて実装され得、処理ファシリティは、一連の命令を記憶しており、命令が実行されたとき、ｅコマースプラットフォーム１００は、本明細書で説明されるようにｅコマースを実施し、機能をサポートする。処理ファシリティは、サーバ、クライアント、ネットワークインフラストラクチャ、モバイルコンピューティングプラットフォーム、クラウドコンピューティングプラットフォーム、固定コンピューティングプラットフォーム、または他のコンピューティングプラットフォームの一部であり、ｅコマースプラットフォーム１００の電子コンポーネント、商人デバイス１０２、支払いゲートウェイ１０６、アプリケーション開発者、チャンネル１１０Ａ－Ｂ、配送プロバイダ１１２、顧客デバイス１５０、販売時点管理デバイス１５２等の間の電子的接続および通信を提供し得る。ｅコマースプラットフォーム１００は、ソフトウェアがサブスクリプションベースでライセンスを与えられ、一元的にホストされた（たとえば、Ｗｅｂブラウザまたは他のアプリケーションを介してクライアント（例えば、シンクライアント）を用いてユーザによってアクセスされる、ＰＯＳデバイスによってアクセスされる等）ソフトウェアおよび送達モデル等における、クラウドコンピューティングサービス、ソフトウェア・アズ・ア・サービス（ＳａａＳ）、インフラストラクチャ・アズ・ア・サービス（ＩａａＳ）、プラットフォーム・アズ・ア・サービス（ＰａａＳ）、デスクトップ・アズ・ア・サービス（ＤａａＳ）、管理型ソフトウェア・アズ・ア・サービス（ＭＳａａＳ）、モバイル・バックエンド・アズ・ア・サービス（ＭＢａａＳ）、情報テクノロジ管理・アズ・ア・サービス（ＩＴＭａａＳ）等として実装され得る。いくつかの実施形態では、ｅコマースプラットフォーム１００の要素は、種々のプラットフォーム、およびｉＯＳ、Ａｎｄｒｏｉｄ（登録商標）等のオペレーティングシステムにおいて、ならびにＷｅｂ上等で動作するように実装され得る（例えば、アドミニストレータ１１４は、多くの場合、ｉＯＳ、Ａｎｄｒｏｉｄ（登録商標）用の所与のオンライン店舗、およびＷｅｂにおいて実装され、各々は同様の機能を有する）。

いくつかの実施形態では、オンライン店舗１３８は、ｅコマースプラットフォーム１００のサーバによって提供されるウェブページを通じて顧客デバイス１５０にサービス提供され得る。サーバは、ブラウザまたは顧客デバイス１５０にインストールされた他のアプリケーションからウェブページの要求を受信し得、ブラウザ（または他のアプリケーション）は、ＩＰアドレスを通じてサーバに接続し、ＩＰアドレスは、ドメイン名を翻訳することによって取得される。これに対し、サーバは、要求されたウェブページを送り返す。ウェブページは、Ｈｙｐｅｒｔｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ（ＨＴＭＬ）、テンプレート言語、ＪａｖａＳｃｒｉｐｔ（登録商標）またはこれらの任意の組み合わせで記述されているか、またはそれらを含み得る。例えば、ＨＴＭＬは、ウェブページのレイアウト、フォーマット、およびコンテンツ等のウェブページに関する静的情報を記述するコンピュータ言語である。ウェブサイトの設計者および開発者は、テンプレート言語を用いて、複数のページで同一である静的コンテンツと、１つのページから次のページへと変化する動的コンテンツとを組み合わせるウェブページを構築し得る。テンプレート言語は、オンライン店舗からのデータでページを動的に追加する一方で、ウェブページのレイアウトを画定する静的要素を再利用することを可能にし得る。静的要素は、ＨＴＭＬで書かれ得、動的要素は、テンプレート言語で書かれ得る。ファイル内のテンプレート言語要素は、プレースホルダーとして機能し、それによって、ファイル内のコードは、コンパイルされて顧客デバイス１５０に送られ、その後、テンプレート言語は、テーマがインストールされるとき等に、オンライン店舗１３８からのデータによって置き換えられる。テンプレートおよびテーマは、タグ、オブジェクト、およびフィルタを考慮し得る。そして、クライアントデバイスウェブブラウザ（または他のアプリケーション）は、それに応じて、ページをレンダリングする。

いくつかの実施形態では、オンライン店舗１３８は、ｅコマースプラットフォーム１００によって顧客に提供され得、顧客は、種々の取り扱い製品を閲覧および購入し得る（例えば、製品をカートに追加する、買うボタンを通じて即購入する等）。オンライン店舗１３８は、製品が（直接商人から購入するのではなく）ｅコマースプラットフォーム１００を通じて提供されていることを顧客が必ずしも気付かない透明な手法で顧客に提供され得る。商人は、商人が構成可能なドメイン名、カスタマイズ可能なＨＴＭＬテーマ等を用いて、彼らのオンライン店舗１３８をカスタマイズし得る。商人は、テーマシステムを通じて彼らのウェブサイトの外観および雰囲気をカスタマイズし得、例えば、商人は、オンライン店舗１３８の製品のヒエラルキー内に示される同一の下位の製品およびビジネスデータを示しながらオンライン店舗のテーマを変更することによって、彼らのオンライン店舗の外観および雰囲気を選択および変更し得る。テーマは、テーマエディタおよびデザインインタフェースを通じてさらにカスタマイズされ得、デザインインタフェースは、ユーザが彼らのウェブサイトのデザインを柔軟にカスタマイズすることを可能にする。テーマは、特有の色、フォント、および予め構築されているレイアウトスキーム等の側面を変更するテーマ特有の設定を用いることによってもカスタマイズされ得る。オンライン店舗は、ウェブサイトコンテンツのためのコンテンツ管理システムを実装し得る。商人は、ブログ投稿または静的ページを作り、ブログ、記事等を通じて彼らのオンライン店舗１３８にそれらを発信するのみならず、ナビゲーションメニューも構成し得る。商人は、システムによる格納（例えば、データ１３４）等のために、画像（例えば、製品の画像）、ビデオ、コンテンツ、データ等をｅコマースプラットフォーム１００にアップロードし得る。いくつかの実施形態では、ｅコマースプラットフォーム１００は、画像をサイズ変更し、画像を製品に関連付け、画像にテキストを追加し関連付け、新たな製品バリエーションの画像を追加し、画像を保護するため等の機能を提供し得る。

本明細書中で説明されるように、ｅコマースプラットフォーム１００は、オンライン店舗１３８、電話を介してのみならず、本明細書中で説明されるような物理的ＰＯＳデバイス１５２も含む多くの異なるチャンネル１１０Ａ－Ｂを通じて、製品の取引ファシリティを商人に提供し得る。ｅコマースプラットフォーム１００は、ビジネスサポートサービス１１６、アドミニストレータ１１４等を含み、それらは、彼らのオンライン店舗に関連付けられたドメインサービス１１８、顧客との取引を促進するための支払いサービス１２０、購入された製品の配送オプションを顧客に提供するための配送サービス１２２、製品の保護および信頼性に関連付けられたリスクおよび保証サービス１２４、商人の請求等を提供する等、オンラインビジネスを営業することに関連付けられ得る。サービス１１６は、支払処理のための支払いゲートウェイ１０６、製品の配送を捗らせるための配送プロバイダ１１２等を通じて、ｅコマースプラットフォーム１００を介してまたは外部ファシリティに関連付けられて提供され得る。

いくつかの実施形態では、ｅコマースプラットフォーム１００は、リアルタイムの最新情報、追跡、自動的レート計算、バルクオーダ―準備、ラベル印刷等を商人に提供する等、統合型配送サービス１２２を（例えば、ｅコマースプラットフォーム配送ファシリティを通じて、または第三の配送キャリアを通じて）提供し得る。

図２は、アドミニストレータ１１４のホームページに関する非限定的な実施形態を描写し、日ごとのタスク、店舗の現在の活動、および商人が彼らのビジネスを構築するために取るべき次のステップについての情報を示し得る。いくつかの実施形態では、商人は、商人デバイス１０２を介して（デスクトップコンピュータまたはモバイルデバイスから等）アドミニストレータ１１４にログインし、商人のオンライン店舗１３８の局面（オンライン店舗１３８の現在の活動を視認すること、オンライン店舗１３８のカタログを更新すること、注文、現在の訪問者の活動、および全体の注文活動等を管理すること等）を管理し得る。いくつかの実施形態では、商人は、例えば図２に示されるようなサイドバーを用いることによって、アドミニストレータ１１４の異なるセクションにアクセスすることが可能であり得る。アドミニストレータ１１４のセクションは、注文、製品、顧客、取り扱い報告および割引を含む商人のビジネスの核となる局面にアクセスし、それを管理するための種々のインタフェースを含み得る。アドミニストレータ１１４は、店舗のための販売チャンネルを管理するためのインタフェースも含み得、インタフェースは、オンライン店舗、店舗にアクセスするために顧客に利用可能にされたモバイルアプリケーション（単数または複数）（モバイルアプリ）、ＰＯＳデバイス、および／または買うボタンを含む。アドミニストレータ１１４は、商人のアカウントにインストールされたアプリケーション（アプリ）を管理するためのインタフェース（商人のオンライン店舗１３８およびアカウントに適用される設定）も含み得る。商人は、製品、ページ、または他の情報を見つけるために検索バーを用い得る。商人が使用しているデバイス１０２またはソフトウェアアプリケーションに依存して、商人は、アドミニストレータ１１４を通じて異なる機能を可能にされ得る。例えば、商人がブラウザからアドミニストレータ１１４にログインする場合、彼らは、彼らのオンライン店舗１３８の全ての局面を管理することが可能であり得る。商人が彼らのモバイルデバイスから（例えばモバイルアプリケーションを介して）ログインする場合、彼らは、オンライン店舗１３８の現在の活動を眺める、オンライン店舗１３８のカタログを更新する、注文を管理する等、彼らのオンライン店舗１３８の側面の全てまたは一部を視認することが可能であり得る。

コマースおよびオンライン店舗１３８への訪問者に関するより詳細な情報は、商人のビジネス全体に関する売上概要、活動している販売チャンネルに関する特定の売上および従業員データ等を表示する等、獲得レポートまたはメトリクスを通じて見られ得る。レポートは、獲得レポート、行動レポート、顧客レポート、金融レポート、マーケティングレポート、売上レポート、カスタムレポート等を含み得る。商人は、ドロップダウンメニュー等を用いることによって、様々な期間（例えば、日、週、月等）から様々なチャンネル１１０Ａ－Ｂに関する売上データを見ることが可能であり得る。概観ダッシュボードも、店舗の売上および契約データのより詳細な図を望む商人に提供され得る。ホームメトリクスセクションにおける活動フィードは、商人のアカウントにおける活動の概観を例証するために提供され得る。例えば、「全ての現在の活動を見る」ダッシュボードボタンをクリックすることによって、商人は、彼らのアカウントにおける現在の活動のより長いフィードを見ることが可能であり得る。ホームページは、例えばアカウントステータス、成長、現在の顧客の活動等に基づいて、商人のオンライン店舗１３８についての通知を示し得る。通知は、支払いを取り込む、履行された注文をマーキングする、完了した注文をアーカイブする等のプロセスを通じたナビゲーションで商人を支援するために提供され得る。

ｅコマースプラットフォーム１００は、商人、顧客、商人デバイス１０２、顧客デバイス１５０、ＰＯＳデバイス１５２等の間の通信相互作用を収集し分析するための電子メッセージ集約ファシリティを活用する等、電子通信を提供しマーケティングをするための通信ファシリティ１２９および関連付けられた商人インタフェースを提供し、製品の販売を提供するポテンシャルを増加させる等のために通信を集約し分析し得る。例えば、顧客は、製品に関連する質問を有し得、質問は、顧客と商人（または商人を代理する自動化されたプロセッサベースの代理人）との間の対話を生み出し得、通信ファシリティ１２９は、相互作用を分析し、販売に関する利益をどのように向上するかについて商人に分析を提供する。

ｅコマースプラットフォーム１００は、例えばセキュアカードサーバ環境を通じて、顧客との安全な金融取引のための金融ファシリティ１２０を提供し得る。ｅコマースプラットフォーム１００は、例えば、支払いカードインダストリーデータ（ＰＣＩ）環境（例えば、カードサーバ）等にクレジットカード情報を記憶し得、金融情報を照合し、商人に請求書を送り、（例えば、現金を用いているとき）ｅコマースプラットフォーム１００金融機関口座と商人の銀行口座との間の自動決済（ＡＣＨ）振替を実施する。これらのシステムは、Ｓａｒｂａｎｅｓ―Ｏｘｌｅｙ Ａｃｔ（ＳＯＸ）コンプライアンス、および、それらの開発および動作において要求される高いレベルの注意を有し得る。金融ファシリティ１２０は、例えば資金の貸し出し（例えば、貸出ファンド、現金前貸し等）および保険の付保を通して、商人に金融サポートも提供し得る。加えて、ｅコマースプラットフォーム１００は、マーケティングおよびパートナーサービスのセットを提供し、ｅコマースプラットフォーム１００とパートナーとの間の関係を制御し得る。それらは、新たな商人をｅコマースプラットフォーム１００に接続し、搭載し得る。これらのサービスは、商人がｅコマースプラットフォーム１００を横断して作業することを容易にすることによって商人の成長を可能にし得る。これらのサービスを通じて、商人は、ｅコマースプラットフォーム１００を介したヘルプファシリティを提供され得る。

いくつかの実施形態では、オンライン店舗１３８は、数多くの独立して運営される店頭をサポートし、毎日の各種の製品に関する大量の取引データを処理し得る。取引データは、顧客連絡先情報、請求情報、配送情報、購入された製品の情報、与えられたサービスの情報、およびｅコマースプラットフォーム１００を通したビジネスに関連付けられた任意の他の情報を含み得る。いくつかの実施形態では、ｅコマースプラットフォーム１００は、データファシリティ１３４内にこのデータを記憶し得る。取引データは、分析１３２を生み出すために処理され得、ひいては、商人または第三のコマースエンティティに提供されて、顧客の傾向、マーケティングおよび売上の洞察、売上を向上するための推薦、顧客行動の評価、マーケティングおよび売上のモデル化、詐欺の傾向等を提供し、オンラインコマースに関連付けられ、レポートを通してダッシュボードインタフェースで提供され得る。ｅコマースプラットフォーム１００は、ビジネスおよび商人の取引についての情報を記憶し得、データファシリティ１３４は、データを強化し、データに貢献し、データを精錬し、データを抽出する多くの手段を有し得、収集されたデータは、経時的にｅコマースプラットフォーム１００の局面の改善を可能にし得る。

図１を再度参照すると、いくつかの実施形態では、ｅコマースプラットフォーム１００は、コンテンツ管理、タスク自動化、およびデータ管理のためのコマース管理エンジン１３６で構成され、（例えば、製品、在庫、顧客、注文、提携、供給者、レポート、金融、リスクおよび詐欺等に関連付けられた）複数のオンライン店舗１３８のサポートおよびサービスを可能にし得るが、ｅコマースプラットフォーム１００は、アプリケーション１４２Ａ－Ｂを通して拡張可能であり得、アプリケーション１４２Ａ－Ｂは、多種多様な商人オンライン店舗、ＰＯＳデバイス、製品、およびサービスに適応するために要求されるより高い柔軟性およびカスタム処理を可能にし、アプリケーション１４２Ａが、ｅコマースプラットフォーム１００の内部に提供され得、または、アプリケーション１４２Ｂが、ｅコマースプラットフォーム１００の外部に提供され得る。いくつかの実施形態では、アプリケーション１４２Ａは、プラットフォーム１００を提供する同じパーティによって、または異なるパーティによって提供され得る。いくつかの実施形態では、アプリケーション１４２Ｂは、プラットフォーム１００を提供する同じパーティによって、または異なるパーティによって提供され得る。コマース管理エンジン１３６は、例えば顧客識別子、注文識別子、オンライン店舗識別子等による機能およびデータの分配（例えば、分割）を通じた柔軟性およびスケーラビリティのために構成され得る。コマース管理エンジン１３６は、店舗特有のビジネスロジックに適応し得、いくつかの実施形態では、アドミニストレータ１１４および／またはオンライン店舗１３８を統合し得る。

コマース管理エンジン１３６は、ｅコマースプラットフォーム１００のベースまたは「核となる」機能を含み、そのため、本明細書中で説明されるように、オンライン店舗１３８をサポートする全ての機能が、含めるのに適切であるわけではないこともある。例えば、コマース管理エンジン１３６内に含まれる機能は、「核となる」機能性のしきい値を超える必要があり得、「核となる」機能性のしきい値を通して、機能がコマース体験にとっての核であること（例えば、横断チャンネル、アドミニストレータインタフェース、商人の場所、産業、製品タイプ等のオンライン店舗活動の大部分の共通性）、機能がオンライン店舗１３８を横断して再利用可能であること（例えば核となる機能を横断して再利用／修正され得る機能）、同時に単一のオンライン店舗１３８のコンテキストに限定されること（例えば、オンライン店舗「分離原理」を実装し、この原理において、コードは、同時に複数のオンライン店舗１３８と相互作用することが可能であるべきではなく、分離原理は、オンライン店舗１３８が互いのデータにアクセスできないことを保証する）、取引仕事量を提供すること等が決定され得る。多くの要求される特徴が、コマース管理エンジン１３６によって直接提供されるか、または、アプリケーション１４２Ａ－Ｂおよびチャンネル１１０Ａ－Ｂへのアプリケーションプログラミングインタフェース（ＡＰＩ）接続を通じたその拡張等によってインタフェース１４０Ａ－Ｂを通して可能にされる（インタフェース１４０Ａは、ｅコマースプラットフォーム１００内のアプリケーション１４２Ａおよび／またはチャンネル１１０Ａに提供され、または、インタフェース１４０Ｂは、ｅコマースプラットフォーム１００の外部のアプリケーション１４２Ｂおよび／またはチャンネル１１０Ｂに提供され得る）かのいずれかである場合、どの機能が実装されるかということの制御をメンテナンスすることが、コマース管理エンジン１３６が応答可能であり続けることを可能にし得る。概して、プラットフォーム１００は、（拡張機能、コネクタ、ＡＰＩ等であり得る）インタフェース１４０Ａ－Ｂを含み得、インタフェース１４０Ａ－Ｂは、他のプラットフォーム、システム、ソフトウェア、データソース、コード等への接続およびそれらとの通信を促進する。そのようなインタフェース１４０Ａ－Ｂは、さらに概略的に、コマース管理エンジン１３６のインタフェース１４０Ａ、またはプラットフォーム１００のインタフェース１４０Ｂであり得る。ケアがコマース管理エンジン１３６内の規制機能に与えられない場合、低速データベースまたは致命的ではないバックエンドの破壊を通じたインフラストラクチャの劣化を通して、オフラインになっているデータセンター等による致命的なインフラストラクチャの破壊を通して、新たなコードが展開され、それが予期されるより実行するために長い時間を要することを通して、応答性が損なわれ得る。これらの状況を防ぐためにまたは軽減させるために、コマース管理エンジン１３６は、例えばタイムアウト、クエリ、劣化を防ぐバックプレッシャー等を活用する構成を通じて応答性を維持するように構成され得る。

オンライン店舗データを分離することは、オンライン店舗１３８間および商人間のデータプライバシーを維持するために重要であるが、例えば注文リスク査定システムまたはプラットフォーム支払いファシリティ（注文リスク査定システムおよびプラットフォーム支払いファシリティの両方は、うまく実施するために複数のオンライン店舗１３８からの情報を要求する）において相互店舗データを収集し使用する理由が存在し得る。いくつかの実施形態では、分離原理に違反することなく、これらのコンポーネントをコマース管理エンジン１３６の外部に移動させること、およびｅコマースプラットフォーム１００内のそれら自身のインフラストラクチャ内に移動させることが好まれ得る。

いくつかの実施形態では、ｅコマースプラットフォーム１００は、プラットフォーム支払いファシリティ１２０を提供し得、プラットフォーム支払いファシリティ１２０は、コマース管理エンジン１３６からのデータを活用するが分離原理に違反しないように外部に配置され得るコンポーネントの別の例である。プラットフォーム支払いファシリティ１２０は、オンライン店舗１３８と相互作用する顧客が、コマース管理エンジン１３６によって安全に記憶された彼らの支払い情報を有することを可能にし、それによって、彼らは一度しか支払い情報を入力する必要がない。顧客が異なるオンライン店舗１３８を訪問するとき、彼らが以前にその店舗に行ったことがない場合であっても、プラットフォーム支払いファシリティ１２０は、彼らの情報を回収し、より迅速で正確な勘定を可能にする。これは、クロスプラットフォームネットワーク効果を提供し得、例えば顧客の購入に関する使用の容易さのおかげでより頻繁に勘定をするより多くの顧客が存在するので、ｅコマースプラットフォーム１００は、より多くの商人が参加するにつれてその商人により有用となる。このネットワークの効果を最大化するために、所与の顧客に関する支払い情報は、オンライン店舗の勘定から回収可能であり得、情報がオンライン店舗１３８にわたって全体的に利用可能になることを可能にする。各オンライン店舗１３８が任意の他のオンライン店舗１３８に接続してそこに記憶された支払い情報を回収することが可能であることは、困難であり、誤りを起こしやすい。結果的に、プラットフォーム支払いファシリティは、コマース管理エンジン１３６の外部で実装され得る。

コマース管理エンジン１３６内に含まれていない機能に関して、アプリケーション１４２Ａ－Ｂは、ｅコマースプラットフォーム１００に特徴を追加する手段を提供する。アプリケーション１４２Ａ－Ｂは、例えば、商人のオンライン店舗１３８にあるデータにアクセスし、これを修正し、アドミニストレータ１１４を通じてタスクを実施し、ユーザインタフェースを通じて商人のための新たなフローを創出し得る（例えば、それは、拡張機能／ＡＰＩを通じて示される）。商人は、アプリケーション検索、推薦およびサポート１２８を通じてアプリケーション１４２Ａ－Ｂを発見しインストールすることが可能にされ得る。いくつかの実施形態では、核となる製品、核となる拡張ポイント、アプリケーション、およびアドミニストレータ１１４が、共に作業するように開発され得る。例えば、アプリケーション拡張ポイントは、アドミニストレータ１１４の内部に構築され得、それによって、核となる特徴が、アプリケーションによって拡張され得、アプリケーションは、拡張機能を通じて機能を商人に送達し得る。

いくつかの実施形態では、アプリケーション１４２Ａ－Ｂは、インタフェース１４０Ａ－Ｂを通じて機能を商人に送達し得、例えば、アプリケーション１４２Ａ－Ｂは、取引データを商人に示すことが可能であり（例えば、アプリ：「エンジン、内臓アプリＳＤＫを用いてモバイル管理およびウェブ管理内の私のアプリデータを示して」）、および／またはコマース管理エンジン１３６は、要求された作業を実施することをアプリケーションに依頼することが可能である（エンジン：「アプリ、この勘定に関する地方税計算を私に提示して」）。

アプリケーション１４２Ａ－Ｂは、例えば、オンライン店舗１３８およびチャンネル１１０Ａ－Ｂをサポートし、商人サポートを提供し、他のサービスと統合し得る。コマース管理エンジン１３６がオンライン店舗１３８にサービスの基盤を提供し得る場合、アプリケーション１４２Ａ－Ｂは、商人が特定のニーズおよび時には独自のニーズを満足させるための手段を提供し得る。異なる商人は、異なるニーズを有するため、異なるアプリケーション１４２Ａ－Ｂから恩恵を受け得る。アプリケーション１４２Ａ－Ｂは、アプリケーション分類（カテゴリ）の開発を通じてｅコマースプラットフォーム１００を通してより見出され得、アプリケーション分類は、例えば、検索、ランキング、および推薦モデルをサポートするアプリケーションデータサービスを通じて、およびアプリケーションストア、ホーム情報カード、アプリケーション設定ページ等のアプリケーション発見インタフェースを通じて、アプリケーションが商人のために実施する機能のタイプによってアプリケーションがタグ付けされることを可能にする。

アプリケーション１４２Ａ－Ｂは、インタフェース１４０Ａ－Ｂを通じてコマース管理エンジン１３６に接続され得、例えば、ＡＰＩを活用して、（ＲＥＳＴ、ＧｒａｐｈＱＬ等を通じて）コマース管理エンジン１３６を通じてまたはその中で利用可能な機能およびデータをアプリケーションの機能に公開する。例えば、ｅコマースプラットフォーム１００は、アプリケーション拡張機能、プロセスフローサービス、開発者向けリソース等を含む商人およびパートナー向けの製品およびサービスにＡＰＩインタフェース１４０Ａ－Ｂを提供し得る。顧客がより頻繁にモバイルデバイスをショッピングのために用いることによって、モバイル使用に関連しているアプリケーション１４２Ａ－Ｂは、関連する増大するコマーストラフィックをサポートするためのＡＰＩのより拡張的な使用からの恩恵を受け得る。（例えばアプリケーション開発のために提供されるような）アプリケーションおよびＡＰＩの使用を通じて提供される柔軟性は、ｅコマースプラットフォーム１００が、コマース管理エンジン１３６に継続的な変更を要求することなく商人（および内部ＡＰＩを通じた内部開発者）の新しい独自のニーズにより良く適応することを可能にし、従って、商人が必要とするものを商人が必要とするときに商人に提供する。例えば、配送サービス１２２は、配送またはキャリアサービスＡＰＩを通じてコマース管理エンジン１３６と統合され得、従って、ｅコマースプラットフォーム１００がコマース管理エンジン１３６で実行しているコードに直接的に影響を及ぼすことなく、配送サービス機能を提供することを可能にする。

バックオフィス動作に関連する問題（商人向けのアプリケーション１４２Ａ－Ｂ）およびオンライン店舗１３８における問題（顧客向けのアプリケーション１４２Ａ－Ｂ）等、多くの商人の問題は、パートナーがアプリケーション開発を通じて商人ワークフローを改善および拡張することによって解決され得る。ビジネスをする一部として、多くの商人は、バックオフィスタスク（例えば、販促、在庫、割引、履行等）およびオンライン店舗タスク（例えば、彼らのオンライン店舗ショップに関連したアプリケーション、フラッシュセール、新製品の注文等）のために毎日モバイルおよびウェブ関連のアプリケーションを用い、アプリケーション１４２Ａ－Ｂは、拡張機能／ＡＰＩ１４０Ａ－Ｂを通じて、急速に成長する市場において製品を容易に見て購入することを助ける。いくつかの実施形態では、パートナー、アプリケーション開発者、内部アプリケーションファシリティ等は、例えばアプリケーションインタフェースをサンドボックスするアドミニストレータ１１４内のフレームを創出することを通じて、ソフトウェア開発キット（ＳＤＫ）を提供され得る。いくつかの実施形態では、アドミニストレータ１１４は、フレーム内で発生することを制御せず、発生したことに気付かないこともある。ＳＤＫは、ユーザインタフェースキットと共に用いられ、例えばコマース管理エンジン１３６の拡張機能として機能するｅコマースプラットフォーム１００のルックアンドフィールを模したインタフェースを生成し得る。

ＡＰＩを活用するアプリケーション１４２Ａ－Ｂは、要求されたデータをプルし得るが、それらは、更新が発生するときにデータがプッシュされる必要もある。例えば顧客創出、製品変更、または注文取消等の更新イベントは、サブスクリプションモデルにおいて実装され得る。更新イベントは、ローカルデータベースを同期させること、外部統合パートナーに通知すること等のためにコマース管理エンジン１３６の変更された状態に関して必要とされる更新を商人に提供し得る。更新イベントは、例えば更新イベントサブスクリプションを通じて更新を確認するためにコマース管理エンジン１３６を常にポーリングする必要なく、この機能を可能にし得る。いくつかの実施形態では、更新イベントサブスクリプションに関連する変更が発生すると、コマース管理エンジン１３６は、予め定義されたコールバックＵＲＬ等に要求を送り得る。この要求の本体は、オブジェクトの新たな状態と、アクションまたはイベントの記述とを含み得る。更新イベントサブスクリプションは、アドミニストレータファシリティ１１４において手動で、または（例えばＡＰＩ１４０Ａ－Ｂを介して）自動で創出され得る。いくつかの実施形態では、更新イベントは、待ち行列に入れられ、それらをトリガした状態変更から非同期で処理され得、それは、リアルタイムで分配されない更新イベント通知を生み出し得る。

いくつかの実施形態では、ｅコマースプラットフォーム１００は、アプリケーション検索、推薦およびサポート１２８を提供し得る。アプリケーション検索、推薦およびサポート１２８は、アプリケーションの開発において支援するための開発者製品およびツールと、（例えば、開発インタフェースを開発者に提供するため、アドミニストレータのアプリケーションの管理のため、商人のアプリケーションのカスタマイズのため等の）アプリケーションダッシュボードと、（例えば、インストールされる前に基準が満たされなければならない公衆アクセスのため、または商人による私的な使用のため等の公共アクセスのための）アプリケーション１４２Ａ－Ｂへのアクセスを提供することに関する許可をインストールおよび提供するためのファシリティと、商人のオンライン店舗１３８のニーズを満足させるアプリケーション１４２Ａ－Ｂを商人が検索することを容易にするためのアプリケーション検索と、商人がどのようにして彼らのオンライン店舗１３８を通じたユーザ体験を改善し得るかについての提案を商人に提供するためのアプリケーション推薦と、コマース管理エンジン１３６内の核となるアプリケーション能力の記述と等を含み得る。これらのサポートファシリティは、任意のエンティティによって実施されるアプリケーション開発によって活用され得、任意のエンティティは、彼ら自身のアプリケーション１４２Ａ－Ｂを開発する商人、アプリケーション１４２Ａ－Ｂを開発する第三開発者（例えば、アプリケーション１４２Ａ－Ｂは、商人によって契約され、公衆に提供するために独自で開発され、ｅコマースプラットフォーム１００に関連付けられた使用のために契約される）、またはｅコマースプラットフォーム１００に関連付けられた内部パーソナルリソースによって開発されるアプリケーション１４２Ａもしくは１４２Ｂを含む。いくつかの実施形態では、アプリケーション１４２Ａ－Ｂは、例えば、アプリケーションに（例えばＡＰＩを通して）リンクするために、アプリケーションを検索するために、アプリケーション推薦を作成するために、アプリケーション識別子（ＩＤ）を割り当てられ得る。

コマース管理エンジン１３６は、ｅコマースプラットフォーム１００のベース機能を含み、これらの機能をＡＰＩ１４０Ａ－Ｂを通じてアプリケーション１４２Ａ－Ｂに公開し得る。ＡＰＩ１４０Ａ－Ｂは、アプリケーション開発を通じて構築されたアプリケーションの異なるタイプを可能にし得る。アプリケーション１４２Ａ－Ｂは、商人の多様なニーズを満足させることを可能にし得るが、大まかに３つのカテゴリにグループに分けられ得る：顧客向けアプリケーション、商人向けアプリケーション、統合アプリケーション等。顧客向けアプリケーション１４２Ａ－Ｂは、オンライン店舗１３８またはチャンネル１１０Ａ－Ｂを含み得、オンライン店舗１３８またはチャンネル１１０Ａ－Ｂは、商人が製品をリストアップしそれらを購入してもらうことが可能な場所（例えば、オンライン店舗、フラッシュセールのためのアプリケーション（例えば、商人製品または第三者リソースによる突発的なセールス機会からのもの）、モバイルストアアプリケーション、ソーシャルメディアチャンネル、卸売り購入を提供するためのアプリケーション等）である。商人向けアプリケーション１４２Ａ－Ｂは、商人が、（例えば、ウェブもしくはウェブサイト、またはモバイルデバイスに関連するアプリケーションを通じて）彼らのオンライン店舗１３８を管理すること、彼らのビジネスを（例えばＰＯＳデバイスに関連するアプリケーションを通じて）営業すること、（例えば配送（例えば置き配）に関連するアプリケーション、自動化されたエージェントの使用、プロセスフロー開発および改善の使用を通じて）彼らのビジネスを成長させること等を可能にするアプリケーションを含む。統合アプリケーションは、配送プロバイダ１１２および支払いゲートウェイ等のビジネスの営業に関する有用な統合を提供するアプリケーションを含み得る。

いくつかの実施形態では、アプリケーション開発者は、アプリケーションプロキシを用いて、外部の場所からデータをフェッチし、それをオンライン店舗１３８のページに表示し得る。これらのプロキシページにおけるコンテンツは、例えば動的であり、更新されることが可能であり得る。アプリケーションプロキシは、画像ギャラリ、統計、カスタムフォーム、および他の種類の動的コンテンツを表示するために有用であり得る。ｅコマースプラットフォーム１００の核となるアプリケーション構造は、アプリケーション１４２Ａ－Ｂで構築される増加した数の商人体験を可能にし、それによって、コマース管理エンジン１３６は、より一般的に活用されるコマースのビジネスロジックに焦点を当て続けることができる。

ｅコマースプラットフォーム１００は、商人が柔軟で透明性のある態様で顧客に接触することを可能にする洗練されたシステムアーキテクチャを通じてオンラインショッピング体験を提供する。典型的な顧客体験は、例示的な購入ワークフローの実施形態を通じてより理解され得、ワークフローにおいて、顧客は、チャンネル１１０Ａ－Ｂにある商人の製品を閲覧し、彼らが買いたい物を彼らのカートに追加し、勘定に進み、彼らのカートのコンテンツの支払いをし、商人への注文の創出をもたらす。そして、商人は、注文をレビューおよび履行（または取消）し得る。そして、製品は、顧客に送達される。顧客が満足しない場合、彼らは製品を商人に返却し得る。

例示的な実施形態では、顧客は、チャンネル１１０Ａ－Ｂにある商人の製品を閲覧し得る。チャンネル１１０Ａ－Ｂは、顧客が製品を見て買い得る場所である。いくつかの実施形態では、チャンネル１１０Ａ－Ｂは、アプリケーション１４２Ａ－Ｂ（可能な例外は、コマース管理エンジン１３６内に統合されるオンライン店舗１３８である）としてモデル化され得る。販促コンポーネントは、商人が、彼らが販売したい物および彼らがそれを販売する場所を説明することを可能にし得る。製品とチャンネルとの間の関連付けは、製品出版物としてモデル化され、例えば製品リストアップＡＰＩを介してチャンネルアプリケーションによってアクセスされ得る。製品は、サイズおよび色、ならびに、極小かつ緑であるバリエーション、または大きいサイズかつ青であるバリエーション等、利用可能なオプションを全てのオプションの特定の組み合わせに拡大する多くのバリエーション等の多くのオプションを有し得る。製品は、少なくとも１つのバリエーション（例えば、「デフォルトバリエーション」は、どのオプションもない製品として創出される）を有し得る。閲覧および管理を促進するために、製品は、例えば、コレクションにグルーピングされ、製品識別子（例えば、在庫品維持ユニット（ＳＫＵ））等を提供され得る。製品のコレクションは、例えば手動で製品を１つのコレクションに分類すること（例えば、カスタムコレクション）か、または自動的な分類（例えばスマートコレクション）のためのルールセット等を構築することのいずれかによって構築され得る。製品は、例えば仮想現実または拡張現実インタフェースを通じて、２Ｄ画像、３Ｄ画像、回転図画像として閲覧され得る。

いくつかの実施形態では、顧客は、彼らが買いたい物を彼らのカートに追加し得る（代替となる実施形態では、製品は、本明細書中で説明されるように、例えば買うボタンを通じて直接購入され得る）。顧客は、彼らのショッピングカートに製品バリエーションを追加し得る。ショッピングカートモデルは、チャンネル特有であり得る。オンライン店舗１３８カートは、複数のカートラインアイテムから構成され得、各カートラインアイテムは、製品バリエーションに関する量を追跡する。商人は、カートスクリプトを用いて、顧客のカートのコンテンツに基づいて顧客に特別なプロモーションを提供し得る。製品をカートに追加することは、顧客または商人からの何らかの約束を意味せず、カートの予測される寿命は数分の単位（日ではない）であり得るので、カートは、短期データ記憶装置に持続させられ得る。

そして、顧客は、勘定に進む。勘定コンポーネントは、顧客向けの注文創出プロセスとしてウェブ勘定を実装し得る。勘定ＡＰＩは、いくつかのチャンネルアプリケーションによって用いられるコンピュータ向けの注文創出プロセスとして提供され、（例えば、販売時点情報管理として）顧客に代わって注文を創出し得る。勘定は、カートから創出され、ｅメールアドレス、請求書、および配送詳細等の顧客の情報を記録し得る。勘定の時、商人は、価格設定を確約する。顧客が彼らの連絡先情報入力したが、勘定に進まない場合、ｅコマースプラットフォーム１００は、顧客に再び係合するための機会（例えば破棄された勘定の特徴）を提供し得る。それらの理由のため、勘定は、カートより遥かに長い寿命（時間またはさらに日）を有し得、したがって持続される。勘定は、顧客の配送先住所に基づいて税および配送費用を計算し得る。勘定は、税コンポーネントに税の計算を委任し、送達コンポーネントに配送費用の計算を委任し得る。価格設定コンポーネントは、商人が割引コード（例えば、勘定において入力されると、勘定されるアイテムに新たな価格を適用する「秘密の」文字列）を創出することを可能にし得る。割引は、顧客を引き付け、マーケティングキャンペーンの成果を評価するために、商人によって用いられ得る。割引および他のカスタム価格システムは、例えば価格ルール（例えば、満たされたときに一連の資格を示す一連の必須条件）を通じて、同一のプラットフォームピースの上部に実装され得る。例えば、必須条件は、「注文の小計が＄１００より高い」または「配送費用が＄１０を下回る」等のアイテムであり得、資格は、「注文全体の２０％割引」または「＄１０引き製品Ｘ、ＹおよびＺ」等のアイテムであり得る。

そして、顧客は、彼らのカートのコンテンツの支払いをし、これは、商人への注文の創出をもたらす。チャンネル１１０Ａ－Ｂは、コマース管理エンジン１３６を用いて、お金、通貨または店舗の価値の蓄え（ドルまたは暗号通貨等）を顧客と商人との間で移動させ得る。種々の支払いプロバイダ（例えば、オンライン支払いシステム、モバイル支払いシステム、デジタルウォレット、クレジットカードケートウェイ等）との通信は、支払い処理コンポーネント内で実装され得る。支払いゲートウェイ１０６との実際の相互作用は、カードサーバ環境を通じて提供され得る。いくつかの実施形態では、支払いゲートウェイ１０６は、例えば主要な国際クレジットカードプロセッサを組み込んだ国際支払いを承認し得る。カードサーバ環境は、カードサーバアプリケーション、カードシンク、ホステッドフィールド等を含み得る。この環境は、機密クレジットカード情報のセキュアゲートキーパーとして機能し得る。いくつかの実施形態では、ほとんどのプロセスは、支払い処理ジョブによって組織化され得る。コマース管理エンジン１３６は、サイト外支払いゲートウェイ１０６を通じたもの（例えば、顧客が別のウェブサイトに向け直される）、手動によるもの（例えば、現金）、オンライン支払方法（例えば、オンライン支払システム、モバイル支払いシステム、デジタルウォレット、クレジットカードゲートウェイ等）、ギフトカード等、多くの他の支払い方法をサポートし得る。勘定プロセスの最後に、注文が創出される。注文は、商人と顧客との間の販売契約であり、商人は、注文にリストアップされた商品およびサービス（例えば、注文ラインアイテム、配送ラインアイテム等）を提供することに同意し、顧客は、（税を含む）支払いを提供することに同意する。このプロセスは、販売コンポーネントでモデル化され得る。コマース管理エンジン１３６勘定によらないチャンネル１１０Ａ－Ｂは、注文ＡＰＩを用いて注文を創出し得る。注文が創出されると、通知コンポーネントを介して、注文確認通知が、顧客に送られ得、注文完了通知が商人に送られ得る。売り過ぎを回避するために、注文処理ジョブが始動するとき、在庫が予約され得る（例えば、商人は、各バリエーションの在庫方針からこの行動を制御し得る）。在庫予約は、短い時間スパン（数分）を有し得、フラッシュセール（例えば、ターゲットインパルス購入等の短時間提供される割引またはプロモーション）をサポートするために、非常に高速かつスケーラブルである必要があり得る。支払いが失敗した場合、予約が解除される。支払いが成功し、注文が創出されたとき、予約が、特定の場所に割り当てられた長期在庫確約に変換される。在庫コンポーネントは、バリエーションが保管される場所を記録し得、在庫追跡が可能であるバリエーションに関して、量を追跡する。在庫は、在庫アイテム（量および場所が管理されるアイテムを表す商人向けコンセプト）から製品バリエーション（製品リストのテンプレートを表す顧客向けコンセプト）を切り離し得る。在庫レベルコンポーネントは、販売取扱量、注文が確約された量、または在庫転送コンポーネントから（例えば、ベンダーから）の仕入れ量を追跡し得る。

そして、商人は、注文をレビューし、履行（または取消）し得る。レビューコンポーネントは、ビジネスプロセス商人の使用を実装し、実際にそれらを履行する前に注文が履行に適していることを保証し得る。注文は、詐欺であり得、確認（例えばＩＤチェック）を要求し、彼らの資金を受領することを確実するために待つことを商人に要求する支払い方法を有し得る。リスクおよび推薦は、注文リスクモデルで永続化され得る。注文リスクは、例えば、詐欺検出ツールから生成され、注文リスクＡＰＩを通じて第三者によって提出され得る。履行に進む前、商人は、支払い情報（例えば、クレジットカード情報）を捕捉するか、または（例えば、銀行送金、小切手等を介して）それを受領することを待って注文が支払われたことをマークする必要があり得る。それから、商人は、送達のために製品を準備し得る。いくつかの実施形態では、このビジネスプロセスは、履行コンポーネントによって実装され得る。履行コンポーネントは、在庫場所および履行サービスに基づいて作業の論理的履行単位に注文のラインアイテムをグルーピングし得る。商人は、作業の単位をレビューし、これを調節し、商人が箱から製品を取り出して梱包するときに用いられる（例えば、商人に管理された場所における）手動履行サービスを通じて、関連する履行サービスをトリガし、配送ラベルを購入してその追跡番号を入力するか、または、単に履行されたことをアイテムにマークし得る。カスタム履行サービスは、ｅメールを（例えば、ＡＰＩ接続を提供しない場所に）送り得る。ＡＰＩ履行サービスは、第三者をトリガし得、第三者が、履行記録を作成する。レガシー履行サービスは、コマース管理エンジン１３６から第三者へのカスタムＡＰＩコールをトリガし得る（例えば、Ａｍａｚｏｎによる履行）。ギフトカード履行サービスは、ギフトカードをプロビジョニングし（例えば、番号を生成する）、アクティブにし得る。商人は、注文プリンタアプリケーションを用い、梱包票を印刷し得る。履行プロセスは、アイテムが箱に梱包され、配送の準備がされるとき、配送されるとき、追跡されるとき、送達されるとき、顧客によって受領されたことが確認されるとき等に実行され得る。

顧客が満足しない場合、彼らは、製品（単数または複数）を商人に返却し得る。商人が、アイテムを「販売できない」ことを経験し得るビジネスプロセスは、返却コンポーネントによって実装され得る。返却は、各種の異なるアクションから成り得、各種の異なるアクションは、例えば、再入庫（販売された製品が実際にビジネスに復帰し、再び販売可能である場合）、払い戻し（顧客から集めたお金が部分的または全額返却される場合）、どのくらいのお金が払い戻されたかを通知する会計調節（例えば、何らかの再入庫料金が存在する場合、または商品が返却されておらず、顧客の手元に残っている場合を含む）等である。返却は、販売契約（例えば注文）の変更を表し得、ｅコマースプラットフォーム１００は、（例えば、税に関する）法規違反に関するコンプライアンスの問題を商人に知らせ得る。いくつかの実施形態では、ｅコマースプラットフォーム１００は、商人が経時的に販売契約の変更を追跡することを可能にし、これは、販売モデルコンポーネント（例えば、アイテムに発生した販売関連のイベントを記録する追加専用の日付ベースの台帳）を通じて実装される。
ｅコマースプラットフォームにおける拡張現実の実装

仮想コンテンツを使用して実世界体験を変更する拡張現実（ＡＲ）および複合現実（ＭＲ）（本明細書中では概して「ＡＲ」と記される）等のテクノロジが、向上させられた顧客体験を提供するためにコマースにおいて使用され得る。ｅコマースプラットフォーム１００は、各種の異なる用途のうちのいずれかのためにＡＲを実装し得、その例が、本明細書中の別の箇所で説明される。図３は、図１のｅコマースプラットフォーム１００であるが、ＡＲエンジン３００を含むものを例証している。ＡＲエンジン３００は、ｅコマースプラットフォーム１００、顧客デバイス１５０および／または商人デバイス１０２による使用のためのＡＲコンテンツを生成するコンピュータ実装システムのある例である。

ＡＲエンジン３００は、図３においてｅコマースプラットフォーム１００の別種の構成要素として例証されているが、これは単なる例である。同様に、または、代わりに、ＡＲエンジンは、ｅコマースプラットフォーム１００内またはその外部に常駐する別のコンポーネントによって提供され得る。いくつかの実施形態では、アプリケーション１４２Ａ－Ｂの一方または両方が、顧客および／または商人に利用可能であるＡＲエンジンを提供する。さらに、いくつかの実施形態では、コマース管理エンジン１３６は、ＡＲエンジンを提供する。ｅコマースプラットフォーム１００は、１つ以上のパーティによって提供される複数のＡＲエンジンを含み得る。複数のＡＲエンジンは、同一の態様で、同様の態様で、および／または別種の態様で実装され得る。加えて、ＡＲエンジンの少なくとも一部は、商人デバイス１０２および／または顧客デバイス１５０において実装され得る。例えば、顧客デバイス１５０は、ソフトウェアアプリケーションとしてＡＲエンジンを記憶し、それをローカルで実行し得る。

ＡＲエンジン３００は、本明細書中で説明される機能のうちの少なくともいくつかを実装し得る。以下で説明される実施形態は、ｅコマースプラットフォーム１００等（しかしこれに限定されない）のｅコマースプラットフォームに関連付けられて実装され得るが、以下で説明される実施形態は、図１～図３の特定のｅコマースプラットフォーム１００に限定されない。さらに、本明細書中で説明される実施形態は、必ずしもｅコマースプラットフォームに関連付けられて実装されることも、それを伴うことも必要としない。概して、ＡＲの任意のアプリケーションが、本明細書中で開示されるシステムおよび方法を実装することができる。
コマースにおけるＡＲの用途

ＡＲ（またはそのバリエーション）は、ユーザの実世界環境を仮想コンテンツで補完し、実世界環境のユーザの知覚を変更することができる。いくつかの実装では、同時位置決めおよびマッピング（ＳＬＡＭ）として知られているプロセスを通して、ユーザの実世界環境の表現およびその実世界環境内のユーザの位置が、例えばＡＲエンジンによって継続的または断続的に決定され得る。本明細書中で使用される場合、位置は向きと場所との両方を含み得ることが留意されるべきである。ユーザのためのＡＲ体験は、実世界環境の表現に１つ以上の仮想モデルをマッピングすることによって生成され得る。ユーザのためのＡＲコンテンツは、実世界環境上に重ねられた仮想モデルのレンダリング表現を含み得る。レンダリング表現は、実世界環境内のユーザの相対的位置と、実世界環境への仮想モデルのマッピングとを反映するために生成され得る。このようにして、ＡＲコンテンツは、ユーザのための実世界環境との仮想モデルのほとんどシームレスな統合を提供し得る。

いくつかの実装では、ＡＲ体験は、マーカ（例えば、クイックレスポンス（ＱＲ）コード等）、顔の特徴（例えば、ユーザの目および／または鼻等）、および／または実世界環境内の他の特徴を追跡することによって提供され得る。そして、これらの特徴は、ＡＲ体験において仮想コンテンツを使用して除去および／または変更され得る。

ＡＲは、顧客が実世界製品と物理的に相互作用することが可能でないときに顧客が仮想製品を視認し、それと相互作用することを可能にし得る。例えば、ＡＲは、画像内に捕捉された実世界環境上に製品の仮想表現を重ね得、これは、製品が実世界環境内に存在するように見えるようにすることができる。画像は、顧客の家または顧客に関連する別の場所のものであり、顧客が彼の興味のある環境内で製品を視認することを可能にし得る。いくつかの実装では、家具小売店は、ＡＲを使用して、顧客が彼らの家の中で仮想家具を視認することを可能にし得る。例えば、テレビの仮想表現が、ＡＲを使用して顧客のリビングルームのビデオストリーム上に重ね合わせられ、リビングルームにおけるテレビのサイズおよび見え方が認識されることを可能にし得る。

ＡＲは、「ブリックアンドモルタル」小売店内に数多くの異なる製品のバリエーションをストックする商人の必要性を低減させるために使用され得る。例えば、いくつかの製品は、異なるバリエーションで入手可能であり、異なるバリエーションは、同一の形状および機能を有するが、それらの視覚的外観が異なり得る。そのような製品バリエーションの非限定的な例は、製品に関する異なる色、模様、テクスチャ、および／またはグラフィックデザインを含む。商人が小売店を通して製品を販売しているとき、数多くの製品バリエーションのストックを維持することは、典型的に、広大な保管空間を要求する。さらに、顧客に多くの異なる製品バリエーションを物理的に示すことは、時間がかかり、顧客が興味を失うという結果になり得る。

例として、いくつかの家具は、多くの異なるバリエーションが入手可能であり得るが、小売店は、バリエーションの全てをストックするために十分な保管空間を有していないこともある。ＡＲは、物理的にバリエーションを保管する必要なく、比較的迅速な態様で顧客に家具の多くの異なるバリエーションの仮想表現を示すために使用され得る。

衣類は、ＡＲを使用して顧客に提示され得る製品の別のタイプである。スマートミラーおよびＡＲ性能を有する他のデバイスが、小売店において顧客の身体の一部上に衣類の仮想表現を重ねるために使用され得る。これは、スマート試着室とみなされ得る。商人がストックされている物理的な衣服を有しない場合でさえ、顧客は、衣類の見え方およびフィット感を評価することができる。加えて、顧客は、異なる衣服を物理的に着用する（これは時間がかかり得る）必要なく、衣類の異なるバリエーション間を迅速に切り替えることができる。

ＡＲを使用して製品の仮想表現を作成することの欠点は、多くの顧客が、製品を購入するか否かを決定する前に、製品と物理的に相互作用することを望むことである。例えば、ある衣服を購入することに興味のある顧客を考慮されたい。顧客の身体の一部上に重ねられた衣服の仮想表現は、顧客が衣服を購入するか否かを決定するために十分な情報を提供しないこともある。仮想表現は、顧客に衣服がどう見えるかのインジケーションを提供し得る一方で、衣類は顧客の身体上にただ重ねられるだけであるので、顧客は、衣類の素材、たるみ、感触、および構造を評価することが可能ではない。さらに、衣服の静的な仮想表現は、顧客が動くと衣類がどのようにしわを寄せ、流れるかを含む、衣類のいくらかの審美的特徴を実証することができないこともある。例えば、衣服の静的表現は、着用時に着用者の身体の周囲で流れ、かつ動く物理的衣服より、紙人形の服に似て見えることがあり得る。

従って、商人に各バリエーションを物理的に保管することを要求することなく、顧客が製品と物理的に相互作用し、製品の複数の異なるバリエーションを視認することを可能にするシステムおよび方法に対するニーズが存在している。

いくつかの実施形態がコマースアプリケーションの文脈で説明されるが、本開示はいかようにもコマースに限定されないことが留意されるべきである。本明細書中で開示されるシステムおよび方法は、ＡＲの他のアプリケーションにおいても実装され得る。
歪められた３Ｄモデルを使用したＡＲコンテンツの生成

本開示は、部分的に、実世界アイテムを重ね、そして実世界アイテムを変更するためのＡＲコンテンツを生成することに関している。小売店アプリケーションにおいて、これは、顧客が、ＡＲを使用して製品の複数の異なるバリエーションを視認する一方で、製品の単一の実世界アイテムと物理的に相互作用することを可能にし得る。その結果、商人は、彼らの在庫として保管されているアイテムの総数を低減させることが可能であり得る。オンラインショッピングアプリケーションでは、商人は、顧客に製品の単一の実世界アイテムを配送し、顧客がＡＲを使用して製品の複数の異なるバリエーションを視認することを可能にし得る。これは、１つのアイテムしか配送される必要がないので、商人および／または顧客のための配送コストを低減させ得る。

例として、製品の限られた数の無地のアイテムまたは一般的アイテムが、小売店においてストックされ得る。無地のアイテムは、単一のソリッドカラーのアイテムであり得るが、以下で議論されるように、これは、常に当てはまるわけではない。顧客は、無地のアイテムを使用して、製品と物理的に相互作用し、製品の感触、フィット感、動き、および／または他の物理的特徴を認識し得る。そして、ＡＲは、無地のアイテム上に製品の異なる視覚的バリエーションを描写するように実装され、顧客が異なるバリエーションを視認することを可能にし得る。例えば、異なる製品の色、模様、および／またはグラフィックデザインが、ＡＲを使用して顧客に提示され得る。そして、顧客は、製品の特定のバリエーションを注文し得る。

無地のアイテムは、小売店における使用のために意図されているだけであり、顧客のために販売されないこともある。あるいは、無地のアイテムは、例えばベージュのカウチまたはソリッドカラーの衣料等、製品の基本的なバージョンであり得る。顧客がカウチをショッピングしている場合、顧客がカウチに座ることを可能にするために、無地のカウチが小売店において利用可能であり得る一方で、カウチに関して入手可能である異なる色、模様、テクスチャ、およびグラフィックデザインの全てを実証するために、ＡＲが使用される。同様に、顧客がシャツをショッピングしている場合、複数の異なるサイズの無地のシャツが、シャツのサイズを顧客が選ぶことに役立つように小売店において利用可能であり得る。顧客が好むシャツのバリエーションを顧客が決定することに役立つように、異なる視覚的外観が、ＡＲを使用して無地のシャツ上に付与され得る。異なる視覚的外観は、顧客がシャツを着用しているとき、および／またはシャツがラックに掛けられているとき、もしくは別様に小売店内で陳列されているときに、付与され得る。無地のアイテムは、製品の最も所望されるバリエーションではない可能性が高いので、小売店内に製品の無地のアイテムをストックすることは、いくつかの場合、窃盗を低減させ得る。いくつかの場合、無地のアイテムは、無地のアイテム上に目立つように印字されているお知らせまたは文字によるものを潜在的に含む、そのように特有にブランドを表示されるかまたはマークされ得る。

多くの製品は、軟質であり、可撓性であり、順応性があり、または別様に変形可能である。従って、これらの製品の形状は、固定されないだけでなく、数多くの異なる要因のうちのいずれかに基づいて変化し得る。例えばコットンシャツを考慮されたい。シャツの形状は、とりわけ、どのように着用されるか、どのように動かさられるか、どのように保持されるか、どのような向きに向けられるかに基づいて変化し得る。ＡＲを使用して変形可能アイテムの視覚的外観を変更するとき、実世界アイテム上に新たな視覚的外観を写実的に重ねるために、アイテムの３Ｄ形状のリアルタイムの把握が要求され得る。

いくつかの実施形態では、実世界アイテムの３Ｄ形状を決定することに役立つように、変形可能な実世界アイテムの測定値が取得される。これらの測定値は、例えば、光学画像、ｌｉｄａｒスキャン、および／またはレーダスキャンを含み得る。そして、測定値の分析は、実世界アイテムのおおよその３Ｄ形状を提供するアイテム上の複数の点の３Ｄ位置または相対位置を決定し得る。測定される実世界アイテム上の点の数を増加させることは、実世界アイテムの形状がより正確に決定されることを可能にし得る。測定値の分析は、実世界アイテムに対するユーザデバイスの位置も決定し得る。

実世界アイテム上の複数の点の相対位置が決定された後、アイテムに対応するＡＲコンテンツがユーザのために生成され得る。このＡＲコンテンツは、概して、ユーザの視点からの実世界アイテムに重ねられたアイテムの３Ｄモデルのレンダリング表現を含む。いくつかの場合、３Ｄモデルは、アイテムのための新たな視覚的外観を提供し得る。例えば、３Ｄモデルは、特定の製品のバリエーションを描写するために実世界アイテムに重ねられ得る模様、色、および／またはグラフィックデザインを提供し得る。

いくつかの実施形態では、ＡＲコンテンツを生成することは、修正されたモデルの形状がアイテムの測定された３Ｄ形状に対応するように、アイテムの３Ｄモデルを修正するか、変形させるか、または歪めることを含み得る。この歪みは、実世界アイテム上の複数の点の測定された相対位置に基づき得る。例えば、３Ｄモデル上の複数の点は、実世界アイテム上の複数の点の相対位置にマッピングされ得る。マッピング中、３Ｄモデルの一部が、位置変更されるか、または別様に変更され得、これは、実世界アイテムの３Ｄ形状を３Ｄモデルの形状で再現することができる。

実世界アイテムの測定された３Ｄ形状に基づいて３Ｄモデルを歪めることの利点は、アイテムのリアルタイムの変形が３Ｄモデルにおいて反映され、３Ｄモデルのレンダリング表現が写実的態様で実世界アイテムに適切に合致し、それに重なることを可能にし得る。例えば、実世界アイテムにおける任意の曲げ、折れ曲がり、ひだ、または他の変形が、修正された３Ｄモデルで捕捉され得る。これは、３Ｄモデルが実世界アイテムに「シュリンクラップ」されていると考えられ得る。３Ｄモデルを修正することは、３Ｄモデルが変形させられたアイテムに容易に重ねられることができない複雑な模様を含むとき、特に重要であり得る。例えば、無地のカウチ上にゼブラプリント模様を仮想的に再現するように試みるとき、模様を提供する３Ｄモデルは、人がカウチ上に座り、カウチを変形させることに応答して、修正され得る。従って、ゼブラプリント模様は、カウチの形状に能動的に適合させられる。

さらに、実世界アイテムの測定された形状に基づいて３Ｄモデルを歪めることは、可撓性表面の動きおよび流れが捕捉されることを可能にし得る。衣類および衣料等のアイテムに関して、これは、これらのアイテムの重要な美的側面を捕捉することができる。例として、顧客は、シャツが動き、折れ曲がり、しわを寄せたときにシャツ上の模様がどのように見えるのかを見ることを望み得る。

対照的に、ＡＲコンテンツを生成してアイテムに重ねるときに実世界アイテムの３Ｄ形状が決定されない場合を考慮されたい。代わりに、アイテムの２Ｄ輪郭のみが決定される。そして、ＡＲコンテンツは、アイテムの輪郭内に模様を重ねる。これは、例えばクロマキー合成を使用して行われ得、アイテムは、色に基づいて周囲環境から分離される。そして、選択された模様が、アイテム上に重ね合わせられ得る。アイテムが変形させられないとき、および／または模様が均一な色であるとき、この手法が、アイテムのために好適な仮想外観を提供し得る。しかしながら、模様が不均一であり、アイテムが変形可能である場合、クロマキー合成は、変形させられたアイテム上に模様を写実的に重ねることができないこともある。例えば、アイテムが折れ曲がりを有するシャツであり、模様がチェッカー模様である場合、クロマキー合成は、折れ曲がりの領域内の模様を正確に描写しない可能性があり得る。これは、クロマキー合成が、単一の視点からシャツの境界を検出するだけであり、シャツの３Ｄ形状を検出しないこともあるからである。

変形可能な実世界アイテムのためのＡＲコンテンツの生成に続いて、ＡＲコンテンツは、デバイスに出力され、実世界アイテムに重ねられ得る。ＡＲコンテンツは、ユーザがアイテムに対して動いたときに、３Ｄモデルのレンダリング表現がユーザの視点からのアイテムのサイズおよび向きに一致することを確実にするように更新され得る。ＡＲコンテンツを更新することは、例えばビデオ内に捕捉されたアイテムの任意の変形に合致するようにリアルタイムで３Ｄモデルを歪めることを含み得る。さらに、ユーザは、アイテムの異なる物理的外観を取得するために、アイテムの異なる３Ｄモデル間で能動的に切り替え得る。これは、顧客が例えば製品の異なるバリエーションを視認することを可能にし得る。

図４は、ある実施形態による第１の時点におけるドレス４００を着用するユーザを例証しており、図５は、ある実施形態による第２の時点におけるドレス４００を着用するユーザを例証している。ドレス４００は、模様のない白色可撓性衣料である。ドレス４００は、第１の時点において第１の３Ｄ形状４０２を有し、第２の時点において第２の３Ｄ形状４０４を有する。示されるように、３Ｄ形状４０２は、３Ｄ形状４０４と異なる。この形状の変化は、ユーザが動き、それによって、例えばドレス４００の布における湾曲、折れ曲がり、およびしわを変更することによって引き起こされ得る。

図６は、第１の時点におけるドレス４００を着用するユーザを例証しており、図７は、第２の時点におけるドレス４００を着用するユーザを例証しているが、仮想模様６００がドレス４００上に重ねられている。仮想模様６００は、チェッカー模様を有するドレス４００のバリエーションを描写するＡＲコンテンツによって提供され得る。いくつかの実装では、仮想模様６００は、ドレス４００の３Ｄモデルに対応している。３Ｄモデルは、第１の時点におけるドレス４００の３Ｄ形状４０２に基づいて歪められ得る。そして、歪められた３Ｄモデルのレンダリング表現は、図６に示される仮想模様６００を提供するために使用され得る。同様に、第２の時点におけるドレス４００の３Ｄ形状４０４に基づいて３Ｄモデルを歪めた後、歪められた３Ｄモデルのレンダリング表現が、図７に示される仮想模様６００を提供するために使用され得る。

仮想模様６００は、図６および図７における３Ｄ形状４０２、４０４に基づいているので、仮想模様６００は、ドレス４００の湾曲および折れ曲がりに写実的に描写される。このようにして、仮想模様６００は、チェッカー模様を有するドレス４００のバリエーションが実世界においてどのように見え得るかをより良く表現し得る。

図６および図７に例証されている仮想模様６００は、本明細書中に開示されるシステムおよび方法を使用して生成され得るＡＲコンテンツのある例である。
ＡＲコンテンツを生成するための例示的システムおよび方法

図８は、ある実施形態による歪められた３Ｄモデルを使用するＡＲコンテンツの生成のためのシステム８００を例証するブロック図である。システム８００は、ＡＲエンジン８０２と、ネットワーク８２０と、ユーザデバイス８３０と、物理的実世界アイテム８５０とを含む。

いくつかの実装では、実世界アイテム８５０は、ユーザデバイス８３０に関連付けられたユーザがＡＲエンジン８０２および／またはユーザデバイス８３０を使用して仮想的に変更するように意図し得る特定の製品のアイテムである。例えば、実世界アイテム８５０は、ＡＲを使用して異なる色、模様、および／またはデザインを重ねられ、製品の異なるバリエーションを描写し得る。実世界アイテム８５０は、製品の無地のアイテムとみなされ得る。

実世界アイテム８５０は、シャツとして例証されているが、これは単なる例である。実世界アイテム８５０は、より概略的には、任意の物体またはエンティティであり得る。いくつかの実装では、実世界アイテム８５０は、１つ以上の可撓性表面を含む。可撓性表面は、概して、順応性のある表面、変形可能な表面、または別様に形状を変化させることが可能な表面である。可撓性表面の非限定的な例は、布、プラスチック、およびゴムから作製された表面を含む。いくつかの実装では、実世界アイテム８５０は、衣料であるか、またはそれを含む。

ユーザデバイス８３０は、携帯電話、タブレット、ラップトップ、プロジェクタ、ヘッドセットおよびコンピュータであるか、またはそれらを含み得る。ユーザデバイス８３０は、例えば、顧客によって所有されおよび／または動作させられる顧客デバイスであり得るか、または商人によって所有されおよび／または動作させられる商人デバイスであり得る。

ユーザデバイス８３０は、プロセッサ８３２と、メモリ８３４と、ユーザインタフェース８３６と、ネットワークインタフェース８３８と、センサ８４０とを含む。ユーザインタフェース８３６は、例えば、ディスプレイスクリーン（タッチスクリーンであり得る）、ジェスチャ認識システム、スピーカ、ヘッドフォン、マイクロフォン、ハプティクス、キーボード、および／またはマウスを含み得る。ユーザインタフェース８３６は、視覚コンテンツ、触覚コンテンツ、音響コンテンツを含むＡＲコンテンツをユーザに提示し得る。いくつかの実装では、ユーザデバイス８３０は、ユーザが実世界を視認すると同時に実世界上に重ねられたＡＲコンテンツを視認することを可能にする嵌め込み型ディスプレイを有する、衣類素材に埋め込まれたデバイス、または眼鏡等のユーザによって着用されるデバイス等の植え込み型デバイスまたはウェアラブルデバイスを含む。

ネットワークインタフェース８３８は、ネットワーク８２０上で通信するために提供される。ネットワークインタフェース８３８の構造は、ユーザデバイス８３０がどのようにネットワーク８２０とインタフェース接続するかに依存する。例えば、ユーザデバイス８３０が携帯電話、ヘッドセットまたはタブレットである場合、ネットワークインタフェース８３８は、ネットワーク８２０へ無線伝送を送信しネットワーク８２０から無線伝送を受信するためのアンテナを有するトランスミッタ／レシーバを含み得る。ユーザデバイスがネットワークケーブルを用いてネットワークに接続されるパーソナルコンピュータである場合、ネットワークインタフェース８３８は、例えば、ネットワークインタフェースカード（ＮＩＣ）、コンピュータポート、および／またはネットワークソケットを含み得る。プロセッサ８３２は、ユーザデバイス８３０によって実施される動作のうちの全てを直接実施するか、またはそれを命令する。これらの動作の例は、ユーザインタフェース８３６から受信されたユーザ入力を処理することと、ネットワーク８２０上での伝送のための情報を準備することと、ネットワーク８２０上で受信されたデータを処理することと、ディスプレイスクリーンに情報を表示するように命令することとを含む。プロセッサ８３２は、メモリ８３４内に記憶されている命令を実行する１つ以上のプロセッサによって実装され得る。あるいは、プロセッサ８３２のうちのいくつかまたはそれら全てが、特定用途向け集積回路（ＡＳＩＣ）、グラフィクス処理ユニット（ＧＰＵ）、またはプログラムされたフィールドプログラマブルゲートアレイ（ＦＰＧＡ）等の専用回路を使用して実装され得る。

センサ８４０は、例えば、１つ以上のカメラ、レーダセンサ、ｌｉｄａｒセンサ、および／またはソナーセンサを含み得る。センサ８４０は、ユーザデバイス８３０のコンポーネントとして示されているが、センサ８４０はまた、あるいは、または、代わりに、ユーザデバイス８３０から分離して実装され得、例えば有線接続および／または無線接続を介してユーザデバイス８３０および／またはＡＲエンジン８０２と通信し得る。

センサ８４０は、ユーザデバイス８３０のユーザのためのＡＲ体験を提供することに役立つように、実世界空間の測定値を取得し得る。例えば、センサ８４０は、ＳＬＡＭプロセスのうちの少なくとも一部を実施し得る。いくつかの実装では、センサ８４０によって取得された測定値は、実世界アイテム８５０の形状を決定することに役立つように使用される。これらの測定値は、実世界アイテム８５０上の複数の点８５２の相対位置を提供し得る。点８５２は、実世界アイテム８５０上の画定された模様、特徴、構造、部分、または部位に対応し、これらは、センサ８４０によって検出可能であり、かつ／または位置決め可能であり得る。例えば、点８５２の各々は、実世界アイテム８５０上の布の間の縫い目に沿った場所に対応し得る。点８５２の相対位置を決定した後、実世界アイテム８５０の全体形状が、概算され、または推定され得る。いくつかの実装では、センサ８４０によって取得された実世界アイテム８５０の測定値は、点８５２の相対位置を決定するための分析のために、ＡＲエンジン８０２に伝送される。

実世界アイテム８５０上の点８５２の数および位置は単に例として提供されることが留意されるべきである。概して、センサ８４０によって取得された測定値は、実世界アイテム８５０上の任意の数の点の相対位置を決定することに役立ち得る。例えば、何十、何百、何千、何万、何十万、または何百万の点の位置が、実世界アイテム８５０上で決定され得る。いくつかの場合、実世界アイテム８５０上でより多くの数の点の位置を決定することは、正確性および精密性を増加させ得、これによって、実世界アイテム８５０の形状が推定される。センサ８４０の分解能を増加させることは、検出および位置決めされることができる実世界アイテム８５０上の点の数を増加させ得る。比較的高いセンシング分解能は、実世界アイテム８５０の可撓性表面における折れ曲がりまたはしわ等の小さな形状変動を検出するように実装され得る。

いくつかの実装では、点８５２は、実世界アイテム８５０上、またはその中に組み込まれたマーカの場所に対応している。これらのマーカの各々は、測定値を通して検出可能である物理的構造またはデバイスであり得る。異なるタイプのマーカの非限定的な例は、光学マーカ、電波マーカ、慣性マーカ、および磁気マーカを含む。マーカは、実世界アイテム８５０に内在するだけでなく、実世界アイテム８５０に追加される追加要素であり得る。例えば、実世界アイテム８５０は、実世界アイテム８５０の形状が決定されることを可能にするように特別に追加されたマーカを含む無地のアイテムであり得る。実世界アイテム８５０上の点８５２においてマーカを実装することにより、点８５２の位置は、マーカを検出および位置決めすることによって決定され得る。

光学マーカは、光学画像を通して検出可能であり得る。例えば、色、シンボル、模様、発光素子、および／または反射素子が、光学マーカとして実装され、光学画像を通して検出可能であり得る。複数の光学画像は、マーカの位置、または、少なくともあるマーカの他のマーカに対する相対位置を決定するために使用され得る。とりわけ、いくつかの場合、光学マーカは、折れ曲がり、着用者の身体の位置等に起因して塞がれ得る。いくつかの実装では、１つ以上のマーカが塞がれている一方で他のマーカが視認可能であるという事実が、可撓性アイテムにおける折れ曲がりを検出することにおいて使用され、かつ／または採用され得る。加えて、または、あるいは、いくつかの実装では、例えばバーコードおよびクイックレスポンス（ＱＲ）コード等のコンピュータ読み取り可能なコードまたは証印が、光学マーカとして使用される。これらのコンピュータ読み取り可能なコードは、各マーカが実世界アイテム上で区別されることを可能にする情報を提供し得る。例えば、複数のＱＲコード（登録商標）が実世界アイテム上で実装されるとき、各ＱＲコード（登録商標）は、ＱＲ（登録商標）コードがアイテム上の特定の点に対応していることを示す情報を提供し得る。

電波マーカは、無線周波数識別（ＲＦＩＤ）リーダによって検出および位置決めされることができるＲＦＩＤトランスポンダを含み得る。慣性マーカは、慣性センサを含み得、慣性センサは、アイテム内に組み込まれ、慣性データを伝送することができ、慣性データは、センサの位置を決定するために分析され得る。磁気マーカは、例えば磁束測定値を通して検出および位置決めされる磁石を含み得る。

ネットワーク８２０は、ＡＲエンジン８０２およびユーザデバイス８３０を含む異なるデバイス間の有線接続および／または無線接続を実装するコンピュータネットワークであり得る。ネットワーク８２０は、当技術分野において公知である任意の通信プロトコルを実装し得る。通信プロトコルの非限定的な例は、ローカルエリアネットワーク（ＬＡＮ）、無線ＬＡＮ、インターネットプロトコル（ＩＰ）ネットワーク、およびセルラネットワークを含む。

ＡＲエンジン８０２は、歪められた３Ｄモデルに基づくＡＲコンテンツを含むＡＲコンテンツの生成をサポートする。例証されるように、ＡＲエンジン８０２は、プロセッサ８０４と、メモリ８０６と、ネットワークインタフェース８０８とを含む。プロセッサ８０４は、メモリ８０６内または別のコンピュータ読み取り可能な媒体内に記憶されている命令を実行する１つ以上のプロセッサによって実装され得る。あるいは、プロセッサ８０４のうちのいくつかまたはそれら全てが、ＡＳＩＣ、ＧＰＵ、またはプログラムされたＦＰＧＡ等の専用回路を使用して実装され得る。

ネットワークインタフェース８０８は、ネットワーク８２０上での通信のために提供される。ネットワークインタフェース８０８の構造は、実装特有である。例えば、ネットワークインタフェース８０８は、ＮＩＣ、コンピュータポート（例えば、プラグまたはケーブルが接続する物理的差込口）、および／またはネットワークソケットを含み得る。

メモリ８０６は、３Ｄモデルレコード８１０と、画像アナライザ８１２と、３Ｄモデルディストータ８１４と、ＡＲコンテンツジェネレータ８１６とを記憶している。

３Ｄモデルレコード８１０は、アイテム、物体、建物、場所、風景、人々、解剖学的特徴、動物、および／または任意の他のタイプのエンティティの仮想３Ｄモデルを含み得る。３Ｄモデルは、長さ、幅、および高さで画定されたエンティティの数学的表現である。３Ｄモデルは、３Ｄ仮想座標系内に位置付けられるか、または別様に画定され得、３Ｄ仮想座標系は、例えば、デカルト座標系、円筒座標系、または極座標系であり得る。３Ｄモデルは、３Ｄモデルが仮想座標系の中心にあるように、仮想座標系の原点にアンカされ得る。３Ｄモデルは、全体的にコンピュータ生成され得るか、または、実世界エンティティの測定値に基づいて生成され得る。実世界エンティティから３Ｄモデルを生成するための可能な方法は、写真測量（一連の２Ｄ画像から３Ｄモデルを作成すること）および３Ｄスキャニング（エンティティの周囲でスキャナを動かし、全角度を捕捉すること）を含む。

３Ｄモデルは、仮想アイテムがＡＲ体験内の種々の異なる角度で視認されることを可能にするように、ＡＲ体験において実装され得る。さらに、ユーザが３Ｄ性能を有するデバイス（例えば、ヘッドセット等）を使用してＡＲ体験と相互作用しているとき、３Ｄモデルは、仮想アイテムの３Ｄ表現が生成されることを可能にし得る。例えば、仮想アイテムの３Ｄ表現は、ユーザの各眼において仮想アイテムのわずかに異なる視点を表示し、物体に３Ｄ効果を与えることによって、実現され得る。

３Ｄモデルレコード８１０内に記憶されている３Ｄモデルは、音響コンテンツおよび／または触覚コンテンツも関連付けていることもある。例えば、３Ｄモデルレコード８１０は、モデルによって鳴らされるかまたは別様にモデルに関連付けられた音、および／またはモデルのための感触を提供することができる触覚フィードバックを記憶し得る。

いくつかの実装では、３Ｄモデルレコード８１０内に記憶されている１つ以上の３Ｄモデルは、製品に関する異なるバリエーションを提供する。例えば、複数の３Ｄモデルは、同一の製品に基づき得るが、その全てが、製品の異なるバリエーションを反映する異なる視覚コンテンツ、音響コンテンツ、および／または触覚コンテンツを有し得る。本明細書中の別の箇所で議論されるように、これらの３Ｄモデルは、これらの異なるバリエーションをユーザに提供するために、その製品の実世界アイテム上に重ねられ得る。

３Ｄモデルレコード８１０内に記憶されている３Ｄモデルは製品の一部のみを表現し得ることが留意されるべきである。一例では、３Ｄモデルは、シャツのためのロゴを表現し、それは、ユーザによって着用されている実世界のシャツの画像上にロゴを重ねるように実装され得る。これは、ロゴを含むシャツのバリエーションを描写し得る。別の例では、３Ｄモデルは、ベルを表現し、そのベルは、ベルを含む自転車のバリエーションを描写するために、実世界の自転車の画像上に重ねられ得る。

３Ｄレコード８１０内の３Ｄモデルは、数多くの異なる手法のうちのいずれかで取得され得る。いくつかの実装では、３Ｄモデルのうちの少なくともいくつかは、例えば、顧客から、または商人から等、ＡＲエンジン８０２のユーザから取得される。商人は、彼らの店舗において販売されている製品のうちのいずれか、それらのうちの１つ、それらのうちのいくつか、またはそれら全てのための１つ以上の３Ｄモデルを生成し得る。これらの３Ｄモデルは、商人によってＡＲエンジン８０２に直接提供され得るか、または、ＡＲエンジン８０２は、ｅコマースプラットフォーム上の商人のアカウントから、および／または商人のオンライン店舗から３Ｄモデルを取得し得る。３Ｄモデルは、例えばソーシャルメディアプラットフォーム等の他のプラットフォームからも取得され得る。加えて、いくつかの３Ｄモデルは、ＡＲエンジン８０２においてローカルで生成され得る。例えば、ＡＲエンジン８０２によって取得される画像またはスキャンは、３Ｄモデルを生成するために使用され得る。

画像アナライザ８１２は、ＡＲエンジン８０２によって受信され、かつ／または記憶されている画像を分析するために提供される。画像アナライザ８１２は、ＡＲ体験のためのＳＬＡＭプロセスの少なくとも一部を実装し得る。例えば、画像アナライザ８１２は、実世界空間の１つ以上の画像から実世界空間の表現を生成し、実世界空間内でユーザおよび／またはユーザデバイスを位置決めし得る。実世界空間の表現は、仮想座標系内に画定された表面、縁および／または角を含み得る。

いくつかの実装では、画像アナライザ８１２は、実世界アイテム８５０上の点８５２等の実世界アイテム上の複数の点の相対位置を決定することに役立つように、センサ８４０から受信された画像を分析するために使用される。例として、画像分析は、実世界アイテムの表面、縁、および／または角等の実世界アイテムの特徴を検出し、これらの特徴の３Ｄでの寸法および相対位置を決定し得る。そして、特徴の相対位置は、実世界アイテム上の複数の点の相対位置を取得するために使用され得る。

複数の画像が、画像アナライザ８１２に入力され得る。例えば、異なる位置から撮影された実世界アイテムの複数の画像が、実世界アイテム上の多くの数の点の検出および位置決めを可能にし得る。複数の画像は、例えば、ビデオストリームから、および／または複数の異なるカメラから取得され得る。画像アナライザ８１２が実世界アイテムのビデオストリームを受信する場合、画像アナライザ８１２は、実世界アイテムの特徴を位置特定するための初期特徴検出動作を実施し得る。そして、これらの特徴は、リアルタイムでビデオストリームから受信された連続する画像において追跡され得る。連続する画像において検出された新たな特徴は、実世界アイテム上のより多くの点の相対位置を決定するために使用され得る。

画像アナライザ８１２は、プロセッサ８０４によって実行可能であるソフトウェア命令の形式で実装され得る。数多くの異なるアルゴリズムのうちのいずれかが、画像アナライザ８１２内に含まれ得る。そのようなアルゴリズムのうちの非限定的な例は、
・表面、角、および／または縁検出アルゴリズム
・物体認識アルゴリズム
・運動検出アルゴリズム
・画像分割アルゴリズム
を含む。

画像分析アルゴリズムに関するさらなる詳細が、Ｒｉｃｈａｒｄ Ｓｚｅｌｉｓｋｉによる「Ｃｏｍｐｕｔｅｒ Ｖｉｓｉｏｎ： Ａｌｇｏｒｉｔｈｍｓ ａｎｄ Ａｐｐｌｉｃａｔｉｏｎｓ」（ＩＳＢＮ： ９７８－１－８４８８２－９３５－０（Ｓｐｒｉｎｇｅｒ、２０１０））において見出されることができ、その内容は、それら全体が参照によって本明細書中に援用される。

実世界アイテムに組み込まれたマーカは、画像アナライザ８１２によって検出され、かつ位置決めされ得る。これらのマーカは、マーカが画像分析を通して比較的容易に検出可能であるように構成され得る。例えば、実世界アイテム上の明るい色、発光素子、および／または光反射素子は、画像分析を通して比較的容易に検出可能であり得る。画像アナライザ８１２は、マーカが対応している実世界アイテム上の点を決定するために、マーカによって提供される機械読み取り可能なコードを読み取るようにも構成され得る。

画像アナライザ８１２は、実世界アイテムの画像を分析し、アイテム上の複数の点の相対位置を決定するために、１つ以上の機械学習（ＭＬ）モデルを実装し得る。アイテムは、ＭＬモデルによって検出されて位置決めされるマーカを含み得るが、これは常に当てはまるわけではない。ＭＬモデルは、代わりに、アイテムの特定の内在する物理的特性を位置決めするように訓練され得る。

一例によると、画像アナライザ８１２によって実装されるＭＬモデルのための訓練データセットは、実世界アイテム上の複数の点にＲＦＩＤトランスポンダを組み込むことによって生成される。ＲＦＩＤトランスポンダは、アイテム上に見えない。そして、アイテムの光学画像（例えば、デジタル写真）が取得され、ＲＦＩＤトランスポンダの位置を同時に測定する。光学画像およびＲＦＩＤトランスポンダの測定された位置が、ＭＬモデルのための訓練データセットを形成し得る。例えば、ＲＦＩＤトランスポンダの位置は、光学画像をラベル付けするために使用され得、これは、ＭＬモデルを訓練するためのラベル付けされたデータのセットを作成する。そして、ＭＬモデルは、ある時点において捕捉された光学画像に基づいて、その時点での各ＲＦＩＤトランスポンダの測定された位置を予測するように訓練され得る。訓練後、ＭＬモデルは、そのアイテムおよび同様のアイテム（例えば、同一の製品のアイテム）の光学画像を処理し、ＲＦＩＤトランスポンダが組み込まれた点に対応するアイテム上の点を検出して位置決めし得る。他の例では、実世界アイテム内のジャイロスコープからの慣性データ、実世界アイテム内の加速度計からの加速度データ、および／または光学画像の手動ラベル付けはまた、あるいは、または、代わりに、ＭＬモデルのための訓練データセットを作成するために使用され得る。

３Ｄモデルディストータ８１４は、対応する実世界アイテム上の複数の点の相対位置に基づいて３Ｄモデルを歪めるために（可能ならば、プロセッサ８０４によって実行可能なソフトウェア命令の形式で）１つ以上のアルゴリズムを採用および／または実装する。結果として生じる歪められた３Ｄモデルの形状は、実質的に、実世界アイテムの形状に合致し得る。例として、３Ｄモデルディストータ８１４は、点８５２の相対位置に基づいて、実世界アイテム８５０に対応する３Ｄモデルを歪め得る。この３Ｄモデルは、３Ｄモデルレコード８１０から取得され得、点の相対位置が、センサ８４０からの測定値を使用して、画像アナライザ８１２によって決定され得る。

いくつかの実装では、３Ｄモデルディストータ８１４は、実世界アイテム上の点の測定された位置に基づいて、３Ｄモデルの点をマッピングし、または別様にその点を位置変更し得る。そして、多角形モデリング、曲線モデリング、および／またはデジタルスカルプティングが、位置変更された点に基づいて歪められた３Ｄモデルを形成するために、３Ｄモデルディストータ８１４によって使用され得る。このようにして、歪められた３Ｄモデルの形状は、実世界アイテムの形状に対応し得る。

ＡＲコンテンツジェネレータ８１６は、１人以上のユーザのためのＡＲコンテンツを生成するために（可能ならば、プロセッサ８０４によって実行可能なソフトウェア命令の形式で）１つ以上のアルゴリズムを採用および／または実装する。このＡＲコンテンツは、ＡＲ体験をユーザに提供し得る。

ＡＲを生成するために、ＡＲコンテンツジェネレータ８１６への可能な入力は、以下を含み得る。
・１つ以上の３Ｄモデル。例えば、３Ｄモデルが、３Ｄモデルレコード８１０から取得され得る。
・１つ以上の歪められた３Ｄモデル。例えば、３Ｄモデルが、３Ｄモデルディストータ８１４から取得され得る。
・ユーザに関連付けられた実世界空間の表現。実世界空間の表現は、ＳＬＡＭプロセスおよび／または画像アナライザ８１２を使用して取得され得る。実世界空間の表現は、仮想座標系内に画定され得る。
・実世界空間内のユーザおよび／またはユーザデバイスの位置（例えば、ＳＬＡＭプロセスおよび／または画像アナライザ８１２を使用して決定される）。
・実世界空間内の１つ以上の実世界アイテムの位置（例えば、ＳＬＡＭプロセスおよび／または画像アナライザ８１２を使用して決定される）。
・実世界空間内の実世界アイテム上の複数の点の位置（例えば、画像アナライザ８１２を使用して、ならびに／または、電波測定値、慣性測定値および／または磁気測定値の分析を通して決定される）。

ＡＲコンテンツジェネレータ８１６によって出力されるＡＲコンテンツは、視覚コンテンツ、触覚コンテンツ、および／または音響コンテンツを含み得る。この視覚コンテンツ、触覚コンテンツ、および／または音響コンテンツは、実世界空間内のユーザおよび／またはユーザデバイスの相対位置（場所および向きを含む）に基づいて生成され得る。このようにして、ＡＲコンテンツは、文脈的に類似した態様で実世界空間のユーザの知覚を仮想的に変更し得る。

視覚コンテンツは、ユーザがＡＲ体験内で仮想的な模様、グラフィクス、および／または物体を視認することを可能にし得る。いくつかの実装では、視覚コンテンツは、ユーザを囲う実世界空間上に重ねられ得る。これは、例えばカメラによって捕捉された実世界空間の画像に視覚コンテンツを合成することを含み得る。あるいは、視覚コンテンツは、例えばＡＲヘッドセット内の透明ディスプレイを使用して実世界空間上に重ねられ得る。いくつかの実装では、ＡＲコンテンツは、アイテムの物理的外観を変化させるように実世界アイテム上に重ねられた３Ｄモデルのレンダリング表現を含む。これは、製品の複数の視覚バリエーションが同一の実世界アイテム上で視認されることを可能にし得る。

触覚コンテンツは、ユーザがＡＲ体験内で仮想テクスチャに接触し、感触を確かめることを可能にし得る。触覚コンテンツは、実世界アイテムのテクスチャを変更し得る。コマース用途において、これは、ユーザが製品の無地のアイテムと相互作用し、製品の１つ以上の他のバリエーションのテクスチャの感触を確かめることを可能にし得る。触覚コンテンツは、少なくとも部分的に嵌め込み型ハプティクスを有する衣類を使用して実装され得る。

音響コンテンツは、ユーザがＡＲ体験内で音を聞くことを可能にし得る。音響コンテンツは、ＡＲ体験内での音響コンテンツの源に対するユーザの位置に対応する方向性を有する空間的音響を実装し得る。いくつかの実装では、空間的音響は、ユーザの各耳内へ再生される音を独立して制御することによって生み出される。

ＡＲコンテンツは、ＡＲ体験における変化および／または修正を反映するために、ＡＲコンテンツジェネレータ８１６によって、継続的または断続的に更新されることができる。例えば、３Ｄモデルが実世界アイテムの外観を変更するために使用されており、ユーザが実世界アイテムに対して動く場合、実世界アイテムに対するユーザの新たな位置を反映するために、新たなＡＲコンテンツが生成され得る。新たなＡＲコンテンツは、実世界アイテムに対するユーザの新たな位置に基づく３Ｄモデルの新たなレンダリング表現を含み得る。さらに、実世界アイテムが変形可能であり、かつ経時的に形状を変化させる場合、新たなＡＲコンテンツは、実世界アイテムのリアルタイムの形状に基づいて歪められた３Ｄモデルを使用して生成され得る。

画像アナライザ８１２、３Ｄモデルディストータ８１４、およびＡＲコンテンツジェネレータ８１６が、メモリ８０６内に別個に記憶されているように例証されているが、これは単なる例である。いくつかの実施形態は、画像アナライザ８１２、３Ｄモデルディストータ８１４、および／またはＡＲコンテンツジェネレータ８１６の機能をメモリ８０６または別のコンピュータ読み取り可能な媒体内に記憶されている単一のソフトウェアインスタンスに組み合わせ得る。

ＡＲエンジン８０２によって生成されたＡＲコンテンツは、ユーザデバイス８３０における提示のために出力され得る。例えば、ＡＲコンテンツは、ユーザインタフェース８３６上に表示され得る。従って、ユーザデバイス８３０は、ユーザがＡＲエンジン８０２によって提供されるＡＲ体験に関与することを可能にし得る。図５では、１つのユーザデバイスが例として示されている。しかしながら、複数のユーザデバイスが、ＡＲエンジン８０２と通信し、および／またはＡＲエンジンからＡＲコンテンツを受信し得る。

ＡＲエンジン８０２は、例として提供される。ＡＲエンジンの他の実装も想定される。いくつかの実装では、ＡＲエンジンは、ｅコマースプラットフォームのコア機能として、または、ｅコマースプラットフォームによってサポートされるかもしくはｅコマースプラットフォームと通信するアプリケーションもしくはサービスとして、ｅコマースプラットフォームによって少なくとも部分的に提供される。いくつかの実装では、ＡＲエンジンは、ＡＲコンテンツを生成するためのスタンドアロン型サービスとして実装される。ＡＲエンジン８０２は、単一のコンポーネントとして示されているが、ＡＲエンジンは、代わりに、ネットワークを介して通信する複数の異なるコンポーネントによって提供され得る。

いくつかの実装では、ユーザデバイス８３０は、ＡＲコンテンツ生成能力を有する。例えば、ＡＲエンジン８０２と同様のＡＲエンジンが、部分的または全体的にユーザデバイス８３０上で実装され得る。ソフトウェアアプリケーションまたはインスタンスは、ユーザデバイス８３０上にインストールされ、ＡＲコンテンツをローカルで（すなわち、ユーザデバイス８３０上で）生成し得る。ソフトウェアアプリケーションは、３Ｄモデルレコード８１０、画像アナライザ８１２、３Ｄモデルディストータ８１４、および／またはＡＲコンテンツジェネレータ８１６のうちの少なくともいくつかを、ＡＲエンジン８０２から受信し得る。

ここで図９を参照すると、ある実施形態による歪められた３Ｄモデルを使用してＡＲコンテンツを生成するための方法９００を例証するフロー図が示されている。方法９００は、実世界アイテム８５０を仮想的に変更するために図８のＡＲエンジン８０２によって実施されるように説明される。しかしながら、代わりに、方法９００の少なくとも一部が、例えばユーザデバイス８３０等の別の場所で実施され得る。さらに、方法９００は実世界アイテム８５０に関連して上で説明されるが、方法９００は、より概略的には、任意のアイテムおよび／またはアイテムの任意の部分を仮想的に変更するために適用され得る。これらのアイテムは、変形可能なアイテムであり得、その非限定的な例は、衣類、靴、および家具を含む。

ステップ９０２は、プロセッサ８０４が実世界アイテム８５０上の複数の点の相対位置を決定することを含む。これらの点は、限定ではないが、点８５２を含み得る。実世界アイテム８５０上の複数の点の相対位置は、ある時点における実世界アイテム８５０（または実世界アイテム８５０の少なくとも一部）のおおよその形状を示し、またはそれを提供し得、ステップ９０２の後、メモリ８０６内に記憶され得る。

いくつかの実装では、実世界アイテム８５０上の点の決定された位置は、ＡＲ体験の仮想座標系内に画定される。例えば、ＳＬＡＭプロセスが、実世界アイテム８５０を囲む実世界空間に仮想座標系をマッピングするために使用され得る。そして、実世界アイテム８５０上の複数の点の位置は、仮想座標系内の座標として画定され得る。ユーザおよび／またはユーザデバイス８３０の位置も、仮想座標系内に画定され得る。

実世界アイテム上の点の決定された位置が場所および向きを含み得ることが留意されるべきである。例えば、実世界アイテム８５０の表面上の点は、表面上の点の場所（例えば、仮想座標系における点の座標等）と点における表面に対する法線ベクトルとによって画定され得る。

いくつかの実装では、ステップ９０２は、随意にセンサ８４０を使用して実世界アイテム８５０の測定値を取得することを含む。そのような測定値の非限定的な例は、光学測定値、電波測定値、慣性測定値、および／または磁気測定値を含む。測定値は、実世界アイテム８５０上の複数の点の相対位置を決定するために、ユーザデバイス８３０のプロセッサ８３２によって分析され得る。そして、点の相対位置は、ＡＲエンジン８０２に伝送され得る。あるいは、または、加えて、測定値は、プロセッサ８０４による分析のために、ユーザデバイス８３０からＡＲエンジン８０２に伝送され得る。例えば、光学画像は、実世界アイテム８５０上の複数の点の相対位置を決定するために、画像アナライザ８１２に入力され得る。

いくつかの実装では、実世界アイテム８５０上の複数の点の相対位置を決定することに役立つように、ステップ９０２においてＭＬモデルが使用される。本明細書中の別の箇所でさらに詳細に議論されるように、ＭＬモデルは、実世界アイテム８５０の光学測定値および／または他の測定値を使用して実世界アイテム８５０上の点を検出して位置決めするように訓練され得る。ステップ９０２は、ＭＬモデルにこれらの測定値を入力することと、ＭＬモデルの出力を取得することとを含み得る。そして、実世界アイテム８５０上の点の相対位置は、ＭＬモデルの出力に基づいて決定され得る。このＭＬモデルは、例えば画像アナライザ８１２によって実装され得る。

上で留意されるように、マーカが実世界アイテム８５０上の複数の点において実装され得る。ステップ９０２は、各マーカの相対位置を決定することを含み得、各マーカは、実世界アイテム８５０上のそれぞれの点の位置として使用され得る。いくつかの実装では、マーカは、光学マーカであるか、またはそれを含み得る。これらの実装では、ステップ９０２は、例えばセンサ８４０から実世界アイテム８５０の１つ以上の画像を取得することし（例えば画像アナライザ８１２を使用して）画像に画像分析を実施し、マーカを検出および／または位置決めすることを含み得る。

実世界アイテム８５０のいくつかの点は、特定の状況において、測定値を通して検出可能でないこともある。例えば、実世界アイテム８５０が衣類等の変形可能なアイテムであるとき、実世界アイテム８５０の流れまたは折れ曲がりは、いくつかの点が仮想的に塞がれるようにし得る。実世界アイテム８５０の一部の非検出は、実世界アイテム８５０の表面における折れ曲がりまたはしわとしてＡＲエンジン８０２によって構築され得る。例として、実世界アイテム８５０がＱＲコード（登録商標）を含み、ＱＲコード（登録商標）のうちのいくつかが光学測定値を通して検出可能ではないとき、塞がれたＱＲコード（登録商標）の位置は、１つ以上の折れ曲がりとして指定され得る。あるいは、または、加えて、実世界アイテム８５０の一部の非検出は、実世界アイテム８５０のその部分を遮断する別の物体としてＡＲエンジン８０２によって構築され得る。画像分析を通した実世界アイテム８５０上の影の検出は、例えば、実世界アイテム８５０内の折れ曲がりまたはしわの位置を決定するための別の潜在的な方法である。

実世界アイテム８５０内の折れ曲がりまたはしわの検出は、例えばモーションキャプチャスーツの使用とは別物である。モーションキャプチャスーツは、画定された基準点にマーカを有し、スーツを皮膚に密着させることによって、それらのマーカがずれ、不必要に塞がれるようになることを抑止するように構成される。モーションキャプチャスーツの皮膚密着性質は、スーツの折れ曲がりをわざと低減させ得る。対照的に、例えば衣料等の多くの製品は、折れ曲がりやすく、折れ曲がるように設計されることさえあり得る。

ステップ９０４は、プロセッサ８０４がステップ９０２において決定された実世界アイテム８５０上の複数の点の相対位置に基づいて仮想アイテムの３Ｄモデルを歪めることを含む。仮想アイテムの３Ｄモデルは、実世界アイテム８５０に対応し得る。例えば、３Ｄモデルは、実世界アイテム８５０を表現するように生成され得、実世界アイテム８５０または同様のアイテム（例えば、商人によって販売されている同一の製品のアイテム）の３Ｄスキャンに基づいて生成されることさえあり得る。しかしながら、３Ｄモデルは、実世界アイテム８５０全体ではなく、実世界アイテム８５０の一部のみを表現し得る。

いくつかの実装では、ステップ９０４は、ステップ９０２において決定された点の相対位置に対応する相対位置内にあるように、３Ｄモデルにおいて点を位置変更するように３Ｄモデルを修正することを含む。そして、多角形モデリング、曲線モデリング、および／またはデジタルスカルプティングが、位置変更された点を接続して歪められた３Ｄモデルを形成するために使用され得る。その結果、歪められた３Ｄモデルの形状は、実世界アイテム８５０の形状に実質的に合致し得る。

いくつかの実装では、ステップ９０４は、実世界アイテム８５０の３Ｄモデルおよび／またはその複数の点の相対位置を３Ｄモデルディストータ８１４に入力することを含む。仮想アイテムの歪められた３Ｄモデルは、３Ｄモデルディストータ８１４からの出力から取得され得る。

ステップ９０４において生成された歪められた３Ｄモデルは、実世界アイテム８５０のユーザの知覚を変更するために使用され得る。いくつかの実装では、３Ｄモデルは、実世界アイテム８５０のための視覚的外観を含む。同様に、または代わりに、３Ｄモデルは、実世界アイテム８５０のための仮想的な音および／またはテクスチャを含み得る。視覚的外観、音、および／またはテクスチャは、実世界アイテム８５０の特定のバリエーションを刺激し得る。例えば、実世界アイテム８５０が商人によって販売されている特定の製品に対応するとき、３Ｄモデルは、その製品の特定のバリエーションを模し得る。

ステップ９０４において歪められた３Ｄモデルは、３Ｄモデルレコード８１０から取得され得る。３Ｄモデルレコード８１０から特定の３Ｄモデルを選択することは、数多くの異なる手法のうちのいずれかで実施され得る。いくつかの場合、３Ｄモデルは、例えばユーザデバイス８３０におけるユーザ入力を介して、３Ｄモデルのセットから能動的に選択され得る。選択された３Ｄモデルは、例えば、ユーザが仮想的に相互作用することを望む実世界アイテム８５０の特定のバリエーションに対応し得る。

いくつかの実装では、ステップ９０４において歪められた３Ｄモデルは、コンピュータプラットフォームによって自動的に選択され、提案され得る。例えば、ＡＲエンジン８０２は、ユーザデバイス８３０のユーザのために１つ以上の３Ｄモデルを提案し得る。そして、ユーザは、ユーザインタフェース８３６における入力を介して、提案された３Ｄモデルのうちの１つを選択し得る。

実世界アイテム８５０のための３Ｄモデルを自動的に選択または提案することは、例えば実世界アイテム８５０に対応する製品もしくは製品タイプ、および／または、実世界アイテム８５０を販売する商人の身元等、実世界アイテム８５０に関するいくつかの情報の使用を伴い得る。製品、製品タイプ、および／または商人の身元は、ユーザデバイス８３０におけるユーザ入力を通してユーザによって提供され得る。あるいは、または、加えて、実世界アイテム８５０の測定値は、実世界アイテム８５０に対応する製品、製品タイプおよび／または商人を自動的に識別するために使用され得る。

一例によると、実世界アイテム８５０上のマーカの特定の配置は、商人によって販売される特定の製品に対応し得る。（可能ならばＭＬモデルを使用した）マーカの相対位置の分析を通して、プロセッサ８０４は、製品のための製品番号、および／または製品を販売する商人の身元を取得し得る。別の例によると、実世界アイテム８５０上のＱＲコード（登録商標）は、製品番号および／または商人を識別することに役立つような情報をエンコードし得る。製品番号および／または商人の身元を取得した後、ＡＲエンジン８０２は、実世界アイテム８５０のための３Ｄモデルを選択し、提案し得る。これらの３Ｄモデルは、商人によって販売されるその製品の外観を変更する特定の目的のために生成され得る。

ユーザの好みはまた、あるいは、または、代わりに、実世界アイテム８５０のための３Ｄモデルを自動的に選択または提案することに役立つように使用され得る。例えば、実世界アイテム８５０に対応する製品および／または商人が識別されると、その製品および／または商人に対応する３Ｄモデルのリストが、３Ｄモデルレコード８１０から取得され得る。そして、ユーザの好みは、このリストから３Ｄモデルのサブセットを選択するために、ＡＲエンジン８０２によって使用され得る。一例では、ユーザデバイス８３０のユーザが実世界アイテム８５０と同様の黄色の製品を過去に購入している場合、ユーザのために選択または提案される３Ｄモデルは、実世界アイテム８５０の黄色のバリエーションを提供し得る。別の例では、他のユーザが典型的に実世界アイテム８５０の特定のバリエーションを購入および／または視認する場合（すなわち、そのバリエーションは、顧客に人気である）、そのバリエーションに対応する３Ｄモデルが、ユーザデバイス８３０のユーザのためにＡＲエンジン８０２によって選択または提案され得る。

ユーザの好みのレコードは、ユーザのために３Ｄモデルを自動的に選択または提案することに役立つようにＡＲエンジン８０２によって記憶され得るが、これは常に当てはまるわけではない。ユーザの好みのレコードはまた、別の場所に記憶され、ＡＲエンジン８０２によってアクセスされ得る。ユーザの好みのレコードは、例えばルックアップテーブルの形式で記憶され得る。

いくつかの実装では、随意にＡＲエンジン８０２によって提供されるＭＬモデルが、ユーザの過去の購入、他のユーザの好み、および／または他のユーザの活動に基づいてユーザの好みを予測するように訓練される。ユーザの好みのレコードは、そのようなＭＬモデルのための訓練データセットの少なくとも一部を形成し得る。そして、訓練されたＭＬモデルは、ユーザデバイス８３０に関連付けられたユーザの好みに合致する実世界アイテム８５０のための３Ｄモデルを提案または選択するように実装され得る。

ステップ９０６は、プロセッサ８０４がユーザデバイス８３０または別の場所における提示のためにＡＲコンテンツを生成することを含む。ステップ９０６において生成されるＡＲコンテンツは、ステップ９０４において生成される歪められた３Ｄモデルに基づき得る。例えば、ステップ９０６は、歪められた３Ｄモデルをレンダリングすることを含み得る。ＡＲコンテンツは、レンダリング表現を使用して実世界アイテム８５０に重ね、仮想的に実世界アイテム８５０の外観を変更し得る。図６～図７は、ＡＲコンテンツを実世界アイテム上に重ね、実世界アイテムの外観を変更する例を提供する。同様に、または、代わりに、ステップ９０６において生成されるＡＲコンテンツは、実世界アイテム８５０を変更する音および／またはテクスチャを提供し得る。

いくつかの実装では、ステップ９０６において生成されるＡＲコンテンツは、歪められた３Ｄモデルと、画像処理技術（例えば、クロマキー合成等）との組み合わせに基づいている。均一な色であり１つの場所にロゴを有する実世界アイテム８５０のバリエーションを描写するようにＡＲコンテンツが生成される場合を考慮されたい。クロマキー合成は、実世界アイテム８５０に均一な色を仮想的に追加するために使用され得る。歪められた３Ｄモデルは、ロゴのみを表現し得、３Ｄモデルのレンダリング表現は、実世界アイテム８５０の形状に基づくロゴの描写を提供するために使用され得る。これは、実世界アイテム８５０全体の３Ｄモデルではなく、ロゴ（またはロゴに対応する実世界アイテム８５０の一部）の３Ｄモデルのみが歪められ、レンダリングされるので、ＡＲエンジン８０２における演算資源を節約し得る。

随意のステップ９０８では、ステップ９０６において生成されたＡＲコンテンツが、ユーザデバイス８３０上での表示のためにプロセッサ８０４によって出力される。ＡＲコンテンツの形式は、本明細書中で限定されない。ユーザデバイス８３０のセンサ８４０がカメラを含む場合、ＡＲコンテンツは、カメラによって捕捉された実世界アイテム８５０の画像（またはビデオのフレーム）に合成された歪められた３Ｄモデルのレンダリング表現を含み得る。レンダリング表現は、画像上に実世界アイテム８５０の描写を重ね、実世界アイテム８５０の外観を変更し得る。

いくつかの実装では、歪められた３Ｄモデルは、実世界アイテム８５０の画像に対応する視座または視点からレンダリングされ、それによって、レンダリング表現は、画像内の実世界アイテム８５０のサイズおよび向きに実質的に合致する。画像分析（例えば、画像アナライザ８１２を使用するもの）が、画像に対応する視座を決定するために使用され得る。センサ８４０によって捕捉された同一の画像も、実世界アイテム８５０上の点の相対位置を決定するために、ステップ９０２において使用され得る。

ユーザデバイス８３０が透明ディスプレイを有するデバイスである場合、歪められた３Ｄモデルのレンダリング表現は、透明ディスプレイを通して実世界アイテム８５０のユーザの眺め上に重ねられ得る。ここで、歪められた３Ｄモデルは、ユーザの視点からの実世界アイテム８５０のサイズおよび向きを正確に反映するために、実世界アイテム８５０に対するユーザデバイス８３０および／またはユーザの位置に基づいてレンダリングされ得る。方法９００は、実世界アイテム８５０に対するユーザおよび／またはユーザデバイス８３０のこの位置を決定することをさらに含み得る。例えば、センサ８４０によって捕捉された測定値は、随意にＳＬＡＭプロセスを使用して、実世界アイテム８５０に対するユーザデバイス８３０および／またはユーザの位置、視座および／または視点を決定するために分析され得る。

ステップ９０２、９０４、９０６、９０８は、経時的な実世界アイテム８５０に対するユーザおよび／またはユーザデバイス８３０の動きを反映する更新されたＡＲコンテンツを提供するために複数回繰り返され得る。同様に、または、代わりに、更新されたＡＲコンテンツは、実世界アイテム８５０の形状の変化を反映し得る。例えば、実世界アイテム８５０は、可撓性表面を有する衣料であり、実世界アイテム８５０が形状を変化させることを可能にし得る。ステップ９０２、９０４、９０６、９０８を断続的または継続的に実施することは、実世界アイテム８５０の変動する形状を追跡し、変動する形状に基づいて３Ｄモデルを歪め、ＡＲコンテンツを生成して、その変動する形状を反映する態様で実世界アイテム８５０の外観を変更し得る。

一例によると、実世界アイテム８５０は、第１の形状で開始する。ステップ９０２の第１のインスタンスは、この第１の形状である実世界アイテム８５０上の複数の点の第１の相対位置を決定するために実施され、これは、第１の形状がＡＲエンジン８０２によって決定されることを可能にし得る。ステップ９０４の第１のインスタンスでは、３Ｄモデルが、第１の形状を反映する第１の歪められた３Ｄモデルを生成するために、複数の点の第１の相対位置に基づいて歪められる。そして、ステップ９０６において、第１のＡＲコンテンツが、第１の歪められたモデルに基づいて生成される。その後、実世界アイテム８５０は、第２の形状であり得る。ステップ９０２の第２のインスタンスは、第２の形状である実世界アイテム８５０上の複数の点の第２の相対位置を決定するために実施され、それによって、第２の形状を潜在的に決定する。そして、ステップ９０４、９０６の第２のインスタンスは、第２の歪められた３Ｄモデルに基づいて第２のＡＲコンテンツを生成し得、第２の歪められた３Ｄモデルは、第１の歪められた３Ｄモデルを歪めることによって、または実世界アイテム８５０上の点の第２の相対位置に基づいて元の３Ｄモデルを歪めることによって、生み出され得る。

随意のステップ９１０は、プロセッサ８０４がステップ９０４において歪められた仮想アイテムの３Ｄモデル（第１の３Ｄモデルと称される）を仮想アイテムの第２の３Ｄモデルと取り替えるための命令を取得することを含む。この命令は、ユーザデバイス８３０におけるユーザ入力に由来し得る。例えば、第１の３Ｄモデルは、実世界アイテム８５０の１つのバリエーションに対応し得るが、ユーザデバイス８３０のユーザは、実世界アイテム８５０の異なるバリエーションを視認することを望み得る。ユーザデバイス８３０を使用して、ユーザは、ＡＲコンテンツを介して異なるバリエーションを視認するための命令を生成し得、これは、ＡＲエンジン８０２によって、第１の３Ｄモデルを第２の３Ｄモデルと取り替えるための命令として解釈される。そして、ステップ９０２、９０４、９０６、９０８は、第２の３Ｄモデルの歪められたバージョンに基づいてさらなるＡＲコンテンツを生成するように繰り返され得る。

方法９００は、商人が小売店内に製品の複数の異なるバリエーションを保管することを回避することを可能にし、それによって、比較的小さい店舗が広範な種類の製品のバリエーションを顧客に提供することを可能にするためのコマースアプリケーションとして実装され得る。方法９００は、コマースのコンテキスト以外にも適用され得る。例えば、
・方法９００は、ビデオチャットの参加者が彼らの衣類を仮想的に変更することを可能にするために適用され得る。参加者によって着用されている衣服は、衣類の形状を決定することに役立つようなマーカを含み得る。
・方法９００は、スポーツイベントのプレーヤの衣類を仮想的に変更するために適用され得る。例えば、方法９００は、試合中にホッケーセーター上のブランドマークを変更するために使用され得、放送中、プレーヤの衣類に地域のスポンサーを追加するために使用され得る。
・方法９００は、ユーザが衣類上に仮想要素を配置することを可能にするために適用され得る。そのような要素の非限定的な例は、アポイントメントについての情報、時計、天気についての情報、および着用者の気分のインジケーションを含む。これらの要素は、透明ディスプレイを有するヘッドセットを使用して視認され得、要素は、着用者が動くと、衣類と共に流れ得る。
ＡＲコンテンツを生成して実世界アイテムを仮想的に変更するさらなる例

図１０～図１８は、歪められた３Ｄモデルを使用して変形可能な実世界アイテムを仮想的に変更するために生成されるＡＲコンテンツの例を提供する。

図１０は、ある実施形態によるスクリーンページ１００２を表示するユーザデバイス１０００を例証している。スクリーンページ１００２は、シャツ１０１０を着用して鏡の前に立っているユーザの画像１００４を含む。例証される例では、画像１００４は、ユーザデバイス１０００上のカメラによって捕捉される。

いくつかの実装では、画像１００４は、小売店内で捕捉され、ユーザは、小売店でシャツ１０１０を試着している。あるいは、シャツ１０１０は、ユーザに郵送されており、ユーザは、彼らの家の中でシャツ１０１０を試着していることもある。

シャツ１０１０は、商人によって販売される変形可能な実世界製品の１つのバリエーションであり、さらにその製品の無地のアイテムとみなされ得る。しかしながら、いくつかの場合、ユーザは、製品の異なるバリエーションを視認することに興味があることもある。これらの製品のバリーションは、小売店内で物理的に入手可能ではないこともあり、ユーザに郵送されていないこともあり、従って、ユーザは、異なるバリエーションを物理的に試着することが可能ではないこともある。

ユーザがユーザデバイス１０００を介してシャツ１０１０の異なるバリエーションと仮想的に相互作用することを可能にするために、スクリーンページ１００２は、複数のオプション１００６、１００８を含む。例証されるように、オプション１００６、１００８の各々は、シャツ１０１０のための異なる模様に対応する。これらの模様は、シャツ１０１０の異なるバリエーションを描写する。オプション１００６、１００８のうちの１つを選択することは、図９の方法９００が対応する模様をシャツ１０１０に追加するＡＲコンテンツを生成するように実装されることをもたらし得る。このようにして、方法９００は、ユーザが異なる実世界アイテムを試着する必要なくシャツ１０１０の複数の異なるバリエーションを視認することを可能にし得る。

いくつかの実装では、オプション１００６、１００８は、ＡＲエンジンによって自動的に生成された製品提案に基づいて提供される。ＡＲエンジンは、例えば画像１００４の分析を通して、シャツ１０１０のための製品番号および／またはシャツ１０１０を販売する商人の身元を決定し得る。製品番号および／または商人の身元を使用して、ＡＲエンジンは、オプション１００６、１００８に対応する模様を提供する３Ｄモデルを取得し得る。これらの３Ｄモデルは、製品番号および／または商人に関連付けられた３Ｄモデルの全てであり得るか、または、それらは、全ての利用可能な３Ｄモデルのうちのサブセットであり得る。上でさらに詳細に概説されるように、このサブセットは、ユーザの好みに基づいて選択され得る。

図１１は、スクリーンページ１００２内のオプション１００８のユーザ選択に応答して生成される歪められた３Ｄモデル１１００を例証している。歪められた３Ｄモデル１１００は、オプション１００８で示されるシャツ１０１０のための模様を提供し、仮想座標系１１０２の原点に画定される。ユーザデバイス１０００の位置１１０４も、仮想座標系１１０２内に画定される。この位置１１０４は、画像１００４におけるシャツ１０１０の相対位置に対応する。つまり、仮想座標系１１０２における歪められた３Ｄモデル１１００と位置１１０４との間の距離は、ユーザデバイス１０００から鏡までの実世界の距離に、シャツ１０１０から鏡までの距離を加えたものにほぼ等しい。位置１１０４は、画像１００４の分析を通して、および／または他の測定値の分析を通して決定され得る。

歪められた３Ｄモデル１１００は、仮想座標系１１０２内に画定された複数の点１１０６を含む。点１１０６の相対位置は、方法９００のステップ９０２において決定され得るシャツ１０１０上の複数の点の相対位置に対応する。例えば、画像１００４および／または他の測定値が、シャツ１０１０上の点の相対位置を決定するために分析され得る。画像１００４内に見えないが、シャツ１０１０は、点の相対位置を決定することに役立つようなマーカを含み得る。

歪められた３Ｄモデル１１００は、随意に方法９００のステップ９０４において、シャツ１０１０上の点の相対位置に対応する相対位置にあるように、点１１０６を位置変更することによって生成され得る。その結果、歪められた３Ｄモデル１１００の形状は、画像１００４に示されるシャツ１０１０の形状に実質的に合致する。これは、例えば歪められた３Ｄモデル１１００の輪郭、折れ曲がり、およびしわとして反映される。そのうえ、歪められた３Ｄモデル１１００によって提供される模様は、シャツ１０１０の形状に対応するように変形させられる。従って、歪められた３Ｄモデル１１００は、写実的態様でシャツ１０１０の外観を変更するために使用され得る。

図１２は、スクリーンページ１００２内のオプション１００８のユーザ選択に応答して生成されるスクリーンページ１２０２を表示するユーザデバイス１０００を例証している。スクリーンページ１２０２は、歪められた３Ｄモデル１１００のレンダリング表現１２０６を備えるＡＲコンテンツ１２０４を含む。ＡＲコンテンツ１２０４は、例えば方法９００のステップ９０６において生成され得る。レンダリング表現１２０６は、歪められた３Ｄモデル１１００に対する仮想座標系１１０２におけるユーザデバイス１０００の位置１１０４に基づいて生成され、それによって、ＡＲコンテンツ１２０４内のレンダリング表現１２０６のサイズおよび向きは、画像１００４内のシャツ１０１０のサイズおよび向きに対応する。

ＡＲコンテンツ１２０４において、レンダリング表現１２０６は、レンダリング表現１２０６がシャツ１０１０の外観を変更するように、画像１００４に重ねられる。変更されたシャツ１０１０の外観は、歪められた３Ｄモデル１１００によって提供される模様を含む。レンダリング表現１２０６は、シャツ１０１０における折れ曲がりおよびしわに当たり、従って、模様は、これらの折れ曲がりおよびしわとして写実的に反映される。このようにして、ユーザデバイス１０００のユーザは、シャツ１０１０上で、歪められた３Ｄモデル１１００によって提供される模様を仮想的に視認することが可能である。

ＡＲコンテンツは、リアルタイムでユーザデバイス１０００に継続的または断続的に更新され得、更新されたＡＲコンテンツは、実世界におけるシャツ１０１０に対するユーザおよび／またはユーザデバイス１０００の動きを反映し得る。とりわけ、そのようなリアルタイム／ほぼリアルタイムの実装では、ＡＲコンテンツは、実世界内のシャツ１０１０の捕捉された画像に基づいて継続的または断続的に更新され得る。従って、少なくともいくつかのそのような実装では、バッファされた画像に基づくＡＲコンテンツの生成を促進するために、シャツ１０１０の実世界画像は、連続して捕捉され、捕捉された画像のうちのいくつかまたはそれら全てをメモリ内のバッファ中に記憶すること等によって、一時的にバッファされ得る。加えて、または、あるいは、より概括的には、いくつかの実装では、実世界におけるシャツ１０１０の捕捉された画像は、リアルタイム／ほぼリアルタイムのＡＲコンテンツの生成のために要求される時間より長い期間にわたって（例えば、メモリ内、バッファ内、または永久ストレージ内に）記憶され得る。そして、便宜上、ＡＲコンテンツに類似するコンテンツが、いくらか後に、そのような記憶された画像に基づいて生成され得る。

図１３は、図１１の歪められた３Ｄモデル１１００と、仮想座標系１１０２内のユーザデバイス１０００の新たな位置１３００を例証している。新たな位置１３００は、実世界におけるシャツ１０１０に対するユーザデバイス１０００の新たな位置（新たな場所および向きを含む）を反映し得る。例えば、位置１３００は、ユーザが実世界においてユーザデバイス１０００に対してシャツ１０１０を回転させた結果であり、それによって、ユーザデバイス１０００は、シャツ１０１０の右側を画像化している。

図１４は、仮想座標系１１０２内のユーザデバイス１０００の位置１３００に基づく更新されたＡＲコンテンツ１４０４を含むスクリーンページ１４０２を表示するユーザデバイス１０００を例証している。ＡＲコンテンツ１４０４は、シャツ１０１０を着用しているユーザの右側を示す画像１４０８を含む。ＡＲコンテンツ１４０４は、歪められた３Ｄモデル１１００の更新されたレンダリング表現１４０６をさらに含み、これは、仮想座標系１１０２における歪められた３Ｄモデル１１００に対するユーザデバイス１０００の位置１３００に基づいている。レンダリング表現１４０６は、歪められた３Ｄモデル１１００の右側を描写し、画像１４０８の視座からのシャツ１０１０のサイズおよび向きに実質的に合致する。レンダリング表現１４０６は、ＡＲコンテンツ１４０４においてシャツ１０１０に重ねるように画像１４０８と合成され、それによって、シャツ１０１０の外観を仮想的に変更する。

レンダリング表現１４０６は、画像１４０８において塞がれているシャツ１０１０の部分に当たる。例えば、図１４において概して１４１０で示されるユーザの腕は、シャツ１０１０の一部を塞いでいる。このシャツ１０１０の塞がれた部分は、例えば方法９００のステップ９０２における画像１４０８の分析を通して識別され得る。歪められた３Ｄモデル１１００のレンダリング表現１４０６は、塞がれた部分に当たるように生成され、ユーザの腕１４１０に重ならない。

図１１～図１４は、方法９００を使用して生成されたＡＲコンテンツが、例えばＡＲ体験におけるユーザデバイスに対する実世界アイテムの動きにどのように適応し得るかということのある例を例証している。

実世界におけるシャツ１０１０に対するユーザおよび／またはユーザデバイス１０００の移動を反映することに加えて、同様に、または、代わりに、更新されたＡＲコンテンツがシャツ１０１０のリアルタイムの変形を反映し得る。

図１５は、仮想座標系１１０２内に画定される別の歪められた３Ｄモデル１５００を例証している。ユーザデバイス１０００の位置１５０２も、図１５において仮想座標系１１０２内に画定される。歪められた３Ｄモデル１５００は、歪められた３Ｄモデル１１００と同一の模様をシャツ１０１０のために提供する。しかしながら、歪められた３Ｄモデル１５００は、歪められた３Ｄモデル１１００と異なるように歪められており、これは、図１１に示される歪められた３Ｄモデル１１００と図１５に示される歪められた３Ｄモデル１５００との異なる形状として反映される。いくつかの場合、歪められた３Ｄモデル１１００、１５００は、同一の元の３Ｄモデルの異なる歪みである。

歪められた３Ｄモデル１５００は、シャツ１０１０が実世界において形状を変化させることに応答して生成され得る。例えば、歪められた３Ｄモデル１１００は、ある時点において測定されたシャツ１０１０の第１の形状に対応し得、歪められた３Ｄモデル１５００は、別の時点において測定されたシャツ１０１０の第２の形状に対応し得る。歪められた３Ｄモデル１５００は、その第２の形状であるシャツ１０１０上の複数の点の相対位置に対応する相対位置に複数の点１５０６を含む。点１５０６は、歪められた３Ｄモデル１１００上の点１１０６に対応し得るが、点１５０６は、歪められた３Ｄモデル１１００、１５００の異なる形状に起因して、点１１０６と異なる相対位置にある。

図１６は、更新されたＡＲコンテンツ１６０４を含むスクリーンページ１６０２を表示するユーザデバイス１０００を例証している。ＡＲコンテンツ１６０４は、その第２の形状にあるシャツ１０１０の画像１６０８を含む。ＡＲコンテンツ１６０４は、仮想座標系１１０２における歪められた３Ｄモデル１５００に対するユーザデバイス１０００の位置１５０２に基づく歪められた３Ｄモデル１５００のレンダリング表現１６０６をさらに含む。レンダリング表現１６０６は、ＡＲコンテンツ１６０４においてシャツ１０１０に重ねられ、シャツ１０１０の第２の形状に適合する模様を提供する。

図１１、図１２、図１５、および図１６は、方法９００を使用して生成されるＡＲコンテンツが実世界アイテムのリアルタイムの変形にどのように適応するかといいうことのある例を例証している。

歪められた３Ｄモデル１１００、１５００によって提供される模様は、シャツ１０１０の外観を変更するために使用され得る模様の一例に過ぎない。いくつかの実装では、シャツ１０１０のための複数の異なる３Ｄモデルが利用可能であり、各３Ｄモデルは、異なる模様を提供する。異なる模様は、シャツ１０１０の異なるバリエーションに対応し得る。例として、スクリーンページ１００２、１２０２、１４０２、１６０２に示されるオプション１００６は、歪められた３Ｄモデル１１００、１５００によって提供される模様と異なるシャツ１０１０のための模様を提供する３Ｄモデルに対応する。スクリーンページ１２０２、１４０２、１６０２のいずれかにおけるオプション１００６の選択は、歪められた３Ｄモデル１１００または歪められた３Ｄモデル１５００をこの異なる模様を提供する３Ｄモデルと取り替えるための命令を生成し得る。

図１７は、スクリーンページ１２０２におけるオプション１００６の選択に応答して生成される歪められた３Ｄモデル１７００を例証している。歪められた３Ｄモデルは、仮想座標系１１０２内に画定される。歪められた３Ｄモデル１７００上の複数の点１７０６の相対位置は、オプション１００６の選択後のシャツ１０１０上の複数の点の測定された相対位置に対応する。従って、歪められた３Ｄモデル１７００の形状は、オプション１００６の選択後のシャツ１０１０の形状に概して対応する。ユーザデバイス１０００の位置１７０２も、図１７において、仮想座標系１１０２内に画定される。

図１８は、スクリーンページ１２０２におけるオプション１００６の選択に応答して生成されるスクリーンページ１８０２を表示するユーザデバイス１０００を例証している。スクリーンページ１８０２は、歪められた３Ｄモデル１７００のレンダリング表現１８０６を有するＡＲコンテンツ１８０４を含む。ＡＲコンテンツ１８０４において、レンダリング表現１８０６は、レンダリング表現１８０６が歪められた３Ｄモデル１７００によって提供される模様をシャツ１０１０に追加するように、シャツ１０１０の画像１８０８に重ねられる。

図１１、図１２、図１７および図１８は、方法９００を使用して生成されたＡＲコンテンツが、どのようにして例えばユーザがＡＲ体験において実世界アイテムの複数の異なるバリエーション間で仮想的に切り替えることを可能にし得るかということを例証している。

スクリーンページ１００２、１２０２、１４０２、１６０２、１８０２、および歪められたモデル１１００、１５００、１７００は、ユーザデバイス１０００または他の場所上で実行されるソフトウェアアプリケーションによって生成され得る。このソフトウェアアプリケーションは、図９の方法９００、または本明細書中で開示される任意の他の方法を実装し得る。ソフトウェアアプリケーションは、ｅコマースアプリケーションであり得、ｅコマースアプリケーションは、ユーザがＡＲを使用してシャツ１０１０の複数のバリエーションと相互作用することを可能にし、ユーザがシャツ１０１０のバリエーションを購入することも可能にし得る。例えば、スクリーンページ１００２、１２０２、１４０２、１６０２、１８０２のうちのいずれか、それらのうちの１つ、それらのうちのいくつか、またはそれら全てが、ユーザがシャツ１０１０のバリエーションを購入することを可能にするさらなるオプションを含み得る。
結論

本発明はその特定の特徴および実施形態を参照して説明されたが、本発明から逸脱せず、種々の修正物および組み合わせ物が作製され得る。よって、説明および図面は、単に、添付の請求項によって定義される本発明のいくつかの実施形態の例証とみなされるべきであり、本発明の範囲内に属する任意のおよび全ての修正物、変更物、組み合わせ物、または同等物を網羅するように想定される。したがって、本発明およびその利点が詳細に説明されたが、種々の変化、代用、および変更が、添付の請求項によって定義される本発明から逸脱せず、本明細書においてなされ得る。そのうえ、本願の範囲は、本明細書中で説明されるプロセス、機械、製造、化合物、手段、方法、およびステップの特定の実施形態に限定されるように意図されていない。当業者は、本発明の開示から、本明細書中で説明される対応する実施形態と実質的に同一の機能を実施し、または同一の結果を達成する、既存または今後開発されるプロセス、機械、製造、化合物、手段、方法、またはステップが、本発明によって活用され得ることを、容易に認識するだろう。よって、添付の請求項は、そのようなプロセス、機械、製造、化合物、手段、方法、またはステップ等のそれらの範囲内に含まれるように意図される。

そのうえ、命令を実行する本明細書中で例示される任意のモジュール、コンポーネント、またはデバイスは、非一過性のコンピュータ／プロセッサ読み取り可能なストレージ媒体（単数または複数）を含むか、さもなければそれらへのアクセスを有し得、非一過性のコンピュータ／プロセッサ読み取り可能なストレージ媒体（単数または複数）は、コンピュータ／プロセッサ読み取り可能な命令、データ構造、プログラムモジュール、および／または他のデータ等の情報のストレージのためである。非一過性のコンピュータ／プロセッサ読み取り可能なストレージ媒体の例の非網羅的なリストは、磁気カスケット、磁気テープ、磁気ディスクストレージもしくは他の磁気ストレージデバイス、光学ディスク（コンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）、デジタルビデオディスクもしくはデジタルバーサタイルディスク（ＤＶＤ）、Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ、または任意の光学ストレージ等）、任意の方法またはテクノロジで実装される揮発性および不揮発性の除去可能および除去不可能媒体、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、電気的消去可能プログラマブル読み取り専用メモリ（ＥＥＰＲＯＭ）、フラッシュメモリまたは他のメモリテクノロジを含む。任意のそのような非一過性コンピュータ／プロセッサストレージ媒体は、デバイスの一部であるか、またはデバイスにアクセス可能もしくは接続可能であり得る。本明細書中で説明される任意のアプリケーションまたはモジュールは、そのような非一過性のコンピュータ／プロセッサ読み取り可能なストレージ媒体によって記憶されているか、さもなければ保持され得るコンピュータ／プロセッサ読み取り可能／実行可能な命令を用いて実装され得る。

本教示は、以下の採番された項目のうちの１つ以上の特徴にも拡張され得る。
（項目１）
コンピュータ実装方法であって、前記コンピュータ実装方法は、
実世界アイテム上の複数の点の相対位置を決定することと、
前記複数の点の前記相対位置に基づいて、仮想アイテムの３次元モデルを歪め、前記仮想アイテムの歪められた３次元モデルを生み出すことと、
提示のために拡張現実（ＡＲ）コンテンツを生成することであって、前記ＡＲコンテンツは、前記歪められた３次元モデルに基づいている、ことと
を含む、コンピュータ実装方法。
（項目２）
前記ＡＲコンテンツを生成することは、前記歪められた３次元モデルをレンダリングすることを含む、項目１に記載のコンピュータ実装方法。
（項目３）
前記歪められた３次元モデルは、前記実世界アイテムの捕捉された画像に対応する視座からレンダリングされ、
前記ＡＲコンテンツを生成することは、前記実世界アイテムに重ねるように前記レンダリング表現を前記画像と合成することをさらに含む、項目２に記載のコンピュータ実装方法。
（項目４）
前記実世界アイテムに対するユーザの位置を決定することをさらに含み、前記歪められた３次元モデルは、前記ユーザの前記位置に基づいてレンダリングされる、項目２に記載のコンピュータ実装方法。
（項目５）
前記複数の点の前記相対位置に基づいて前記仮想アイテムの前記３次元モデルを歪めることは、前記３次元モデルを修正し、前記複数の点の前記相対位置に対応する相対位置にあるように前記３次元モデル内の点を位置変更することを含む、項目１に記載のコンピュータ実装方法。
（項目６）
前記実世界アイテムは、可撓性表面を含む、項目１に記載のコンピュータ実装方法。
（項目７）
前記実世界アイテムは、衣料であるか、または衣料を含む、項目６に記載のコンピュータ実装方法。
（項目８）
前記実世界アイテムは、複数のマーカを備え、前記複数のマーカの各々は、前記実世界アイテム上の前記複数の点のうちのそれぞれの異なる点であり、
前記実世界アイテム上の前記複数の点の前記相対位置を決定することは、前記複数のマーカの相対位置を決定することを含む、項目１に記載のコンピュータ実装方法。
（項目９）
前記複数のマーカは、光学マーカを備え、
前記方法は、前記実世界アイテムの少なくとも１つの画像を取得することをさらに含み、
前記複数のマーカの前記相対位置を決定することは、前記少なくとも１つの画像に画像分析を実施し、前記光学マーカを検出することを含む、項目８に記載のコンピュータ実装方法。
（項目１０）
前記実世界アイテム上の前記複数の点の前記相対位置を決定することは、
前記実世界アイテムの測定値を取得することと、
前記測定値を機械学習（ＭＬ）モデルに入力することと、
前記ＭＬモデルの出力を取得することであって、前記実世界アイテム上の前記複数の点の前記相対位置は、前記ＭＬモデルの前記出力に基づいている、ことと
を含む、項目１に記載のコンピュータ実装方法。
（項目１１）
前記複数の点の前記相対位置は、前記複数の点の第１の相対位置であり、前記仮想アイテムの前記歪められたモデルは、前記仮想アイテムの第１の歪められたモデルであり、前記ＡＲコンテンツは、第１のＡＲコンテンツであり、
前記複数の点の前記第１の相対位置は、第１の形状である前記実世界アイテムに対応し、
前記方法は、
前記実世界アイテム上の前記複数の点の第２の相対位置を決定することであって、第２の相対位置は、第２の形状である前記実世界アイテムに対応している、ことと、
前記複数の点の前記第２の相対位置に基づいて、前記仮想アイテムの前記３次元モデルを歪め、前記仮想アイテムの第２の歪められた３次元モデルを生み出すことと、
提示のために第２のＡＲコンテンツを生成することであって、前記ＡＲコンテンツは、前記第２の歪められた３次元モデルに基づいている、ことと
をさらに含む、項目１に記載のコンピュータ実装方法。
（項目１２）
前記３次元モデルは、実世界アイテムのための視覚的外観を備える、項目１に記載のコンピュータ実装方法。
（項目１３）
前記実世界アイテム上の前記複数の点の前記相対位置は、デバイスから取得された測定値に基づいており、
前記ＡＲコンテンツは、前記デバイスにおける提示のためのものである、項目１に記載のコンピュータ実装方法。
（項目１４）
前記仮想アイテムの前記３次元モデルは、前記仮想アイテムの第１の３次元モデルであり、前記複数の点の前記相対位置は、前記複数の点の第１の相対位置であり、前記ＡＲコンテンツは、第１のＡＲコンテンツであり、前記方法は、
前記仮想アイテムの前記第１の３次元モデルを前記仮想アイテムの第２の３次元モデルと取り替えるための命令を取得することであって、前記命令は、デバイスにおけるユーザ入力に由来する、ことと、
前記実世界アイテム上の前記複数の点の第２の相対位置を決定することと、
前記複数の点の前記第２の相対位置に基づいて、前記仮想アイテムの前記第２の３次元モデルを歪め、前記仮想アイテムの歪められた第２の３次元モデルを生み出すことと、
提示のために第２のＡＲコンテンツを生成することであって、前記第２のＡＲコンテンツは、前記歪められた第２の３次元モデルに基づいている、ことと
をさらに含む、項目１に記載のコンピュータ実装方法。
（項目１５）
実世界アイテム上の複数の点の相対位置を記憶するためのメモリと、
少なくとも１つのプロセッサと
を備え、前記少なくとも１つのプロセッサは、
前記複数の点の前記相対位置に基づいて、仮想アイテムの３次元モデルを歪め、前記仮想アイテムの歪められた３次元モデルを生み出すことと、
提示のために拡張現実（ＡＲ）コンテンツを生成することであって、前記ＡＲコンテンツは、前記歪められた３次元モデルに基づいている、ことと
を行う、システム。
（項目１６）
前記少なくとも１つのプロセッサは、前記歪められた３次元モデルをレンダリングすることをさらに行い、
前記ＡＲコンテンツは、前記レンダリング表現を含む、項目１５に記載のシステム。
（項目１７）
前記歪められた３次元モデルは、前記実世界アイテムの捕捉された画像に対応する視座からレンダリングされ、
前記ＡＲコンテンツは、前記実世界アイテムに重ねるように前記画像と合成された前記レンダリング表現を含む、項目１６に記載のシステム。
（項目１８）
前記歪められた３次元モデルは、前記複数の点の前記相対位置に対応する相対位置にあるように位置変更された点を備える、項目１５に記載のシステム。
（項目１９）
前記実世界アイテムは、複数のマーカを備え、前記複数のマーカの各々は、前記実世界アイテム上の前記複数の点のうちのそれぞれの異なる点であり、
前記少なくとも１つのプロセッサは、前記複数のマーカの相対位置を決定することをさらに行う、項目１５に記載のシステム。
（項目２０）
前記複数のマーカは、光学マーカを備え、
前記少なくとも１つのプロセッサは、前記実世界アイテムの少なくとも１つの画像に画像分析を実施し、前記光学マーカを検出することをさらに行う、項目１９に記載のシステム。
（項目２１）
前記少なくとも１つのプロセッサは、
前記実世界アイテムの測定値を取得することと、
前記測定値を機械学習（ＭＬ）モデルに入力することと、
前記ＭＬモデルの出力を取得することであって、前記実世界アイテム上の前記複数の点の前記相対位置は、前記ＭＬモデルの前記出力に基づいている、ことと
をさらに行う、項目１５に記載のシステム。
（項目２２）
前記複数の点の前記相対位置は、前記複数の点の第１の相対位置であり、前記仮想アイテムの前記歪められたモデルは、前記仮想アイテムの第１の歪められたモデルであり、前記ＡＲコンテンツは、第１のＡＲコンテンツであり、
前記複数の点の前記第１の相対位置は、第１の形状である前記実世界アイテムに対応し、
前記メモリは、前記実世界アイテム上の前記複数の点の第２の相対位置を記憶することをさらに行い、前記第２の相対位置は、第２の形状である前記実世界アイテムに対応し、
前記少なくとも１つのプロセッサは、
前記複数の点の前記第２の相対位置に基づいて、前記仮想アイテムの前記３次元モデルを歪め、前記仮想アイテムの第２の歪められた３次元モデルを生み出すことと、
提示のために第２のＡＲコンテンツを生成することであって、前記第２のＡＲコンテンツは、前記歪められた第２の３次元モデルに基づいている、ことと
をさらに行う、項目１５に記載のシステム。
（項目２３）
前記実世界アイテム上の前記複数の点の前記相対位置は、デバイスから取得された測定値に基づいており、
前記ＡＲコンテンツは、前記デバイスにおける提示のためのものである、項目１５に記載のシステム。
（項目２４）
前記仮想アイテムの前記３次元モデルは、前記仮想アイテムの第１の３次元モデルであり、前記複数の点の前記相対位置は、前記複数の点の第１の相対位置であり、前記ＡＲコンテンツは、第１のＡＲコンテンツであり、
前記少なくとも１つのプロセッサは、前記仮想アイテムの前記第１の３次元モデルを前記仮想アイテムの第２の３次元モデルと取り替えるための命令を取得することをさらに行い、前記命令は、デバイスにおけるユーザ入力に由来し、
前記メモリは、前記実世界アイテム上の前記複数の点の第２の相対位置を記憶することをさらに行い、
前記少なくとも１つのプロセッサは、
前記複数の点の前記第２の相対位置に基づいて、前記仮想アイテムの前記第２の３次元モデルを歪め、前記仮想アイテムの歪められた第２の３次元モデルを生み出すことと、
提示のために第２のＡＲコンテンツを生成することであって、前記第２のＡＲコンテンツは、前記歪められた第２の３次元モデルに基づいている、ことと
をさらに行う、項目１５に記載のシステム。
（項目２５）
コンピュータ実行可能な命令を記憶している非一過性のコンピュータ読み取り可能な媒体であって、前記コンピュータ実行可能な命令は、コンピュータによって実行されると、前記コンピュータに方法を実施させ、前記方法は、
実世界アイテム上の複数の点の相対位置を決定することと、
前記複数の点の前記相対位置に基づいて、仮想アイテムの３次元モデルを歪め、前記仮想アイテムの歪められた３次元モデルを生み出すことと、
提示のために拡張現実（ＡＲ）コンテンツを生成することであって、前記ＡＲコンテンツは、前記歪められた３次元モデルに基づいている、ことと
を含む、非一過性のコンピュータ読み取り可能な媒体。

Claims (15)

1. コンピュータ実装方法であって、前記コンピュータ実装方法は、
   ユーザデバイスのディスプレイ上に表示された実世界アイテムを識別する入力を受信することと、
   前記識別された実世界アイテム上の複数の所定の点の相対位置を決定することと、
   前記複数の所定の点の前記決定された相対位置に基づいて、仮想アイテムの３次元モデルを歪め、前記仮想アイテムの歪められた３次元モデルを生み出すことであって、前記歪められた３次元モデルは、前記複数の所定の点の間の相対距離を維持している、ことと、
   提示のために拡張現実（ＡＲ）コンテンツを生成することであって、前記ＡＲコンテンツは、前記歪められた３次元モデルに基づいている、ことと
   を含む、コンピュータ実装方法。
2. 前記複数の所定の点の前記相対位置は、前記複数の点の第１の相対位置であり、前記仮想アイテムの前記歪められたモデルは、前記仮想アイテムの第１の歪められたモデルであり、前記ＡＲコンテンツは、第１のＡＲコンテンツであり、
   前記複数の点の前記第１の相対位置は、第１の寸法を有する第１の形状である前記実世界アイテムに対応する、請求項１に記載のコンピュータ実装方法。
3. 前記実世界アイテム上の前記複数の点の第２の相対位置を決定することであって、前記第２の相対位置は、第２の寸法を有する第２の形状である前記実世界アイテムに対応し、前記第２の寸法は、前記第１の寸法と異なる、ことをさらに含み、
   随意に、前記複数の点の前記第２の相対位置に基づいて、前記仮想アイテムの前記３次元モデルを歪め、前記仮想アイテムの第２の歪められた３次元モデルを生み出すことと、
   提示のために第２のＡＲコンテンツを生成することであって、前記第２のＡＲコンテンツは、前記第２の歪められた３次元モデルに基づいている、ことと
   をさらに含む、請求項２に記載の方法。
4. 前記ＡＲコンテンツの生成後、前記表示された実世界アイテムに重ねるように前記ＡＲコンテンツをレンダリングすることを含む、請求項１～３のいずれか一項に記載の方法。
5. 前記デバイスの移動を監視することと、前記レンダリングされたＡＲコンテンツが前記デバイスの視点からの前記実世界アイテムのサイズおよび向きに合致するように、前記実世界アイテムに対して前記デバイスが動いたときに前記ＡＲコンテンツを動的に更新することとをさらに含む、請求項４に記載の方法。
6. 前記ＡＲコンテンツを生成することは、前記歪められた３次元モデルをレンダリングすることを含み、
   前記歪められた３次元モデルは、前記実世界アイテムの捕捉された画像に対応する視座からレンダリングされ、
   前記ＡＲコンテンツを生成することは、前記実世界アイテムに重ねるように前記レンダリング表現を前記画像と合成することをさらに含む、請求項１～５のいずれか一項に記載のコンピュータ実装方法。
7. 前記実世界アイテムに対するユーザの位置を決定することをさらに含み、前記歪められた３次元モデルは、前記ユーザの前記位置に基づいてレンダリングされる、請求項６に記載のコンピュータ実装方法。
8. 前記複数の点の前記相対位置に基づいて前記仮想アイテムの前記３次元モデルを歪めることは、前記３次元モデルを修正し、前記複数の点の前記相対位置に対応する相対位置であるように前記３次元モデル内の点を位置変更することを含む、請求項１～７のいずれか一項に記載のコンピュータ実装方法。
9. 前記実世界アイテムは、複数の識別可能なマーカを備え、前記複数のマーカの各々は、前記実世界アイテム上の前記複数の点のうちのそれぞれの異なる点であり、
   前記実世界アイテム上の前記複数の点の前記相対位置を決定することは、前記複数のマーカの相対位置を決定することを含む、請求項１～８のいずれか一項に記載のコンピュータ実装方法。
10. 前記複数の識別可能なマーカは、光学マーカを備え、
    前記方法は、前記実世界アイテムの少なくとも１つの画像を取得することをさらに含み、
    前記複数のマーカの前記相対位置を決定することは、前記少なくとも１つの画像に画像分析を実施し、前記光学マーカを検出することを含む、請求項９に記載のコンピュータ実装方法。
11. 前記実世界アイテム上の前記複数の点の前記相対位置を決定することは、
    前記実世界アイテムの測定値を取得することと、
    前記測定値を機械学習（ＭＬ）モデルに入力することと、
    前記ＭＬモデルの出力を取得することであって、前記実世界アイテム上の前記複数の点の前記相対位置は、前記ＭＬモデルの前記出力に基づいている、ことと
    を含む、請求項１～１０のいずれか一項に記載のコンピュータ実装方法。
12. 前記実世界アイテム上の前記複数の点の前記相対位置は、デバイスから取得された測定値に基づいており、
    前記ＡＲコンテンツは、前記デバイスにおける提示のためのものである、請求項１～１１のいずれか一項に記載のコンピュータ実装方法。
13. 前記仮想アイテムの前記３次元モデルは、前記仮想アイテムの第１の３次元モデルであり、前記複数の点の前記相対位置は、前記複数の点の第１の相対位置であり、前記ＡＲコンテンツは、第１のＡＲコンテンツであり、前記方法は、
    前記仮想アイテムの前記第１の３次元モデルを前記仮想アイテムの第２の３次元モデルと取り替えるための命令を取得することであって、前記命令は、デバイスにおけるユーザ入力に由来する、ことと、
    前記実世界アイテム上の前記複数の点の第２の相対位置を決定することと、
    前記複数の点の前記第２の相対位置に基づいて、前記仮想アイテムの前記第２の３次元モデルを歪め、前記仮想アイテムの歪められた第２の３次元モデルを生み出すことと、
    提示のために第２のＡＲコンテンツを生成することであって、前記第２のＡＲコンテンツは、前記歪められた第２の３次元モデルに基づいている、ことと
    をさらに含む、請求項１～１２のいずれかに一項に記載のコンピュータ実装方法。
14. 実世界アイテム上の複数の点の相対位置を記憶するためのメモリと、
    請求項１～１３のいずれか一項に記載の方法を実行するように構成される少なくとも１つのプロセッサと
    を備える、システム。
15. コンピュータプログラムであって、前記コンピュータプログラムは、コンピュータによって実行されると、前記コンピュータに請求項１～１３のいずれか一項に記載の方法を実施させる、コンピュータプログラム。

Images