JP7289208B2 - Program, Information Processing Apparatus, and Method - Google Patents
Program, Information Processing Apparatus, and Method Download PDFInfo
- Publication number
- JP7289208B2 JP7289208B2 JP2019049053A JP2019049053A JP7289208B2 JP 7289208 B2 JP7289208 B2 JP 7289208B2 JP 2019049053 A JP2019049053 A JP 2019049053A JP 2019049053 A JP2019049053 A JP 2019049053A JP 7289208 B2 JP7289208 B2 JP 7289208B2
- Authority
- JP
- Japan
- Prior art keywords
- touch screen
- omnidirectional
- area
- processor
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明はプログラム、情報処理装置、および方法に関する。 The present invention relates to a program, an information processing device, and a method.
特許文献１には、全方位画像やパノラマ画像を表示した状態で、タッチパネルに接触させた指示体を、接触を維持したまま移動させる移動操作を入力することにより、全方位画像やパノラマ画像に対する種々の処理を実行する画像表示装置が開示されている。
In
また、動画（映像）を再生し、視聴者に該動画を閲覧させるアプリケーションであって、移動操作を受け付けることにより、該動画に関する処理を実行するアプリケーションが知られている。 Further, there is known an application that reproduces a moving image (video) and allows a viewer to view the moving image, and executes processing related to the moving image by accepting a movement operation.
このような技術には、操作性を向上することができる余地がある。 Such technology has room for improving operability.
本発明の一態様は、全天球映像の閲覧に関する操作の操作性を向上させることを目的とする。 An object of one aspect of the present invention is to improve the operability of an operation related to viewing an omnidirectional video.
本開示に係るプログラムは、プロセッサ、メモリ、およびタッチスクリーンを備えたコンピュータによって実行されるプログラムである。プログラムは、プロセッサに、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域である第１領域をタッチスクリーンに表示させるステップと、タッチスクリーンに対して入力された、移動操作である第１操作に応答して、第１全天球映像に関する第１処理を実行するステップと、タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、第１処理と異なる、第１全天球映像に関する第２処理を実行するステップと、タッチスクリーンに対して入力された、第１操作と異なる移動操作、または、第２操作と異なるタップ操作である第３操作に応答して、第１全天球映像に関する第３処理を実行するステップと、を実行させる。 A program according to the present disclosure is a program executed by a computer having a processor, memory, and a touch screen. A step in which the program causes the processor to display, on the touch screen, a first area that is a partial area of the first omnidirectional image among the plurality of viewable omnidirectional images. executing a first process related to the first omnidirectional image in response to a first operation, which is a movement operation, input to the touch screen; and a tap operation input to the touch screen. a step of executing a second process related to the first omnidirectional video that is different from the first process in response to a second operation that is a moving operation that is input to the touch screen and is different from the first operation, or and executing a third process related to the first omnidirectional video in response to a third operation that is a tap operation different from the second operation.
本発明の一態様によれば、全天球映像の閲覧に関する操作の操作性を向上させる効果を奏する。 According to one aspect of the present invention, there is an effect of improving the operability of operations related to viewing omnidirectional video.
以下、この技術的思想の実施の形態について図面を参照しながら詳細に説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。本開示において示される１以上の実施形態において、各実施形態が含む要素を互いに組み合わせることができ、かつ、当該組み合わせられた結果物も本開示が示す実施形態の一部をなすものとする。 Hereinafter, embodiments of this technical idea will be described in detail with reference to the drawings. In the following description, the same parts are given the same reference numerals. Their names and functions are also the same. Therefore, detailed description thereof will not be repeated. In one or more of the embodiments presented in this disclosure, elements of each embodiment may be combined with each other and the combined result shall also form part of the embodiments presented in this disclosure.
［動画配信システムの構成］
図１を参照して、動画配信システム１００の構成について説明する。図１は、本実施の形態に従う動画配信システム１００の構成の概略を表す図である。
[Video distribution system configuration]
The configuration of the
動画配信システム１００は、一例として、動画撮影システム１１０Ａ、１１０Ｂ、１１０Ｃ、１１０Ｄと、スマートフォン１６０Ａ、１６０Ｂ、１６０Ｃ、１６０Ｄ（コンピュータ、情報処理装置）と、サーバ１７０と、ネットワーク２とを含む。動画配信システム１００は、動画撮影システム１１０Ａ、１１０Ｂ、１１０Ｃ、１１０Ｄの各々が撮影した動画を、ネットワーク２およびサーバ１７０を介して、スマートフォン１６０Ａ、１６０Ｂ、１６０Ｃ、１６０Ｄの各々に配信するシステムである。以下、スマートフォン１６０Ａ、１６０Ｂ、１６０Ｃ、１６０Ｄを総称して、スマートフォン１６０とも言う。
［スマートフォン１６０］
スマートフォン１６０は、配信された動画を、スマートフォン１６０のユーザに閲覧させる。つまり、スマートフォン１６０のユーザは、配信された動画の視聴者であるとも言える。スマートフォン１６０は、ネットワーク２を介してサーバ１７０と通信可能に構成される。動画配信システム１００を構成するスマートフォン１６０の数は、４つに限られず、３つ以下でも、５つ以上でもよい。
[Smartphone 160]
Smartphone 160 allows the user of
図２を参照して、スマートフォン１６０について、さらに詳細に説明する。図２は、本実施の形態に従うスマートフォン１６０のハードウェア構成の一例を示すブロック図である。スマートフォン１６０は、主たる構成要素として、プロセッサ２１０と、メモリ２２０と、ストレージ２３０と、タッチスクリーン２４０と、通信インターフェイス２５０とを備える。各構成要素は、それぞれ、バス２６０に接続されている。
Smartphone 160 will be described in more detail with reference to FIG. FIG. 2 is a block diagram showing an example of the hardware configuration of
プロセッサ２１０は、スマートフォン１６０に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ２２０またはストレージ２３０に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ２１０は、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＭＰＵ（Micro Processor Unit）、ＦＰＧＡ（Field-Programmable Gate Array）その他のデバイスとして実現される。
メモリ２２０は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ２３０からロードされる。データは、スマートフォン１６０に入力されたデータと、プロセッサ２１０によって生成されたデータとを含む。ある局面において、メモリ２２０は、ＲＡＭ（Random Access Memory）その他の揮発メモリとして実現される。
Memory 220 temporarily stores programs and data. The program is loaded from
ストレージ２３０は、プログラムおよびデータを永続的に保持する。ストレージ２３０は、例えば、ＲＯＭ（Read-Only Memory）、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。ストレージ２３０に格納されるプログラムは、動画をユーザに閲覧させるためのアプリケーションプログラム、シミュレーションプログラム、ユーザ認証プログラムを含んでもよい。ストレージ２３０に格納されるデータは、各プログラムのためのデータおよびオブジェクト等を含む。別の局面において、ストレージ２３０は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、スマートフォン１６０に内蔵されたストレージ２３０の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成の場合、スマートフォン１６０は、ネットワーク２を介した通信、あるいは、ＷｉＦｉ（登録商標）（Wireless Fidelity）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ（Near Field Communication）等の近距離無線通信により、該外部の記憶装置に保存されているプログラムおよびデータを使用してもよい。
タッチスクリーン２４０は、タッチパネル２４１とディスプレイ２４２とを備えた電子部品である。タッチパネル２４１は、入力面に対しユーザの操作（主にタッチ操作、スライド操作、スワイプ操作、およびタップ操作等の物理的接触操作）が入力された位置を検知して、位置を示す情報を入力信号として送信する機能を備える。タッチパネル２４１は、図示しないタッチセンシング部を備えていればよい。タッチセンシング部は、静電容量方式または抵抗膜方式等のどのような方式を採用したものであってもよい。ディスプレイ２４２は、例えば液晶ディスプレイ、または有機ＥＬ（Electro-Luminescence）ディスプレイ等によって構成される。
A
通信インターフェイス２５０は、ネットワーク２に接続されて、ネットワーク２に接続されている他のコンピュータ（例えば、サーバ１７０）と通信する。ある局面において、通信インターフェイス２５０は、例えば、ＬＡＮ（Local Area Network）等の有線通信インターフェイス、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ、ＮＦＣ等の無線通信インターフェイスとして実現される。通信インターフェイス２５０は上述のものに限られない。
The
ある局面において、プロセッサ２１０は、ストレージ２３０にアクセスし、ストレージ２３０に格納されている１つ以上のプログラムをメモリ２２０にロードし、当該プログラムに含まれる一連の命令を実行する。当該１つ以上のプログラムは、コンピュータ２００のオペレーティングシステム、動画をユーザに閲覧させるためのアプリケーションプログラム等を含み得る。プロセッサ２１０は、ネットワーク２、サーバ１７０、および通信インターフェイス２５０を介して受信した動画をタッチスクリーン２４０（ディスプレイ２４２）に表示する。
In one aspect,
［動画撮影システム１１０Ａ］
図１に戻り、動画撮影システム１１０Ａの詳細について説明する。動画撮影システム１１０Ａは、被写体１５０の動画（映像）を撮影するシステムである。本実施の形態に従う動画撮影システム１１０Ａは、各フレームが全天球画像である全天球映像を撮影する。動画撮影システム１１０Ａは、一例として、全天球カメラ１２０、全天球映像生成装置１３０、表示装置１４０と、を含む。本実施の形態では、動画撮影システム１１０Ｂ、１１０Ｃ、１１０Ｄについても、動画撮影システム１１０Ａと同様に、全天球カメラ１２０、全天球映像生成装置１３０、表示装置１４０と、を含むものとして説明する。以下、動画撮影システム１１０Ａ、１１０Ｂ、１１０Ｃ、１１０Ｄを総称して、動画撮影システム１１０とも言う。動画配信システム１００を構成する動画撮影システム１１０の数は、４つに限られず、３つ以下でも、５つ以上でもよい。
[
Returning to FIG. 1, the details of the
（全天球カメラ１２０）
全天球カメラ１２０は、複数の撮像部を備え、被写体１５０を撮影する。一例として、全天球カメラ１２０は、２つの撮像部を備える。具体的には、全天球カメラ１２０は、第１撮像部１２１および第２撮像部１２２を備える。
(omnidirectional camera 120)
The
第１撮像部１２１および第２撮像部１２２は、動画像を撮像するように構成されており、ＣＣＤ（Charge-Coupled Device）やＣＭＯＳ（complementary metal-oxide semiconductor）などの撮像素子、および、レンズによって構成されている。以降、第１撮像部１２１および第２撮像部１２２が撮像する動画像を「撮影映像」と称する場合がある。
The first
図３は、ある実施の形態に従う全天球カメラ１２０の視野を説明するための図である。第１撮像部１２１および第２撮像部１２２は、一例として、互いに反対方向を撮像するように全天球カメラ１２０に配置されている。第１撮像部１２１は、一例として、図３に示す視野３１１を有する。また、第２撮像部１２２は、一例として、図３に示す視野３１２を有する。視野３１１および視野３１２は、それぞれ、第１撮像部１２１および第２撮像部１２２の撮像領域と表現することもできる。
FIG. 3 is a diagram for explaining the field of view of
図３は、全天球カメラ１２０の上面図であるため、視野３１１および視野３１２を、一部が欠けた円形（扇形）で示している。しかしながら、第１撮像部１２１および第２撮像部１２２は、垂直方向（紙面に垂直な方向）にも視野を有している。つまり、視野３１１および視野３１２は、実際は、一部が欠けた球形である。よって、全天球カメラ１２０の視野は、互いに反対方向であり、かつ、一部が欠けた球形の２つの視野である。これにより、全天球カメラ１２０は、全天球カメラ１２０の全周囲（３６０度）の領域を撮影することができる。
Since FIG. 3 is a top view of the
図４は、ある実施の形態に従う全天球カメラ１２０のハードウェア構成の一例を表すブロック図である。図４に示すように、全天球カメラ１２０は、主たる構成要素として、プロセッサ４１１と、メモリ４１２と、ストレージ４１３と、第１撮像部１２１と、第２撮像部１２２と、入出力インターフェイス４１４と、通信インターフェイス４１５とを備える。各構成要素は、それぞれ、バス４１６に接続される。
FIG. 4 is a block diagram showing an example of the hardware configuration of
プロセッサ４１１は、全天球カメラ１２０に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ４１２またはストレージ４１３に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ４１１は、ＣＰＵ、ＧＰＵ、ＭＰＵ、ＦＰＧＡその他のデバイスとして実現される。
メモリ４１２は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ４１３からロードされる。データは、全天球カメラ１２０に入力されたデータと、プロセッサ４１１によって生成されたデータとを含む。ある局面において、メモリ４１２は、ＲＡＭその他の揮発メモリとして実現される。
ストレージ４１３は、プログラムおよびデータを永続的に保持する。ストレージ４１３は、例えば、ＲＯＭ、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。ストレージ４１３に格納されるプログラムは、撮影映像の撮像を実現するためのプログラム、その他の装置との通信を実現するためのプログラムなどを含んでもよい。ストレージ４１３に格納されるデータは、撮影映像（撮影映像データ）を含んでもよい。
別の局面において、ストレージ４１３は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、全天球カメラ１２０に内蔵されたストレージ４１３の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成の場合、全天球カメラ１２０は、ネットワーク２を介した通信、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ、ＮＦＣ等の近距離無線通信により、該外部の記憶装置に保存されているプログラムおよびデータを使用してもよい。
In another aspect,
第１撮像部１２１および第２撮像部１２２は、上述したように、撮影映像を撮像する。入出力インターフェイス４１４は、入出力機器との間で信号を通信する。ある局面において、入出力インターフェイス４１４は、ＵＳＢ、ＤＶＩ、ＨＤＭＩ（登録商標）その他の端子を用いて実現される。入出力インターフェイス４１４は上述のものに限られない。通信インターフェイス１７７５は、ネットワーク２に接続されて、ネットワーク２に接続されている装置と通信する。ある局面において、通信インターフェイス４１５は、例えば、ＬＡＮ等の有線通信インターフェイス、あるいは、ＷｉＦｉ，Ｂｌｕｅｔｏｏｔｈ、ＮＦＣ等の無線通信インターフェイスとして実現される。通信インターフェイス４１５は上述のものに限られない。なお、プロセッサ４１１は、通信インターフェイス４１５を用いて、撮影映像をリアルタイムに全天球映像生成装置１３０へ送信する。
The first
（全天球映像生成装置１３０）
全天球映像生成装置１３０は、全天球カメラ１２０から取得した撮影映像を用いて、全天球映像を生成する。ある局面において、全天球映像生成装置１３０は、ネットワーク２を介して全天球カメラ１２０から撮影映像を取得する。
(Spherical image generation device 130)
The omnidirectional
全天球映像生成装置１３０は、全天球カメラ１２０の第１撮像部１２１が撮像した撮影映像と、第２撮像部１２２が撮像した撮影映像とを取得する。図３に示すように、第１撮像部１２１の視野３１１と、第２撮像部１２２の視野３１２とは、一部が互いに重複している。このため、全天球カメラ１２０の第１撮像部１２１が撮像した撮影映像と、第２撮像部１２２が撮像した撮影映像とは、一部が互いに重複している。全天球映像生成装置１３０は、これら２つの撮影映像に含まれる、対応する２つのフレームを歪ませて、当該歪んだ２つのフレームをスティッチング処理する。「対応する２つのフレーム」とは、撮影時刻が一致する２つのフレームである。全天球映像生成装置１３０は、対応する２つのフレーム全てに対し、スティッチング処理を行うことにより、全天球映像を生成する。全天球映像生成装置１３０は、生成した全天球映像を、ネットワーク２を介して、サーバ１７０へ送信する。
The omnidirectional
全天球カメラ１２０が、全天球映像を生成し、サーバ１７０へ送信する機能を備えていてもよい。この例の場合、動画撮影システム１１０は、全天球映像生成装置１３０を含まなくてもよい。
The
（表示装置１４０）
表示装置１４０は、全天球映像生成装置１３０が生成した全天球映像を、ネットワーク２およびサーバ１７０を介して取得し、表示する。これにより、被写体１５０は、自身が撮影された全天球映像を確認しながら、撮影を行うことができる。表示装置１４０は、一例として、スマートフォン１６０のストレージ２３０に記憶されている、動画（全天球映像）をユーザに閲覧させるためのアプリケーションプログラムと同一のアプリケーションプログラムを記憶していてもよい。つまり、表示装置１４０は、該アプリケーションプログラムを用いて、全天球映像を表示してもよい。
(Display device 140)
The
［サーバ１７０］
サーバ１７０は、動画撮影システム１１０の各々から受信した全天球映像をスマートフォン１６０へ配信する。ある局面において、サーバ１７０は、スマートフォン１６０に対するユーザの入力に基づく第１指示を受信した場合、第１指示が示す全天球映像をスマートフォン１６０へ送信する。つまり、第１指示は、特定の全天球映像の送信指示である。
[Server 170]
［被写体の撮影］
図５は、動画撮影システム１１０Ａを用いた被写体１５０の撮影の一例を示す図である。本実施の形態では、被写体１５０が女性である例を説明する。この例のように、被写体１５０が人間である場合、被写体１５０は映像の配信者と表現することもできる。
[Shooting a subject]
FIG. 5 is a diagram showing an example of photographing of subject 150 using moving
一例として、被写体１５０は、撮影中において、視聴者（スマートフォン１６０のユーザ）に向けて喋ったり、演技、演奏、歌唱などを行なったり、ゲームをプレイしたり、日常の行動をしたりする。つまり、視聴者は、全天球映像を視聴することで、一例として、被写体１５０のこれらの動作、行動を視聴する。なお、被写体１５０の撮影中の動作、行動はこの例に限定されない。 As an example, the subject 150 speaks to the viewer (the user of the smart phone 160), acts, performs, sings, plays a game, or performs daily activities during shooting. In other words, the viewer views these motions and behaviors of the subject 150 as an example by viewing the omnidirectional video. Note that the motions and behaviors of the subject 150 during shooting are not limited to this example.
全天球カメラ１２０は、被写体１５０を第１位置から撮影する。図５の例では、被写体１５０は、第１撮像部１２１の視野の正面に位置し、全天球カメラ１２０の方向を向いている。換言すれば、図５の例では、被写体１５０は第１撮像部１２１によって撮影される。なお、図５では、第１撮像部１２１は、表示装置１４０によって隠れているため、図示していない。
一例として、表示装置１４０は、図５に示すように、全天球カメラ１２０の上部に、表示領域が被写体１５０側となるように配置される。これにより、被写体１５０は、全天球カメラ１２０の撮像部（図５の例では第１撮像部１２１）に目線を向けながら、自身が撮影された全天球映像を確認することができる。換言すれば、被写体１５０は、カメラ目線を維持しながら、自身が撮影された全天球映像を確認することができる。
As an example, as shown in FIG. 5, the
一例として、全天球映像をユーザに閲覧させるためのアプリケーションプログラムは、視聴者が全天球映像を視聴しながらコメント等を入力する機能、および、該コメント等を表示する機能を備えていてもよい。これにより、被写体１５０は、自身が撮影された全天球映像を視聴している視聴者が入力したコメントを視認することができ、該コメントに対して応答することができる。なお、アプリケーションプログラムは、視聴者の入力に基づく処理の実行を、通知として表示する機能を備えていてもよい。一例として、視聴者に対する課金に関する処理が実行され、ギフトオブジェクトが被写体１５０に贈呈されたことを示す通知が、該機能によって表示されてもよい。 As an example, an application program for allowing a user to view an omnidirectional video may have a function of inputting comments, etc. while the viewer views the omnidirectional video, and a function of displaying the comments, etc. good. As a result, the subject 150 can visually recognize the comment input by the viewer viewing the omnidirectional video captured by the subject 150, and can respond to the comment. Note that the application program may have a function of displaying the execution of processing based on the viewer's input as a notification. As an example, the function may display a notification indicating that a process for billing the viewer has been performed and the gift object has been presented to the subject 150 .
［サーバ１７０のハードウェア構成］
図６を参照して、本実施の形態に係るサーバ１７０について、さらに詳細に説明する。図６は、ある実施の形態に従うサーバ１７０のハードウェア構成の一例を表すブロック図である。サーバ１７０は、主たる構成要素として、プロセッサ６１１と、メモリ６１２と、ストレージ６１３と、入出力インターフェイス６１４と、通信インターフェイス６１５とを備える。各構成要素は、それぞれ、バス６１６に接続されている。
[Hardware Configuration of Server 170]
プロセッサ６１１は、サーバ１７０に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ６１２またはストレージ６１３に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ６１１は、ＣＰＵ、ＧＰＵ、ＭＰＵ、ＦＰＧＡその他のデバイスとして実現される。
メモリ６１２は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ６１３からロードされる。データは、サーバ１７０に入力されたデータと、プロセッサ６１１によって生成されたデータとを含む。ある局面において、メモリ６１２は、ＲＡＭその他の揮発メモリとして実現される。
ストレージ６１３は、プログラムおよびデータを永続的に保持する。ストレージ６１３は、例えば、ＲＯＭ、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。
別の局面において、ストレージ６１３は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、サーバ１７０に内蔵されたストレージ６１３の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成の場合、サーバ１７０は、ネットワーク２を介した通信、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ等の近距離無線通信により、該外部の記憶装置に保存されているプログラムおよびデータを使用してもよい。
In another aspect,
入出力インターフェイス６１４は、入出力機器との間で信号を通信する。ある局面において、入出力インターフェイス６１４は、ＵＳＢ、ＤＶＩ、ＨＤＭＩその他の端子を用いて実現される。入出力インターフェイス６１４は上述のものに限られない。
Input/
通信インターフェイス６１５は、ネットワーク２に接続されて、ネットワーク２に接続されている全天球映像生成装置１３０、表示装置１４０、および、スマートフォン１６０と通信する。ある局面において、通信インターフェイス６１５は、例えば、ＬＡＮその他の有線通信インターフェイス、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ、ＮＦＣその他の無線通信インターフェイスとして実現される。通信インターフェイス６１５は上述のものに限られない。
ある局面において、プロセッサ６１１は、ストレージ６１３にアクセスし、ストレージ６１３に格納されている１つ以上のプログラムをメモリ６１２にロードし、当該プログラムに含まれる一連の命令を実行する。当該１つ以上のプログラムは、サーバ１７０のオペレーティングシステム、スマートフォン１６０および表示装置１４０に全天球映像を配信するためのアプリケーションプログラム等を含み得る。プロセッサ６１１は、通信インターフェイス６１５、または、入出力インターフェイス６１４を介して、全天球映像をスマートフォン１６０および表示装置１４０に配信してもよい。
In one aspect,
ここで、図示してはいないが、サーバ１７０のモジュール構成の詳細について説明する。サーバ１７０は、コントロールモジュールと、メモリモジュールと、通信制御モジュールとを備える。ある局面において、コントロールモジュールは、プロセッサ６１１によって実現される。メモリモジュールは、メモリ６１２またはストレージ６１３によって実現される。通信制御モジュールは、通信インターフェイス６１５によって実現される。
Here, although not shown, the details of the module configuration of the
コントロールモジュールは、スマートフォン１６０から第１指示を受信すると、スマートフォン１６０に全天球映像を送信する。コントロールモジュールは、一例として、ライブ方式で全天球映像のストリーミング（ライブストリーミング）を行う。ライブストリーミングとは、データをダウンロードしつつ同時に再生する方式であるストリーミングの一種で、映像や音声をリアルタイムで配信し、リアルタイムでデータの変換（エンコード）を行い、そのままストリーミング再生することである。つまり、コントロールモジュールは、全天球映像生成装置１３０から受信した全天球映像のストリーミングをリアルタイムに行う。換言すれば、該全天球映像は、ライブストリーミング映像であると表現することもできる。
Upon receiving the first instruction from
つまり、動画配信システム１００では、（１）全天球カメラ１２０から全天球映像生成装置１３０への撮影映像の送信、（２）全天球映像生成装置１３０による全天球映像の生成、および、該全天球映像のサーバ１７０への送信、（３）サーバ１７０から、第１指示を送信したスマートフォン１６０への全天球映像の送信がリアルタイムに行われる。これにより、視聴者は、現在撮影されている被写体１５０の全天球映像を視聴することができる。なお、第１指示は、表示装置１４０から送信されてもよい。
That is, in the
［スマートフォン１６０のモジュール構成］
図７および図８を参照して、スマートフォン１６０のモジュール構成について説明する。図７は、ある実施の形態に従うスマートフォン１６０をモジュール構成として表すブロック図である。図８は、ある実施の形態に従うスマートフォン１６０のモジュールの詳細構成を表すブロック図である。
[Module Configuration of Smartphone 160]
The module configuration of
図７に示すように、スマートフォン１６０は、コントロールモジュール７１０と、メモリモジュール７２０と、通信制御モジュール７３０とを備える。ある局面において、コントロールモジュール７１０は、プロセッサ２１０によって実現される。別の局面において、複数のプロセッサ２１０が、コントロールモジュール７１０として作動してもよい。メモリモジュール７２０は、メモリ２２０またはストレージ２３０によって実現される。通信制御モジュール７３０は、通信インターフェイス２５０によって実現される。
As shown in FIG. 7 ,
図８に示すように、コントロールモジュール７１０は、動画制御モジュール８１１、操作判別モジュール８１２、動画切換モジュール８１３、および、ＵＩ制御モジュール８１４を備えている。
As shown in FIG. 8 , the
動画制御モジュール８１１は、ユーザが閲覧する全天球映像を制御する。動画制御モジュール８１１は、例えば、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、サーバ１７０に第１指示を送信し、第１指示が示す全天球映像を再生する。ここで、「全天球映像を再生する」とは、全天球映像を受信し、タッチスクリーン２４０（ディスプレイ２４２）に表示することを指す。
The
全天球映像の再生について、図９を参照して説明する。図９は、ある実施の形態に従う全天球映像、および、該全天球映像のスマートフォン１６０への表示例を示す図である。
Playback of omnidirectional video will be described with reference to FIG. FIG. 9 is a diagram showing an omnidirectional image according to an embodiment and an example of display of the omnidirectional image on
上述したように、全天球カメラ１２０は、全天球カメラ１２０の全周囲（３６０度）の領域を撮影する。このため、全天球映像は、球で表現することが可能である。換言すれば、球の外縁に全天球映像が貼り付いていると表現することもできる。図９（Ａ）の例では、説明を複雑にしないために、全天球映像９１０の上半分（半球）を例示している。
As described above,
一方、動画の興趣性、ユーザによる動画の視認のしやすさなどを考慮すれば、スマートフォン１６は、全天球映像の一部の領域をディスプレイ２４２に表示することが好ましい。つまり、本実施の形態において、全天球映像を再生するとは、ディスプレイ２４２に全天球映像の一部の領域を表示することである。以降、該一部の領域を「表示領域」と称する。
On the other hand, it is preferable that the smartphone 16 displays a partial area of the omnidirectional video on the
該表示領域の設定について説明する。全天球映像９１０の中心９１１は、撮影現場における全天球カメラ１２０の位置に対応する。動画制御モジュール８１１は、一例として、中心９１１を、表示領域の決定のための基準点９１２として設定する。動画制御モジュール８１１は、一例として、基準点９１２から球（半球）の外縁に向かう方向に延びる基準線９１３と、スマートフォン１６のディスプレイ２４２のサイズに基づいて、全天球映像９１０の再生開始時の表示領域９１４を設定する。具体的には、動画制御モジュール８１１は、基準線９１３が全天球映像９１０（すなわち球の外縁）と交わる点を中心とする、ディスプレイ２４２のサイズと略同一の表示領域９１４を設定する。
Setting of the display area will be described. A
基準線９１３が延びる方向（全天球映像の基準方向）は、一例として、撮影現場における、全天球カメラ１２０から被写体１５０へ向かう方向に対応する。基準線９１３が延びる方向は、全天球映像の正面方向と表現することもできる。動画制御モジュール８１１は、設定された表示領域９１４を、図９（Ｂ）に示すように、ディスプレイ２４２に表示する。これにより、全天球映像の再生が開始された時点で、被写体１５０を含む映像がディスプレイ２４２に表示される。
The direction in which the
また、動画制御モジュール８１１は、例えば、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、表示領域を変更する。動画制御モジュール８１１は、一例として、該操作に応じた、基準線９１３とは異なる方向に延びる直線を特定する。そして、該直線が全天球映像９１０と交わる点を中心とする、ディスプレイ２４２のサイズと略同一の表示領域を特定し、該表示領域をディスプレイ２４２に表示する。この処理は、換言すれば、基準点から伸びる直線と、全天球映像９１０との交点の位置を、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて移動させる処理とも言える。あるいは、この処理は、表示領域９１４を、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて移動させる処理とも言える。
Also, the
操作判別モジュール８１２は、タッチスクリーン２４０（タッチパネル２４１）の出力に基づいて、ユーザの入力操作を受け付ける。具体的には、操作判別モジュール８１２は、ユーザの指などがタッチスクリーン２４０に接近したことを、タッチスクリーン２４０を構成する面の横軸及び縦軸からなる座標系の座標として検出する。例えば、操作判別モジュール８１２は、タッチパネル２４１に対する入力操作を受け付け、該入力操作の入力位置の座標を検出し、該入力操作の種類を特定する。操作判別モジュール８１２は、入力操作の種類として、例えばタッチ操作、スライド操作、スワイプ操作、およびタップ操作等を特定する。また、操作判別モジュール８１２は、連続して検知されていた入力が途切れると、タッチスクリーン２４０から接触入力が解除されたことを検知する。
The
操作判別モジュール８１２は、タッチスクリーン２４０に対するユーザの操作を判別する。操作判別モジュール８１２は、例えば、（１）「接近操作」、（２）「リリース操作」、（３）「タップ操作」、（４）「ダブルタップ操作」、（５）「長押し操作（ロングタッチ操作）」、（６）「ドラッグ操作（スワイプ操作）」、（７）「ムーブ操作」、（８）「フリック操作」、その他のユーザの操作を判別する。操作判別モジュール８１２が判別するユーザの操作は、上記に限られない。例えば、タッチスクリーン２４０が、ユーザがタッチスクリーン２４０に対して押下する圧力の大きさを検出可能な機構を有する場合、操作判別モジュール８１２は、ユーザにより押下された圧力の大きさを判別する。
An
（１）「接近操作」とは、ユーザが指などをタッチスクリーン２４０に接近させる操作である。タッチスクリーン２４０は、ユーザの指などが接近したこと（ユーザの指などがタッチスクリーン２４０に接触したことを含む）をタッチスクリーン２４０により検出し、検出したタッチスクリーン２４０の座標に応じた信号をコントロールモジュール７１０へ出力する。コントロールモジュール７１０は、タッチスクリーン２４０へのユーザの指などの接近を検出しない状態から、接近を検出したときに、状態が「タッチオン状態」になったと判別する。
(1) An “approach operation” is an operation by which the user brings a finger or the like closer to the
（２）「リリース操作」とは、ユーザがタッチスクリーン２４０を接近操作している状態を止める操作である。操作判別モジュール８１２は、例えば、ユーザが指などをタッチスクリーン２４０に接触させている状態から、指を離す操作をしたときに、ユーザの操作を「リリース操作」と判別する。コントロールモジュール７１０は、タッチスクリーン２４０へのユーザの指などの接近を検出している状態から、接近を検出しない状態になったときに、状態が「タッチオン状態」から「タッチオフ状態」になったと判別する。
(2) “Release operation” is an operation for stopping the state in which the user is operating the
（３）「タップ操作」とは、ユーザがタッチスクリーン２４０に対して指などを接近させる接近操作をした後に、接近操作をした位置でリリース操作を行うことである。操作判別モジュール８１２は、接近操作が検出されない状態（ユーザの指などがタッチスクリーン２４０から離れており、タッチスクリーン２４０がユーザの指などの接近を検出していない状態）から、タッチスクリーン２４０の出力に基づいて、ユーザの指などが接近したことを検出した場合に、その検出した座標を「初期タッチ位置」として保持する。操作判別モジュール８１２は、初期タッチ位置の座標と、リリース操作をした座標とがほぼ同一である場合（接近操作が検出された座標から一定範囲内の座標においてリリース操作の座標が検出された場合）に、ユーザの操作を「タップ操作」と判別する。
(3) “Tap operation” means that after the user performs an approach operation of approaching the
（４）「ダブルタップ操作」とは、ユーザがタップ操作を一定時間内に２回行う操作である。操作判別モジュール８１２は、例えば、ユーザの操作をタップ操作と判別してから一定時間内に、タップ操作にかかる座標で再びタップ操作を判別した場合に、ユーザの操作を「ダブルタップ操作」と判別する。
(4) A “double-tap operation” is an operation in which a user performs a tap operation twice within a certain period of time. For example, the
（５）「長押し操作」とは、ユーザがタッチスクリーン２４０を押し続ける操作である。タッチスクリーン２４０は、ユーザの操作を検出して接近操作を判別してから、接近操作が検出された座標において接近操作が継続している時間が一定時間を超えた場合に、ユーザの操作を「長押し操作」（「長押し操作」を、「ロングタッチ操作」と称することもある）と判別する。
(5) A “long press operation” is an operation in which the user keeps pressing the
（６）「ドラッグ操作」とは、ユーザがタッチスクリーン２４０に指などを接近させた接近状態を維持したまま、指をスライドさせる操作である。「ドラッグ操作」を「スライド操作」と称する場合もある。
(6) A “drag operation” is an operation in which the user slides a finger or the like while maintaining a close state in which the finger or the like is brought close to the
（７）「ムーブ操作」とは、ユーザがタッチスクリーン２４０において、接近操作を維持しつつ、タッチスクリーン２４０に指などを接近させている位置を移動させてリリース操作を行う一連の操作をいう。「ムーブ操作」を「スワイプ操作」と称する場合もある。
(7) “Move operation” refers to a series of operations in which the user performs a release operation by moving the position where the finger or the like is approaching the
（８）「フリック操作」は、ユーザがムーブ操作を予め定められた時間よりも短い時間で行う操作をいう。フリック操作は、ユーザがタッチスクリーン２４０で指を弾くような操作である。
(8) "Flick operation" refers to an operation in which the user performs a move operation in a time shorter than a predetermined time. A flick operation is an operation such that the user flicks a finger on the
なお、本実施形態では、ドラッグ操作とムーブ操作とは同じ操作であるものとして説明する。すなわち、本実施形態に係るドラッグ操作（スライド操作）は、ムーブ操作（スワイプ操作）と同様に、ユーザがタッチスクリーン２４０において、接近操作を維持しつつ、タッチスクリーン２４０に指などを接近させている位置を移動させてリリース操作を行う一連の操作をいう。
Note that in the present embodiment, a description will be given assuming that the drag operation and the move operation are the same operation. That is, in the drag operation (slide operation) according to the present embodiment, the user moves his or her finger or the like closer to the
動画切換モジュール８１３は、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、再生する全天球映像、すなわち、ディスプレイ２４２に表示する全天球映像を変更する。具体的には、動画切換モジュール８１３は、第１全天球映像を再生している場合において、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、第１全天球映像の再生を停止し、第１全天球映像と異なる第２全天球映像を再生する。
The
ＵＩ制御モジュール８１４は、全天球映像に重畳してディスプレイ２４２に表示されているユーザインターフェース（以下、「ＵＩ」と記載する）を制御する。ＵＩ制御モジュール８１４は、例えば、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、ＵＩを非表示とする。
The
［処理フロー］
図１０は、ある実施の形態に従うスマートフォン１６０において実行される処理、および、サーバ１７０において実行される処理の一部を示すシーケンス図である。本実施形態では、視聴者側の一連の処理が、スマートフォン１６０Ａにより実行されるものとして説明する。ただし、当該処理は、他のスマートフォン１６０Ｂ、１６０Ｃ、１６０Ｄにより実行されてもよいし、当該処理の一部または全部がサーバ１７０によって実行されてもよい。
[Processing flow]
FIG. 10 is a sequence diagram showing a part of the processing executed in
ステップＳ１０１１において、サーバ１７０のプロセッサ６１１は、全天球映像生成装置１３０から全天球映像を受信する。具体的には、プロセッサ６１１は、現在撮影を行っている動画撮影システム１１０に含まれる全天球映像生成装置１３０の各々から、全天球映像を受信する。つまり、複数の動画撮影システム１１０において同時に撮影が行なわれている場合、プロセッサ６１１は、複数の全天球映像を受信する。
In step S<b>1011 , the
ステップＳ１００１において、スマートフォン１６０Ａのタッチパネル２４１は、第１全天球映像の再生操作を受け付ける。該操作は、例えば、ユーザが閲覧可能な複数の全天球映像それぞれを示す複数のＵＩを表示したタッチスクリーン２４０における、第１全天球映像を示すＵＩへのタップ操作であってもよい。該画面は、例えば、動画をユーザに閲覧させるためのアプリケーション（以下、単に「アプリケーション」と記載）を起動した直後に表示されてもよい。また、該複数のＵＩは、閲覧可能な複数の全天球映像それぞれのサムネイル画像であってもよい。ステップＳ１００２において、スマートフォン１６０Ａのプロセッサ２１０は、第１全天球映像の再生操作に基づく、第１全天球映像の再生指示をサーバ１７０へ送信する。
In step S1001,
ステップＳ１０１２において、プロセッサ６１１は、第１全天球映像の再生指示を受信したことに伴い、第１全天球映像をスマートフォン１６０Ａへ送信する。
In step S1012,
ステップＳ１００３において、プロセッサ２１０は、動画制御モジュール８１１として、受信した第１全天球映像を再生する。
At step S1003, the
図１０に示してはいないが、プロセッサ２１０は、操作判別モジュール８１２として、全天球映像の再生中に、タッチパネル２４１にユーザの操作が入力された場合、該操作が、第１操作、第２操作、第３操作のいずれであるかを判別する。この処理の詳細については、図１１を参照して後述する。図１１は、ある実施の形態に従うスマートフォン１６０において実行される操作判別処理を示すフローチャートである。
Although not shown in FIG. 10, the
図１２は、ある実施の形態に従う、スマートフォン１６０Ａにおける全天球映像の表示例を示す図である。プロセッサ２１０は、一例として、図１２（Ａ）に示すように、全天球映像９１０の一部である表示領域１２１４Ａ、および、ＵＩ１２２１Ａ、１２２１Ｂ、１２２１Ｃをディスプレイ２４２に表示している。以下、ＵＩ１２２１Ａ、１２２１Ｂ、１２２１Ｃを総称して、ＵＩ１２２１とも言う。また、図１２（Ａ）に示す表示領域１２１４Ａは、基準線９１３に応じた表示領域、すなわち、全天球映像の正面であるとする。ＵＩ１２２１は、一例として、全天球映像の再生に関する各種処理を実行するための操作を受け付ける。各種処理とは、例えば、全天球映像の再生、停止、一時停止などであってもよいし、被写体１５０へ送信するコメントの入力、被写体へのギフトオブジェクトの贈呈などであってもよいが、これに限定されない。
FIG. 12 is a diagram showing a display example of omnidirectional video on
ステップＳ１００４において、タッチパネル２４１は第１操作を受け付ける。ステップＳ１００４は、すなわち、プロセッサ２１０が、ユーザの操作を第１操作と判別した場合に相当する。第１操作は、一例として、図１２（Ａ）に示すように、タッチスクリーン２４０へ指１２３０を接触させ、指１２３０を移動させる移動操作である。第１操作は、例えば、ドラッグ操作であってもよいし、フリック操作であってもよい。図１２（Ａ）の例では、第１操作により、指１２３０を第１方向１２４０へ移動させている。第１方向１２４０は、図１２（Ａ）の右方向である。
In step S1004,
ステップＳ１００５において、プロセッサ２１０は、動画制御モジュール８１１として、第１操作に基づき、表示領域を変更する。具体的には、プロセッサ２１０は、第１操作の移動方向と移動距離とに応じて、第１全天球映像内で表示領域を移動させる。図１２（Ａ）の例では、指１２３０を右方向に移動させているので、プロセッサ２１０は、例えば、表示領域を右方向に、指１２３０の移動距離に応じた距離だけ移動させる。つまり、第１操作に基づく、全天球映像の表示領域を変更する処理は、第１操作の移動方向および移動距離に応じた処理であると言える。これにより、表示領域１２１４Ａは表示領域１２１４Ｂに変更され、ディスプレイ２４２では、図１２（Ｂ）に示すように、第１移動操作の前には視聴者が視認できなかった、被写体１５０の右側が表示される。なお、被写体１５０の右側とは、ユーザ（視聴者）から見た被写体１５０の右側である。
In step S1005, the
このように、本実施の形態に従うスマートフォン１６０Ａは、第１操作により、全天球映像における、タッチスクリーン２４０に表示させる領域を変更することができる。スマートフォン１６０Ａのユーザは、全天球映像の再生開始時にタッチスクリーン２４０に表示されていなかった領域を、第１操作の実行により視認することができる。
In this way,
図１３は、スマートフォンの表示部の分割例を示す図である。本実施形態に係るスマートフォン１６０Ａのタッチスクリーン２４０は、一例として、図１３に示すように９つの領域に分割（９等分）される。換言すれば、該９つの領域の各々を示す情報が、メモリモジュール７２０に格納されている。該情報は、例えば、９つの領域（矩形領域）の左上および右下の頂点の座標であってもよい。以下、該９つの領域のうち、図１３における右側の３つの領域を右側領域１３１、左側の３つの領域を左側領域１３２、中央の１つの領域を中央領域１３３と称する。
FIG. 13 is a diagram illustrating an example of division of a display unit of a smartphone. As an example, the
図１４は、ある実施の形態に従う、スマートフォン１６０Ａにおける全天球映像の表示例を示す図である。ステップＳ１００６において、タッチパネル２４１は第２操作を受け付ける。ステップＳ１００６は、すなわち、プロセッサ２１０が、ユーザの操作を第２操作と判別した場合に相当する。第２操作は、一例として、図１４（Ａ）に示すように、タッチスクリーン２４０へ指１２３０を接触させ、接触させた指１２３０を移動させることなく離す操作である。つまり、第２操作はタップ操作である。さらに言えば、第２操作は、右側領域１３１、または、左側領域１３２へのタップ操作である。なお、図１３（Ａ）は、左側領域１３２へのタップ操作の例を示している。
FIG. 14 is a diagram showing a display example of omnidirectional video on
プロセッサ２１０は、動画切換モジュール８１３として、第２操作に基づき、第１全天球映像を第２全天球映像に切り換える。具体的には、プロセッサ２１０は、ステップＳ１００７において、第２全天球映像の再生指示をサーバ１７０へ送信する。ステップＳ１０１３において、プロセッサ６１１は、第２全天球映像の再生指示を受信したことに伴い、第１全天球映像の送信を中止し、第２全天球映像をスマートフォン１６０Ａへ送信する。
ステップＳ１００８において、プロセッサ２１０は、動画制御モジュール８１１として、受信した第２全天球映像を再生する。具体的には、図１４（Ｂ）に示すように、第２全天球映像の一部である表示領域１３１４をディスプレイ２４２に表示する。第２全天球映像は、第１全天球映像とは異なる全天球映像であり、一例として、被写体１５０と異なる被写体１３５０を含む。
In step S1008, the
このように、本実施の形態に従うスマートフォン１６０Ａは、第２操作により、第１全天球映像を、第１全天球映像と異なる第２全天球映像に変更することができる。スマートフォン１６０Ａのユーザは、第２移動操作により、複数の全天球映像のザッピングを行うことができる。
In this way,
第２操作に基づく、全天球映像を切り換える処理は、第２操作が、右側領域１３１と左側領域１３２とのいずれへのタップ操作であるか、に応じた処理であると言える。一例として、第２操作の入力位置（以下、「タップ位置」と記載する）が左側領域１３２である場合、上述したように、プロセッサ２１０は、第１全天球映像を第２全天球映像に切り換える。一方、タップ位置が右側領域１３１である場合、プロセッサ２１０は、第１全天球映像を、第２全天球映像と異なる第３全天球映像に切り換える。なお、プロセッサ２１０は、タップ位置が右側領域１３１であるか左側領域１３２であるかに依らず、右側領域１３１または左側領域１３２へのタップ操作が入力された場合、１全天球映像を第２全天球映像に切り換えてもよい。
The process of switching the omnidirectional video based on the second operation can be said to be a process according to whether the second operation is a tap operation on the
図１５は、ある実施の形態に従う、スマートフォン１６０Ａにおける全天球映像の表示例を示す図である。ステップＳ１００９において、タッチパネル２４１は第３操作を受け付ける。ステップＳ１００９は、すなわち、プロセッサ２１０が、ユーザの操作を第３操作と判別した場合に相当する。第３操作は、一例として、図１５（Ａ）に示すように、タッチスクリーン２４０へ指１２３０を接触させ、接触させた指１２３０を移動させることなく離す操作である。つまり、第３操作は、第２操作と同様にタップ操作である。ただし、第３操作は、第２操作と異なり、中央領域１３３へのタップ操作である。
FIG. 15 is a diagram showing a display example of omnidirectional video on
ステップＳ１０１０において、プロセッサ２１０は、ＵＩ制御モジュール８１４として、第３移動操作に基づき、画面からＵＩ１２２１を消去する。具体的には、図１５（Ｂ）に示すように、ディスプレイ２４２において、ＵＩ１２２１を非表示とし、表示領域１２１４Ａのみが表示された状態とする。
In step S1010, the
ユーザに、動画を閲覧させるアプリケーションにおいては、アプリケーションの操作性を向上させるために、ＵＩを用いることが好ましい。一方で、ＵＩをディスプレイに表示した場合、ＵＩによって動画の視認性が低下する。これに対し、本実施の形態に従うスマートフォン１６０Ａは、第３操作により、ＵＩ１２２１を非表示とすることができるので、ＵＩによる全天球映像の視認性の低下を防ぐことができる。換言すれば、スマートフォン１６０Ａは、ＵＩ１２２１が全天球映像に重畳することにより、全天球映像に視認できない部分が発生することを防ぐことができる。
An application that allows a user to browse moving images preferably uses a UI in order to improve the operability of the application. On the other hand, when the UI is displayed on the display, the UI reduces the visibility of the moving image. In contrast, since
なお、非表示となったＵＩ１２２１は、ユーザの操作に基づいて再表示可能であることが望ましい。一例として、プロセッサ２１０は、ＵＩ制御モジュール８１４として、ＵＩ１２２１が非表示の場合における第３操作、すなわち、中央領域１３３へのタップ操作に基づき、非表示となったＵＩ１２２１を再表示する。あるいは、プロセッサ２１０は、ＵＩ制御モジュールとして、第１操作、第２操作、第３操作の何れとも異なる操作に基づき、非表示となったＵＩ１２２１を再表示してもよい。
Note that it is desirable that the UI 1221 that has become hidden can be redisplayed based on the user's operation. As an example, the
（操作判別処理）
図１１を参照して、操作判別処理の詳細について説明する。図１１に示す操作判別処理の前提として、プロセッサ２１０は、操作判別処理の開始から終了まで、操作判別モジュール８１２として機能する。また、ディスプレイ２４２には、全天球映像およびＵＩ１２２１が表示されているものとする。ステップＳ１１０１において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作が移動操作であるか否かを判定する。一例として、プロセッサ２１０は、タッチパネル２４１が受け付けた操作が以下の２つの条件を満たす場合、該操作が移動操作であると判定する。すなわち、（１）接近操作の座標（初期タッチ位置）とリリース操作の座標とが、いずれも単一の座標である（換言すれば、１本の指での操作である）、（２）初期タッチ位置とリリース操作の座標とが、所定の範囲内にない。移動操作であると判定した場合（ステップＳ１１０１でＹＥＳ）、ステップＳ１１０２において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第１操作と判別する。
(Operation determination processing)
Details of the operation determination process will be described with reference to FIG. 11 . As a premise of the manipulation determination processing shown in FIG. 11, the
一方、移動操作でないと判定した場合（ステップＳ１１０１でＮＯ）、ステップＳ１１０３において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作がタップ操作であるか否かを判定する。一例として、プロセッサ２１０は、タッチパネル２４１が受け付けた操作が以下の２つの条件を満たす場合、該操作がタップ操作であると判定する。すなわち、（１）接近操作の座標（初期タッチ位置）とリリース操作の座標とが、いずれも単一の座標である（換言すれば、１本の指での操作である）、（２）初期タッチ位置とリリース操作の座標とが、所定の範囲内にある。タップ操作であると判定した場合（ステップＳ１１０３でＹＥＳ）、ステップＳ１１０４において、プロセッサ２１０は、タップ操作が入力された領域が、右側領域１３１または左側領域１３２であるか否かを判定する。右側領域１３１または左側領域１３２であると判定した場合（ステップＳ１１０４でＹＥＳ）、ステップＳ１１０５において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第２操作と判別する。
On the other hand, if it is determined that the operation is not a move operation (NO in step S1101), the
ステップＳ１１０４にて、タップ操作が入力された領域が、右側領域１３１または左側領域１３２でないと判定した場合（ステップＳ１１０４でＮＯ）、ステップＳ１１０６において、プロセッサ２１０は、タップ操作が入力された領域が、中央領域１３３であるか否かを判定する。中央領域１３３であると判定した場合（ステップＳ１１０６でＹＥＳ）、ステップＳ１１０７において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第３操作と判別する。
If it is determined in step S1104 that the area to which the tap operation has been input is not the
一方、中央領域１３３でないと判定した場合（ステップＳ１１０６でＮＯ）、プロセッサ２１０は、タップ操作が入力された領域が、右側領域１３１、左側領域１３２、中央領域１３３の何れでもないことを特定する。この場合におけるタップ操作が入力された領域は、例えば、図１３に示す中央領域１３３の上側、あるいは下側の領域である。プロセッサ２１０は、この場合、タップ操作を第１操作、第２操作、第３操作の何れでもないと判別する。なお、この様なタップ操作をタッチパネル２４１が受け付けた場合、プロセッサ２１０は、一例として、いずれの処理も実行しない。
On the other hand, if the
ステップＳ１１０３にて、タップ操作でないと判定した場合（ステップＳ１１０３でＮＯ）、ステップＳ１１０８において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作をその他の操作と判別する。その他の操作の一例としては、指１２３０をタッチスクリーン２４０に接触させ、タッチスクリーン２４０を押し込もうとする操作、換言すれば、タッチスクリーン２４０に対して所定の閾値以上の圧力をかける操作である押し込み操作などが挙げられる。なお、その他の操作は該押し込み操作に限定されない。また、押し込み操作以外の操作は、タッチスクリーン２４０に対して、該所定の閾値未満の圧力をかけながら行う操作と表現することもできる。例えば、タップ操作は、指１２３０をタッチスクリーン２４０に接触させ、タッチスクリーン２４０に対して、該所定の閾値未満の圧力をかけた後に指１２３０をタッチスクリーン２４０から離す操作、と表現することもできる。
If it is determined in step S1103 that the operation is not a tap operation (NO in step S1103), then in step S1108 the
［作用効果］
以上のとおり、本実施形態に係るスマートフォン１６０のプロセッサ２１０は、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域（表示領域）を前記タッチスクリーンに表示させる。そして、プロセッサ２１０は、タッチスクリーン２４０に対して入力された、移動操作である第１操作に応答して、第１全天球映像に関する第１処理を実行する。また、プロセッサ２１０は、タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、第１処理と異なる、第１全天球映像に関する第２処理を実行する。また、プロセッサ２１０は、タッチスクリーンに対して入力された、第２操作と異なるタップ操作である第３操作に応答して、第１全天球映像に関する第３処理を実行する。
[Effect]
As described above, the
具体的には、第２操作は、右側領域１３１または左側領域１３２に対して入力されたタップ操作であり、第３操作は、中央領域１３３に対して入力されたタップ操作である。また、上記第１処理は、表示領域を変更する処理であり、上記第２処理は、第１全天球映像を第２全天球映像に切り換える処理である。また、プロセッサ２１０は、表示領域とともに、ＵＩ１２２１を表示させる。そして、上記第３処理は、ＵＩ１２２１を非表示とする処理である。
Specifically, the second operation is a tap operation input to
このように、移動操作とタップ操作という簡易な操作により、スマートフォン１６０に、全天球映像に関する３つの異なる処理を実行させることができる。具体的には、１つの移動操作と、入力される領域が異なる２つのタップ操作により、スマートフォン１６０に、全天球映像に関する３つの異なる処理を実行させることができる。結果として、全天球映像の閲覧に関する操作の操作性が向上する。
In this way,
また、ユーザは、スマートフォン１６０に、全天球映像を再生したまま、表示領域の変更処理も全天球映像の切り換え処理も実行させることができる。よって、全天球映像の閲覧に関する操作について、操作性の良いアプリケーションを実現することができる。
In addition, the user can cause
［変形例］
（操作判別処理の変形例１）
図１６は、ある実施の形態に従うスマートフォン１６０において実行される操作判別処理を示すフローチャートである。図１６に示す操作判別処理の前提として、プロセッサ２１０は、操作判別処理の開始から終了まで、操作判別モジュール８１２として機能する。また、ディスプレイ２４２には、全天球映像およびＵＩ１２２１が表示されているものとする。ステップＳ１６０１において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作が移動操作であるか否かを判定する。移動操作であると判定した場合（ステップＳ１６０１でＹＥＳ）、ステップＳ１６０２において、プロセッサ２１０は、移動操作が入力された領域が、中央領域１３３であるか否かを判定する。プロセッサ２１０は、ある局面において、接近操作が検出された座標とリリース操作が検出された座標とがいずれも中央領域１３３に含まれる場合、移動操作が入力された領域が中央領域１３３であると判定してもよい。また、プロセッサ２１０は、別の局面において、少なくとも接近操作が検出された座標が中央領域に１３３に含まれる場合、移動操作が入力された領域が中央領域１３３であると判定してもよい。
[Modification]
(Modified example 1 of operation determination processing)
FIG. 16 is a flowchart showing operation determination processing executed in
移動操作が入力された領域が中央領域１３３であると判定した場合（ステップＳ１６０２でＹＥＳ）、ステップＳ１６０３において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第１操作と判別する。
If it is determined that the area where the movement operation was input is central area 133 (YES in step S1602),
一方、中央領域１３３でないと判定した場合（ステップＳ１６０２でＮＯ）、ステップＳ１６０４において、プロセッサ２１０は、移動操作が入力された領域が、右側領域１３１または左側領域１３２であるか否かを判定する。プロセッサ２１０は、ある局面において、接近操作が検出された座標とリリース操作が検出された座標とがいずれも右側領域１３１または左側領域１３２に含まれる場合、移動操作が入力された領域が右側領域１３１または左側領域１３２であると判定してもよい。また、プロセッサ２１０は、別の局面において、少なくとも接近操作が検出された座標が、右側領域１３１または左側領域１３２に含まれる場合、移動操作が入力された領域が右側領域１３１または左側領域１３２であると判定してもよい。
On the other hand, if it is determined that it is not central area 133 (NO in step S1602),
移動操作が入力された領域が右側領域１３１または左側領域１３２であると判定した場合（ステップＳ１６０４でＹＥＳ）、ステップＳ１６０５において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第４操作と判別する。第４操作は、第１操作、第２操作、第３操作の何れとも異なる操作である。タッチパネル２４１が受け付けた操作を第４操作と判別した場合、プロセッサ２１０は、一例として、図１０に示すステップＳ１００７の処理を実行する。すなわち、プロセッサ２１０は、第４操作に応答して、全天球映像を切り換える処理を実行する。換言すれば、ユーザは、第２操作または第４操作をタッチスクリーン２４０に入力することにより、全天球映像を切り換える処理をスマートフォン１６０に実行させることができる。
If it is determined that the area where the movement operation was input is
一方、右側領域１３１または左側領域１３２でないと判定した場合（ステップＳ１６０４でＮＯ）、プロセッサ２１０は、移動操作が入力された領域が、右側領域１３１、左側領域１３２、中央領域１３３の何れでもないことを特定する。この場合における移動操作が入力された領域は、例えば、図１３に示す中央領域１３３の上側、あるいは下側の領域である。プロセッサ２１０は、この場合、移動操作を第１操作、第２操作、第３操作、第４操作の何れでもないと判別する。なお、この様な移動操作をタッチパネル２４１が受け付けた場合、プロセッサ２１０は、一例として、いずれの処理も実行しない。
On the other hand, if the
ステップＳ１６０１において、移動操作でないと判定した場合（ステップＳ１６０１でＮＯ）、ステップＳ１６０６において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作がタップ操作であるか否かを判定する。タップ操作であると判定した場合（ステップＳ１６０６でＹＥＳ）、ステップＳ１６０７において、プロセッサ２１０は、タップ操作が入力された領域が、右側領域１３１または左側領域１３２であるか否かを判定する。右側領域１３１または左側領域１３２であると判定した場合（ステップＳ１６０７でＹＥＳ）、ステップＳ１６０８において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第２操作と判別する。
If it is determined in step S1601 that the operation is not a move operation (NO in step S1601), the
一方、右側領域１３１または左側領域１３２でないと判定した場合（ステップＳ１６０７でＮＯ）、ステップＳ１６０９において、プロセッサ２１０は、タップ操作が入力された領域が、中央領域１３３であるか否かを判定する。中央領域１３３であると判定した場合（ステップＳ１６０９でＹＥＳ）、ステップＳ１６１０において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第３操作と判別する。
On the other hand, if it is determined that it is neither the
一方、中央領域１３３でないと判定した場合（ステップＳ１６０９でＮＯ）、プロセッサ２１０は、タップ操作が入力された領域が、右側領域１３１、左側領域１３２、中央領域１３３の何れでもないことを特定する。この場合におけるタップ操作が入力された領域は、例えば、図１３に示す中央領域１３３の上側、あるいは下側の領域である。プロセッサ２１０は、この場合、タップ操作を第１操作、第２操作、第３操作、第４操作の何れでもないと判別する。なお、この様なタップ操作をタッチパネル２４１が受け付けた場合、プロセッサ２１０は、一例として、いずれの処理も実行しない。
On the other hand, if the
ステップＳ１６０６にて、タップ操作でないと判定した場合（ステップＳ１６０６でＮＯ）、ステップＳ１６１１において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作をその他の操作と判別する。その他の操作の具体例は、上述した実施形態で既に説明しているため、ここでは説明を繰り返さない。
If it is determined in step S1606 that the operation is not a tap operation (NO in step S1606), then in step S1611 the
（作用効果）
以上のとおり、本変形例に係るスマートフォン１６０のプロセッサ２１０は、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域（表示領域）を前記タッチスクリーンに表示させる。そして、プロセッサ２１０は、タッチスクリーン２４０に対して入力された、移動操作である第１操作に応答して、第１全天球映像に関する第１処理を実行する。また、プロセッサ２１０は、タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、第１処理と異なる、第１全天球映像に関する第２処理を実行する。また、プロセッサ２１０は、タッチスクリーンに対して入力された、第２操作と異なるタップ操作である第３操作に応答して、第１全天球映像に関する第３処理を実行する。
(Effect)
As described above,
具体的には、第１操作は、中央領域１３３に対して入力された移動操作であり、第２操作は、右側領域１３１または左側領域１３２に対して入力されたタップ操作であり、第３操作は、中央領域１３３に対して入力されたタップ操作である。また、上記第１処理は、表示領域を変更する処理であり、上記第２処理は、第１全天球映像を第２全天球映像に切り換える処理である。また、プロセッサ２１０は、表示領域とともに、ＵＩ１２２１を表示させる。そして、上記第３処理は、ＵＩ１２２１を非表示とする処理である。
Specifically, the first operation is a move operation input to the
このように、移動操作とタップ操作という簡易な操作により、スマートフォン１６０に、全天球映像に関する３つの異なる処理を実行させることができる。具体的には、１つの移動操作と、入力される領域が異なる２つのタップ操作により、スマートフォン１６０に、全天球映像に関する３つの異なる処理を実行させることができる。結果として、全天球映像の閲覧に関する操作の操作性が向上する。
In this way,
また、プロセッサ２１０は、右側領域１３１または左側領域１３２に対して入力された移動操作に応答して、第１全天球映像を第２全天球映像に切り換える処理を実行する。つまり、スマートフォン１６０のユーザは、移動操作を入力する領域を異ならせることで、表示領域を変更する処理と、第１全天球映像を第２全天球映像に切り換える処理という２つの異なる処理をスマートフォン１６０に実行させることができる。
コンテンツの切り換えを移動操作で行うことは一般的であり、また、全天球映像の表示領域の変更を移動操作で行うこともまた一般的である。換言すれば、ユーザは、コンテンツを切り換えようとする場合も、全天球映像の表示領域を変更しようとする場合も、移動操作を想起する。一方で、複数の全天球映像を閲覧可能な場合においては、表示領域の変更のための操作と、全天球映像の切り換えのための操作とが移動操作として重複してしまう。 It is common to switch contents by a moving operation, and it is also common to change the display area of the omnidirectional video by a moving operation. In other words, the user recalls the movement operation when trying to switch the content or when trying to change the display area of the omnidirectional video. On the other hand, when a plurality of omnidirectional images can be browsed, the operation for changing the display area and the operation for switching the omnidirectional images overlap as movement operations.
そこで、中央領域１３３に入力された移動操作に表示領域変更処理を対応付け、右側領域１３１および左側領域１３２に入力された移動操作に動画切換処理を対応付けることで、これらの処理をいずれも移動操作で行うことができる。よって、ユーザは直感的な（慣れ親しんだ）操作を入力することで、いずれの処理についてもスマートフォン１６０に実行させることができる。
Therefore, by associating the display area change process with the movement operation input to the
該変形例のある局面において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作が移動操作であると判定した場合、移動操作が入力された領域がいずれの領域であったとしても該操作を第１操作と判別してもよい。すなわち、この例において、プロセッサ２１０は、移動操作を第１操作と判別し、右側領域１３１または左側領域１３２に入力されたタップ操作を第２操作と判別し、中央領域１３３に入力されたタップ操作を第３操作と判別する。
In one aspect of the modification, when
また、該変形例の別の局面において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作がタップ操作であると判定した場合、タップ操作が入力された領域がいずれの領域であったとしても該操作を第３操作と判別してもよい。すなわち、この例において、プロセッサ２１０は、中央領域１３３に入力された移動操作を第１操作と判別し、右側領域１３１または左側領域１３２に入力された移動操作を第２操作と判別し、タップ操作を第３操作と判別する。
Further, in another aspect of the modification, when
（操作判別処理の変形例２）
図１７は、ある実施の形態に従うスマートフォン１６０において実行される操作判別処理を示すフローチャートである。図１７に示す操作判別処理の前提として、プロセッサ２１０は、操作判別処理の開始から終了まで、操作判別モジュール８１２として機能する。また、ディスプレイ２４２には、全天球映像およびＵＩ１２２１が表示されているものとする。ステップＳ１７０１において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作が移動操作であるか否かを判定する。移動操作であると判定した場合（ステップＳ１７０１でＹＥＳ）、ステップＳ１７０２において、プロセッサ２１０は、移動操作がフリック操作（第１移動操作）であるか否かを判定する。プロセッサ２１０は、一例として、接近操作が検出されてからリリース操作が検出されるまでの時間が所定の閾値である第１時間未満である場合、移動操作をフリック操作と判定する。移動操作がフリック操作であると判定した場合（ステップＳ１７０２でＹＥＳ）、ステップＳ１７０３において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第１操作と判別する。
(Modified example 2 of operation determination processing)
FIG. 17 is a flowchart showing operation determination processing executed in
一方、移動操作がフリック操作でないと判定した場合（ステップＳ１７０２でＮＯ）、ステップＳ１７０４において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第３操作と判別する。プロセッサ２１０は、一例として、接近操作が検出されてからリリース操作が検出されるまでの時間が第１時間以上である場合、移動操作をフリック操作でないと判定する。この場合、プロセッサ２１０は、例えば移動操作をドラッグ操作（第２移動操作）と判定する。すなわち、タッチパネル２４１がドラッグ操作を受け付けた場合、プロセッサ２１０は、該ドラッグ操作を第３操作と判別する。
On the other hand, when determining that the moving operation is not the flicking operation (NO in step S1702), the
ステップＳ１７０１において、移動操作でないと判定した場合（ステップＳ１７０１でＮＯ）、ステップＳ１７０５において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作がタップ操作であるか否かを判定する。タップ操作であると判定した場合（ステップＳ１７０５でＹＥＳ）、ステップＳ１７０６において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作を第２操作と判別する。
If it is determined in step S1701 that the operation is not a move operation (NO in step S1701), the
一方、タップ操作でないと判定した場合（ステップＳ１７０５でＮＯ）、ステップＳ１７０７において、プロセッサ２１０は、タッチパネル２４１が受け付けた操作をその他の操作と判別する。その他の操作の具体例は、上述した実施形態で既に説明しているため、ここでは説明を繰り返さない。
On the other hand, if the
（作用効果）
以上のとおり、本変形例に係るスマートフォン１６０のプロセッサ２１０は、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域（表示領域）を前記タッチスクリーンに表示させる。そして、プロセッサ２１０は、タッチスクリーン２４０に対して入力された、移動操作である第１操作に応答して、第１全天球映像に関する第１処理を実行する。また、プロセッサ２１０は、タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、第１処理と異なる、第１全天球映像に関する第２処理を実行する。また、プロセッサ２１０は、タッチスクリーンに対して入力された、第３操作と異なる移動操作である第３操作に応答して、第１全天球映像に関する第３処理を実行する。
(Effect)
As described above,
具体的には、第１操作は、指１２３０がタッチスクリーン２４０に接触している時間が第１時間未満である操作、いわゆるフリック操作であり、第３操作は、指１２３０がタッチスクリーン２４０に接触している時間が第１時間以上である操作、いわゆるドラッグ操作である。また、上記第１処理は、表示領域を変更する処理であり、上記第２処理は、第１全天球映像を第２全天球映像に切り換える処理である。また、プロセッサ２１０は、表示領域とともに、ＵＩ１２２１を表示させる。そして、上記第３処理は、ＵＩ１２２１を非表示とする処理である。
Specifically, the first operation is an operation in which the
このように、移動操作とタップ操作という簡易な操作により、スマートフォン１６０に、全天球映像に関する３つの異なる処理を実行させることができる。具体的には、操作の態様が異なる２つの移動操作と、１つのタップ操作により、スマートフォン１６０に、全天球映像に関する３つの異なる処理を実行させることができる。結果として、全天球映像の閲覧に関する操作の操作性が向上する。
In this way,
（操作判別処理の変形例３）
上述した実施形態、並びに、変形例１および２では、プロセッサ２１０は、ドラッグ操作とムーブ操作（以下、「スワイプ操作」と記載する）とを同じ操作として判別していた。これに対し、プロセッサ２１０は、これらの操作を別の操作として判別し、それぞれに異なる処理を対応付けてもよい。例えば、プロセッサ２１０は、タッチパネル２４１が受け付けた操作をドラッグ操作と判別した場合、全天球映像の表示領域を変更してもよい。また、プロセッサ２１０は、タッチパネル２４１が受け付けた操作をスワイプ操作と判別した場合、全天球映像を別の全天球映像に切り換えてもよい。
(Modified example 3 of operation determination processing)
In the above-described embodiment and modified examples 1 and 2, the
一方で、ドラッグ操作とスワイプ操作とは共に移動操作であるため、ユーザが入力した操作が異なる操作と判別され、結果として、ユーザの意図した処理が実行されない可能性がある。例えば、ユーザが表示領域を変更するためにドラッグ操作を入力したところ、スワイプ操作と判別され、再生中の全天球映像が別の全天球映像に切り換えられてしまう、といった状況が発生し得る。本変形例では、この問題の解決方法を説明する。 On the other hand, since both the drag operation and the swipe operation are movement operations, the operations input by the user may be determined as different operations, and as a result, the processing intended by the user may not be executed. For example, when the user inputs a drag operation to change the display area, it is determined to be a swipe operation, and the omnidirectional image being played back is switched to another omnidirectional image. . This modified example will explain how to solve this problem.
図１８および図１９は、ある実施の形態に従う、スマートフォン１６０Ａにおける全天球映像の表示例を示す図である。図１８（Ａ）に示すように、プロセッサ２１０は、タッチスクリーン２４０へ指１２３０を接触させ、所定の閾値（以下、単に「閾値」と記載する）秒以上待機した後、指１２３０を移動させる操作を受け付ける。該操作は、タッチスクリーン２４０へ指１２３０を接触させた後、接触を維持したまま移動させない時間である待機時間（第２時間）が、閾値秒以上の移動操作であるとも表現することができる。また、該操作は、タッチスクリーン２４０へ指１２３０を接触させた後、接触を維持したまま、閾値秒以上移動させないという初期操作を含む移動操作であるとも表現することができる。図１８（Ａ）の例では、該移動操作により、指１２３０を第１方向１２４０へ移動させている。第１方向１２４０は、図１８（Ａ）の右方向である。本変形例では、プロセッサ２１０は、操作判別モジュール８１２として、該移動操作を第１操作（第３移動操作）と判別する。
18 and 19 are diagrams showing display examples of omnidirectional video on
「所定の閾値秒」の具体的な値（秒数）は、タッチパネル２４１の性能（レスポンス）に応じて適宜設定される。一例としては、該値は、０．０１秒～０．１秒の範囲で好適な値を設定可能である。
A specific value (number of seconds) of the “predetermined threshold seconds” is appropriately set according to the performance (response) of the
なお、本変形例に係る第１操作は、具体的には、閾値秒待機してから行われるドラッグ操作を想定しているが、上記の条件を満たした移動操作であれば、ドラッグ操作に限定されない。例えば、第１操作は、上記の条件を満たしたフリック操作であってもよい。 Note that the first operation according to this modification is specifically assumed to be a drag operation performed after waiting for the threshold seconds, but if the move operation satisfies the above conditions, it is limited to the drag operation. not. For example, the first operation may be a flick operation that satisfies the above conditions.
プロセッサ２１０は、動画制御モジュール８１１として、第１操作に基づき表示領域を変更する。図１８（Ａ）の例では、指１２３０を右方向に移動させているので、プロセッサ２１０は、例えば、表示領域を右方向に、指１２３０の移動距離に応じた距離だけ移動させる。これにより、表示領域１２１４Ａは表示領域１２１４Ｂに変更され、ディスプレイ２４２では、図１２（Ｂ）に示すように、第１移動操作の前には視聴者が視認できなかった、被写体１５０の右側が表示される。なお、被写体１５０の右側とは、ユーザ（視聴者）から見た被写体１５０の右側である。
また、図１９に示すように、プロセッサ２１０は、タッチスクリーン２４０へ指１２３０を接触させ、閾値秒が経過する前に、指１２３０を移動させる操作を受け付ける。該操作は、上述した待機時間が、閾値秒未満の移動操作であるとも表現することができる。また、該操作は、上述した初期操作を含まない移動操作であるとも表現することができる。本変形例では、プロセッサ２１０は、操作判別モジュール８１２として、該移動操作のうち、「図１３（Ａ）の左右方向へ指１２３０等の指示体を移動させる操作」を第４操作（第４移動操作）と判別する。図１９（Ａ）の例では、指１２３０を第１方向１２４０へ移動させている。第１方向１２４０は、図１９（Ａ）の右方向である。
In addition, as shown in FIG. 19,
なお、本変形例に係る第４操作は、具体的には、閾値秒待機せずに行われる左右方向へのフリック操作（左右方向への通常のフリック操作）、または、閾値秒待機せずに行われる左右方向へのスワイプ操作（左右方向への通常のスワイプ操作）を想定している。ただし、上記の条件を満たした移動操作であれば、フリック操作およびスワイプ操作に限定されない。例えば、第４操作は、上記の条件を満たしたドラッグ操作であってもよい。なお、本変形例では、実施形態および他の変形例と異なり、プロセッサ２１０は、スワイプ操作とドラッグ操作とを異なる操作として判別する。
Note that the fourth operation according to the present modification is, specifically, a left-right flick operation performed without waiting for the threshold seconds (normal flick operation in the left-right direction), or a flick operation performed without waiting for the threshold seconds. A swipe operation in the left and right direction (a normal swipe operation in the left and right direction) is assumed. However, the movement operation is not limited to the flick operation and the swipe operation as long as the movement operation satisfies the above conditions. For example, the fourth operation may be a drag operation that satisfies the above conditions. Note that in this modified example, unlike the embodiment and other modified examples, the
プロセッサ２１０は、動画切換モジュール８１３として、第４操作に基づき、第１全天球映像を第２全天球映像に切り換える。具体的には、図１９（Ｂ）に示すように、第２全天球映像の一部である表示領域１３１４をディスプレイ２４２に表示する。第２全天球映像は、第１全天球映像とは異なる全天球映像であり、一例として、被写体１５０と異なる被写体１３５０を含む。
なお、本変形例に係る第２操作および第３操作は、実施形態に係る第２操作および第３操作と同一であるため、ここでは説明を繰り返さない。また、本変形例では、プロセッサ２１０は、操作判別モジュール８１２として、待機時間が閾値秒未満の移動操作のうち、「図１３（Ａ）の上下方向へ指１２３０等の指示体を移動させる操作」を、第１操作～第４操作と異なる第５操作と判別する。
Note that the second operation and the third operation according to this modified example are the same as the second operation and the third operation according to the embodiment, and thus description thereof will not be repeated here. In addition, in the present modification, the
プロセッサ２１０は、ＵＩ制御モジュール８１４として、第５操作に基づき、画面からＵＩ１２２１を消去する。換言すれば、ユーザは、第３操作または第５操作をタッチスクリーン２４０に入力することにより、画面からＵＩ１２２１を消去する処理をスマートフォン１６０に実行させることができる。
（作用効果）
以上のとおり、本実施形態に係るスマートフォン１６０のプロセッサ２１０は、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域（表示領域）を前記タッチスクリーンに表示させる。そして、プロセッサ２１０は、タッチスクリーン２４０に対して入力された、初期操作を含む移動操作である第１操作に応答して、第１全天球映像に関する第１処理を実行する。また、プロセッサ２１０は、タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、第１処理と異なる、第１全天球映像に関する第２処理を実行する。また、プロセッサ２１０は、タッチスクリーンに対して入力された、第２操作と異なるタップ操作である第３操作に応答して、第１全天球映像に関する第３処理を実行する。
(Effect)
As described above, the
具体的には、第２操作は、右側領域１３１または左側領域１３２に対して入力されたタップ操作であり、第３操作は、中央領域１３３に対して入力されたタップ操作である。また、上記第１処理は、表示領域を変更する処理であり、上記第２処理は、第１全天球映像を第２全天球映像に切り換える処理である。また、プロセッサ２１０は、表示領域とともに、ＵＩ１２２１を表示させる。そして、上記第３処理は、ＵＩ１２２１を非表示とする処理である。
Specifically, the second operation is a tap operation input to
このように、移動操作とタップ操作という簡易な操作により、スマートフォン１６０に、全天球映像に関する３つの異なる処理を実行させることができる。具体的には、１つの移動操作と、入力される領域が異なる２つのタップ操作により、スマートフォン１６０に、全天球映像に関する３つの異なる処理を実行させることができる。結果として、全天球映像の閲覧に関する操作の操作性が向上する。
In this way,
また、プロセッサ２１０は、初期操作を含まない移動操作に応答して、第１全天球映像を第２全天球映像に切り換える処理を実行する。つまり、スマートフォン１６０のユーザは、初期操作を含む移動操作と、初期操作を含まない移動操作とを使い分けることで、表示領域を変更する処理と、第１全天球映像を第２全天球映像に切り換える処理という２つの異なる処理をスマートフォン１６０に実行させることができる。
コンテンツの切り換えを移動操作で行うことは一般的であり、また、全天球映像の表示領域の変更を移動操作で行うこともまた一般的である。換言すれば、ユーザは、コンテンツを切り換えようとする場合も、全天球映像の表示領域を変更しようとする場合も、移動操作を想起する。一方で、複数の全天球映像を閲覧可能な場合においては、表示領域の変更のための操作と、全天球映像の切り換えのための操作とが移動操作として重複してしまう。 It is common to switch contents by a moving operation, and it is also common to change the display area of the omnidirectional video by a moving operation. In other words, the user recalls the movement operation when trying to switch the content or when trying to change the display area of the omnidirectional video. On the other hand, when a plurality of omnidirectional images can be browsed, the operation for changing the display area and the operation for switching the omnidirectional images overlap as movement operations.
そこで、初期操作を含む移動操作に表示領域変更処理を対応付け、初期操作を含まない移動操作に動画切換処理を対応付けることで、これらの処理をいずれも移動操作で行うことができる。よって、ユーザは直感的な（慣れ親しんだ）操作を入力することで、いずれの処理についてもスマートフォン１６０に実行させることができる。
Therefore, by associating the display area changing process with the movement operation including the initial operation and the moving image switching process with the movement operation not including the initial operation, both of these processes can be performed by the movement operation. Therefore, the user can cause the
（各例における操作と処理との対応）
図２０は、ある実施の形態に従う、スマートフォンに対する操作と、該操作に応じてスマートフォンが実行する処理との対応付けを示す図である。図２０において、単一操作とは、１本の指（例えば、人差し指）で行う操作である。シェイクとは、把持したスマートフォン１６０を振る操作（以下、「シェイク操作」と記載する）である。指二本操作とは、２本の指（例えば、人差し指と中指、または、親指と人差し指）で行う操作である。ダブルタップトリガーとは、ダブルタップ操作を行った後、所定時間以内に任意の操作を行うことである。また、図２０において、パターン１、２、３、４は、それぞれ、実施形態の例、変形例１、変形例２、変形例３に対応する。
(Correspondence between operations and processes in each example)
FIG. 20 is a diagram illustrating correspondences between operations performed on a smartphone and processes executed by the smartphone in response to the operations, according to an embodiment. In FIG. 20, a single operation is an operation performed with one finger (for example, index finger). A shake is an operation of shaking the gripped smartphone 160 (hereinafter referred to as a “shake operation”). A two-finger operation is an operation performed with two fingers (for example, index finger and middle finger, or thumb and index finger). A double-tap trigger is to perform an arbitrary operation within a predetermined time after performing a double-tap operation. In FIG. 20,
すなわち、パターン１において、スマートフォン１６０のプロセッサ２１０は、右側領域１３１または左側領域１３２に対するタップ操作を受け付けると、映像切替処理、すなわち、全天球映像を切り換える処理を実行する。また、パターン１において、プロセッサ２１０は、中央領域１３３に対するタップ操作を受け付けると、ＵＩ消去処理、すなわち、画面からＵＩ１２２１を消去する処理を実行する。また、パターン１において、プロセッサ２１０は、フリック操作またはドラッグ操作（すなわち、移動操作）を受け付けると、表示領域変更処理、すなわち、移動方向と移動距離とに応じて、第１全天球映像内で表示領域を移動させる処理を実行する。
That is, in
パターン２において、プロセッサ２１０は、右側領域１３１または左側領域１３２に対するタップ操作を受け付けると、映像切替処理を実行する。また、パターン２において、プロセッサ２１０は、中央領域１３３に対するタップ操作を受け付けると、ＵＩ消去処理を実行する。また、パターン２において、プロセッサ２１０は、右側領域１３１または左側領域１３２に対する移動操作を受け付けると、映像切替処理を実行する。また、パターン２において、プロセッサ２１０は、中央領域１３３に対する移動操作を受け付けると、表示領域変更処理を実行する。
In
パターン３において、プロセッサ２１０は、タップ操作を受け付けると、映像切替処理を実行する。また、パターン３において、プロセッサ２１０は、フリック操作を受け付けると、表示領域変更処理を実行する。また、パターン３において、プロセッサ２１０は、ドラッグ操作を受け付けると、ＵＩ消去処理を実行する。
In
パターン４において、プロセッサ２１０は、右側領域１３１または左側領域１３２に対するタップ操作を受け付けると、映像切替処理を実行する。また、パターン４において、プロセッサ２１０は、中央領域１３３に対するタップ操作を受け付けると、ＵＩ消去処理を実行する。また、パターン４において、プロセッサ２１０は、フリック操作およびスワイプ操作を受け付けると、映像切替処理を実行する。また、パターン４において、プロセッサ２１０は、ドラッグ操作を受け付けると、表示領域変更処理を実行する。なお、ここでのフリック操作およびスワイプ操作は、初期操作を含まない操作であり、ドラッグ操作は、初期操作を含む操作である。
In
図２０に示すパターン１、２、３、４において、プロセッサ２１０は、押し込み操作を受け付けると、メニュー表示処理を実行する、メニュー表示処理とは、プロセッサ２１０が実行可能な処理の一欄をタッチスクリーン２４０（ディスプレイ２４２）に表示させる処理である。
In
図２０に示すパターン１、２、３、４において、プロセッサ２１０は、シェイク操作を受け付けると、映像切替処理を実行する。すなわち、スマートフォン１６０のユーザは、スマートフォン１６０を振ることにより、全天球映像を切り換えることができる。
In
図２０に示すパターン１、２、４において、プロセッサ２１０は、並列移動操作を受け付けると、映像切替処理を実行する。並列移動操作とは、２本の指（例えば人差し指および中指）をタッチスクリーン２４０に接触（または近接）させてタッチスクリーン２４０上を移動させた後に、接触（または近接）を解除する操作である。すなわち、パターン１および２において、スマートフォン１６０のユーザは、タップ操作だけでなく、移動操作によっても全天球映像を切り換えることができる。
In
コンテンツの切り換えを移動操作で行うことは一般的であり、また、全天球映像の表示領域の変更を移動操作で行うこともまた一般的である。換言すれば、ユーザは、コンテンツを切り換えようとする場合も、全天球映像の表示領域を変更しようとする場合も、移動操作を想起する。一方で、複数の全天球映像を閲覧可能な場合においては、表示領域の変更のための操作と、全天球映像の切り換えのための操作とが移動操作として重複してしまう。 It is common to switch contents by a moving operation, and it is also common to change the display area of the omnidirectional video by a moving operation. In other words, the user recalls the movement operation when trying to switch the content or when trying to change the display area of the omnidirectional video. On the other hand, when a plurality of omnidirectional images can be browsed, the operation for changing the display area and the operation for switching the omnidirectional images overlap as movement operations.
そこで、２本の指を用いた並列移動操作を採用し、１本の指を用いた移動操作に表示領域変更処理を対応付け、並列移動操作に動画切替処理を対応付けることで、これらの処理をいずれも移動操作で行うことができる。よって、ユーザは直感的な（慣れ親しんだ）操作を入力することで、いずれの処理についてもスマートフォン１６０に実行させることができる。
Therefore, by adopting a parallel movement operation using two fingers, by associating display area change processing with the movement operation using one finger, and moving image switching processing with the parallel movement operation, these processes can be combined. Both can be done by moving. Therefore, the user can cause the
また、パターン３において、プロセッサ２１０は、並列移動操作を受け付けると、ＵＩ消去処理を実行する。あるいは、パターン３の別の例として、プロセッサ２１０は、並列移動操作を受け付けると、メニュー表示処理を実行する。あるいは、プロセッサ２１０は、指２本を用いたドラッグ操作を受け付けた場合、ＵＩ消去処理を実行し、指２本を用いたフリック操作を受け付けた場合、メニュー表示処理を実行してもよい。
Also, in
図２０に示すパターン１、２、３、４において、プロセッサ２１０は、ピンチイン操作を受け付けると、縮小処理を実行する。ピンチイン操作とは、タッチスクリーン２４０に接触（または近接）させた２本の指を、該２本の指の間隔を狭めるように移動させる操作である。縮小処理とは、タッチスクリーン２４０（ディスプレイ２４２）に表示された全天球映像の表示倍率を下げる処理である（ズームアウト処理とも表現することができる）。また、パターン１、２、３、４において、プロセッサ２１０は、ピンチアウト操作を受け付けると、拡大処理を実行する。ピンチアウト操作とは、タッチスクリーンに接触（または近接）させた２本の指を、該２本の指の間隔を広げるように移動させる操作である。拡大処理とは、タッチスクリーン２４０（ディスプレイ２４２）に表示された全天球映像の表示倍率を上げる処理である（ズームイン処理とも表現することができる）。なお、ピンチイン操作に拡大処理が対応付けられ、ピンチアウト操作に縮小処理が対応付けられてもよい。
In
図２０に示すパターン１、２、３、４において、プロセッサ２１０は、回転操作を受け付けると、表示領域変更処理を実行する。回転操作とは、２本の指をタッチスクリーン２４０に接触させ、該２本の指の１本を軸とし、もう１本の指を、軸を中心として回転させる操作である。
In
図２０に示すパターン１、２、３、４において、プロセッサ２１０は、ダブルタップ操作を受け付けた後、所定時間以内にフリック操作を受け付けると、表示領域変更処理を実行する。また、図２０に示すパターン１、３において、プロセッサ２１０は、ダブルタップ操作を受け付けた後、所定時間以内にドラッグ操作を受け付けると、映像切替処理を実行する。
In
なお、図２０に示す操作と処理との対応付けは一例である。パターン１、２、３、４において、押し込み操作、シェイク操作、指二本操作の各々、ダブルタップトリガーの各々に対応付けられる操作は、図２０の例に限定されない。
Note that the correspondence between operations and processes shown in FIG. 20 is an example. In
（その他の変形例）
上述した実施形態では、タッチスクリーン２４０が９等分され、右側領域１３１、左側領域１３２、中央領域１３３が設定されているが、タッチスクリーン２４０の分割はこの例に限定されない。例えば、タッチスクリーン２４０は、図１３に示すタッチスクリーンの右端部が右側領域１３１であり、左端部が左側領域１３２であり、それ以外の領域が中央領域１３３であってもよい。ここで、右端部とは、図１３に示すタッチスクリーン２４０（矩形）の２つの長辺のうち、右側の長辺と、該長辺と平行な線であって、該長辺の僅かに内側にある線と、該矩形の２つの短辺に囲まれる領域である。また、左端部とは、図１３に示すタッチスクリーン２４０（矩形）の２つの長辺のうち、左側の長辺と、該長辺と平行な線であって、該長辺の僅かに内側にある線と、該矩形の２つの短辺に囲まれる領域である。
(Other modifications)
In the above-described embodiment, the
つまり、本変形例において、右側領域１３１および左側領域１３２は、左右方向の移動操作が入力できないほど、左右方向に狭い領域である。右側領域１３１、左側領域１３２、中央領域１３３がこのように設定されることにより、実施形態の例、すなわち、移動操作が第１操作、左右領域でのタップ操作が第２操作と判別される例において、第１操作（特にフリック操作）が第２操作（タップ操作）と誤って判別されることを防ぐことができる。なお、プロセッサ２１０は、右側領域１３１および左側領域１３２に入力された操作を、すべてタップ操作と判別してもよい。
In other words, in this modification, the
また、タッチスクリーン２４０は、図１３に示すタッチスクリーンの上端部の領域、下端部の領域、それ以外の領域に分割されてもよい。ここで、上端部とは、図１３に示すタッチスクリーン２４０（矩形）の２つの短辺のうち、上側の長辺と、該短辺と平行な線であって、該短辺の僅かに内側にある線と、該矩形の２つの長辺に囲まれる領域である。また、下端部とは、図１３に示すタッチスクリーン２４０（矩形）の２つの短辺のうち、下側の短辺と、該短辺と平行な線であって、該短辺の僅かに内側にある線と、該矩形の２つの長辺に囲まれる領域である。
Also, the
つまり、本変形例において、上端部の領域および下端部の領域は、上下方向の移動操作が入力できないほど、上下方向に狭い領域である。この変形例において、上端部の領域または下端部の領域に対して入力された左右方向の移動操作が、全天球映像を切り換える処理に対応付けられ、それ以外の領域に対して入力された移動操作が、表示領域を変更する処理に対応付けられてもよい。 In other words, in this modified example, the upper end region and the lower end region are regions that are so narrow in the vertical direction that vertical movement operations cannot be input. In this modification, the left-right direction movement operation input to the upper end region or the lower end region is associated with the processing of switching the omnidirectional video, and the movement input to the other regions is associated with the process of switching the omnidirectional video. An operation may be associated with a process of changing the display area.
プロセッサ２１０は、動画制御モジュール８１１として、アプリケーションを起動した直後に、第１全天球映像の受信を自動的に開始し、第１全天球映像を再生してもよい。換言すれば、プロセッサ２１０は、閲覧可能な複数の全天球映像のうちの１つを自動的に選択し、再生してもよい。この場合、第１全天球映像の再生操作は、アプリケーションを起動するための操作に相当する。
The
プロセッサ２１０が、第３操作に基づき実行する処理は、ＵＩの消去に限定されない。例えば、プロセッサ２１０は、第３操作に基づき、ユーザが閲覧可能な複数の全天球映像それぞれを示す複数のＵＩ（サムネイル画像）を表示してもよい。プロセッサ２１０は、一例として、該複数のＵＩの何れかへのタップ操作を受け付けた場合、タップ操作を受け付けたＵＩが示す全天球映像を再生してもよい。つまり、この例において、ユーザは第３操作をスマートフォン１６０Ａに入力することにより、第１全天球映像の再生を停止し、別の全天球映像を再生することができる。この例は、特に、ユーザが視聴したい全天球映像の視聴のために、複数回の第２操作を必要とする場合に有効である。
The process executed by the
第３操作によりＵＩ１２２１を非表示とした状態で第２操作を受け付けた場合、プロセッサ２１０は、別の全天球映像を再生するとともに、ＵＩ１２２１を表示させてもよい。あるいは、プロセッサ２１０は、別の全天球映像を再生するとともに、ＵＩ１２２１を非表示のままとしてもよい。
If the second operation is received while the UI 1221 is hidden by the third operation, the
第２操作により、再生していた全天球映像を別の全天球映像に切り換えた場合、切り換え後の全天球映像はユーザの所定の操作を受け付けるまで再生しない構成としてもよい。 When the omnidirectional video being reproduced is switched to another omnidirectional video by the second operation, the omnidirectional video after switching may not be reproduced until a predetermined user operation is received.
ユーザが全天球映像を閲覧するために使用する端末装置は、タッチパネルを搭載した端末装置であればよく、スマートフォン１６０に限定されない。例えば、ユーザが全天球映像を閲覧するために使用する端末装置は、タブレット端末、タッチパネルを搭載したゲーム機（ゲーム端末）などであってもよい。
The terminal device used by the user to browse the omnidirectional video is not limited to the
以上、本開示の実施形態について説明したが、本発明の技術的範囲は、本実施形態の説明によって限定的に解釈されるべきではない。本実施形態は一例であって、特許請求の範囲に記載された発明の範囲内において、様々な実施形態の変更が可能であることが当業者によって理解されるところである。本発明の技術的範囲は、特許請求の範囲に記載された発明の範囲およびその均等の範囲に基づいて定められるべきである。 Although the embodiments of the present disclosure have been described above, the technical scope of the present invention should not be construed to be limited by the description of the embodiments. It should be understood by those skilled in the art that this embodiment is merely an example, and that various modifications of the embodiment are possible within the scope of the invention described in the claims. The technical scope of the present invention should be determined based on the scope of the invention described in the claims and their equivalents.
〔付記事項〕
本発明の一側面に係る内容を列記すると以下の通りである。
[Additional notes]
The contents of one aspect of the present invention are listed below.
（項目１） プログラムを説明した。本開示のある局面によると、プログラムは、プロセッサ（プロセッサ２１０）、メモリ（メモリ２２０）、およびタッチスクリーン（タッチスクリーン２４０）を備えたコンピュータ（スマートフォン１６０）によって実行される。プログラムは、プロセッサに、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域である第１領域をタッチスクリーンに表示させるステップ（ステップＳ１００３）と、タッチスクリーンに対して入力された、移動操作である第１操作に応答して、第１全天球映像に関する第１処理を実行するステップ（ステップＳ１００５）と、タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、第１処理と異なる、第１全天球映像に関する第２処理（ステップＳ１００８）を実行するステップと、タッチスクリーンに対して入力された、第１操作と異なる移動操作、または、第２操作と異なるタップ操作である第３操作に応答して、第１全天球映像に関する第３処理を実行するステップ（ステップＳ１０１０）と、を実行させる。 (Item 1) Explained the program. According to one aspect of the present disclosure, the program is executed by a computer (smartphone 160) with a processor (processor 210), memory (memory 220), and a touchscreen (touchscreen 240). A step in which the program causes the processor to display, on the touch screen, a first area that is a partial area of the first omnidirectional image among the plurality of viewable omnidirectional images. (step S1003); in response to a first operation, which is a movement operation, input to the touch screen, a step of executing a first process related to the first omnidirectional video (step S1005); executing a second process (step S1008) related to the first omnidirectional image, which is different from the first process, in response to a second operation, which is a tap operation, input to the touch screen; a step of executing a third process related to the first omnidirectional video in response to a third operation that is a moving operation different from the first operation or a tap operation different from the second operation (step S1010); to run.
（項目２） （項目１）において、第１処理を実行するステップでは、第１処理として、タッチスクリーンに表示させる領域を第１領域から、第１領域と異なる第１全天球映像の一部の領域である第２領域に変更する。第２処理を実行するステップでは、第２処理として、ユーザに閲覧させる全天球映像を第１全天球映像から、第１全天球映像と異なる複数の全天球映像のうちの第２全天球映像に変更する。 (Item 2) In the step of executing the first process in (Item 1), as the first process, the area to be displayed on the touch screen is changed from the first area to a part of the first omnidirectional video different from the first area. to the second area, which is the area of . In the step of executing the second process, as the second process, the omnidirectional video to be browsed by the user is selected from the first omnidirectional video and selected from the plurality of omnidirectional videos different from the first omnidirectional video. Change to spherical image.
（項目３） （項目２）において、表示させるステップでは、領域とともに、ユーザの操作を受け付けるユーザインターフェース部品（ＵＩ１２２１）をタッチスクリーンに表示させる。第３処理を実行するステップでは、タッチスクリーンの略中央に設定された第１範囲（中央領域１３３）に対して入力された第３操作としてのタップ操作に応答して、第３処理としてユーザインターフェース部品を非表示とする。第２処理を実行するステップでは、タッチスクリーンに設定された、第１範囲よりタッチスクリーンの左端部に近い第２範囲（左側領域１３２）、または、タッチスクリーンに設定された、第１範囲よりタッチスクリーンの右端部に近い第３範囲（右側領域１３１）に対して入力された第２操作としてのタップ操作に応答して、ユーザに閲覧させる全天球映像を、第１全天球映像から第２全天球映像に変更する。 (Item 3) In the step of displaying in (Item 2), the user interface component (UI 1221) that receives the user's operation is displayed on the touch screen together with the area. In the step of executing the third process, in response to a tap operation as a third operation input to a first range (central area 133) set substantially in the center of the touch screen, a user interface as a third process Hide parts. In the step of executing the second process, a second range (left region 132) set on the touch screen closer to the left end of the touch screen than the first range, or a touch from the first range set on the touch screen In response to the tap operation as the second operation input to the third range (right area 131) near the right end of the screen, the omnidirectional video to be viewed by the user is changed from the first omnidirectional video to the third. 2 Change to omnidirectional video.
（項目４） （項目３）において、第１処理を実行するステップでは、第１範囲に対して入力された第１操作としての移動操作に応答して、タッチスクリーンに表示させる領域を第１領域から第２領域に変更する。プログラムは、プロセッサに、第２範囲、または、第３範囲に対して入力された移動操作に応答して、ユーザに閲覧させる全天球映像を前記第１全天球映像から第２全天球映像に変更するステップ（ステップＳ１００８）をさらに実行させる。 (Item 4) In (Item 3), in the step of executing the first process, the area to be displayed on the touch screen is changed to the first area in response to the movement operation as the first operation input to the first range. to the second area. The program causes the processor to change the omnidirectional image to be viewed by the user from the first omnidirectional image to the second omnidirectional image in response to a movement operation input with respect to the second range or the third range. The step of changing to video (step S1008) is further executed.
（項目５） （項目２）において、表示させるステップでは、領域とともに、ユーザの操作を受け付けるユーザインターフェース部品（ＵＩ１２２１）をタッチスクリーンに表示させる。第１処理を実行するステップでは、指示体（指１２３０）がタッチスクリーンに接触している時間が第１時間未満である第１操作としての第１移動操作に応答して、タッチスクリーンに表示させる領域を第１領域から第２領域に変更する。第３処理を実行するステップでは、指示体がタッチスクリーンに接触している時間が第１時間以上である第３操作としての第２移動操作に応答して、第３処理としてユーザインターフェース部品を非表示とする。 (Item 5) In the step of displaying in (Item 2), the user interface component (UI 1221) that receives user operations is displayed on the touch screen together with the area. In the step of executing the first process, the pointer (finger 1230) is displayed on the touch screen in response to the first movement operation as the first operation in which the time during which the pointer (finger 1230) is in contact with the touch screen is less than the first time. Change the area from the first area to the second area. In the step of executing the third process, in response to the second movement operation as the third operation in which the pointer is in contact with the touch screen for the first time or longer, the user interface component is turned off as the third process. display.
（項目６） （項目３）において、第１処理を実行するステップでは、タッチスクリーンへ指示体（指１２３０）を接触させた後、接触を維持したまま第２時間移動させない操作である初期操作を含む、第１操作としての第３移動操作に応答して、タッチスクリーンに表示させる領域を第１領域から第２領域に変更する。プログラムは、プロセッサに、初期操作を含まない移動操作である第４移動操作に応答して、ユーザに閲覧させる全天球映像を第１全天球映像から第２全天球映像に変更するステップをさらに実行させる。 (Item 6) In (Item 3), in the step of executing the first process, after the pointer (finger 1230) is brought into contact with the touch screen, an initial operation, which is an operation of not moving for a second time while maintaining the contact, is performed. In response to a third move operation as the first operation, the area displayed on the touch screen is changed from the first area to the second area. The program instructs the processor to change the omnidirectional image to be viewed by the user from the first omnidirectional image to the second omnidirectional image in response to a fourth movement operation that is a movement operation that does not include an initial operation. further execute.
（項目７） （項目１）から（項目６）のいずれか１項目において、プログラムは、プロセッサに、タッチスクリーンに対して入力された、指示体（指１２３０）をタッチスクリーンに押し込もうとする押し込み操作に応答して、実行可能な処理の一覧をタッチスクリーンに表示させるステップをさらに実行させる。 (Item 7) In any one item from (Item 1) to (Item 6), the program causes the processor to try to press the pointer (finger 1230) input to the touch screen into the touch screen. A step of displaying a list of executable processes on the touch screen in response to the pressing operation is further executed.
（項目８） （項目１）から（項目７）のいずれか１項目において、プログラムは、プロセッサに、ユーザが把持したコンピュータを振る操作であるシェイク操作に応答して、ユーザに閲覧させる全天球映像を、第１全天球映像から、第１全天球映像と異なる複数の全天球映像のうちの第２全天球映像に変更するステップをさらに実行させる。 (Item 8) In any one of (Item 1) to (Item 7), the program causes the processor to cause the user to browse the omnidirectional sphere in response to a shake operation, which is an operation to shake the computer held by the user. A step of changing the image from the first omnidirectional image to a second omnidirectional image among the plurality of omnidirectional images different from the first omnidirectional image is further executed.
（項目９） （項目１）から（項目８）のいずれか１項目において、プログラムは、プロセッサに、タッチスクリーンに対して入力された、タッチスクリーンに接触させた２つの指示体を、該２つの指示体の間隔を狭めるように移動させるピンチイン操作、または、タッチスクリーンに対して入力された、２つの指示体を、該２つの指示体の間隔を広げるように移動させるピンチアウト操作に応答して、タッチスクリーンに表示された全天球映像の表示倍率を変更するステップをさらに実行させる。 (Item 9) In any one of (Item 1) to (Item 8), the program causes the processor to input two pointers that are input to the touch screen and are brought into contact with the touch screen, In response to a pinch-in operation for narrowing the distance between the pointers, or a pinch-out operation for widening the distance between the two pointers input to the touch screen. , further executing a step of changing the display magnification of the omnidirectional image displayed on the touch screen.
（項目１０） 情報処理装置を説明した。本開示のある局面によると、情報処理装置（スマートフォン１６０）は、プログラムを記憶する記憶部（メモリ２２０）と、プログラムを実行することにより、情報処理装置の動作を制御する制御部（プロセッサ２１０）と、タッチスクリーン（タッチスクリーン２４０）を備え、制御部は、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域である第１領域をタッチスクリーンに表示させ、タッチスクリーンに対して入力された、移動操作である第１操作に応答して、第１全天球映像に関する第１処理を実行し、タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、第１処理と異なる、第１全天球映像に関する第２処理を実行し、タッチスクリーンに対して入力された、第１操作と異なる移動操作、または、第２操作と異なるタップ操作である第３操作に応答して、第１全天球映像に関する第３処理を実行する。 (Item 10) The information processing apparatus has been described. According to one aspect of the present disclosure, the information processing device (smartphone 160) includes a storage unit (memory 220) that stores a program, and a control unit (processor 210) that controls the operation of the information processing device by executing the program. and a touch screen (touch screen 240), and the control unit controls the first omnidirectional image among the plurality of viewable omnidirectional images. displaying a first region on the touch screen, executing a first process on the first omnidirectional image in response to a first operation, which is a movement operation, input to the touch screen; In response to the input second operation, which is a tap operation, a second process related to the first omnidirectional video that is different from the first process is executed, and the second operation is input to the touch screen and is different from the first operation. In response to a move operation or a third operation that is a tap operation different from the second operation, a third process relating to the first omnidirectional video is executed.
（項目１１） プログラムを実行する方法を説明した。本開示のある局面によると、プログラムは、プロセッサ（プロセッサ２１０）、メモリ（メモリ２２０）、およびタッチスクリーン（タッチスクリーン２４０）を備えたコンピュータによって実行される。方法は、プロセッサが、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域である第１領域をタッチスクリーンに表示させるステップ（ステップＳ１００３）と、タッチスクリーンに対して入力された、移動操作である第１操作に応答して、第１全天球映像に関する第１処理を実行するステップ（ステップＳ１００５）と、タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、第１処理と異なる、第１全天球映像に関する第２処理（ステップＳ１００８）を実行するステップと、タッチスクリーンに対して入力された、第１操作と異なる移動操作、または、第２操作と異なるタップ操作である第３操作に応答して、第１全天球映像に関する第３処理を実行するステップ（ステップＳ１０１０）と、を含む。 (Item 11) I explained how to run the program. According to one aspect of the present disclosure, the program is executed by a computer having a processor (processor 210), memory (memory 220), and a touchscreen (touchscreen 240). The method comprises the step of causing the processor to display, on the touch screen, a first area that is a partial area of the first omnidirectional image among the plurality of viewable omnidirectional images. (step S1003); in response to a first operation, which is a movement operation, input to the touch screen, a step of executing a first process related to the first omnidirectional video (step S1005); executing a second process (step S1008) related to the first omnidirectional image, which is different from the first process, in response to a second operation, which is a tap operation, input to the touch screen; a step of executing a third process related to the first omnidirectional video in response to a third operation that is a moving operation different from the first operation or a tap operation different from the second operation (step S1010); including.
２ ネットワーク、１００ 動画配信システム、１１０，１１０Ａ，１１０Ｂ，１１０Ｃ，１１０Ｄ 動画撮影システム、１２０ 全天球カメラ、１２１ 第１撮像部、１２２ 第２撮像部、１３０ 全天球映像生成装置、１４０ 表示装置、１５０ 被写体、１６０，１６０Ａ，１６０Ｂ，１６０Ｃ，１６０Ｄ スマートフォン（コンピュータ、情報処理装置）、１７０ サーバ、２１０，４１１，６１１ プロセッサ（制御部）、２２０，４１２，６１２ メモリ（記憶部）、２３０，４１３，６１３ ストレージ、２４０ タッチスクリーン、２４１ タッチパネル、２４２ ディスプレイ、２５０，４１５，６１５ 通信インターフェイス、２６０，４１６，６１６ バス、３１１，３１２ 視野、４１４ 入出力インターフェイス、７１０ コントロールモジュール、７２０ メモリモジュール、７３０ 通信制御モジュール、８１１ 動画制御モジュール、８１２ 操作判別モジュール、８１３ 動画切換モジュール、８１４ ＵＩ制御モジュール、９１０ 全天球映像、９１１ 中心、９１２ 基準点、９１３基準線、９１４，１２１４Ａ，１２１４Ｂ，１３１４ 表示領域、１２２１，１２２１Ａ，１２２１Ｂ，１２２１Ｃ ＵＩ、１２３０ 指（指示体）、１２４０ 第１方向、１４４０ 第２方向
2 network, 100 moving image distribution system, 110, 110A, 110B, 110C, 110D moving image shooting system, 120 omnidirectional camera, 121 first imaging unit, 122 second imaging unit, 130 omnidirectional video generation device, 140 display device , 150 subject, 160, 160A, 160B, 160C, 160D smartphone (computer, information processing device), 170 server, 210, 411, 611 processor (control unit), 220, 412, 612 memory (storage unit), 230, 413 , 613 storage, 240 touch screen, 241 touch panel, 242 display, 250,415,615 communication interface, 260,416,616 bus, 311,312 field of view, 414 input/output interface, 710 control module, 720 memory module, 730
Claims (9)
前記プログラムは、前記プロセッサに、
閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域である第１領域を前記タッチスクリーンに表示させるステップと、
前記タッチスクリーンに対して入力された、移動操作である第１操作に応答して、前記第１全天球映像に関する第１処理を実行するステップと、
前記タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、前記第１処理と異なる、前記第１全天球映像に関する第２処理を実行するステップと、
前記タッチスクリーンに対して入力された、前記第１操作と異なる移動操作、または、前記第２操作と異なるタップ操作である第３操作に応答して、前記第１全天球映像に関する第３処理を実行するステップと、を実行させ、
前記第２処理を実行するステップでは、前記第２処理として、ユーザに閲覧させる全天球映像を前記第１全天球映像から、前記第１全天球映像と異なる前記複数の全天球映像のうちの第２全天球映像に変更する、プログラム。 A program executed by a computer with a processor, memory and touch screen, comprising:
The program causes the processor to:
displaying, on the touch screen, a first area, which is a partial area of the first omnidirectional image among the plurality of viewable omnidirectional images;
executing a first process related to the first omnidirectional image in response to a first operation, which is a movement operation, input to the touch screen;
a step of executing a second process related to the first omnidirectional video, different from the first process, in response to a second operation, which is a tap operation, input to the touch screen;
Third processing relating to the first omnidirectional video in response to a third operation that is a moving operation different from the first operation or a tap operation different from the second operation input to the touch screen and causing the
In the step of executing the second process, as the second process, an omnidirectional image to be viewed by the user is selected from the first omnidirectional image to the plurality of omnidirectional images different from the first omnidirectional image. A program that changes to a second omnidirectional image of .
前記第３処理を実行するステップでは、前記タッチスクリーンの略中央に設定された第１範囲に対して入力された前記第３操作としてのタップ操作に応答して、前記第３処理として前記ユーザインターフェース部品を非表示とし、
前記第２処理を実行するステップでは、前記タッチスクリーンに設定された、前記第１範囲より前記タッチスクリーンの左端部に近い第２範囲、または、前記タッチスクリーンに設定された、前記第１範囲より前記タッチスクリーンの右端部に近い第３範囲に対して入力された前記第２操作としてのタップ操作に応答して、ユーザに閲覧させる全天球映像を、前記第１全天球映像から前記第２全天球映像に変更する、請求項１に記載のプログラム。 In the displaying step, a user interface component for receiving an operation of the user is displayed on the touch screen together with the area;
In the step of executing the third process, in response to a tap operation as the third operation input to a first range set substantially in the center of the touch screen, the user interface as the third process hide the parts,
In the step of executing the second process, a second range set on the touch screen closer to the left end of the touch screen than the first range, or a range set on the touch screen closer to the first range In response to a tap operation as the second operation input to a third range near the right end of the touch screen, the omnidirectional video to be viewed by the user is changed from the first omnidirectional video to the third range. 2. The program according to claim 1 , for changing to omnidirectional video.
前記プログラムは、前記プロセッサに、前記第２範囲、または、前記第３範囲に対して入力された移動操作に応答して、ユーザに閲覧させる全天球映像を前記第１全天球映像から前記第２全天球映像に変更するステップをさらに実行させる、請求項３に記載のプログラム。 In the step of executing the first process, the area to be displayed on the touch screen is changed from the first area to the first area in response to a movement operation as the first operation input with respect to the first range. Change to a second area that is a partial area of the first omnidirectional video different from
The program causes the processor to change the omnidirectional video to be viewed by the user from the first omnidirectional video in response to a movement operation input with respect to the second range or the third range. 4. The program according to claim 3, further causing the step of changing to the second omnidirectional video.
前記プログラムは、前記プロセッサに、
閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域である第１領域を前記タッチスクリーンに表示させるステップと、
前記タッチスクリーンに対して入力された、移動操作である第１操作に応答して、前記第１全天球映像に関する第１処理を実行するステップと、
前記タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、前記第１処理と異なる、前記第１全天球映像に関する第２処理を実行するステップと、
前記タッチスクリーンに対して入力された、前記第１操作と異なる移動操作、または、前記第２操作と異なるタップ操作である第３操作に応答して、前記第１全天球映像に関する第３処理を実行するステップと、を実行させ、
前記第１処理を実行するステップでは、前記第１処理として、前記タッチスクリーンに表示させる領域を前記第１領域から、前記第１領域と異なる前記第１全天球映像の一部の領域である第２領域に変更し、
前記表示させるステップでは、前記領域とともに、ユーザの操作を受け付けるユーザインターフェース部品を前記タッチスクリーンに表示させ、
前記第１処理を実行するステップでは、指示体が前記タッチスクリーンに接触している時間が第１時間未満である前記第１操作としての第１移動操作に応答して、前記タッチスクリーンに表示させる領域を前記第１領域から前記第２領域に変更し、
前記第３処理を実行するステップでは、前記指示体が前記タッチスクリーンに接触している時間が前記第１時間以上である前記第３操作としての第２移動操作に応答して、前記第３処理として前記ユーザインターフェース部品を非表示とする、プログラム。 A program executed by a computer with a processor, memory and touch screen, comprising:
The program causes the processor to:
displaying, on the touch screen, a first area, which is a partial area of the first omnidirectional image among the plurality of viewable omnidirectional images;
executing a first process related to the first omnidirectional image in response to a first operation, which is a movement operation, input to the touch screen;
a step of executing a second process related to the first omnidirectional video, different from the first process, in response to a second operation, which is a tap operation, input to the touch screen;
Third processing relating to the first omnidirectional video in response to a third operation that is a moving operation different from the first operation or a tap operation different from the second operation input to the touch screen and causing the
In the step of executing the first process, as the first process, the area to be displayed on the touch screen is changed from the first area to a partial area of the first omnidirectional image different from the first area. change to the second area,
In the displaying step, a user interface component for receiving a user's operation is displayed on the touch screen together with the area;
In the step of executing the first process, displaying on the touch screen in response to a first movement operation as the first operation in which the pointer is in contact with the touch screen for less than a first time changing the area from the first area to the second area;
In the step of executing the third process, in response to a second movement operation as the third operation in which the pointer is in contact with the touch screen for the first time or more, the third process is performed. A program that hides the user interface component as .
前記プログラムは、前記プロセッサに、前記初期操作を含まない移動操作である第４移動操作に応答して、ユーザに閲覧させる全天球映像を前記第１全天球映像から前記第２全天球映像に変更するステップをさらに実行させる、請求項３に記載のプログラム。 In the step of executing the first process, a third movement operation as the first operation including an initial operation, which is an operation in which the pointer is kept in contact with the touch screen and then not moved for a second time while maintaining the contact. in response to changing the area to be displayed on the touch screen from the first area to a second area that is a partial area of the first omnidirectional image different from the first area ;
The program causes the processor to change the omnidirectional image to be viewed by the user from the first omnidirectional image to the second omnidirectional image in response to a fourth movement operation that is a movement operation that does not include the initial operation. 4. The program according to claim 3, further causing the step of changing to video.
前記プログラムは、前記プロセッサに、
閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域である第１領域を前記タッチスクリーンに表示させるステップと、
前記タッチスクリーンに対して入力された、移動操作である第１操作に応答して、前記第１全天球映像に関する第１処理を実行するステップと、
前記タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、前記第１処理と異なる、前記第１全天球映像に関する第２処理を実行するステップと、
前記タッチスクリーンに対して入力された、前記第１操作と異なる移動操作、または、前記第２操作と異なるタップ操作である第３操作に応答して、前記第１全天球映像に関する第３処理を実行するステップと、
前記タッチスクリーンに対して入力された、指示体を前記タッチスクリーンに押し込もうとする押し込み操作に応答して、実行可能な処理の一覧を前記タッチスクリーンに表示させるステップと、を実行させる、プログラム。 A program executed by a computer with a processor, memory and touch screen, comprising:
The program causes the processor to:
displaying, on the touch screen, a first area, which is a partial area of the first omnidirectional image among the plurality of viewable omnidirectional images;
executing a first process related to the first omnidirectional image in response to a first operation, which is a movement operation, input to the touch screen;
a step of executing a second process related to the first omnidirectional video, different from the first process, in response to a second operation, which is a tap operation, input to the touch screen;
Third processing relating to the first omnidirectional video in response to a third operation that is a moving operation different from the first operation or a tap operation different from the second operation input to the touch screen and
causing a list of executable processes to be displayed on the touch screen in response to a pressing operation of pressing an indicator into the touch screen , which is input to the touch screen ; program .
前記プログラムは、前記プロセッサに、
閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域である第１領域を前記タッチスクリーンに表示させるステップと、
前記タッチスクリーンに対して入力された、移動操作である第１操作に応答して、前記第１全天球映像に関する第１処理を実行するステップと、
前記タッチスクリーンに対して入力された、タップ操作である第２操作に応答して、前記第１処理と異なる、前記第１全天球映像に関する第２処理を実行するステップと、
前記タッチスクリーンに対して入力された、前記第１操作と異なる移動操作、または、前記第２操作と異なるタップ操作である第３操作に応答して、前記第１全天球映像に関する第３処理を実行するステップと、
ユーザが把持した前記コンピュータを振る操作であるシェイク操作に応答して、前記ユーザに閲覧させる全天球映像を、前記第１全天球映像から、前記第１全天球映像と異なる前記複数の全天球映像のうちの第２全天球映像に変更するステップと、を実行させる、プログラム。 A program executed by a computer with a processor, memory and touch screen, comprising:
The program causes the processor to:
displaying, on the touch screen, a first area, which is a partial area of the first omnidirectional image among the plurality of viewable omnidirectional images;
executing a first process related to the first omnidirectional image in response to a first operation, which is a movement operation, input to the touch screen;
a step of executing a second process related to the first omnidirectional video, different from the first process, in response to a second operation, which is a tap operation, input to the touch screen;
Third processing relating to the first omnidirectional video in response to a third operation that is a moving operation different from the first operation or a tap operation different from the second operation input to the touch screen and
In response to a shake operation, which is an operation of shaking the computer held by the user, the omnidirectional images to be viewed by the user are selected from the first omnidirectional image to the plurality of omnidirectional images different from the first omnidirectional image. and a step of changing the omnidirectional image to a second omnidirectional image.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019049053A JP7289208B2 (en) | 2019-03-15 | 2019-03-15 | Program, Information Processing Apparatus, and Method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019049053A JP7289208B2 (en) | 2019-03-15 | 2019-03-15 | Program, Information Processing Apparatus, and Method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020149626A JP2020149626A (en) | 2020-09-17 |
| JP7289208B2 true JP7289208B2 (en) | 2023-06-09 |
Family
ID=72430642
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019049053A Active JP7289208B2 (en) | 2019-03-15 | 2019-03-15 | Program, Information Processing Apparatus, and Method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7289208B2 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010097393A (en) | 2008-10-16 | 2010-04-30 | Casio Hitachi Mobile Communications Co Ltd | Image display device and program |
| JP2012033058A (en) | 2010-07-30 | 2012-02-16 | Sony Corp | Information processing apparatus, information processing method, and information processing program |
| US20180007340A1 (en) | 2016-06-29 | 2018-01-04 | Barbara Carey Stachowski | Method and system for motion controlled mobile viewing |
| JP2018163683A (en) | 2018-06-07 | 2018-10-18 | 株式会社リコー | Information processing method, information processing program, and information processing device |
-
2019
- 2019-03-15 JP JP2019049053A patent/JP7289208B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010097393A (en) | 2008-10-16 | 2010-04-30 | Casio Hitachi Mobile Communications Co Ltd | Image display device and program |
| JP2012033058A (en) | 2010-07-30 | 2012-02-16 | Sony Corp | Information processing apparatus, information processing method, and information processing program |
| US20180007340A1 (en) | 2016-06-29 | 2018-01-04 | Barbara Carey Stachowski | Method and system for motion controlled mobile viewing |
| JP2018163683A (en) | 2018-06-07 | 2018-10-18 | 株式会社リコー | Information processing method, information processing program, and information processing device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020149626A (en) | 2020-09-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12541338B2 (en) | Shared-content session user interfaces | |
| US11822761B2 (en) | Shared-content session user interfaces | |
| US12449961B2 (en) | Adaptive video conference user interfaces | |
| US11175726B2 (en) | Gesture actions for interface elements | |
| US10165189B2 (en) | Electronic apparatus and a method for controlling the same | |
| CN108604175B (en) | Apparatus and associated methods | |
| KR102146858B1 (en) | Photographing apparatus and method for making a video | |
| CN110546601B (en) | Information processing device, information processing method and program | |
| JP7005161B2 (en) | Electronic devices and their control methods | |
| WO2015159548A1 (en) | Projection control device, projection control method, and recording medium recording projection control program | |
| CN113613053A (en) | Video recommendation method and device, electronic equipment and storage medium | |
| US20260037114A1 (en) | Adaptive video conference user interfaces | |
| JP7000289B2 (en) | Programs, information processing equipment, and methods | |
| CN111782113A (en) | Display method, apparatus and computer-readable storage medium | |
| JP7005160B2 (en) | Electronic devices and their control methods | |
| JP7289208B2 (en) | Program, Information Processing Apparatus, and Method | |
| JP6718937B2 (en) | Program, information processing apparatus, and method | |
| JP7087046B2 (en) | Programs, information processing equipment, and methods | |
| JP7210153B2 (en) | ELECTRONIC DEVICE, ELECTRONIC DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
| EP4372533B1 (en) | Shared-content session user interfaces | |
| US20200257396A1 (en) | Electronic device and control method therefor | |
| US20230254555A1 (en) | Electronic apparatus, control method therefor, and computer-readable storage medium storing program | |
| WO2019102885A1 (en) | Electronic device with changeable image display section | |
| HK40098985A (en) | Element display method based on virtual reality, device, equipment, medium and product | |
| JP2025158865A (en) | Image processing device, image processing system, image processing program, and image processing method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220215 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221115 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221213 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230130 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230516 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230530 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7289208 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |