JP6123562B2 - Imaging device - Google Patents

Imaging device Download PDF

Info

Publication number
JP6123562B2
JP6123562B2 JP2013165009A JP2013165009A JP6123562B2 JP 6123562 B2 JP6123562 B2 JP 6123562B2 JP 2013165009 A JP2013165009 A JP 2013165009A JP 2013165009 A JP2013165009 A JP 2013165009A JP 6123562 B2 JP6123562 B2 JP 6123562B2
Authority
JP
Japan
Prior art keywords
subject
operation frame
unit
cursor
hand
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013165009A
Other languages
Japanese (ja)
Other versions
JP2015035060A (en
Inventor
隆洋 吉村
隆洋 吉村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2013165009A priority Critical patent/JP6123562B2/en
Publication of JP2015035060A publication Critical patent/JP2015035060A/en
Application granted granted Critical
Publication of JP6123562B2 publication Critical patent/JP6123562B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)
  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、撮像装置に関する。   The present invention relates to an imaging apparatus.

従来、身振りや手振りなどのいわゆるジェスチャーにより、カーソル等の機能操作が可能な装置が知られている。例えば特許文献1には、被写体の像を含む撮影画像のデータからユーザの手の領域を検出することで、ユーザが手を用いた所作により画面内のカーソルを移動できるようにした情報処理装置が記載されている。   2. Description of the Related Art Conventionally, an apparatus capable of performing a function operation such as a cursor by a so-called gesture such as gesture or hand gesture is known. For example, Patent Document 1 discloses an information processing apparatus that detects a region of a user's hand from captured image data including an image of a subject so that the user can move the cursor in the screen by an operation using the hand. Have been described.

特開2011−221787号公報JP 2011-221787 A

従来技術は、ハンドジェスチャー操作により画面内のカーソルをボタンの上に移動させると、ボタンに割り当てられたコマンドが実行されるというものであるが、ユーザが画面から遠ざかった場合、画面に表示されたカーソルやボタンを視認して両者の位置を合わせるという細かな操作を行うことは困難であった。   In the prior art, when the cursor in the screen is moved over the button by a hand gesture operation, the command assigned to the button is executed. However, when the user moves away from the screen, the command is displayed on the screen. It was difficult to perform detailed operations such as visually recognizing a cursor or button and aligning the positions of both.

請求項1に記載の撮像装置は、被写体像を撮像する撮像素子と、前記撮像素子により撮像された被写体像から、その被写体の手の位置を検出する手検出部と、前記被写体の位置およびサイズを検出する被写体検出部と、前記被写体検出部により検出された前記被写体の周囲に、少なくとも前記手検出部により検出された手が届く範囲に収まる操作枠を設定する操作枠設定部と、前記操作枠内における前記手の位置に対応する撮影画面内の位置に、カーソルを配置するカーソル配置部と、前記撮像素子により撮像された被写体像とその被写体像に重畳した複数のシンボルと前記操作枠と前記カーソルとを表示する、前記被写体から視認可能な表示部と、前記カーソルが前記複数のシンボルのいずれかに近接したことに応じて、当該シンボルに対応する機能を実行する機能実行部と、を備えることを特徴とする。   The imaging apparatus according to claim 1, an imaging element that captures a subject image, a hand detection unit that detects a position of a hand of the subject from the subject image captured by the imaging element, and the position and size of the subject An operation frame setting unit that sets an operation frame that falls within the reach of the hand detected by the hand detection unit around the subject detected by the subject detection unit, and the operation A cursor placement unit for placing a cursor at a position in the shooting screen corresponding to the position of the hand in the frame, a subject image captured by the imaging device, a plurality of symbols superimposed on the subject image, and the operation frame; A display unit that displays the cursor and is visible from the subject; and when the cursor is close to any of the plurality of symbols, A function execution unit that the function to be executed, characterized in that it comprises a.

本発明によれば、ユーザが画面から遠ざかった場合であっても操作性が低下しない、ハンドジェスチャー操作可能な撮像装置を提供することができる。   According to the present invention, it is possible to provide an imaging device capable of hand gesture operation that does not deteriorate operability even when the user moves away from the screen.

本発明の第1の実施の形態に係る撮像装置の構成を示すブロック図である。1 is a block diagram illustrating a configuration of an imaging apparatus according to a first embodiment of the present invention. 撮像装置10の斜視図である。1 is a perspective view of an imaging device 10. FIG. 液晶モニタ24の表示画面の一例を示す図である。4 is a diagram illustrating an example of a display screen of a liquid crystal monitor 24. 制御部23が実行するハンドジェスチャー操作処理のフローチャートである。It is a flowchart of the hand gesture operation process which the control part 23 performs. 第1の実施の形態の変形例を説明する図である。It is a figure explaining the modification of 1st Embodiment.

(第1の実施の形態)
図1は、本発明の第1の実施の形態に係る撮像装置の構成を示すブロック図である。撮像装置10は、レンズ一体型のいわゆるコンパクトタイプのデジタルカメラである。撮像装置10は、撮影光学系21と、撮像素子22と、制御部23と、液晶モニタ24と、メモリカード25と、操作部26と、DRAM27と、フラッシュメモリ28とを備える。
(First embodiment)
FIG. 1 is a block diagram showing the configuration of the imaging apparatus according to the first embodiment of the present invention. The imaging device 10 is a so-called compact type digital camera integrated with a lens. The imaging apparatus 10 includes an imaging optical system 21, an imaging element 22, a control unit 23, a liquid crystal monitor 24, a memory card 25, an operation unit 26, a DRAM 27, and a flash memory 28.

撮影光学系21は、複数のレンズから構成され、撮像素子22の撮像面に被写体像を結像させる。撮影光学系21は焦点距離が可変に構成された、いわゆるズームレンズである。制御部23は不図示のアクチュエータを駆動させることにより、撮影光学系21のズームアップおよびズームダウンを行うことができる。なお図1では、撮影光学系21を1枚のレンズとして図示している。   The photographing optical system 21 is composed of a plurality of lenses, and forms a subject image on the imaging surface of the imaging element 22. The photographing optical system 21 is a so-called zoom lens having a variable focal length. The controller 23 can zoom up and down the photographing optical system 21 by driving an actuator (not shown). In FIG. 1, the photographing optical system 21 is illustrated as one lens.

撮像素子22は例えばCMOSやCCD等の撮像素子であり、撮影光学系21により結像された被写体像を撮像して撮像信号を出力する。制御部23は、撮像装置10の各部を制御する電子回路であり、CPUとその周辺回路とから構成される。不揮発性の記憶媒体であるフラッシュメモリ28には、予め所定の制御プログラムが書き込まれている。制御部23は、フラッシュメモリ28から制御プログラムを読み込んで実行することにより、各部の制御を行う。この制御プログラムは、揮発性の記憶媒体であるDRAM27を作業用領域として使用する。   The image pickup device 22 is an image pickup device such as a CMOS or a CCD, for example, and picks up a subject image formed by the photographing optical system 21 and outputs an image pickup signal. The control unit 23 is an electronic circuit that controls each unit of the imaging apparatus 10 and includes a CPU and its peripheral circuits. A predetermined control program is written in advance in the flash memory 28 which is a nonvolatile storage medium. The control unit 23 controls each unit by reading and executing a control program from the flash memory 28. This control program uses the DRAM 27, which is a volatile storage medium, as a work area.

液晶モニタ24は、液晶パネルを利用した表示装置である。制御部23は、所定周期(例えば60分の1秒)ごとに撮像素子22に繰り返し被写体像を撮像させる。そして、撮像素子22から出力された撮像信号に種々の画像処理を施していわゆるスルー画を作成し、液晶モニタ24に表示する。液晶モニタ24には、上記のスルー画以外に、例えば撮影パラメータを設定する設定画面等が表示される。   The liquid crystal monitor 24 is a display device using a liquid crystal panel. The control unit 23 causes the image sensor 22 to repeatedly capture a subject image every predetermined cycle (for example, 1/60 second). Then, various image processes are performed on the imaging signal output from the imaging element 22 to create a so-called through image, which is displayed on the liquid crystal monitor 24. In addition to the above-described through image, for example, a setting screen for setting shooting parameters is displayed on the liquid crystal monitor 24.

制御部23は、撮像素子22から出力された撮像信号に種々の画像処理を施して撮影画像データを作成し、可搬性の記憶媒体であるメモリカード25に画像データを記憶する。操作部26は、プッシュボタン等の種々の操作部材を有し、それら操作部材が操作されたことに応じて制御部23に操作信号を出力する。   The control unit 23 performs various image processing on the imaging signal output from the imaging element 22 to create captured image data, and stores the image data in a memory card 25 that is a portable storage medium. The operation unit 26 has various operation members such as push buttons, and outputs an operation signal to the control unit 23 in response to the operation members being operated.

制御部23はソフトウェア形態により手検出部23a、被写体検出部23b、操作枠設定部23c、カーソル配置部23d、および機能実行部23eを備える。これらの各部は、制御部23がフラッシュメモリ28に格納されている所定の制御プログラムを実行することにより、ソフトウェア的に実現される。なお、これらの各部を電子回路として構成することも可能である。   The control unit 23 includes a hand detection unit 23a, a subject detection unit 23b, an operation frame setting unit 23c, a cursor arrangement unit 23d, and a function execution unit 23e in software form. Each of these units is realized by software by the control unit 23 executing a predetermined control program stored in the flash memory 28. Each of these units can be configured as an electronic circuit.

手検出部23aは、撮像素子22により撮像された被写体像から、特定の被写体人物の手の位置を検出する。被写体検出部23bは、撮像素子22により撮像された被写体像から、特定の被写体人物の位置およびサイズを検出する。操作枠設定部23cは、被写体検出部23bにより検出された被写体人物の周囲に、後述する操作枠を設定する。カーソル配置部23dは、操作枠内における手の位置に対応する撮影画面内の位置に、後述するカーソルを配置する。機能実行部23eは、カーソルが液晶モニタ24に表示された複数のアイコン(後に詳述)のいずれかに近接したことに応じて、当該アイコンに対応する機能を実行する。   The hand detection unit 23 a detects the position of the hand of a specific subject person from the subject image captured by the image sensor 22. The subject detection unit 23 b detects the position and size of a specific subject person from the subject image picked up by the image sensor 22. The operation frame setting unit 23c sets an operation frame described later around the subject person detected by the subject detection unit 23b. The cursor placement unit 23d places a cursor to be described later at a position in the shooting screen corresponding to the position of the hand in the operation frame. The function execution unit 23e executes a function corresponding to the icon in response to the cursor approaching one of a plurality of icons (detailed later) displayed on the liquid crystal monitor 24.

図2は、撮像装置10の斜視図である。図2(a)に示すように、撮像装置10の筐体は板状の形状を有し、幅広面40に液晶モニタ24が設けられている。また、幅広面40に対向する別の幅広面(不図示)には、撮影光学系21を内蔵するレンズ鏡筒(不図示)が設けられている。被写体は、図2(a)に矢印xで示す方向、すなわち液晶モニタ24の表示画面51とは逆の方向に位置する。   FIG. 2 is a perspective view of the imaging apparatus 10. As shown in FIG. 2A, the housing of the imaging device 10 has a plate shape, and the liquid crystal monitor 24 is provided on the wide surface 40. Further, on another wide surface (not shown) facing the wide surface 40, a lens barrel (not shown) in which the photographing optical system 21 is built is provided. The subject is located in the direction indicated by the arrow x in FIG. 2A, that is, in the direction opposite to the display screen 51 of the liquid crystal monitor 24.

以下の説明において、撮像装置10の筐体が有する2つの幅広面のうち、液晶モニタ24が設置されている幅広面40を背面と称し、レンズ鏡筒が設置されている不図示の幅広面を前面と称する。   In the following description, of the two wide surfaces of the housing of the imaging device 10, the wide surface 40 on which the liquid crystal monitor 24 is installed is referred to as the back surface, and the wide surface (not shown) on which the lens barrel is installed is referred to as the back surface. Called the front.

液晶モニタ24は、撮像装置10の筐体上部に設けられた軸部42により回動可能に構成されている。図2(a)では、液晶モニタ24は撮像装置10の背面に収納されている。ユーザは、軸部42を支点として、液晶モニタ24を撮像装置10の上部に回動することができる。   The liquid crystal monitor 24 is configured to be rotatable by a shaft portion 42 provided at the upper part of the housing of the imaging device 10. In FIG. 2A, the liquid crystal monitor 24 is accommodated on the back surface of the imaging device 10. The user can turn the liquid crystal monitor 24 to the upper part of the imaging device 10 with the shaft portion 42 as a fulcrum.

液晶モニタ24を最大限に回動させた様子を図2(b)に示す。このとき、液晶モニタ24の表示画面51は、図中に矢印xで示す方向、すなわちレンズ鏡筒と同じ方向を向く。従って、撮像装置10が図2(b)に示す状態のとき、被写体となっている人物は表示画面51を視認可能である。例えば、撮像装置10が表示画面51にいわゆるライブビュー表示を行っているとき、被写体となっている人物は自身の画像を表示画面51により視認することができる。   A state in which the liquid crystal monitor 24 is rotated to the maximum is shown in FIG. At this time, the display screen 51 of the liquid crystal monitor 24 faces the direction indicated by the arrow x in the drawing, that is, the same direction as the lens barrel. Therefore, when the imaging apparatus 10 is in the state shown in FIG. 2B, the person who is the subject can visually recognize the display screen 51. For example, when the imaging apparatus 10 performs a so-called live view display on the display screen 51, the person who is the subject can visually recognize his / her own image on the display screen 51.

撮像装置10の筐体には、レリーズボタン43、電源ボタン44、その他種々の操作を行うためのボタン45、46、47、48、49が設けられている。これらのボタン類は前述の操作部26に接続されており、ボタンの押下に応じて操作部26は制御部23に操作信号を出力する。   The housing of the imaging apparatus 10 is provided with a release button 43, a power button 44, and other buttons 45, 46, 47, 48, and 49 for performing various operations. These buttons are connected to the operation unit 26 described above, and the operation unit 26 outputs an operation signal to the control unit 23 in response to pressing of the button.

(ハンドジェスチャー操作の説明)
液晶モニタ24が図2(b)に図示するように被写体側、すなわち矢印xの方向を向くと、制御部23は撮像装置10にハンドジェスチャー操作モードを設定する。ハンドジェスチャー操作モードが設定されているとき、被写体となっている人物(被撮影者であるユーザ)は手振り(ハンドジェスチャー)により、静止画の撮影やズーム操作等の操作を行うことができる。なお、ハンドジェスチャー操作モードが設定されているときも、例えばレリーズスイッチによる静止画の撮影など、操作部26を用いた操作は通常通り行える。
(Explanation of hand gesture operation)
When the liquid crystal monitor 24 faces the subject, that is, in the direction of the arrow x as illustrated in FIG. 2B, the control unit 23 sets the hand gesture operation mode for the imaging apparatus 10. When the hand gesture operation mode is set, a person who is a subject (a user who is a subject) can perform operations such as still image shooting and zoom operation by hand gestures (hand gesture). Note that even when the hand gesture operation mode is set, operations using the operation unit 26, such as taking a still image with a release switch, can be performed as usual.

例えば撮影者が自分自身の画像を撮影したいとき、撮像装置10を片手で持ち、自身の方に撮像装置10を向けて撮影を行う。このとき、撮像装置10の背面40などに設けられた操作部材を操作することは困難である。ハンドジェスチャー操作モードを利用すれば、筐体に設けられた操作部材を操作することなく、撮影やズームアップ等を行うことができる。   For example, when a photographer wants to take an image of himself / herself, the user takes the image pickup apparatus 10 with one hand and points the image pickup apparatus 10 toward himself / herself. At this time, it is difficult to operate an operation member provided on the back surface 40 of the imaging device 10 or the like. If the hand gesture operation mode is used, it is possible to perform shooting, zoom-in, or the like without operating an operation member provided on the housing.

また、三脚等により撮像装置10を固定し、撮像装置10から離れて撮影を行う場合、セルフタイマー機能等を用いて撮影を行うことはできるが、動画の撮影やズームアップ等の操作を行うことは困難である。このような場合であっても、ハンドジェスチャー操作モードを利用すれば、筐体に設けられた操作部材を操作することなく撮影やズームアップ等を行うことができる。   In addition, when the imaging device 10 is fixed with a tripod or the like, and shooting is performed away from the imaging device 10, shooting can be performed using a self-timer function or the like, but an operation such as shooting a movie or zooming in is performed. It is difficult. Even in such a case, if the hand gesture operation mode is used, it is possible to perform shooting, zoom-in, or the like without operating the operation member provided in the housing.

ハンドジェスチャー操作モードが設定されているとき、制御部23は所定周期(例えば60分の1秒)ごとに撮像素子22に繰り返し被写体像を撮像させる。そして、撮像素子22から出力された撮像信号からスルー画を作成し、液晶モニタ24に表示する。手検出部23aは、スルー画の基になった撮像信号に対し、手のひらの検出処理を実行する。撮像素子22は撮像信号を所定周期ごとに繰り返し出力するので、手検出部23aによる手のひらの検出処理もその所定周期ごとに繰り返し実行される。なお、手のひらの検出処理はスルー画の基となった撮像信号に対してではなく、スルー画に対して行ってもよい。また、手のひらの検出処理の実行周期は撮像周期より長くてもよい。例えば、手のひらの検出処理を、撮像2回につき1回だけ行うようにしてもよい。   When the hand gesture operation mode is set, the control unit 23 causes the image sensor 22 to repeatedly capture a subject image every predetermined cycle (for example, 1/60 second). Then, a through image is created from the imaging signal output from the imaging element 22 and displayed on the liquid crystal monitor 24. The hand detection unit 23a performs palm detection processing on the imaging signal that is the basis of the through image. Since the image pickup device 22 repeatedly outputs the image pickup signal at every predetermined cycle, the palm detection process by the hand detecting unit 23a is also repeatedly executed at every predetermined cycle. Note that the palm detection process may be performed on the through image, not on the imaging signal that is the basis of the through image. The execution period of the palm detection process may be longer than the imaging period. For example, the palm detection process may be performed only once for every two imaging operations.

なお、以下の説明では、手検出部23aは同時に1つの手のひらだけを検出するものとする。例えば複数の人間が撮影範囲に含まれている場合など、手のひらが複数存在する場合には、その中からいずれか1つの手のひらのみを検出し、制御部23はその手のひらを対象に以下に説明する処理を実行する。例えば、顔認識の結果と、予め設定されている人物毎の優先順位とに基づき、最も優先順位の高い手のひらを決定してもよいし、撮影画面内において最初に検出できた手のひらを対象に以下で説明する処理を行うこととしてもよい。   In the following description, it is assumed that the hand detection unit 23a detects only one palm at the same time. For example, when there are a plurality of palms, such as when a plurality of people are included in the shooting range, only one palm is detected from among them, and the control unit 23 will be described below with respect to that palm. Execute the process. For example, the palm with the highest priority may be determined based on the result of the face recognition and the preset priority for each person, or the palm that can be detected first in the shooting screen is as follows. It is good also as performing the process demonstrated by.

ハンドジェスチャー操作モードの設定時における液晶モニタ24の表示画面51を図3(a)に示す。ハンドジェスチャー操作モードが設定されると、制御部23は、表示画面51の全面にスルー画を表示すると共に、スルー画に重畳して複数のアイコン52a、52b、52c、52d、52e、52fを表示する。これらのアイコンは、ハンドジェスチャー操作を行うためのユーザインタフェース(UI)である。アイコン52a、52b、52c、52d、52e、52fはそれぞれ、例えばズームアップ機能、静止画レリーズ機能、ズームダウン機能、動画レリーズ機能等に対応するシンボルである。なお、ハンドジェスチャー操作モードが設定されているとき、制御部23はスルー画を左右反転して液晶モニタ24に表示する。   A display screen 51 of the liquid crystal monitor 24 when the hand gesture operation mode is set is shown in FIG. When the hand gesture operation mode is set, the control unit 23 displays a through image on the entire surface of the display screen 51 and displays a plurality of icons 52a, 52b, 52c, 52d, 52e, and 52f superimposed on the through image. To do. These icons are user interfaces (UI) for performing hand gesture operations. The icons 52a, 52b, 52c, 52d, 52e, and 52f are symbols corresponding to, for example, a zoom-up function, a still image release function, a zoom-down function, and a video release function. Note that, when the hand gesture operation mode is set, the control unit 23 displays the through image on the liquid crystal monitor 24 by inverting the left-right image.

被写体人物54が手のひらを撮像装置10に向けると、手検出部23aがその手のひらを検出する。手検出部23aにより手のひらが検出されると、液晶モニタ24の表示画面51は、図3(b)に示す内容に変化する。具体的には、手検出部23aによる手のひらの検出に応じて、制御部23が当該手のひらの周囲に、その手のひらが検出されていることを表す検出枠56を表示する。次に被写体検出部23bが、当該手のひらを有する被写体人物54の位置およびサイズを検出する。その後、操作枠設定部23cが、検出された被写体人物54の周囲に操作枠55を設定し、液晶モニタ24に表示させる。   When the subject person 54 points the palm toward the imaging apparatus 10, the hand detection unit 23a detects the palm. When the palm is detected by the hand detection unit 23a, the display screen 51 of the liquid crystal monitor 24 changes to the content shown in FIG. Specifically, in response to detection of a palm by the hand detection unit 23a, the control unit 23 displays a detection frame 56 indicating that the palm is detected around the palm. Next, the subject detection unit 23b detects the position and size of the subject person 54 having the palm. Thereafter, the operation frame setting unit 23 c sets the operation frame 55 around the detected subject person 54 and displays the operation frame 55 on the liquid crystal monitor 24.

操作枠55は、被写体人物54が手のひらを動かす範囲を規定する矩形形状の枠である。本実施形態では、操作枠55は表示画面51と相似な形状を有している。カーソル配置部23dは、操作枠55内における手のひらの位置を、表示画面51内における位置にマッピングする。そして、マッピングした位置にカーソル57を配置する。例えば、操作枠55内において、手のひらが左上隅に位置しているなら、カーソル57は表示画面51の左上隅に配置される。同様に、操作枠55内の上下左右の中央に手のひらが位置しているなら、カーソル57は表示画面51の上下左右の中央に配置される。   The operation frame 55 is a rectangular frame that defines the range in which the subject person 54 moves the palm. In the present embodiment, the operation frame 55 has a shape similar to the display screen 51. The cursor placement unit 23 d maps the palm position in the operation frame 55 to the position in the display screen 51. Then, the cursor 57 is arranged at the mapped position. For example, in the operation frame 55, if the palm is located at the upper left corner, the cursor 57 is arranged at the upper left corner of the display screen 51. Similarly, if the palm is positioned at the center of the operation frame 55 in the vertical and horizontal directions, the cursor 57 is arranged at the vertical and horizontal centers of the display screen 51.

ユーザ(被写体人物54)は、図3に示した表示画面51を視認して、表示画面51における複数のアイコン52a、52b、52c、52d、52e、52fの位置、および、操作枠55における検出枠56の位置を把握する。そして、所望の機能に対応するアイコンに対応する操作枠55内の位置に手のひら(検出枠56)を移動させる。手検出部23aにより、手のひらの新たな位置が検出されると、カーソル配置部23dは、その新たな手のひらの位置に対応する表示画面51内の位置にカーソル57を配置する。換言すると、カーソル配置部23dは、手のひらの移動に応じてカーソル57を移動させる。この様子を図3(c)に示す。表示画面51におけるカーソル57がいずれかのアイコンに重なると、機能実行部23eは当該アイコンに対応する機能を実行する。例えば、ユーザが「静止画レリーズ」に対応するアイコン52bにカーソル57を重ねると、機能実行部23eは静止画の撮影を行う。   The user (subject person 54) visually recognizes the display screen 51 shown in FIG. 3, and the positions of the plurality of icons 52a, 52b, 52c, 52d, 52e, 52f on the display screen 51 and the detection frame on the operation frame 55. The position of 56 is grasped. Then, the palm (detection frame 56) is moved to a position in the operation frame 55 corresponding to the icon corresponding to the desired function. When the new position of the palm is detected by the hand detecting unit 23a, the cursor arranging unit 23d arranges the cursor 57 at a position in the display screen 51 corresponding to the new palm position. In other words, the cursor placement unit 23d moves the cursor 57 according to the movement of the palm. This is shown in FIG. When the cursor 57 on the display screen 51 overlaps any icon, the function execution unit 23e executes a function corresponding to the icon. For example, when the user places the cursor 57 on the icon 52b corresponding to “still image release”, the function execution unit 23e captures a still image.

このようにするのは、被写体人物54が撮影画面に小さく写った場合であっても、各機能を手振りで実行できるようにするためである。被写体人物54が撮像装置10から遠いほど、撮影画面すなわち表示画面51に表示されるスルー画における被写体人物54のサイズは小さくなる。従って、ジェスチャー操作モードを、手のひらをアイコンに直接触れさせることで各機能を実行するように構成してしまうと、例えば図3(a)〜(c)に示す程度のサイズで被写体人物54が写り込んだ場合、表示画面51の端部に配置されているアイコンまで手のひらを移動させるのは困難である。本実施形態では、手のひらを直接アイコンに触れさせるのではなく、手のひらに連動して移動するカーソル57をアイコンに重ねさせることで各機能を実行するようにジェスチャー操作モードを実装しているので、被写体人物54は撮像装置10からある程度離れている場合であっても、手のひらをそれほど大きく動かすことなく各機能を機能実行部23eに実行させることが可能になる。   The reason for this is to enable each function to be executed by hand gesture even when the subject person 54 appears small on the shooting screen. The farther the subject person 54 is from the imaging apparatus 10, the smaller the size of the subject person 54 in the through image displayed on the shooting screen, that is, the display screen 51. Therefore, if the gesture operation mode is configured to execute each function by directly touching the palm with the icon, for example, the subject person 54 is captured with a size of the order shown in FIGS. In such a case, it is difficult to move the palm to the icon arranged at the end of the display screen 51. In the present embodiment, the gesture operation mode is implemented so that each function is executed by causing the icon to move the cursor 57 that moves in conjunction with the palm instead of directly touching the palm. Even when the person 54 is away from the imaging apparatus 10 to some extent, the function execution unit 23e can execute each function without moving the palm so much.

次に、操作枠設定部23cにより設定される操作枠55について詳述する。操作枠55は、表示画面51と相似な形状を有する。被写体検出部23bにより検出された被写体人物54の大きさから、手検出部23aにより検出された被写体人物54の手のひらが届く範囲を推定する。そして、その手のひらの付け根近傍(例えば肩の近傍)、すなわち手のひらの可動範囲の中心位置を中心にして操作枠55を配置する。   Next, the operation frame 55 set by the operation frame setting unit 23c will be described in detail. The operation frame 55 has a shape similar to the display screen 51. From the size of the subject person 54 detected by the subject detection unit 23b, the range in which the palm of the subject person 54 detected by the hand detection unit 23a reaches is estimated. Then, the operation frame 55 is arranged around the base of the palm (for example, near the shoulder), that is, the center position of the movable range of the palm.

本実施形態では、ジェスチャー操作は片手で為されることを前提としているので、操作枠設定部23cは被写体人物54の両手のうち、手検出部23aにより検出された方の手のひらが届く範囲を推定し、その範囲に収まるように操作枠55のサイズおよび位置を決定する。なお、操作枠55の中心は、手のひらの付け根近傍以外であってもよく、例えば被写体人物54の中心であってもよい。   In the present embodiment, since it is assumed that the gesture operation is performed with one hand, the operation frame setting unit 23c estimates a range within which the palm of the hand detected by the hand detection unit 23a reaches between the two hands of the subject person 54. Then, the size and position of the operation frame 55 are determined so as to be within the range. Note that the center of the operation frame 55 may be other than the vicinity of the palm base, for example, the center of the subject person 54.

図4は、制御部23が実行するハンドジェスチャー操作処理のフローチャートである。図4に示す処理は、制御部23がフラッシュメモリ28から読み込んで実行する制御プログラムに含まれる。   FIG. 4 is a flowchart of the hand gesture operation process executed by the control unit 23. The process shown in FIG. 4 is included in a control program that the control unit 23 reads from the flash memory 28 and executes.

まずステップS100で、制御部23が、液晶モニタ24が回動し図2(b)に示す状態になっているか否かを判定する。制御部23は、液晶モニタ24が図2(b)に示す位置に回動するまでステップS100の処理を繰り返し実行する。液晶モニタ24が回動していた場合、制御部23は処理をステップS110に進める。   First, in step S100, the control unit 23 determines whether or not the liquid crystal monitor 24 is rotated and is in the state shown in FIG. The control unit 23 repeatedly executes the process of step S100 until the liquid crystal monitor 24 rotates to the position shown in FIG. If the liquid crystal monitor 24 is rotating, the control unit 23 advances the process to step S110.

ステップS110で制御部23は、撮像素子22に被写体像を撮像させる。ステップS120で制御部23は、ステップS110の撮像により撮像素子22から出力された撮像信号に基づいて、スルー画を作成する。ステップS130で制御部23は、液晶モニタ24の表示画面51に、ステップS120で作成したスルー画を表示すると共に、スルー画に重畳してアイコン52a、52b、52c、52d、52e、52fを表示する。ステップS140で手検出部23aは、ステップS110の撮像により撮像素子22から出力された撮像信号に対し、周知のパターンマッチング等を行うことで、手のひらの検出を試みる。ステップS150で制御部23は、ステップS140において撮像信号から手のひらが検出されたか否かを判定する。手のひらが検出されなかった場合、制御部23は処理をステップS110に進める。他方、手のひらが検出された場合、制御部23は処理をステップS160に進める。   In step S110, the control unit 23 causes the image sensor 22 to capture a subject image. In step S120, the control unit 23 creates a through image based on the imaging signal output from the imaging element 22 by the imaging in step S110. In step S130, the control unit 23 displays the through image created in step S120 on the display screen 51 of the liquid crystal monitor 24, and displays the icons 52a, 52b, 52c, 52d, 52e, and 52f superimposed on the through image. . In step S140, the hand detection unit 23a attempts to detect the palm by performing known pattern matching or the like on the image signal output from the image sensor 22 by the image capturing in step S110. In step S150, the control unit 23 determines whether or not a palm is detected from the imaging signal in step S140. If no palm is detected, the control unit 23 advances the process to step S110. On the other hand, when the palm is detected, the control unit 23 advances the process to step S160.

ステップS160で被写体検出部23bは、ステップS140で検出された手のひらを有する被写体人物54の位置およびサイズを検出する。ステップS163で操作枠設定部23cは、ステップS160で検出された被写体人物54の位置およびサイズに基づいて、その被写体人物54の周囲に、少なくとも手検出部23aにより検出された手のひらを含む範囲を覆う操作枠55を設定する。設定した操作枠55は、これ以降、スルー画に重畳して表示画面51に表示される。   In step S160, the subject detection unit 23b detects the position and size of the subject person 54 having the palm detected in step S140. In step S163, the operation frame setting unit 23c covers at least the range including the palm detected by the hand detection unit 23a around the subject person 54 based on the position and size of the subject person 54 detected in step S160. An operation frame 55 is set. Thereafter, the set operation frame 55 is displayed on the display screen 51 so as to be superimposed on the through image.

ステップS166でカーソル配置部23dが、ステップS163で設定された操作枠55内における手のひらの位置に対応するスルー画内(表示画面51内)の位置に、カーソル57を配置する。配置したカーソル57は、これ以降、スルー画に重畳して表示画面51に表示される。   In step S166, the cursor placement unit 23d places the cursor 57 at a position in the live view (in the display screen 51) corresponding to the palm position in the operation frame 55 set in step S163. Thereafter, the arranged cursor 57 is displayed on the display screen 51 so as to be superimposed on the through image.

ステップS170で制御部23は、撮像素子22に被写体像を撮像させる。ステップS180で制御部23は、ステップS170の撮像により撮像素子22から出力された撮像信号に基づいて、スルー画を作成する。ステップS190で制御部23は、液晶モニタ24の表示画面51に、ステップS180で作成されたスルー画を表示すると共に、スルー画に重畳してアイコン52a、52b、52c、52d、52e、52fを表示する。このとき、操作枠55、検出枠56、カーソル57もスルー画に重畳して表示される。   In step S <b> 170, the control unit 23 causes the image sensor 22 to capture a subject image. In step S180, the control unit 23 creates a through image based on the imaging signal output from the imaging element 22 by imaging in step S170. In step S190, the control unit 23 displays the through image created in step S180 on the display screen 51 of the liquid crystal monitor 24, and displays icons 52a, 52b, 52c, 52d, 52e, and 52f superimposed on the through image. To do. At this time, the operation frame 55, the detection frame 56, and the cursor 57 are also displayed superimposed on the through image.

ステップS200で手検出部23aは、ステップS170の撮像により撮像素子22から出力された撮像信号に対し、周知のパターンマッチング等を行うことで、手のひらの検出を試みる。そしてステップS210で制御部23は、ステップS200において撮像信号から手のひらが検出されたか否かを判定する。手のひらが検出されなかった場合、制御部23は処理をステップS110に進める。他方、手のひらが検出されていた場合、制御部23は処理をステップS220に進める。   In step S200, the hand detection unit 23a attempts to detect the palm by performing known pattern matching or the like on the image signal output from the image sensor 22 by the image capturing in step S170. In step S210, the control unit 23 determines whether a palm is detected from the imaging signal in step S200. If no palm is detected, the control unit 23 advances the process to step S110. On the other hand, when the palm is detected, the control unit 23 advances the process to step S220.

ステップS220でカーソル配置部23dは、操作枠55内における手のひらの位置に対応するスルー画内(表示画面51内)の位置に、カーソル57を配置する。ステップS230で機能実行部23eは、ステップS220で配置されたカーソル57が、アイコン52a、52b、52c、52d、52e、52fのいずれかに重なったか否かを判定する。カーソル57が重なっていなかった場合、機能実行部23eは、処理をステップS170に進める。他方、カーソル57がいずれかのアイコンに重なっていた場合、機能実行部23eは処理をステップS240に進める。ステップS240において機能実行部23eは、カーソル57と重なったアイコンに対応する機能を実行する。   In step S220, the cursor placement unit 23d places the cursor 57 at a position in the live view (in the display screen 51) corresponding to the position of the palm in the operation frame 55. In step S230, the function execution unit 23e determines whether the cursor 57 arranged in step S220 has overlapped with any of the icons 52a, 52b, 52c, 52d, 52e, and 52f. If the cursor 57 does not overlap, the function execution unit 23e advances the process to step S170. On the other hand, when the cursor 57 overlaps any of the icons, the function execution unit 23e advances the process to step S240. In step S240, the function execution unit 23e executes a function corresponding to the icon overlapped with the cursor 57.

上述した第1の実施の形態による撮像装置によれば、次の作用効果が得られる。
(1)操作枠設定部23cは、被写体検出部23bにより検出された被写体人物54の周囲に、少なくとも手検出部23aにより検出された手のひらを含む範囲を覆う操作枠55を設定する。カーソル配置部23dは、操作枠55内における手のひらの位置に対応するスルー画内の位置に、カーソル57を配置する。そして機能実行部23eが、カーソル57が複数のアイコン52a、52b、52c、52d、52e、52fのいずれかに近接したことに応じて、当該アイコンに対応する機能を実行する。以上の構成を有する撮像装置10によれば、ユーザが画面から遠ざかった場合であっても操作性が低下しない。
According to the imaging apparatus according to the first embodiment described above, the following operational effects can be obtained.
(1) The operation frame setting unit 23c sets an operation frame 55 that covers at least the range including the palm detected by the hand detection unit 23a around the subject person 54 detected by the subject detection unit 23b. The cursor placement unit 23d places the cursor 57 at a position in the through image corresponding to the position of the palm in the operation frame 55. Then, the function execution unit 23e executes a function corresponding to the icon 57 when the cursor 57 comes close to any of the plurality of icons 52a, 52b, 52c, 52d, 52e, and 52f. According to the imaging device 10 having the above configuration, the operability is not deteriorated even when the user moves away from the screen.

(2)操作枠設定部23cは、液晶モニタ24の表示画面51の形状に相似である形状を有する操作枠55を設定する。このようにしたので、表示画面51におけるカーソル57の位置と、操作枠55における手のひらの位置とを、ユーザが容易に把握することができる。 (2) The operation frame setting unit 23 c sets an operation frame 55 having a shape similar to the shape of the display screen 51 of the liquid crystal monitor 24. Since it did in this way, the user can grasp | ascertain easily the position of the cursor 57 in the display screen 51, and the position of the palm in the operation frame 55. FIG.

(3)操作枠設定部23cは、被写体検出部23bにより検出された被写体人物54のサイズに応じたサイズの操作枠55を設定する。このようにしたので、被写体人物54がどのようなサイズでスルー画に写り込んだ場合であっても、常に操作感の変わらないジェスチャー操作機能を提供することができる。 (3) The operation frame setting unit 23c sets the operation frame 55 having a size corresponding to the size of the subject person 54 detected by the subject detection unit 23b. As described above, it is possible to provide a gesture operation function that does not change the feeling of operation regardless of the size of the subject person 54 in the through image.

(4)操作枠設定部23cは、被写体人物54の手が届く範囲に収まる操作枠55を設定する。このようにしたので、表示画面51のどの位置にアイコンが配置されていたとしても、ユーザは、現在位置から移動することなく手振りだけで所望の機能に対応するアイコンを選択することができる。 (4) The operation frame setting unit 23c sets the operation frame 55 that falls within the reach of the subject person 54. Since it did in this way, even if the icon is arrange | positioned in which position of the display screen 51, the user can select the icon corresponding to a desired function only by a hand gesture, without moving from a present position.

(5)操作枠設定部23cは、被写体人物54の片手が届く範囲に収まる操作枠55を、当該片手の付け根近傍を中心にして設定する。このようにしたので、ユーザは任意のアイコンを、現在の位置から移動することなく手振りだけで選択することができる。 (5) The operation frame setting unit 23c sets the operation frame 55 that falls within the range where one hand of the subject person 54 can reach, centering on the vicinity of the base of the one hand. Since it did in this way, the user can select arbitrary icons only by a hand gesture, without moving from the present position.

次のような変形も本発明の範囲内であり、変形例の一つ、もしくは複数を上述の実施形態と組み合わせることも可能である。   The following modifications are also within the scope of the present invention, and one or a plurality of modifications can be combined with the above-described embodiment.

(変形例1)
操作枠設定部23cが、被写体検出部23bにより検出された被写体人物54のサイズが変化したことに応じて、リアルタイムに操作枠55のサイズを変化させるようにしてもよい。例えば、被写体人物54が手のひらを撮像装置10に向けながら前後左右に移動した場合、撮影画面における被写体人物54の位置およびサイズは変化する。操作枠55がこのような被写体人物54の移動に追従するように操作枠設定部23cを構成すると、撮像装置10の操作性がより向上する。
(Modification 1)
The operation frame setting unit 23c may change the size of the operation frame 55 in real time in response to the change in the size of the subject person 54 detected by the subject detection unit 23b. For example, when the subject person 54 moves back and forth and right and left with the palm facing the imaging device 10, the position and size of the subject person 54 on the shooting screen changes. When the operation frame setting unit 23c is configured so that the operation frame 55 follows the movement of the subject person 54, the operability of the imaging apparatus 10 is further improved.

(変形例2)
上述した実施形態では、ジェスチャー操作モードにおいて、被写体人物54が片手でジェスチャー操作を行うことを前提としていた。本発明はこのような実施形態に限定されず、被写体人物54が両手でジェスチャー操作を行えるようにしてもよい。この場合、操作枠設定部23cは、被写体人物54の両手が届く範囲に収まる操作枠55を、被写体人物54の両手の中央を中心として設定することが望ましい。また、手検出部23aが両手を同時に検出するようにしたり、カーソル配置部23dがその両手に対応する2つのカーソル57を配置するようにしてもよい。
(Modification 2)
In the above-described embodiment, it is assumed that the subject person 54 performs a gesture operation with one hand in the gesture operation mode. The present invention is not limited to such an embodiment, and the subject person 54 may perform a gesture operation with both hands. In this case, it is desirable that the operation frame setting unit 23 c sets the operation frame 55 that falls within the range where both hands of the subject person 54 can reach, with the center of both hands of the subject person 54 as the center. Alternatively, the hand detection unit 23a may detect both hands at the same time, or the cursor placement unit 23d may place two cursors 57 corresponding to both hands.

(変形例3)
被写体人物54が撮影画面の端に位置している場合、操作枠55が撮影画面(スルー画)に収まらない可能性がある。このような場合において、操作枠設定部23cが、操作枠55が撮影画面に収まるように操作枠55の位置またはサイズを調節するようにしてもよい。例えば操作枠55の中心を、画面端とは逆の方向にずらすことで操作枠55を撮影画面内に収めてもよい。また、操作枠55のサイズを小さくすることにより、操作枠55を撮影画面内に収めてもよい。それら両方を組み合わせることも可能である。
(Modification 3)
When the subject person 54 is located at the end of the shooting screen, the operation frame 55 may not fit on the shooting screen (through image). In such a case, the operation frame setting unit 23c may adjust the position or size of the operation frame 55 so that the operation frame 55 fits on the shooting screen. For example, the operation frame 55 may be placed in the shooting screen by shifting the center of the operation frame 55 in the direction opposite to the screen edge. Further, by reducing the size of the operation frame 55, the operation frame 55 may be stored in the shooting screen. It is also possible to combine both of them.

(変形例4)
カーソル57がアイコンに重なってすぐに機能実行部23eが当該アイコンに対応する機能を実行するのではなく、ユーザが当該アイコンに対応する機能を実行することを確認できるステップを設けてもよい。例えば、カーソル57が複数のアイコン52a、52b、52c、52d、52e、52fのいずれかに重なったことに応じて、当該アイコンに対応する機能を表示画面51に表示して被写体人物54に報知する報知部を設ける。
(Modification 4)
Instead of the function execution unit 23e executing the function corresponding to the icon as soon as the cursor 57 overlaps the icon, a step may be provided in which the user can confirm that the function corresponding to the icon is executed. For example, when the cursor 57 overlaps any of the plurality of icons 52a, 52b, 52c, 52d, 52e, and 52f, a function corresponding to the icon is displayed on the display screen 51 to notify the subject person 54. A notification unit is provided.

図5に、報知部による報知方法の一例を示す。アイコン52bにカーソル57が重なった事に応じて、報知部は液晶モニタ24の表示画面51に、アイコン52bの機能を表す文字列60を表示し、アイコン52bの機能をユーザ(被写体人物54)に報知する。機能実行部23eは、カーソル57が複数のアイコン52a、52b、52c、52d、52e、52fのいずれかに重なり報知部による報知が成された後に、被写体人物54により所定の決定操作が成されたことに応じて、当該アイコンに対応する機能を実行するように構成する。決定操作は、例えばカーソル57とそのアイコンとが重なった状態を一定時間(例えば3秒間)維持する操作や、手のひらを握る(握り拳を作る)操作が考えられる。   FIG. 5 shows an example of a notification method by the notification unit. In response to the cursor 57 overlapping the icon 52b, the notification unit displays a character string 60 representing the function of the icon 52b on the display screen 51 of the liquid crystal monitor 24, and the function of the icon 52b is displayed to the user (subject person 54). Inform. In the function execution unit 23e, a predetermined determination operation is performed by the subject person 54 after the cursor 57 overlaps any of the plurality of icons 52a, 52b, 52c, 52d, 52e, and 52f and the notification unit performs notification. Accordingly, the function corresponding to the icon is executed. As the determination operation, for example, an operation of maintaining the state where the cursor 57 and its icon overlap each other for a certain time (for example, 3 seconds) or an operation of grasping the palm (making a fist) can be considered.

なお、報知部による報知方法は、図5に例示した表示画面51への文字列60の表示に限定でなくてもよい。例えば、アイコンの機能を読み上げる音声を再生して被写体人物54に報知してもよい。また、カーソル57が複数のアイコン52a、52b、52c、52d、52e、52fのいずれかに重なったことに応じて、当該アイコンに対応する機能ではなく、当該アイコンがカーソル57に重なっていることを報知するようにしてもよい。例えば、カーソル57が重なっているアイコンの色や形を変化させることで、そのアイコンがカーソル57と重なっていることを報知してもよい。   In addition, the alerting | reporting method by an alerting | reporting part may not be limited to the display of the character string 60 on the display screen 51 illustrated in FIG. For example, the subject person 54 may be notified by reproducing a sound that reads out the function of the icon. In addition, when the cursor 57 overlaps any of the plurality of icons 52a, 52b, 52c, 52d, 52e, and 52f, the function does not correspond to the icon but the icon overlaps the cursor 57. You may make it alert | report. For example, by changing the color or shape of the icon on which the cursor 57 overlaps, it may be notified that the icon overlaps with the cursor 57.

(変形例5)
上述した実施形態において、機能実行部23eが種々の機能を実行するきっかけは、カーソル57がアイコン52a、52b、52c、52d、52e、52fのいずれかに重なることであった。これはきっかけの一例であり、機能実行部23eはカーソル57がアイコンに近接したときに機能を実行するように構成されていればよく、必ずしもカーソル57がアイコン52a、52b、52c、52d、52e、52fに重なっていなくてもよい。例えばカーソル57がアイコンに向かって一定距離動いたことに応じて機能を実行したり、アイコンに外接する矩形とカーソル57とが重なったら機能を実行するようにしてもよい。
(Modification 5)
In the embodiment described above, the trigger for the function execution unit 23e to execute various functions is that the cursor 57 overlaps one of the icons 52a, 52b, 52c, 52d, 52e, and 52f. This is an example of the trigger, and the function execution unit 23e only needs to be configured to execute a function when the cursor 57 comes close to the icon, and the cursor 57 is not necessarily the icon 52a, 52b, 52c, 52d, 52e, It does not have to overlap with 52f. For example, the function may be executed in response to the cursor 57 moving toward the icon for a certain distance, or the function may be executed when the rectangle circumscribing the icon and the cursor 57 overlap.

(変形例6)
手検出部23aは、撮像素子22により撮像された被写体像から手のひらを検出することにより、被写体人物54の手の位置を検出していた。手検出部23aが手のひら以外のものを検出することにより、被写体人物54の手の位置を検出するようにしてもよい。例えば、手指や手首等をパターンマッチングにより検出することで、被写体人物54の手の位置を検出するようにしてもよい。また、手袋などを装着した手を検出可能にしてもよい。以上のように手検出部23aが構成されていた場合であっても、被写体人物54の手が各アイコン52a、52b、52c、52d、52e、52fに近接したことを検出できるのであれば、本発明を適用することが可能である。
(Modification 6)
The hand detection unit 23 a detects the position of the hand of the subject person 54 by detecting the palm from the subject image captured by the image sensor 22. The hand detection unit 23a may detect the position of the hand of the subject person 54 by detecting something other than the palm. For example, the position of the hand of the subject person 54 may be detected by detecting fingers and wrists by pattern matching. Further, it may be possible to detect a hand wearing a glove or the like. Even if the hand detection unit 23a is configured as described above, if the hand of the subject person 54 can detect that the icon 52a, 52b, 52c, 52d, 52e, 52f is close, the present The invention can be applied.

更に、本発明は手振り(ハンドジェスチャー)に限定されない。被撮影者が行う所定の身振り(ジェスチャー)を、上述した手振り(ハンドジェスチャー)と同様に検出すれば、手以外の部位による撮像装置の操作を実現することが可能である。   Furthermore, the present invention is not limited to hand gestures. If a predetermined gesture (gesture) performed by the subject is detected in the same manner as the above-described hand gesture (hand gesture), it is possible to realize the operation of the imaging apparatus using a part other than the hand.

(変形例7)
被写体人物54が液晶モニタ24の表示画面51を視認するのが困難である程度に被写体人物54が撮像装置10から遠すぎる場合、制御部23がジェスチャー操作モードを無効にするようにしてもよい。
(Modification 7)
When it is difficult for the subject person 54 to visually recognize the display screen 51 of the liquid crystal monitor 24 and the subject person 54 is too far from the imaging apparatus 10, the control unit 23 may invalidate the gesture operation mode.

(変形例8)
上述した実施形態では、撮像装置10に内蔵された液晶モニタ24を用いてジェスチャー操作を行う例について説明したが、本発明はこのような実施形態に限定されず、撮像装置10の外部に接続された表示装置を用いてジェスチャー操作モードに係る種々の制御を行ってもよい。このようにすると、表示装置の表示画面51のサイズを撮像装置10の筐体よりも大きくすることができ、表示画面51の視認性が向上する。
(Modification 8)
In the above-described embodiment, the example in which the gesture operation is performed using the liquid crystal monitor 24 built in the imaging apparatus 10 has been described. However, the present invention is not limited to such an embodiment, and is connected to the outside of the imaging apparatus 10. Various controls related to the gesture operation mode may be performed using the display device. In this way, the size of the display screen 51 of the display device can be made larger than the housing of the imaging device 10, and the visibility of the display screen 51 is improved.

(変形例9)
画面内に設けるアイコンの数はいくつでもよい。その配置も任意に定めることができ、上述した各実施形態のように、表示画面51の端部以外の場所に配置してよい。また、手検出部23aにより検出された手のひらが右手か左手かに応じて、アイコンを配置する位置を変更してもよい。例えば、右手が検出された場合には表示画面51の右側にアイコンを配置し、左手が検出された場合には表示画面51の左側にアイコンを配置することで、撮像装置10の操作性が向上する。
(Modification 9)
Any number of icons may be provided in the screen. The arrangement can be arbitrarily determined, and may be arranged at a place other than the end of the display screen 51 as in the above-described embodiments. Further, the position where the icon is arranged may be changed according to whether the palm detected by the hand detection unit 23a is the right hand or the left hand. For example, the operability of the imaging apparatus 10 is improved by arranging an icon on the right side of the display screen 51 when the right hand is detected and arranging the icon on the left side of the display screen 51 when the left hand is detected. To do.

また、各アイコンに割り当てる機能は、上述した各実施形態で例示したものと異なっていてもよく、機能実行部23eが実行可能な機能(例えば再生モード設定、補助発光装置のオンオフなど)であればどのようなものであってもよい。各アイコンにユーザが任意の機能を割り当てられるようにしてもよい。更に、アイコン以外のシンボル(例えば機能を表す文字列や絵など)を用いてもよい。   Further, the function assigned to each icon may be different from that exemplified in each of the above-described embodiments, as long as it is a function that can be executed by the function execution unit 23e (for example, playback mode setting, on / off of the auxiliary light emitting device, etc.). Any thing is acceptable. A user may be allowed to assign an arbitrary function to each icon. Furthermore, symbols other than icons (for example, character strings or pictures representing functions) may be used.

(変形例10)
以上の説明では、レンズ一体型のデジタルカメラに本発明を適用した形態について説明したが、本発明はこのような実施の形態に限定されず、例えばレンズ交換可能ないわゆる一眼レフレックス方式のデジタルカメラや、レフレックスミラーを有さないレンズ交換可能なデジタルカメラに本発明を適用することも可能である。
(Modification 10)
In the above description, the embodiment in which the present invention is applied to a lens-integrated digital camera has been described. However, the present invention is not limited to such an embodiment. For example, a so-called single-lens reflex digital camera capable of exchanging lenses is used. It is also possible to apply the present invention to a digital camera with no interchangeable lens that does not have a reflex mirror.

本発明の特徴を損なわない限り、本発明は上記実施の形態に限定されるものではなく、本発明の技術的思想の範囲内で考えられるその他の形態についても、本発明の範囲内に含まれる。   As long as the characteristics of the present invention are not impaired, the present invention is not limited to the above-described embodiments, and other forms conceivable within the scope of the technical idea of the present invention are also included in the scope of the present invention. .

10…撮像装置、21…撮影光学系、22…撮像素子、23…制御部、23a…手検出部、23b…被写体検出部、23c…操作枠設定部、23d…カーソル配置部、23e…機能実行部、24…液晶モニタ、25…メモリカード、26…操作部、27…DRAM、28…フラッシュメモリ DESCRIPTION OF SYMBOLS 10 ... Imaging device, 21 ... Imaging optical system, 22 ... Imaging element, 23 ... Control part, 23a ... Hand detection part, 23b ... Subject detection part, 23c ... Operation frame setting part, 23d ... Cursor arrangement part, 23e ... Function execution , 24 ... Liquid crystal monitor, 25 ... Memory card, 26 ... Operation unit, 27 ... DRAM, 28 ... Flash memory

Claims (8)

被写体像を撮像する撮像素子と、
前記撮像素子により撮像された被写体像から、その被写体の手の位置を検出する手検出部と、
前記被写体の位置およびサイズを検出する被写体検出部と、
前記被写体検出部により検出された前記被写体の周囲に、少なくとも前記手検出部により検出された手が届く範囲に収まる操作枠を設定する操作枠設定部と、
前記操作枠内における前記手の位置に対応する撮影画面内の位置に、カーソルを配置するカーソル配置部と、
前記撮像素子により撮像された被写体像とその被写体像に重畳した複数のシンボルと前記操作枠と前記カーソルとを表示する、前記被写体から視認可能な表示部と、
前記カーソルが前記複数のシンボルのいずれかに近接したことに応じて、当該シンボルに対応する機能を実行する機能実行部と、
を備えることを特徴とする撮像装置。
An image sensor for capturing a subject image;
A hand detection unit that detects the position of the hand of the subject from the subject image captured by the imaging device;
A subject detection unit for detecting the position and size of the subject;
An operation frame setting unit that sets an operation frame that falls within the reach of the hand detected by the hand detection unit around the subject detected by the subject detection unit;
A cursor placement unit for placing a cursor at a position in the shooting screen corresponding to the position of the hand in the operation frame;
A display unit that is visible from the subject, displays the subject image captured by the imaging device, a plurality of symbols superimposed on the subject image, the operation frame, and the cursor;
A function execution unit that executes a function corresponding to the symbol in response to the cursor approaching any of the plurality of symbols;
An imaging apparatus comprising:
請求項1に記載の撮像装置において、
前記操作枠設定部は、前記表示部の表示画面の形状に相似である形状を有する前記操作枠を設定することを特徴とする撮像装置。
The imaging device according to claim 1,
The imaging apparatus according to claim 1, wherein the operation frame setting unit sets the operation frame having a shape similar to a shape of a display screen of the display unit.
請求項1または2に記載の撮像装置において、
前記操作枠設定部は、前記被写体検出部により検出された前記被写体のサイズに応じたサイズの前記操作枠を設定することを特徴とする撮像装置。
The imaging device according to claim 1 or 2,
The imaging apparatus according to claim 1, wherein the operation frame setting unit sets the operation frame having a size corresponding to the size of the subject detected by the subject detection unit.
請求項3に記載の撮像装置において、
前記操作枠設定部は、前記被写体検出部により検出された前記被写体のサイズが変化したことに応じて、前記操作枠のサイズを変化させることを特徴とする撮像装置。
The imaging device according to claim 3.
The imaging apparatus according to claim 1, wherein the operation frame setting unit changes the size of the operation frame in response to a change in the size of the subject detected by the subject detection unit.
請求項1〜4に記載の撮像装置において、
前記操作枠設定部は、前記操作枠を、前記被写体の両手の中央を中心として設定することを特徴とする撮像装置。
In the imaging device according to claims 1 to 4,
The imaging apparatus according to claim 1, wherein the operation frame setting unit sets the operation frame around the center of both hands of the subject.
請求項1〜4に記載の撮像装置において、
前記操作枠設定部は、前記操作枠を、当該片手の付け根近傍を中心にして設定することを特徴とする撮像装置。
In the imaging device according to claims 1 to 4,
The imaging apparatus according to claim 1, wherein the operation frame setting unit sets the operation frame centering around a base of the one hand.
請求項1〜6のいずれか一項に記載の撮像装置において、
操作枠設定部は、前記操作枠が前記撮影画面に収まらない場合には、前記操作枠が前記撮影画面に収まるように前記操作枠の位置またはサイズを調節することを特徴とする撮像装置。
In the imaging device according to any one of claims 1 to 6,
The operation frame setting unit adjusts the position or size of the operation frame so that the operation frame fits on the shooting screen when the operation frame does not fit on the shooting screen.
請求項1〜7のいずれか一項に記載の撮像装置において、
前記カーソルが前記複数のシンボルのいずれかに近接したことに応じて、当該シンボルまたは当該シンボルに対応する機能を前記被写体に報知する報知部を備え、
前記機能実行部は、前記カーソルが前記複数のシンボルのいずれかに近接し前記報知部による報知が成された後に、前記被写体により所定の決定操作が成されたことに応じて、当該シンボルに対応する機能を実行することを特徴とする撮像装置。
In the imaging device according to any one of claims 1 to 7,
A notification unit that notifies the subject of the symbol or a function corresponding to the symbol in response to the cursor approaching any of the plurality of symbols;
The function execution unit responds to the symbol in response to a predetermined determination operation performed by the subject after the cursor is close to any of the plurality of symbols and the notification unit performs notification. An imaging apparatus characterized by executing a function to perform.
JP2013165009A 2013-08-08 2013-08-08 Imaging device Active JP6123562B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013165009A JP6123562B2 (en) 2013-08-08 2013-08-08 Imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013165009A JP6123562B2 (en) 2013-08-08 2013-08-08 Imaging device

Publications (2)

Publication Number Publication Date
JP2015035060A JP2015035060A (en) 2015-02-19
JP6123562B2 true JP6123562B2 (en) 2017-05-10

Family

ID=52543556

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013165009A Active JP6123562B2 (en) 2013-08-08 2013-08-08 Imaging device

Country Status (1)

Country Link
JP (1) JP6123562B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3396509B1 (en) * 2015-12-22 2021-10-27 Sony Group Corporation Information processing device, information processing method, and program
JP2017211739A (en) * 2016-05-24 2017-11-30 株式会社エクスビジョン User interface device and user interface program

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04123121A (en) * 1990-09-13 1992-04-23 Sony Corp Image input device
JP4244075B2 (en) * 1998-03-12 2009-03-25 株式会社リコー Image display device
US8726194B2 (en) * 2007-07-27 2014-05-13 Qualcomm Incorporated Item selection using enhanced control
JP2009265709A (en) * 2008-04-22 2009-11-12 Hitachi Ltd Input device
JP4221445B1 (en) * 2008-06-11 2009-02-12 株式会社ベイビッグ Videophone terminal, videophone terminal control method and program
JP2012242948A (en) * 2011-05-17 2012-12-10 Sony Corp Display control device, method, and program

Also Published As

Publication number Publication date
JP2015035060A (en) 2015-02-19

Similar Documents

Publication Publication Date Title
RU2466447C1 (en) Image capturing device and method of controlling said device
US9606718B2 (en) Electronic apparatus and control method thereof
JP6667294B2 (en) Electronic device and control method thereof
JP6590666B2 (en) Electronic device and control method thereof
JP2013070303A (en) Photographing device for enabling photographing by pressing force to screen, photographing method and program
US20180324351A1 (en) Control device, control method, and program
KR20110006243A (en) Manual focusing method and device in portable terminal
JP6701033B2 (en) Electronic device and control method thereof
WO2018021165A1 (en) Electronic device and method for controlling same
JP2014241099A (en) Imaging device
CN112040095B (en) Electronic device, control method of electronic device, and storage medium
US10904442B2 (en) Image sensing apparatus with improved user operability when performing an enlarged display of a live view image and control method of image sensing apparatus
JP6123562B2 (en) Imaging device
CN111866332A (en) Electronic apparatus, control method, and computer-readable medium
JP2019016299A (en) Electronic apparatus having operation member arranged on different surfaces, control method thereof, program and storage medium
US11245835B2 (en) Electronic device
JP2015046038A (en) Imaging device
JP6104338B2 (en) Electronic device, control method therefor, program, and storage medium
JP2016192230A (en) User interface device, display control method and program capable of changing display according to left and right of hand to be held
JP5976166B2 (en) Shooting device, shooting method and program capable of shooting by pressing on screen
US10571781B2 (en) Camera, setting method of camera, and setting program of camera
JP2021144121A (en) Display control apparatus, control method thereof, program, and storage medium
JP7466304B2 (en) Imaging device, control method thereof, program, and storage medium
JP5206226B2 (en) Imaging apparatus and program
CN118695087A (en) Camera device and control method thereof, computer readable medium and program product

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160608

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170215

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170307

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170320

R150 Certificate of patent or registration of utility model

Ref document number: 6123562

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250