KR20150086807A - Method and apparatus of universal remocon based on object recognition - Google Patents
Method and apparatus of universal remocon based on object recognition Download PDFInfo
- Publication number
- KR20150086807A KR20150086807A KR1020140006886A KR20140006886A KR20150086807A KR 20150086807 A KR20150086807 A KR 20150086807A KR 1020140006886 A KR1020140006886 A KR 1020140006886A KR 20140006886 A KR20140006886 A KR 20140006886A KR 20150086807 A KR20150086807 A KR 20150086807A
- Authority
- KR
- South Korea
- Prior art keywords
- electronic product
- remote control
- setting information
- environment setting
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000004891 communication Methods 0.000 claims description 17
- 238000001514 detection method Methods 0.000 description 5
- 239000000470 constituent Substances 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H04M1/72533—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/50—Receiving or transmitting feedback, e.g. replies, status updates, acknowledgements, from the controlled devices
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/90—Additional features
- G08C2201/93—Remote control using other portable devices, e.g. mobile phone, PDA, laptop
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Telephonic Communication Services (AREA)
- Selective Calling Equipment (AREA)
Abstract
본 발명은 사물인식기반 통합 리모컨 장치 및 그 방법에 관한 것이다. 본 발명에 따른 통합관리 서버는 전자제품의 특징점 정보와 원격제어를 위한 환경설정 정보를 저장하고, 단말로부터 전자제품 또는 해당 전자제품의 리모컨의 이미지를 수신하고, 상기 이미지와 상기 특징점 정보를 기반으로 상기 전자제품을 인식하는 하고 및 상기 인식한 전자제품의 원격제어를 위한 상기 환경설정 정보를 검출하여, 상기 환경설정 정보를 상기 단말로 전송한다. 상기 단말은 상기 환경설정 정보를 기반으로 해당 전자제품을 제어하기 위한 통합 리모컨 기능을 구현한다. 본 발명에 따르면 전자제품의 이미지 또는 해당 전자제품의 리모컨의 이미지를 기반으로, 해당 전자제품 관련 고유한 기능을 포함한 사용자 인터페이스를 통합 리모컨을 통하여 제공할 수 있다. 또한, 스마트폰을 이용하는 경우 스마트폰의 통합 리모컨 앱과 카메라 기능을 이용하여, 사진촬영을 통하여 해당 제품의 전용 리모컨과 동일/유사한 기능을 제공할 수 있다.The present invention relates to an object recognition based integrated remote control device and a method thereof. The integrated management server according to the present invention stores minutia information of an electronic product and environment setting information for remote control, receives an electronic product or an image of a remote control of the electronic product from the terminal, and based on the image and the minutia information Recognizes the electronic product, detects the environment setting information for remote control of the recognized electronic product, and transmits the environment setting information to the terminal. The terminal implements an integrated remote control function for controlling the corresponding electronic product based on the environment setting information. According to the present invention, a user interface including unique functions related to the electronic product can be provided through the integrated remote controller based on the image of the electronic product or the image of the remote controller of the electronic product. In addition, when using a smartphone, the integrated remote control application and the camera function of the smartphone can be used to provide the same or similar function as a dedicated remote control through photographing.
Description
본 발명은 가전제품의 원격 제어에 관한 것으로, 보다 상세하게는 사물인식기반 통합 리모컨 장치 및 그 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0002] The present invention relates to remote control of household appliances, and more particularly,
하나의 리모컨에 다수의 제어 대상 기기에 대한 제어 명령 코드들을 구비하여 각각 또는 동시에 대상 기기들을 제어할 수 있는 장치를 통합 리모컨(universal remocon)이라 한다. 통합 리모컨은 리모컨에 미리 다수 개의 제어 코드를 구비하고, 사용자가 필요 시에 모드 전환 버튼 또는 스위치를 조작하여 제어하고자 하는 대상 기기를 선택하는 방법과 종래의 리모컨 장치에 추가하여 다수의 제어 명령 코드를 구비한 셋톱 박스(set top box)를 이용하는 방법 등이 있다. A device having control command codes for a plurality of control target devices on one remote control and capable of controlling target devices individually or simultaneously is referred to as a universal remocon. The integrated remote controller is provided with a plurality of control codes in advance in the remote controller, and a user can select a target device to be controlled by operating a mode switching button or a switch when necessary, and a method of adding a plurality of control command codes A method of using a set top box provided, and the like.
최근 다양한 전자제품의 고기능화로 인하여 시각장애인들 뿐 아니라 전자제품에 익숙하지 않은 사람들의 경우에도 다양한 전자제품의 복잡한 사용자 인터페이스로 인하여 빠르고 올바른 사용 및 정보 접근에 제한을 받고 있다. 즉, 전자제품별로 리모턴의 사용자 인터페이스 및 사용방법이 상이하고, 상기와 같은 통합 리모컨의 존재에도 불구하고 사용을 위한 리모컨 환경설정이 매우 까다로운 실정이다.Recently, due to the high functionality of various electronic products, people who are not familiar with electronic products as well as the visually impaired are being restricted to fast and correct use and information access due to the complex user interface of various electronic products. That is, the user interface and the usage method of the remote are different for each electronic product, and despite the existence of the integrated remote control as described above, it is very difficult to set the remote control environment for use.
기존의 제품화된 통합 리모컨은 예를 들어 TV에 대한 경우 음량조절/채널조절/숫자패드 등의 기본적인 기능만을 제공하고 있고, 사용자 인터페이스가 고정되어 있어서 다양한 전자제품(TV, 에어컨, 선풍기, 로봇 청소기 등)별로 적합한 기능을 쉽게 제공하는데 한계가 있다. 특히 시각장애인 입장에서는 익숙하지 않은 리모컨을 사용하는 것은 매우 어렵다.For example, the existing integrated remote controller provides basic functions such as volume control, channel control, and numeric pad for TV, and the user interface is fixed, so that various electronic products (TV, air conditioner, fan, There is a limitation in easily providing suitable functions. Especially for blind people, it is very difficult to use unfamiliar remote control.
따라서, 하나의 통합 리모컨을 통하여 조작하고자 하는 전자제품을 용이하게 인식하고 원격으로 제어할 수 있는 기술이 요구된다.Therefore, there is a need for a technology that can easily recognize and remotely control an electronic product to be operated through one integrated remote controller.
본 발명의 기술적 과제는 사물인식기반 통합 리모컨 장치 및 그 방법을 제공함에 있다.The object of the present invention is to provide an integrated remote control device based on object recognition and a method thereof.
본 발명의 다른 기술적 과제는 전자제품을 원격으로 제어하기 위한 방법을 제공함에 있다.It is another object of the present invention to provide a method for remotely controlling an electronic product.
본 발명의 또 다른 기술적 과제는 조작하고자 하는 전자제품을 용이하게 인식하고 원격으로 제어할 수 있는 기술을 제공함에 있다.Another object of the present invention is to provide a technology for easily recognizing and remotely controlling an electronic product to be operated.
본 발명의 또 다른 기술적 과제는 전자제품의 이미지를 기반으로 관련 리모컨 환경설정 정보를 획득하여 해당 전자제품의 원격 제어를 수행함에 있다. A further technical object of the present invention is to acquire relevant remote control configuration information based on an image of an electronic product to perform remote control of the corresponding electronic product.
본 발명의 또 다른 기술적 과제는 전자제품 또는 해당 전자제품에 관한 리모컨의 이미지를 기반으로 관련 리모컨 환경설정 정보를 획득하여 해당 전자제품의 원격 제어를 수행함에 있다. Another object of the present invention is to acquire relevant remote control configuration information based on an image of a remote controller for an electronic product or a corresponding electronic product to perform remote control of the corresponding electronic product.
본 발명의 또 다른 기술적 과제는 전자제품에 관한 사물인식을 기반으로 해당 전자제품에 관련된 리모컨 환경설정 정보를 제공함에 있다. Another object of the present invention is to provide remote control configuration information related to a corresponding electronic product based on object recognition of the electronic product.
본 발명의 일 양태에 따르면, 사물인식기반 통합 리모컨 시스템을 위한 통합관리 서버를 제공한다. 상기 통합관리 서버는 전자제품의 특징점 정보와 원격제어를 위한 환경설정 정보를 저장하는 저장부, 단말로부터 전자제품 또는 해당 전자제품의 리모컨의 이미지를 수신하는 통신부, 상기 이미지와 상기 특징점 정보를 기반으로 상기 전자제품을 인식하는 사물인식부 및 상기 인식한 전자제품의 원격제어를 위한 상기 환경설정 정보를 검출하는 정보검출부를 포함하되, 상기 통신부는 상기 환경설정 정보를 단말로 전송함을 특징으로 한다.According to an aspect of the present invention, there is provided an integrated management server for an object recognition based integrated remote control system. Wherein the integrated management server comprises: a storage unit for storing minutia information of the electronic product and environment setting information for remote control; a communication unit for receiving an image of the electronic product or a remote control of the electronic product from the terminal; An object recognition unit for recognizing the electronic product, and an information detection unit for detecting the environment setting information for remote control of the recognized electronic product, wherein the communication unit transmits the environment setting information to the terminal.
본 발명의 다른 일 양태에 따르면, 사물인식기반 통합 리모컨 시스템을 위한 단말을 제공한다. 상기 단말은 제어하고자 하는 전자제품 또는 해당 전자제품의 리모컨을 촬영하고 이미지를 획득하는 촬영부, 상기 이미지를 통합관리 서버로 전송하고, 상기 통합관리 서버로부터 해당 전자제품의 원격제어를 위한 환경설정 정보를 수신하는 통신부, 및 상기 환경설정 정보를 기반으로, 해당 전자제품을 제어하기 위한 통합 리모컨 기능을 구현하는 리모컨부를 포함함을 특징으로 한다.According to another aspect of the present invention, there is provided a terminal for an object recognition based integrated remote control system. The terminal includes a photographing unit for photographing a remote control of an electronic product to be controlled or a corresponding electronic product and acquiring an image thereof, a control unit for transmitting the image to the integrated management server, And a remote control unit for implementing an integrated remote control function for controlling the corresponding electronic product on the basis of the environment setting information.
본 발명의 또 다른 일 양태에 따르면, 사물인식기반 통합 리모컨 시스템을 위한 단말에 의하여 수행되는 전자제품 제어 방법을 제공한다. 상기 제어 방법은 상기 전자제품의 특징점 정보와 상기 전자제품의 원격제어를 위한 환경설정 정보를 수신하는 단계, 상기 전자제품 또는 상기 전자제품의 리모컨을 촬영하고 이미지를 획득하는 단계, 상기 특징점 정보와 상기 이미지를 기반으로 상기 전자제품을 인식하는 단계, 상기 인식한 전자제품의 원격제어를 위한 상기 환경설정 정보를 검출하는 단계, 및 상기 검출된 상기 환경설정 정보를 기반으로 해당 전자제품을 제어하기 위한 통합 리모컨 기능을 구현하는 단계를 포함함을 특징으로 한다.According to another aspect of the present invention, there is provided an electronic product control method performed by a terminal for an object recognition based integrated remote control system. The control method includes receiving minutia information of the electronic product and environment setting information for remote control of the electronic product, photographing a remote control of the electronic product or the electronic product and obtaining an image, The method comprising the steps of: recognizing the electronic product on the basis of an image, detecting the environment setting information for remote control of the recognized electronic product, and performing an integration for controlling the electronic product based on the detected environment setting information And implementing a remote control function.
본 발명의 또 다른 일 양태에 따르면, 사물인식기반 통합 리모컨 시스템을 위한 단말에 의해 수행되는 전자제품 제어 방법을 제공한다. 상기 제어 방법은 상기 전자제품 또는 상기 전자제품의 리모컨을 촬영하고 이미지를 획득하는 단계, 상기 이미지를 통합관리 서버로 전송하는 단계, 상기 통합관리 서버로부터 상기 전자제품의 원격제어를 위한 환경설정 정보를 수신하는 단계, 및 상기 환경설정 정보를 기반으로, 상기 전자제품을 제어하기 위한 통합 리모컨 기능을 구현하는 단계를 포함함을 특징으로 한다.According to another aspect of the present invention, there is provided an electronic product control method performed by a terminal for an object recognition based integrated remote control system. The control method includes the steps of photographing a remote controller of the electronic product or the electronic product and obtaining an image, transmitting the image to the integrated management server, setting environment setting information for remote control of the electronic product from the integrated management server And implementing an integrated remote control function for controlling the electronic product on the basis of the environment setting information.
본 발명에 따르면 전자제품의 이미지 또는 해당 전자제품의 리모컨의 이미지를 기반으로, 해당 전자제품 관련 고유한 기능을 포함한 사용자 인터페이스를 통합 리모컨을 통하여 제공할 수 있다. According to the present invention, a user interface including unique functions related to the electronic product can be provided through the integrated remote controller based on the image of the electronic product or the image of the remote controller of the electronic product.
또한, 스마트폰을 이용하는 경우 스마트폰의 통합 리모컨 앱과 카메라 기능을 이용하여, 사진촬영을 통하여 해당 제품의 전용 리모컨과 동일/유사한 기능을 제공할 수 있다.In addition, when using a smartphone, the integrated remote control application and the camera function of the smartphone can be used to provide the same or similar function as a dedicated remote control through photographing.
더 나아가, 본 발명에 따르면 시각장애인들이나 전자제품에 익숙하지 않은 사용자들도 다양한 전자제품을 용이하게 조작할 수 있다.Furthermore, according to the present invention, users who are blind or unfamiliar with electronic products can easily operate various electronic products.
도 1은 본 발명의 일 예에 따른 사물인식기반 통합 리모컨 시스템의 구성을 간략하게 나타낸다.
도 2는 본 발명의 일 예에 따른 통합 리모컨 설정 방법을 나타내는 흐름도이다.
도 3은 본 발명의 일 예에 따른 통합 리모컨 설정을 수행하는 통합관리 서버 및 단말의 블록도이다.FIG. 1 briefly shows a configuration of a system for recognizing objects based on an object recognition according to an embodiment of the present invention.
FIG. 2 is a flowchart illustrating an integrated remote controller setting method according to an exemplary embodiment of the present invention.
3 is a block diagram of an integrated management server and a terminal for performing an integrated remote controller setting according to an exemplary embodiment of the present invention.
이하, 본 명세서에서는 본 발명의 일부 실시 예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 명세서에서 본 발명의 실시 예들을 설명함에 있어, 관련된 공지의 구성 또는 기능에 대한 구체적인 설명이 본 명세서의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.Hereinafter, some embodiments of the present invention will be described in detail with reference to exemplary drawings. It should be noted that, in adding reference numerals to the constituent elements of the drawings, the same constituent elements are denoted by the same reference numerals whenever possible, even if they are shown in different drawings. In the following description of the embodiments of the present invention, a detailed description of known configurations or functions will be omitted if it is determined that the gist of the present specification may be obscured.
도 1은 본 발명의 일 예에 따른 사물인식기반 통합 리모컨 시스템의 구성을 간략하게 나타낸다.FIG. 1 briefly shows a configuration of a system for recognizing objects based on an object recognition according to an embodiment of the present invention.
도 1을 참조하면, 본 발명의 일 예에 따른 통합 리모컨 시스템은 단말(User equipment: UE, 100), 통합관리 서버(120), 전자제품(140)을 포함한다. Referring to FIG. 1, an integrated remote control system according to an exemplary embodiment of the present invention includes a user equipment (UE) 100, an
통합관리 서버(120)는 전자제품(140)의 특징점 정보와 해당 전자제품(140)의 원격제어를 위한 환경설정 정보를 저장한다. 예를 들어, 전자제품 또는 리모컨의 경우에는 각 제품별로 외형 디자인, 버튼의 배열, 버튼의 색깔, 크기 등이 상이하다. 이러한 특징점 정보를 활용하면 해당 제품을 찾거나 구별하는 것이 가능하다. 상기 특징점 정보는 상술한 예들 외에도 제품 바코드, 제품 시리얼 번호 등을 포함할 수 있다.The integrated
통합관리 서버(120)는 상기 특징점 정보 및 환경설정 정보를 전자제품 제공자(160)를 통하여 획득할 수 있다. 전자제품 제공자(160)는 해당 제품의 특징점 정보와 환경설정 정보를 주기적으로 통합관리 서버(120)에 제공할 수 있고, 업데이트할 수도 있다. 다만, 상기 전자제품 제공자(160)는 일 예로서, 통합관리 서버(120)는 임의의 다른 경로를 통하여 상기 정보들을 획득할 수도 있다.The integrated
단말(100)은 전자제품(140)의 이미지 또는 해당 전자제품(140)의 리모컨을 촬영하고 이미지를 획득하여 통합관리 서버(120)에 무선 또는 유선 통신수단을 통하여 업로드한다. 여기서 전자제품(또는 리모컨)의 이미지라 함은 동영상을 포함한다.The
이 경우 통합관리 서버(120)는 상기 이미지와 상기 특징점 정보를 기반으로 전자제품(140)을 인식하고, 해당 전자제품(140)의 원격제어를 위한 환경설정 정보를 검출한다. 여기서 해당 전자제품(140)의 원격제어를 위한 환경설정 정보는 통합 리모컨 설정 정보일 수 있다. In this case, the
통합관리 서버(120)가 상기 검출된 해당 전자제품(140)의 원격제어를 위한 환경설정 정보를 단말(100)로 전송하면, 단말(100)은 상기 해당 전자제품(140)의 원격제어를 위한 환경설절 정보를 기반으로 통합 리모컨 기능을 구현하고, 해당 전자제품(140)을 제어할 수 있다.When the
한편, 통합관리 서버(120)는 상기 이미지를 기반으로 전자제품(140)을 검출하지 못하는 경우, 단말(100)로 전자제품(140)이 검출되지 않았음을 알리는 정보를 전송할 수 있다. 또한, 단말(100) 또는 통합관리 서버(120)는 전자제품 제공자(160)로 전자제품(140)이 인식(또는 검출)되지 않았음을 알리는 정보를 전송하고, 전자제품 제공자(160)는 전자제품들의 특징점 정보를 통합관리 서버(120)에 업데이트할 수도 있다. Meanwhile, if the integrated
본 발명에 따르면 전자제품의 이미지 또는 해당 전자제품의 리모컨의 이미지를 기반으로, 해당 전자제품 관련 고유한 기능을 포함한 사용자 인터페이스를 통합 리모컨을 통하여 제공할 수 있다. 또한, 상기 단말이 스마트폰인 경우 스마트폰의 통합 리모컨 앱과 카메라 기능을 이용하여, 사진촬영을 통하여 해당 제품의 전용 리모컨과 동일/유사한 기능을 제공할 수 있다.According to the present invention, a user interface including unique functions related to the electronic product can be provided through the integrated remote controller based on the image of the electronic product or the image of the remote controller of the electronic product. In addition, if the terminal is a smart phone, the remote control application and the camera function of the smart phone can be used to provide the same or similar function as a dedicated remote control of the corresponding product through photographing.
도 2는 본 발명의 일 예에 따른 통합 리모컨 설정 방법을 나타내는 흐름도이다.FIG. 2 is a flowchart illustrating an integrated remote controller setting method according to an exemplary embodiment of the present invention.
도 2를 참조하면, 통합관리 서버는 전자제품의 특징점 정보와 해당 전자제품의 원격제어를 위한 환경설정 정보를 저장한다(S200). 통합관리 서버는 상기 특징점 정보 및 환경설정 정보를 예를 들어 전자제품 제공자를 통하여 주기적 또는 비주기적으로 획득할 수 있다. 상기 특징점 정보는 제품의 외형, 버튼의 배열, 버튼의 색깔, 크기, 제품 바코드, 제품 시리얼 중 적어도 하나를 포함한다.Referring to FIG. 2, the integrated management server stores minutia information of the electronic product and environment setting information for remote control of the electronic product (S200). The integrated management server can periodically or non-periodically acquire the minutia information and the environment setting information through the electronic product provider, for example. The feature point information includes at least one of an appearance of the product, an arrangement of the buttons, a color of the button, a size, a product bar code, and a product serial.
단말은 사용하고자 하는 전자제품 또는 해당 전자제품의 리모컨을 촬영하고 이미지를 획득한다(S210). 여기서 단말은 스마트 폰일 수 있고, 또는 통합 리모컨 전용 기기일 수 있다.The terminal captures an image of the remote control of the electronic product or the electronic product to be used and obtains the image (S210). Here, the terminal may be a smart phone, or may be a device dedicated to an integrated remote control.
단말은 상기 이미지를 통합관리 서버로 전송한다(S220). 여기서 전자제품(또는 리모컨)의 이미지라 함은 동영상을 포함한다.The terminal transmits the image to the integrated management server (S220). Here, the image of the electronic product (or remote controller) includes a moving image.
통합관리 서버는 상기 이미지와 상기 특징점 정보를 기반으로 촬영된 전자제품을 인식하고(S230), 해당 전자제품의 해당 전자제품의 원격제어를 위한 환경설정 정보를 검출한다(S240). 여기서 해당 전자제품의 원격제어를 위한 환경설정 정보는 통합 리모컨 설정 정보라고 불릴 수 있다. The integrated management server recognizes the electronic product photographed based on the image and the minutia information (S230), and detects environment setting information for remote control of the electronic product of the electronic product (S240). Here, the environment setting information for remote control of the electronic product may be called the integrated remote control setting information.
통합관리 서버는 상기 전자제품의 원격제어를 위한 환경설정 정보를 단말로 전송한다(S250). The integrated management server transmits environment setting information for remote control of the electronic product to the terminal (S250).
단말은 상기 환경설정 정보를 기반으로 통합 리모컨 기능을 구현하고 해당 전자제품을 제어한다(S260). The terminal implements the integrated remote control function based on the environment setting information and controls the corresponding electronic product (S260).
한편, 비록 도 2에서는 전자제품 인식 및 환경설정 정보 검출이 통합관리 서버에서 수행(S230, S240)되는 것으로 도시되었으나, 이는 예시일 뿐이고, 단말이 통합관리 서버 등으로부터 상기 특징점 정보와 환경설정 정보를 미리 수신하여, 단말 단에서 상기 전자제품(또는 리모컨)의 이미지와 상기 특징점 정보를 기반으로 해당 전자제품을 인식하고, 해당 전자제품의 원격제어를 위한 환경설정 정보 검출을 수행할 수 있다. Although the electronic product recognition and environment setting information detection is performed in the integrated management server (S230, S240) in FIG. 2, this is merely an example, and the terminal may store the minutia information and environment setting information from the integrated management server And can recognize the corresponding electronic product based on the image of the electronic product (or remote controller) and the minutia information at the terminal end, and perform environment setting information detection for remote control of the corresponding electronic product.
예를 들어, 상기 단말이 스마트 폰인 경우, 관련 어플(application)에서 전자제품들의 특징점 정보와 원격제어를 위한 환경설정 정보를 포함하고, 어플 내의 촬영 기능을 통하여 전자제품을 촬영하는 경우 바로 해당 전자제품을 인식하고, 해당 전자제품의 원격제어를 위한 환경설정 정보 검출을 수행하여, 해당 전자제품 제어를 위한 통합 리모컨 기능을 구현할 수 있다. For example, when the terminal is a smart phone, it includes feature point information of electronic products and environment setting information for remote control in an associated application. When an electronic product is photographed through a photographing function in an application, And detects environment setting information for remote control of the electronic product, thereby realizing an integrated remote control function for controlling the electronic product.
도 3은 본 발명의 일 예에 따른 통합 리모컨 설정을 수행하는 통합관리 서버 및 단말의 블록도이다.3 is a block diagram of an integrated management server and a terminal for performing an integrated remote controller setting according to an exemplary embodiment of the present invention.
도 3을 참조하면, 통합관리 서버(300)는 통신부(310), 저장부(320), 사물인식부(330), 정보검출부(340)를 포함한다.Referring to FIG. 3, the
저장부(320)는 전자제품의 특징점 정보와 해당 전자제품의 원격제어를 위한 환경설정 정보를 저장한다. 상기 특징점 정보는 제품의 외형, 버튼의 배열, 버튼의 색깔, 크기, 제품 바코드, 제품 시리얼 중 적어도 하나를 포함할 수 있다.The
통신부(310)는 상기 특징점 정보 및 상기 환경설정 정보를 전자제품 제공자 등을 통하여 주기적 또는 비주기적으로 수신할 수 있다.The
또한, 통신부(310)는 상기 전자제품(또는 해당 전자제품의 리모컨)의 이미지를 단말(350)로부터 수신한다. 여기서 이미지라 함은 동영상을 포함한다.Further, the
사물인식부(330)는 상기 이미지에 포함된 전자제품을 인식한다. 사물인식부는 상기 이미지와 상기 특징점 정보를 기반으로 비교 분석하고 상기 전자제품을 인식할 수 있다. The
정보검출부(340)는 상기 인식된 전자제품의 원격제어를 위한 상기 환경설정 정보를 검출하고, 통신부(310)를 통하여 단말(350)로 전송한다.The
단말(350)은 통신부(360), 촬영부(370) 및 리모컨부(380)을 포함한다.The terminal 350 includes a
촬영부(370)는 사용자의 제어에 따라 사용자가 사용하고자 하는 전자제품(또는 해당 전자제품의 리모컨)을 촬영하고 이미지를 획득하고, 통신부(360)를 통하여 통합관리 서버(300)로 전송한다.The photographing unit 370 photographs an electronic product (or a remote controller of the electronic product) to be used by the user under the control of the user, acquires an image, and transmits the image to the
통신부(360)는 통합관리 서버(300)로부터 상기 전자제품의 원격제어를 위한 환경설정 정보를 수신한다. The
리모컨부(380)는 상기 환경설정 정보를 기반으로 통합 리모컨 기능을 구현하고, 해당 전자제품을 제어할 수 있다.The remote control unit 380 can implement an integrated remote control function based on the environment setting information and control the corresponding electronic product.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The foregoing description is merely illustrative of the technical idea of the present invention, and various changes and modifications may be made by those skilled in the art without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are intended to illustrate rather than limit the scope of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents should be construed as falling within the scope of the present invention.
Claims (18)
전자제품의 특징점 정보와 원격제어를 위한 환경설정 정보를 저장하는 저장부;
단말로부터 전자제품 또는 해당 전자제품의 리모컨의 이미지를 수신하는 통신부;
상기 이미지와 상기 특징점 정보를 기반으로 상기 전자제품을 인식하는 사물인식부; 및
상기 인식한 전자제품의 원격제어를 위한 상기 환경설정 정보를 검출하는 정보검출부를 포함하되,
상기 통신부는 상기 환경설정 정보를 단말로 전송함을 특징으로 하는, 통합관리 서버.An integrated management server for an object recognition based integrated remote control system,
A storage unit for storing minutia information of the electronic product and environment setting information for remote control;
A communication unit for receiving an image of an electronic product or a remote control of the electronic product from the terminal;
An object recognition unit for recognizing the electronic product based on the image and the minutia information; And
And an information detecting unit for detecting the environment setting information for remote control of the recognized electronic product,
And the communication unit transmits the environment setting information to the terminal.
상기 통신부는 상기 특징점 정보와 상기 환경설정 정보를 전자제품 제공자를 통하여 수신함을 특징으로 하는, 통합관리 서버.The method according to claim 1,
Wherein the communication unit receives the minutia information and the environment setting information through an electronic product provider.
상기 통신부는 상기 특징점 정보와 상기 환경설정 정보를 주기적으로 수신함을 특징으로 하는, 통합관리 서버.The method according to claim 1,
Wherein the communication unit periodically receives the minutia information and the environment setting information.
상기 저장부는 해당 전자제품의 외형, 버튼의 배열, 버튼의 색깔, 크기, 제품 바코드, 제품 시리얼 중 적어도 하나를 포함하는 상기 특징점 정보를 저장함을 특징으로 하는, 통합관리 서버.The method according to claim 1,
Wherein the storage unit stores the minutia information including at least one of an external appearance of the electronic product, an arrangement of the buttons, a color and size of the button, a product bar code, and a product serial.
상기 사물인식부는 상기 특징점 정보와 상기 이미지를 비교 분석하여 상기 전자제품을 인식함을 특징으로 하는, 통합관리 서버.5. The method of claim 4,
Wherein the object recognition unit recognizes the electronic product by comparing and analyzing the minutia information and the image.
상기 사물인식부는 상기 전자제품을 인식하지 못한 경우, 상기 전자제품이 인식되지 않았음을 알리는 정보를 생성하고,
상기 통신부는 상기 전자제품이 인식되지 않았음을 알리는 정보를 상기 단말로 전송함을 특징으로 하는, 통합관리 서버.5. The method of claim 4,
Wherein the object recognition unit generates information indicating that the electronic product is not recognized when the electronic product is not recognized,
Wherein the communication unit transmits to the terminal information indicating that the electronic product is not recognized.
상기 단말은 스마트폰이고,
상기 환경설정 정보는 상기 스마트폰의 통합 리모컨 앱(application)을 통하여 상기 전자제품을 제어하기 위한 설정 정보인 것을 특징으로 하는, 통합관리 서버. 6. The method of claim 5,
The terminal is a smartphone,
Wherein the environment setting information is setting information for controlling the electronic product through an integrated remote control application of the smartphone.
제어하고자 하는 전자제품 또는 해당 전자제품의 리모컨을 촬영하고 이미지를 획득하는 촬영부;
상기 이미지를 통합관리 서버로 전송하고, 상기 통합관리 서버로부터 해당 전자제품의 원격제어를 위한 환경설정 정보를 수신하는 통신부; 및
상기 환경설정 정보를 기반으로, 해당 전자제품을 제어하기 위한 통합 리모컨 기능을 구현하는 리모컨부를 포함함을 특징으로 하는, 단말.A terminal for an object recognition based integrated remote control system,
A photographing unit for photographing an electronic product to be controlled or a remote control of the electronic product and acquiring an image;
A communication unit for transmitting the image to the integrated management server and receiving environment setting information for remote control of the electronic product from the integrated management server; And
And a remote control unit for implementing an integrated remote control function for controlling the electronic product based on the environment setting information.
상기 통신부는 상기 전자제품이 인식되지 않았음을 알리는 정보를 상기 통합관리 서버로부터 수신함을 특징으로 하는, 단말. 9. The method of claim 8,
Wherein the communication unit receives from the integrated management server information indicating that the electronic product is not recognized.
상기 단말은 스마트폰인 것을 특징으로 하는, 단말.8. The method of claim 7,
Wherein the terminal is a smartphone.
상기 리모컨부는 상기 환경설정 정보를 기반으로 스마트폰의 통합 리모컨 앱을 통하여 상기 전자제품을 제어함을 특징으로 하는, 단말. 11. The method of claim 10,
Wherein the remote control unit controls the electronic product through an integrated remote control application of a smartphone based on the environment setting information.
상기 전자제품의 특징점 정보와 상기 전자제품의 원격제어를 위한 환경설정 정보를 수신하는 단계;
상기 전자제품 또는 상기 전자제품의 리모컨을 촬영하고 이미지를 획득하는 단계;
상기 특징점 정보와 상기 이미지를 기반으로 상기 전자제품을 인식하는 단계;
상기 인식한 전자제품의 원격제어를 위한 상기 환경설정 정보를 검출하는 단계; 및
상기 검출된 상기 환경설정 정보를 기반으로 해당 전자제품을 제어하기 위한 통합 리모컨 기능을 구현하는 단계를 포함함을 특징으로 하는, 제어 방법.An electronic product control method performed by a terminal for an object recognition based integrated remote control system,
Receiving characteristic point information of the electronic product and environment setting information for remote control of the electronic product;
Capturing a remote control of the electronic product or the electronic product and acquiring an image;
Recognizing the electronic product based on the minutia information and the image;
Detecting the environment setting information for remote control of the recognized electronic product; And
And implementing an integrated remote control function for controlling the corresponding electronic product based on the detected environment setting information.
상기 특징점 정보는 해당 전자제품의 외형, 버튼의 배열, 버튼의 색깔, 크기, 제품 바코드, 제품 시리얼 중 적어도 하나를 포함하는 상기 특징점 정보를 저장함을 특징으로 하는, 제어 방법.13. The method of claim 12,
Wherein the feature point information stores the feature point information including at least one of an appearance of the electronic product, an arrangement of the buttons, a color of the button, a product barcode, and a product serial.
상기 특징점 정보와 상기 환경설정 정보는 통합관리 서버로부터 수신됨을 특징으로 하는, 제어 방법.14. The method of claim 13,
Wherein the minutia information and the environment setting information are received from the integrated management server.
상기 단말은 스마트 폰이고,
상기 스마트폰의 통합 리모컨 앱(application) 내의 촬영 기능을 통하여 상기 전자제품의 상기 이미지를 획득하고, 상기 전자제품의 원격제어를 위한 환경설정 정보를 통하여 상기 통합 리모컨 앱의 리모컨 기능을 구현함을 특징으로 하는. 제어 방법. 14. The method of claim 13,
The terminal is a smartphone,
A remote control function of the integrated remote control application is implemented through environment setting information for remote control of the electronic product by acquiring the image of the electronic product through a photographing function in an integrated remote control application of the smartphone, To. Control method.
상기 전자제품 또는 상기 전자제품의 리모컨을 촬영하고 이미지를 획득하는 단계;
상기 이미지를 통합관리 서버로 전송하는 단계;
상기 통합관리 서버로부터 상기 전자제품의 원격제어를 위한 환경설정 정보를 수신하는 단계; 및
상기 환경설정 정보를 기반으로, 상기 전자제품을 제어하기 위한 통합 리모컨 기능을 구현하는 단계를 포함함을 특징으로 하는, 제어 방법.An electronic product control method performed by a terminal for an object recognition based integrated remote control system,
Capturing a remote control of the electronic product or the electronic product and acquiring an image;
Transmitting the image to an integrated management server;
Receiving environment setting information for remote control of the electronic product from the integrated management server; And
And implementing an integrated remote control function for controlling the electronic product based on the environment setting information.
상기 전자제품이 인식되지 않았음을 알리는 정보를 상기 통합관리 서버로부터 수신하는 단계를 더 포함함을 특징으로 하는, 제어 방법.17. The method of claim 16,
Further comprising receiving from the integrated management server information informing that the electronic product is not recognized.
상기 단말은 스마트폰이고,
상기 제어 방법은 상기 스마트폰의 통합 리모컨 앱을 통하여 수행됨을 특징으로 하는, 제어 방법.17. The method of claim 16,
The terminal is a smartphone,
Wherein the control method is performed through an integrated remote control application of the smartphone.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020140006886A KR20150086807A (en) | 2014-01-20 | 2014-01-20 | Method and apparatus of universal remocon based on object recognition |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020140006886A KR20150086807A (en) | 2014-01-20 | 2014-01-20 | Method and apparatus of universal remocon based on object recognition |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20150086807A true KR20150086807A (en) | 2015-07-29 |
Family
ID=53876273
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020140006886A Withdrawn KR20150086807A (en) | 2014-01-20 | 2014-01-20 | Method and apparatus of universal remocon based on object recognition |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20150086807A (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017111234A1 (en) * | 2015-12-23 | 2017-06-29 | Samsung Electronics Co., Ltd. | Method for electronic device to control object and electronic device |
| KR20180087033A (en) | 2017-01-24 | 2018-08-01 | 나아현 | System and method for gesture based controlling home appliances, recording medium for performing the method |
| KR20190096991A (en) * | 2016-12-21 | 2019-08-20 | 헨켈 아게 운트 코. 카게아아 | Cleaner Weighing Method |
| JP2020127118A (en) * | 2019-02-04 | 2020-08-20 | ソフトバンク株式会社 | Remote control function setting program, remote control server, remote control function setting method, mobile terminal |
| KR20210158554A (en) * | 2020-06-24 | 2021-12-31 | 주식회사 오성전자 | Method and control system for controlling device operation using a camera |
-
2014
- 2014-01-20 KR KR1020140006886A patent/KR20150086807A/en not_active Withdrawn
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017111234A1 (en) * | 2015-12-23 | 2017-06-29 | Samsung Electronics Co., Ltd. | Method for electronic device to control object and electronic device |
| KR20190096991A (en) * | 2016-12-21 | 2019-08-20 | 헨켈 아게 운트 코. 카게아아 | Cleaner Weighing Method |
| US11812912B2 (en) | 2016-12-21 | 2023-11-14 | Henkel Ag & Co. Kgaa | Method for the dosing of cleaning agents |
| EP3558083B1 (en) * | 2016-12-21 | 2024-02-28 | Henkel AG & Co. KGaA | Method for metering cleaning agents |
| KR20180087033A (en) | 2017-01-24 | 2018-08-01 | 나아현 | System and method for gesture based controlling home appliances, recording medium for performing the method |
| JP2020127118A (en) * | 2019-02-04 | 2020-08-20 | ソフトバンク株式会社 | Remote control function setting program, remote control server, remote control function setting method, mobile terminal |
| KR20210158554A (en) * | 2020-06-24 | 2021-12-31 | 주식회사 오성전자 | Method and control system for controlling device operation using a camera |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CA2959707C (en) | Home automation control using context sensitive menus | |
| KR101603017B1 (en) | Gesture recognition device and gesture recognition device control method | |
| CN109243153B (en) | Mobile device and control method | |
| US20170195046A1 (en) | Illumination system and control method thereof | |
| JP6558527B2 (en) | Electronic device, electronic device control method, program, and wireless communication system | |
| CN104536561B (en) | Using the method and wearable device of wearable device control terminal device operation | |
| KR20180050188A (en) | Method and apparatus for controlling electronic device, and terminal | |
| WO2017071093A1 (en) | Electronic device control method and apparatus | |
| KR20150086807A (en) | Method and apparatus of universal remocon based on object recognition | |
| JP2015515048A5 (en) | ||
| KR102238775B1 (en) | Apparatus and method for devices administration using augmented reality in electronics device | |
| US8798543B2 (en) | Easily operated wireless data transmission/reception system and easily operated wireless data transmission/reception program | |
| KR20150014618A (en) | Method and its apparatus for configuring the position of target device | |
| CN103531015A (en) | Method for realizing remote control function, and electronic device thereof | |
| CN103869966A (en) | Somatosensory household electric product control equipment and system thereof | |
| KR20160030382A (en) | Method and device for broadcasting stream media data | |
| KR20170104953A (en) | Method and apparatus for managing system | |
| KR20160024848A (en) | Remote control programming using images | |
| KR20170047055A (en) | Power control system | |
| KR20140100035A (en) | Method and apparatus for controlling electronic device | |
| US20160295117A1 (en) | Display control apparatus, display control method, and recording medium | |
| JPWO2014002322A1 (en) | Portable terminal, electronic device control system, and electronic device control method | |
| KR101748387B1 (en) | Method, device, program and recording medium for positioning | |
| CN105446574B (en) | A kind of information processing method and electronic equipment | |
| CN104427411A (en) | Remote controller and control method thereof |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20140120 |
|
| PG1501 | Laying open of application | ||
| PC1203 | Withdrawal of no request for examination | ||
| WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |