JP4166229B2

JP4166229B2 - Display device with touch panel

Info

Publication number: JP4166229B2
Application number: JP2005071622A
Authority: JP
Inventors: 剛史星野; 長峯元; 有人塚田
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 2005-03-14
Filing date: 2005-03-14
Publication date: 2008-10-15
Anticipated expiration: 2022-08-02
Also published as: JP2005196810A

Description

本発明は、据置型や携帯型などの端末装置に用いられるタッチパネルを備えた
表示装置に関する。 The present invention relates to a display device provided with a touch panel used in a stationary or portable terminal device.

近年、各種業界では、端末装置が広く使用されるようになってきている。例えば、銀行などでＡＴＭ（Automatic Tellers Machine：自動預入支払機）が、駅などでは券売機や地図案内機が夫々設置され、銀行や駅などの業務の一部を端末装置で賄うことができるようにしている。また、ファーストフード店などの店舗においても、商品の注文処理に端末装置を用いるようにする場合もあり（例えば、特許文献１参照）、さらに、インターネットなどの通信ネットワークを利用してコンテンツの配信を受ける端末装置やウェブ閲覧（ブラウズ）用の端末装置なども実現あるいは提案されている。 In recent years, terminal devices have been widely used in various industries. For example, ATMs (Automatic Tellers Machines) are installed at banks, and ticket machines and map guides are installed at stations, etc., so that a part of business such as banks and stations can be covered by terminal devices. I have to. Also, in stores such as fast food restaurants, terminal devices may be used for merchandise order processing (see, for example, Patent Document 1), and content distribution is performed using a communication network such as the Internet. Receiving terminal devices and web browsing (browsing) terminal devices are also realized or proposed.

ところで、このような端末装置では、表示装置が設けられており、その表示画面に表示されるメッセージなどの情報を見ながらキーボードなどの入力手段を操作することにより、上記のような各種の作業ができるようにしているが、表示画面に入力手段としての機能を持たせ、その表示画面に表示されるメッセージやメニューなどにしたがって画面操作を行なうことにより、各種の作業を実行することができるようにしたタッチパネルを備えた表示装置が用いられるようになってきている。 By the way, in such a terminal device, a display device is provided, and various operations as described above can be performed by operating input means such as a keyboard while viewing information such as messages displayed on the display screen. The display screen has a function as an input means, and various operations can be performed by operating the screen according to messages and menus displayed on the display screen. Display devices having a touch panel have been used.

このようなタッチパネルを備えた表示装置によると、その表示画面に直接指先を触れて操作を行なうものであるから、操作がし易く、操作の間違いが少ない、という優れた操作性を実現することができるし、また、キーボードなどの操作部も、操作ボタンの数を少なくすることができるので、端末装置自体を小型化でき、設置面積も狭くできて、店内や構内などでの設置場所の自由度が高まるといったようなメリットも得られることになる。
特開平５ー２１６５８７号公報 According to such a display device equipped with a touch panel, since the operation is performed by directly touching the display screen with a fingertip, it is easy to operate and there are few operational errors. In addition, the operation unit such as the keyboard can reduce the number of operation buttons, so the terminal device itself can be downsized, the installation area can be reduced, and the degree of freedom of installation location in the store or on the premises Benefits such as increased will also be obtained.
Japanese Patent Laid-Open No. 5-216587

しかし、従来のタッチパネルを備えた表示装置では、その表示画面に操作ボタン（タッチボタン）などのタッチ操作部材からなる入力手段の画像を表示することにより、その入力手段を顧客やユーザの視覚で認識させ、この認識のもとに、この入力手段の画像の操作したいと思われる個所をタッチすることで所定の処理を実行する。 However, in a display device equipped with a conventional touch panel, an image of an input unit made of a touch operation member such as an operation button (touch button) is displayed on the display screen, so that the input unit is recognized visually by a customer or a user. Then, based on this recognition, a predetermined process is executed by touching a place where the image of the input means is desired to be operated.

パソコンでは、マウスによるドラッグ・アンド・ドロップ機能が付加されている。マウスでは、カーソルを自由に移動させることができるとともに、クリックボタンを操作することができるので、クリックボタンを押しながらアイコンを移動させたり、あるいは、アイコンにカーソルを合わせて、クリックボタンをダブルクリックすることで予め設定されたアイコンの機能を実行させることができる。 A personal computer has a drag-and-drop function with a mouse. With the mouse, the cursor can be moved freely and the click button can be operated, so the icon can be moved while holding the click button, or the cursor is moved to the icon and the click button is double-clicked. Thus, a preset icon function can be executed.

しかし、従来のタッチパネルでは、１回のタッチを検知して各種処理を実行しているために、１つの処理しか実行することができない。例えば、ＡＴＭなどで採用されているタッチパネルを備えた表示装置では、表示画面のタッチ操作部材にタッチすると、その時点でこのタッチ操作部材に関する機能が実行されるため、タッチ操作によってドラッグ・アンド・ドロップを行なわせることができない。タッチパネルを備えた小型の情報機器では、ドラッグ・アンド・ドロップを可能にしたものがあるが、これらは、アイコンに予め設定された機能を実行するためには、予め設定されたタイミングで２回タッチしなければならない。マウスの操作では、表示画面に表示されるカーソルを見ながら間接的に操作するため、視認性や操作性に左程問題を生じない。しかし、表示画面に表示されたタッチ操作部材を直接操作するタッチパネルにおいては、一度タッチした箇所を同じタイミングでタッチしなければならないために、誤操作や操作性に課題がある。特に、不特定の操作者が操作するＡＴＭや自動機などの公共機器においては、操作者全部に同じタイミングで２回タッチさせることには課題が残る。 However, since the conventional touch panel detects one touch and executes various processes, only one process can be executed. For example, in a display device equipped with a touch panel adopted by ATM or the like, when a touch operation member on the display screen is touched, a function related to the touch operation member is executed at that time, so that drag and drop is performed by the touch operation. Can not be done. Some small information devices equipped with a touch panel can be dragged and dropped. However, in order to execute a function set in advance on an icon, these are touched twice at a preset timing. Must. In the mouse operation, since the operation is performed indirectly while looking at the cursor displayed on the display screen, there is no problem as far as the left in viewability and operability. However, in the touch panel that directly operates the touch operation member displayed on the display screen, the touched part has to be touched at the same timing, so that there are problems in erroneous operation and operability. In particular, in public equipment such as an ATM or an automatic machine operated by an unspecified operator, there is a problem in making all the operators touch twice at the same timing.

本発明の目的は、かかる問題を解消し、操作ボタンなどのタッチ操作部材をユーザが所望とする位置に任意に移動させることができ、かつタッチ操作部材に予め設定された機能を実行できるタッチパネルを備えた表示装置を提供することにある。 An object of the present invention is to solve such a problem, it can be moved to any touch operation member such as an operation button to the position desired by the user, and a touch panel capable of executing a predetermined function on the touch operation member It is to provide a display device provided.

上記目的を達成するために、本発明は、表示パネルの表示面に表示されるタッチ操作部材のタッチ状態の２段階検出を可能とし、第１のタッチ状態でこのタッチ操作部材の表示画面上での移動を可能とし、第２のタッチ状態で該タッチ操作部材に関する機能の実行を可能とするものである。 In order to achieve the above object, the present invention enables two-stage detection of the touch state of a touch operation member displayed on the display surface of the display panel, and on the display screen of the touch operation member in the first touch state. Movement of the touch operation member is enabled in the second touch state.

即ち、本発明に係る代表的な手段は、タッチ操作部材をタッチ操作する際の指示手段によって押圧される押圧力Ｐを検知する検知手段と、設定圧力Ｐ１及びこの設定圧力Ｐ１より大きい設定圧力Ｐ２が予め設定され、該検知手段で検知した押圧力Ｐが設定圧力Ｐ１≦押圧力Ｐ＜設定圧力Ｐ２であるとき、該指示手段によって押圧された該タッチ操作部材に関する第１の処理を行ない、該押圧力Ｐが設定圧力Ｐ２≦押圧力Ｐであるとき、該指示手段によって押圧された該タッチ操作部材に関する第２の処理を行なう制御部とを有し、該第１の処理は、該指示手段が移動すると、該タッチ操作部材を該指示手段に付いて移動させるドラッグ処理であり、該第２の処理は該タッチ操作部材の移動に関する処理であって、該タッチ操作部材への該指示手段による押圧力Ｐが、押圧力Ｐ＜設定圧力Ｐ１から設定圧力Ｐ１≦押圧力Ｐ＜設定圧力Ｐ２を経て、設定圧力Ｐ２≦押圧力Ｐに変化したとき、該タッチ操作部材の移動開始を許可する該第２の処理を行ない、次いで、該タッチ操作部材への該指示手段による押圧力Ｐが緩んで設定圧力Ｐ２≦押圧力Ｐから設定圧力Ｐ１≦押圧力Ｐ＜設定圧力Ｐ２に変化したとき、設定圧力Ｐ１≦押圧力Ｐ＜設定圧力Ｐ２である限り、該タッチ操作部材のドラッグ処理を該第１の処理として行ない、次いで、該タッチ操作部材への該指示手段による押圧力Ｐがさらに緩んで設定圧力Ｐ１≦押圧力Ｐ＜設定圧力Ｐ２から押圧力Ｐ＜設定圧力Ｐ１に変化したとき、該タッチ操作部材の移動先をそのときの位置に決定する処理を行ない、タッチ操作部材をタッチ操作する際の該押圧力Ｐの押圧力Ｐ＜設定圧力Ｐ１から設定圧力Ｐ２≦押圧力Ｐへの変化、または設定圧力Ｐ２≦押圧力Ｐから押圧力Ｐ＜設定圧力Ｐ１への変化が所定時間内に行なわれた場合には、該ドラッグ処理または該移動開始を許可する処理を行なうことなく、該タッチ操作部材に予め割り当てられた機能を実行することで、上記目的を達成する。 That is, representative means according to the present invention include detection means for detecting the pressing force P pressed by the instruction means when the touch operation member is touch-operated, the set pressure P1, and the set pressure P2 larger than the set pressure P1. Is set in advance, and when the pressing force P detected by the detecting means is set pressure P1 ≦ pressing pressure P <set pressure P2, the first processing related to the touch operation member pressed by the indicating means is performed, A control unit that performs a second process relating to the touch operation member pressed by the instruction unit when the pressing force P is a set pressure P2 ≦ the pressing force P. The first process includes the instruction unit. Is a drag process for moving the touch operation member along the instruction means when the movement of the touch operation member, and the second process is a process related to the movement of the touch operation member, the instruction to the touch operation member Allow the pressing force P by stages, through the pressing force P <Configuration set pressure from the pressure P1 P1 ≦ pressing force P <set pressure P2, when changing the set pressure P2 ≦ pressing force P, the movement start of the touch operation member The second process is performed, and then the pressing force P applied to the touch operation member by the instruction means is loosened to change from the set pressure P2 ≦ the pressed pressure P to the set pressure P1 ≦ the pressed pressure P <the set pressure P2. As long as the setting pressure P1 ≦ the pressing force P <the setting pressure P2, the drag operation of the touch operation member is performed as the first processing, and then the pressing force P by the instruction means on the touch operation member is further relaxed. in when changed from the set pressure P1 ≦ pressing force P <set pressure P2 in the pressing force P <set pressure P1, it performs a process of determining the destination of the touch operation member to a position at that time, touch operation on the touch operation member The change of the pressing force P at the time of pressing P <the set pressure P1 to the set pressure P2 ≦ the pressed pressure P or the change from the set pressure P2 ≦ the pressed pressure P to the pressed pressure P <the set pressure P1 within a predetermined time. In the case where the touch operation member is performed , the above-mentioned object is achieved by executing a function assigned in advance to the touch operation member without performing the drag process or the process of permitting the start of movement.

本発明によると、指先などによる押圧力Ｐを検知する検知手段と、この押圧力ＰがＰ１≦Ｐ＜Ｐ２であるときに第１の処理を、Ｐ１≦Ｐ＜Ｐ２からＰ２≦Ｐに変化したときに第２の処理を行なう制御部とを設け、該第１の処理は、指先が移動すると、タッチ操作部材を指先に附いて移動させる処理とし、第２の処理は該タッチ操作部材に関する機能を実行させる処理とするものであるから、ドラッグ・アンド・ドロップなどのタッチ操作部材を移動させる機能を指先でのタッチ操作で行なうことが可能となり、表示画面でのタッチ操作部材の配置の変更などをタッチ操作でもって容易にかつ確実に行なうことができるし、複数の操作ボタンの操作が関連されて１つの機能が実行されるような場合には、複数のタッチ操作部材のタッチ操作の経緯を確認する必要がなくなって、操作が簡単でかつ誤操作を軽減することができる。 According to the present invention, the detecting means for detecting the pressing force P by the fingertip or the like, and the first process when the pressing force P is P1 ≦ P <P2, is changed from P1 ≦ P <P2 to P2 ≦ P. A control unit that performs a second process, and the first process is a process of moving the touch operation member on the fingertip when the fingertip moves, and the second process is a function related to the touch operation member. Because it is a process to execute touch, it is possible to perform a function to move the touch operation member such as drag and drop by touch operation with the fingertip, change the arrangement of the touch operation member on the display screen, etc. Can be easily and reliably performed by a touch operation, and when a plurality of operation buttons are related and one function is executed, the touch operation of a plurality of touch operation members is performed. It unnecessary to confirm, can be operated to reduce the simple and erroneous operation.

以下、本発明の実施形態を図面を用いて説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図１は本発明によるタッチパネルを備えた表示装置の一実施形態を示す図であって、同図（ａ）は外観斜視図、同図（ｂ）は側面図、同図（ｃ）は断面図であり、１は筐体、１ａは開口、２は表示画面、３は取付部、４はスタンド、５は回転軸、６はピン穴、７はピン、８は表示パネル、８ａは表示面、９はタッチパネル、１０は支持部材である。 FIG. 1 is a view showing an embodiment of a display device provided with a touch panel according to the present invention. FIG. 1 (a) is an external perspective view, FIG. 1 (b) is a side view, and FIG. 1 is a housing, 1a is an opening, 2 is a display screen, 3 is a mounting portion, 4 is a stand, 5 is a rotating shaft, 6 is a pin hole, 7 is a pin, 8 is a display panel, 8a is a display surface, 9 is a touch panel and 10 is a support member.

同図において、箱型の筐体１の前面に矩形状の開口１ａが形成されており、この開口１ａに表示画面２が設けられている。この表示画面２に、図示しないが、操作ボタンやメッセージなどのタッチ操作で割り当てられた機能を実行する部材，エリア（以下、タッチ操作部材という）が表示され、かかるタッチ操作部材を指先やペン先、あるいはペン型の入力デバイスなどの指示手段でタッチ操作することにより、この実施形態である表示装置を利用した装置（例えば、パソコンや携帯端末，ＡＴＭ，券売機など）を動作させることができる。 In the figure, a rectangular opening 1a is formed on the front surface of a box-shaped housing 1, and a display screen 2 is provided in the opening 1a. Although not shown, the display screen 2 displays a member and an area (hereinafter referred to as a touch operation member) for executing a function assigned by a touch operation such as an operation button or a message. Alternatively, by performing a touch operation with an instruction means such as a pen-type input device, a device (for example, a personal computer, a portable terminal, an ATM, a ticket machine, etc.) using the display device according to this embodiment can be operated.

この筐体１の開口１ａとは反対側の背面側には、取付部３が一体に設けられており、この取付部３が回転軸５を介してスタンド４に取り付けられている。この取付部３は、従って、筐体１は、スタンド４に対して、この回転軸５を中心に回動可能であり、筐体１をこのように回動させることにより、表示画面２の向きを変えることができる。 An attachment portion 3 is integrally provided on the back side opposite to the opening 1 a of the housing 1, and the attachment portion 3 is attached to the stand 4 via the rotation shaft 5. Accordingly, the mounting portion 3 can rotate the casing 1 around the rotation shaft 5 with respect to the stand 4, and the orientation of the display screen 2 can be determined by rotating the casing 1 in this way. Can be changed.

表示画面２の向きを連続的に変えることができるようにしてもよいが、ここでは、段階的に変化できるようにしている。このために、図１（ｂ）に示すように、取付部３の側面部に、回転軸５を中心として複数のピン穴６が設けられており、これらピン穴６の配列線上の一点に対向して、このピン穴６に嵌り込むピン７がスタンド４に押し込み可能に設けられている。筐体１を回転軸５を中心に回動させ、表示画面２を所定の向きにすると、ピン７がこれに近いピン穴６に嵌め込むことができ、表示画面２はほぼこの所定の向きで安定化する。 Although the orientation of the display screen 2 may be changed continuously, it can be changed stepwise here. For this purpose, as shown in FIG. 1 (b), a plurality of pin holes 6 are provided on the side surface of the mounting portion 3 around the rotating shaft 5, and one point on the array line of these pin holes 6 is opposed. A pin 7 fitted into the pin hole 6 is provided so as to be pushed into the stand 4. When the housing 1 is rotated about the rotation shaft 5 and the display screen 2 is set in a predetermined direction, the pin 7 can be fitted into the pin hole 6 close thereto, and the display screen 2 is almost in this predetermined direction. Stabilize.

このように、ピン穴６とピン７とは、表示画面の向き（角度）を調整手段を構成しており、ピン穴６の個数分だけ、表示画面２の向きを変えることができる。 Thus, the pin hole 6 and the pin 7 constitute a means for adjusting the orientation (angle) of the display screen, and the orientation of the display screen 2 can be changed by the number of the pin holes 6.

この筐体１内では、図１（ｃ）に示すように、表示手段としての表示パネル８が支持部材１０によって支持されて取り付けられており、筐体１の開口１ａ側に、表示画面２として、この表示パネル８の映像を表示する表示面８ａが、その全体を覆うようにして設けられたタッチパネル９とともに、配置されている。 In the housing 1, as shown in FIG. 1C, a display panel 8 as a display unit is supported and attached by a support member 10, and the display screen 2 is provided on the opening 1 a side of the housing 1. A display surface 8a for displaying an image of the display panel 8 is arranged together with a touch panel 9 provided so as to cover the whole.

図２は図１における筐体１内の表示手段の具体例を概略的に示す図であって、同図（ａ）は表示パネル８として液晶パネルやブラウン管，プラズマ表示パネルなどの場合であり、同図（ｂ）は液晶プロジェクタなどのプロジェクタの場合である。そして、これらの図面において、１１は支持部材、１２は映出装置、１３はミラー、１４はスクリーン、１５は支持部材であり、図１に対応する部分には同一符号を付けて重複する説明を省略する。 FIG. 2 is a diagram schematically showing a specific example of the display means in the housing 1 in FIG. 1. FIG. 2A shows a case where a liquid crystal panel, a cathode ray tube, a plasma display panel, etc. are used as the display panel 8. FIG. 5B shows the case of a projector such as a liquid crystal projector. In these drawings, 11 is a support member, 12 is a projection device, 13 is a mirror, 14 is a screen, and 15 is a support member. Omitted.

図２（ａ）において、筐体１内では、上記のように、表示パネル８が支持部材１０によって支持されており、タッチパネル９が支持部材１１によって表示パネル８に支持されている。 2A, in the housing 1, the display panel 8 is supported by the support member 10 and the touch panel 9 is supported by the display panel 8 by the support member 11 as described above.

タッチパネル９は、表示面８ａ全体を覆う透明な膜を設けた構成をなしており、ユーザが指先などでタッチしたことを検知して（タッチ検知）、そのタッチ位置を検出する（位置検出）ものであるが、さらに、この具体例では、このタッチしたときの圧力を検出する（圧力検出の）機能も備えている。この圧力検出の機能を持たせる方法としては、次の表１に示すように、３つの方法がある。

The touch panel 9 has a configuration in which a transparent film covering the entire display surface 8a is provided, and detects that the user has touched with a fingertip (touch detection) and detects the touch position (position detection). However, this specific example also has a function of detecting the pressure when touched (for pressure detection). As a method of providing this pressure detection function, there are three methods as shown in Table 1 below.

表１において、例１は、タッチパネル９にタッチ検知とこれによるタッチ位置の位置検出とタッチ位置での圧力検出との機能を持たせるものであり、支持部材１０，１１には、その本来の表示パネル８の支持、タッチパネル９の支持の機能のみを持たせるものである。例２は、表示パネル８を支持する支持部材１０に、圧力センサを設けて、圧力検出の機能も持たせるものであり、タッチパネル９及び支持部材１１は本来の機能のみを持つ。例３は、タッチパネル９を支持する支持部材１１に、圧力センサを設けて、圧力検出の機能も持たせるものであり、タッチパネル９及び支持部材１０は本来の機能のみを持つ。 In Table 1, Example 1 is an example in which the touch panel 9 is provided with functions of touch detection, position detection of the touch position, and pressure detection at the touch position. Only the functions of supporting the panel 8 and the touch panel 9 are provided. In Example 2, a pressure sensor is provided on the support member 10 that supports the display panel 8 to provide a pressure detection function, and the touch panel 9 and the support member 11 have only original functions. In Example 3, a pressure sensor is provided on the support member 11 that supports the touch panel 9 to provide a pressure detection function, and the touch panel 9 and the support member 10 have only original functions.

図２（ｂ）に示す具体例では、筐体１内に、映像を発生する液晶パネルやブラウン管などからなる映出装置１２とミラー１３とスクリーン１４とからなるプロジェクタが設けられており、このスクリーン１４の外側にこれと一体にタッチパネル９が設けられている。これらスクリーン１４とタッチパネル９とは、支持部材１５でもって、筐体１の開口１ａに支持されている。 In the specific example shown in FIG. 2 (b), a projector 1 comprising a projection device 12 comprising a liquid crystal panel, a cathode ray tube, etc., a mirror 13 and a screen 14 are provided in the housing 1, and this screen. A touch panel 9 is integrally provided on the outside of 14. The screen 14 and the touch panel 9 are supported by the opening 1 a of the housing 1 with a support member 15.

映出装置１２には、図示しない投写レンズが設けられており、映出装置１２からの映像はミラー１３を介してスクリーン１４に投写されるが、投写レンズにより、スクリーン１４に投写される映像は拡大されている。なお、映出装置１２が直接スクリーン１４に対向して設けられる場合には、ミラー１３を省くことができる。 The projection device 12 is provided with a projection lens (not shown), and the image from the projection device 12 is projected onto the screen 14 via the mirror 13, but the image projected onto the screen 14 by the projection lens is It has been expanded. When the projection device 12 is provided directly opposite the screen 14, the mirror 13 can be omitted.

この具体例も、タッチパネル９にタッチしたときの圧力を検出する（圧力検出）の機能も備えている。この圧力検出の機能を持たせる方法としては、次の表２に示すように、２つの方法がある。

This specific example also has a function of detecting a pressure when the touch panel 9 is touched (pressure detection). As a method of providing this pressure detection function, there are two methods as shown in Table 2 below.

表２において、例４は、タッチパネル９にタッチ検知とこれによるタッチ位置の位置検出とタッチ位置での圧力検出との機能を持たせるものであり、支持部材１５には、その本来の表示パネル８を支持する機能のみを持たせるものである。例５は、支持部材１５に、圧力センサを設けて、圧力検出の機能も持たせるものであり、タッチパネル９は本来の機能のみを持つ。 In Table 2, Example 4 is an example in which the touch panel 9 has functions of touch detection, position detection of the touch position, and pressure detection at the touch position, and the support member 15 has its original display panel 8. It has only the function to support In Example 5, a pressure sensor is provided on the support member 15 to provide a pressure detection function, and the touch panel 9 has only an original function.

なお、上記表１，２において、タッチ検知とはタッチパネル９に指先１６がタッチしたことを検知する従来のタッチパネルの機能をいう。 In Tables 1 and 2, the touch detection refers to a function of a conventional touch panel that detects that the fingertip 16 has touched the touch panel 9.

但し、上記いずれの例においても、タッチパネル９で指先１６のタッチ位置が検出されたとき、指先１６がタッチパネル９にタッチされた（即ち、Ｐ≧Ｐ１になった）と判定するようにしてもよい。 However, in any of the above examples, when the touch position of the fingertip 16 is detected on the touch panel 9, it may be determined that the fingertip 16 is touched on the touch panel 9 (that is, P ≧ P1). .

図３はタッチパネル９に対する指先の状態を示す図であり、同図（ａ）は指先１６がタッチパネル９に触れていない状態、同図（ｂ），（ｃ）はタッチパネル９に指先１６が触れた状態を夫々示している。そして、同図（ｂ）は指先１６がタッチパネル９に軽く触った状態であり、同図（ｃ）は指先１６がタッチパネル９に、それを強く押し込むようにして、触った状態である。 FIG. 3 is a diagram showing the state of the fingertip with respect to the touch panel 9. FIG. 3A shows a state where the fingertip 16 is not touching the touch panel 9, and FIGS. 3B and 3C show the fingertip 16 touching the touch panel 9. Each state is shown. FIG. 5B shows a state where the fingertip 16 has touched the touch panel 9 lightly, and FIG. 4C shows a state where the fingertip 16 has touched the touch panel 9 by pressing it strongly.

また、図４は上記の圧力センサが検出する圧力に対する図３に示す指先１６の状態の判定（この判定は、後述する制御部によってなされる）を示す図であり、横軸にタッチパネル９にかかる圧力（タッチパネル９を押す力：以下、押圧力という）Ｐを示し、縦軸に押圧力Ｐに対する判定結果を示す。 FIG. 4 is a diagram showing determination of the state of the fingertip 16 shown in FIG. 3 with respect to the pressure detected by the pressure sensor (this determination is made by a control unit described later), and the horizontal axis is applied to the touch panel 9. The pressure (force for pressing the touch panel 9: hereinafter referred to as a pressing force) P is shown, and the determination result for the pressing force P is shown on the vertical axis.

図４において、予め弱い圧力Ｐ１の値と強い圧力Ｐ２の値とが設定されており、タッチパネル９への押圧力ＰがＰ＜Ｐ１のとき、タッチパネル９への押圧力無し（反応無し）とし、Ｐ１≦Ｐ＜Ｐ２のとき、タッチパネル９にタッチされたと判定し（上記表１，２での「タッチ検知」）、そのタッチ位置の検出が行なわれる。また、押圧力ＰがＰ２≦Ｐのときには、タッチパネル９には、これが押し込まれるような強い押圧力が掛かったことになり、タッチパネル９が押し込まれたと判定する（上記表１，２での「圧力検知」）。 In FIG. 4, when the value of the weak pressure P1 and the value of the strong pressure P2 are set in advance, and the pressing force P to the touch panel 9 is P <P1, it is assumed that there is no pressing force to the touch panel 9 (no reaction), When P1 ≦ P <P2, it is determined that the touch panel 9 is touched (“touch detection” in Tables 1 and 2 above), and the touch position is detected. Further, when the pressing force P is P2 ≦ P, it is determined that a strong pressing force is applied to the touch panel 9, and the touch panel 9 is determined to be pressed (“Pressure” in Tables 1 and 2 above). Detection").

図３（ａ）に示す状態は、図４でのＰ＜Ｐ１の状態を示すものであって、この状態では、タッチパネル９にタッチされていないと判定される。また、図３（ｂ）は指先１６がタッチパネル９にタッチした状態を示すものであるが、このとき、０≦Ｐ＜Ｐ１であれば、図４から、タッチパネル９にタッチされていないと判定するし、Ｐ１≦Ｐ＜Ｐ２であれば、タッチパネル９にタッチされただけで押し込まれてはいないと判定される。これによって誤動作を軽減することができる。図３（ｃ）は指先１６でタッチパネル９を押し込むようにタッチした状態を示すものであり、図４において、Ｐ２≦Ｐの状態である。このときには、タッチパネル９が押し込まれると判定される。 The state shown in FIG. 3A shows the state of P <P1 in FIG. 4, and in this state, it is determined that the touch panel 9 is not touched. FIG. 3B shows a state where the fingertip 16 has touched the touch panel 9. At this time, if 0 ≦ P <P 1, it is determined from FIG. 4 that the touch panel 9 is not touched. If P1 ≦ P <P2, it is determined that the touch panel 9 has only been touched and has not been pressed. This can reduce malfunctions. FIG. 3C shows a state in which the touch panel 9 is touched with the fingertip 16 and is in a state of P2 ≦ P in FIG. At this time, it is determined that the touch panel 9 is pushed.

以上のように、この実施形態では、タッチパネル９の２段階検知を可能とするものである。この２段階検知によれば、キーボードの操作性に近い操作感覚を使用者に与えることができる。例えば、使用者は、軽いタッチ（Ｐ１≦Ｐ＜Ｐ２）でキー位置を確認して、このキーを強く押し込む（Ｐ２≦Ｐ）ようなキーボードの操作感覚を得ることができる。従って、この２段階検知によれば、今までのタッチパネルでは得られなかった確かな操作感覚を使用者に与えることができる。そして、この２段階検知を採用したこの実施形態によれば、表示画面をタッチすることで特定の機能を実行させることができるとともに、後述するようなドラッグ・アンド・ドロップと同様な操作をタッチ操作で実現することができる。しかも、この実施形態によれば、タッチした指を離すことなく、タッチの強さで特定の「機能の実行」と「ドラッグ・アンド・ドロップ」とを区別することができる。従って、従来例のようなタッチのタイミングで同様な機能を実行するものと比べて誤操作が起こりにくく、快適な操作感覚を提供することができる。 As described above, in this embodiment, two-step detection of the touch panel 9 is possible. According to this two-step detection, an operation feeling close to the operability of the keyboard can be given to the user. For example, the user can confirm the key position with a light touch (P1 ≦ P <P2), and can obtain a feeling of operating the keyboard such that the key is strongly pressed (P2 ≦ P). Therefore, according to this two-step detection, it is possible to give the user a certain operational feeling that has not been obtained with conventional touch panels. And according to this embodiment which employ | adopted this two-step detection, while being able to perform a specific function by touching a display screen, operation similar to drag and drop which is mentioned later is touch operation. Can be realized. Moreover, according to this embodiment, it is possible to distinguish between “execution of a specific function” and “drag and drop” by the strength of the touch without releasing the touched finger. Therefore, it is less likely that an erroneous operation occurs compared to a case where a similar function is executed at the touch timing as in the conventional example, and a comfortable operation feeling can be provided.

ここでは、指先を例にとって説明するが、指先のほか、ペンなどの棒状の部材やペン型の入力デバイスなどでも、本発明のタッチパネルを操作することができる。 Here, a fingertip will be described as an example, but the touch panel of the present invention can be operated with a finger-like member, a pen-shaped member such as a pen, or a pen-type input device.

なお、上記の圧力Ｐ１（＞０）は、例えば、振動などによってタッチパネル９に不当な圧力が掛かった場合、タッチパネル９がタッチされたという誤判定を防止するために設定されたものである。 The pressure P1 (> 0) is set to prevent an erroneous determination that the touch panel 9 is touched when an inappropriate pressure is applied to the touch panel 9 due to vibration or the like.

図５はこの実施形態での回路構成の一具体例の要部を示すブロック図であって、同図（ａ）は上記表１，２での例１，４に対するものであり、同図（ｂ）は上記表１，２での例２，３，５に対応するものである。そして、これらの図面において、１７は制御部、１８はスピーカ、１９は記憶部であり、図１，図２に対応する部分には同一符号を付けて重複する説明を省略する。 FIG. 5 is a block diagram showing an essential part of a specific example of the circuit configuration in this embodiment. FIG. 5 (a) is for Examples 1 and 4 in Tables 1 and 2, and FIG. b) corresponds to Examples 2, 3, and 5 in Tables 1 and 2 above. In these drawings, reference numeral 17 denotes a control unit, 18 denotes a speaker, and 19 denotes a storage unit. Parts corresponding to those in FIGS.

図５（ａ）に示す回路構成では、タッチパネル９がタッチセンサと圧力センサとを備えており、この圧力センサの検出圧力（押圧力）Ｐが制御部１７に供給される。制御部１７は、この検出圧力Ｐを基に、図４で説明した判定を行ない、その判定結果に応じて、記憶部１９に記憶されているデータを基に、後述するように、表示パネル８や映出装置１２を制御し、また、スピーカ１８で所定の音声再生を行なわせる。 In the circuit configuration shown in FIG. 5A, the touch panel 9 includes a touch sensor and a pressure sensor, and a detected pressure (pressing force) P of the pressure sensor is supplied to the control unit 17. The control unit 17 performs the determination described with reference to FIG. 4 based on the detected pressure P, and, based on the determination result, the display panel 8 as described later based on the data stored in the storage unit 19. The projector 12 is controlled, and a predetermined sound reproduction is performed by the speaker 18.

図５（ｂ）に示す回路構成の場合でも、支持部材１０，１１，１５に設けられた圧力センサの検出圧力Ｐに応じて、制御部１７が同様の機能制御を行なう。 Even in the case of the circuit configuration shown in FIG. 5B, the control unit 17 performs the same function control according to the detected pressure P of the pressure sensor provided on the support members 10, 11, and 15.

次に、圧力Ｐに対する制御部１７の動作について説明する。なお、以下では、図４に示すように、この圧力Ｐが０≦Ｐ＜Ｐ１であるときの制御部１７による処理をＡ、Ｐ１≦Ｐ＜Ｐ２であるときの制御部１７による処理をＢ、Ｐ２≦Ｐであるときの制御部１７による処理をＣとする。これらの処理については後述するが、処理Ａは、当然のことながら、タッチパネル９へのタッチ操作もなされていないときの処理である。 Next, operation | movement of the control part 17 with respect to the pressure P is demonstrated. In the following, as shown in FIG. 4, the process by the control unit 17 when the pressure P is 0 ≦ P <P1, and the process by the control unit 17 when P1 ≦ P <P2 is B, Let C be the process performed by the control unit 17 when P2 ≦ P. Although these processes will be described later, as a matter of course, the process A is a process when the touch operation on the touch panel 9 is not performed.

ここで、図６により、図５（ａ），（ｂ）における記憶部１９について説明する。 Here, the storage unit 19 in FIGS. 5A and 5B will be described with reference to FIG.

表示部８，１２での表示画面２では、アイコンや操作ボタンなどのタッチ操作部材が表示されるが、制御部１７が指先１６（図３）のタッチ位置を検出したとき、このタッチ位置がタッチ操作部材のエリア内であるか否かを判定するためのデータやタッチ操作部材毎の機能を決めるデータなどが記憶部１９に記憶されている。 Touch operation members such as icons and operation buttons are displayed on the display screen 2 in the display units 8 and 12. When the control unit 17 detects the touch position of the fingertip 16 (FIG. 3), the touch position is touched. Data for determining whether or not the area is within the area of the operation member, data for determining a function for each touch operation member, and the like are stored in the storage unit 19.

図６（ａ）はタッチ位置がタッチ操作部材のエリア内であるか否かを判定するためのデータを表わすデータベースの一具体例を示すものであって、タッチパネル９上の位置を座標（ｘ_i，ｙ_j）で表わし（但し、ｉ，ｊ＝１，２，……）、各タッチ操作部材をオブジェクト（object）１，２，３，……として表わしている。この具体例によると、タッチパネル９上の位置（ｘ_i，ｙ₁），（ｘ_i，ｙ₂），……には、オブジェクト３が配置されていることを示している。なお、オブジェクトが複数の座標位置に跨がるのは、オブジェクトが、例えば、アイコンのように、ある面積のエリアを有するからである。この場合、このデータベースでのオブジェクトに関するデータは、例えば、このオブジェクトに固有に割り当てられたＩＤ（識別符号）である。 FIG. 6A shows a specific example of a database representing data for determining whether or not the touch position is within the area of the touch operation member. The position on the touch panel 9 is represented by coordinates (xi _). , Y _j ) (where i, j = 1, 2,...), And each touch operation member is represented as an object (1, 2, 3,...). According to this specific example, it is indicated that the object 3 is arranged at the positions (x _i , y ₁ ), (x _i , y ₂ ),... On the touch panel 9. Note that the object straddles a plurality of coordinate positions because the object has an area of a certain area such as an icon. In this case, the data regarding the object in this database is, for example, an ID (identification code) uniquely assigned to this object.

また、図６（ａ）に示すデータベースは、タッチパネル９上の位置とオブジェクトの関係を示すものであるが、さらに、記憶部１９には、図示しないが、各オブジェクト毎に、それに関する機能を表わすデータベース（以下、機能データベースという）が格納されている。 Further, the database shown in FIG. 6A shows the relationship between the position on the touch panel 9 and the object. Further, although not shown in the storage unit 19, each object represents a function related to it. A database (hereinafter referred to as function database) is stored.

制御部１７は、上記のようにしてタッチパネル９での指先１６のタッチ位置を検出すると、このタッチ位置を図６（ａ）に示すデータベースと比較し、このタッチ位置がオブジェクトのエリア内にあるか否か、また、ある場合には、いずれのオブジェクトのエリア内かを判定し、例えば、オブジェクト３のエリア内にあるとすると、現在このオブジェクト３がタッチされている状態と判定し、機能データベースの中からこのオブジェクト３の検出される圧力Ｐに応じた機能データを読み取り、表示部８，１２（図５）をこの機能データに応じて制御する。 When the control unit 17 detects the touch position of the fingertip 16 on the touch panel 9 as described above, the control unit 17 compares the touch position with the database shown in FIG. 6A to determine whether the touch position is within the object area. If not, and if there is, in which area of the object, for example, if it is in the area of the object 3, it is determined that the object 3 is currently touched, and the function database The function data corresponding to the pressure P detected by the object 3 is read from the inside, and the display units 8 and 12 (FIG. 5) are controlled according to the function data.

また、図６（ｂ）はタッチパネル９でのタッチ操作部材（オブジェクト）のエリアとタッチパネル９の位置（ｘ_i，ｙ_j）とを関連付けたデータベースであり、タッチ操作部材のエリアをエリア（are）１，２，３，……で表わしたものである。これ以外については、図６（ａ）に示したデータベースと同様である。 FIG. 6B is a database in which the area of the touch operation member (object) on the touch panel 9 and the position (x _i , y _j ) of the touch panel 9 are associated with each other. 1, 2, 3,... Other than this, it is the same as the database shown in FIG.

以下、制御部１７のかかる機能制御による本発明の情報処理方法の実施形態について説明するが、かかる実施形態は、表示画面２に表示されるアイコンなどのオブジェクトをドラッグ・アンド・ドロップする機能を持たせたものである。 Hereinafter, an embodiment of the information processing method of the present invention by the function control of the control unit 17 will be described. However, the embodiment has a function of dragging and dropping an object such as an icon displayed on the display screen 2. It is

図７は制御部１７のかかる機能制御による情報処理方法の第１の実施形態を示すフローチャートである。図８はこの実施形態を実行中に表示画面２に表示される画面の一具体例を示すものであって、２０はオブジェクト（ここでは、アイコンとするが、これに限るものではない）である。図９はこの実施形態での図８に対する動作を行なわせるための圧力Ｐの変化を示す図である。図１０はこの実施形態を実行中に表示画面２に表示される画面の他の具体例を示すものであって、図８に対応する部分には同一符号をつけている。図１１はこの具体例での図１０に対する動作を行なわせるための圧力Ｐの変化を示す図である。 FIG. 7 is a flowchart showing a first embodiment of the information processing method by the function control of the control unit 17. FIG. 8 shows a specific example of a screen displayed on the display screen 2 during execution of this embodiment. Reference numeral 20 denotes an object (here, an icon, but not limited thereto). . FIG. 9 is a diagram showing a change in the pressure P for performing the operation with respect to FIG. 8 in this embodiment. FIG. 10 shows another specific example of a screen displayed on the display screen 2 during execution of this embodiment, and parts corresponding to those in FIG. FIG. 11 is a diagram showing a change in the pressure P for performing the operation with respect to FIG. 10 in this specific example.

図７において、図示しない電源がオンとされると、制御部１７は処理Ａを行なって装置を動作開始状態にする（ステップ１００）。そして、まず、電源をオフするなどして動作の終了条件が設定されたか否か判定し（ステップ１０１）、設定されていない場合には、図５での圧力センサからその検出圧力Ｐを取り込み、Ｐ≧Ｐ１かどうか判定する（ステップ１０２）。図３（ａ）に示すような状態にあって、Ｐ＜Ｐ１のときには、タッチパネル９へのタッチ操作もなされていないとして、ステップ１００に戻り、タッチ操作がなされるまで、ステップ１００〜１０２の一連の動作が繰り返され、その間処理Ａが実行される。このときの表示画面２（図１）に表示される画面を図８，図１０での画面Ｖ１とする。これら画面Ｖ１では、説明を簡単にするために、１つのアイコン２０が表示されているものとする。 In FIG. 7, when a power supply (not shown) is turned on, the control unit 17 performs the process A to put the apparatus into an operation start state (step 100). First, it is determined whether or not an operation end condition is set by turning off the power (step 101). If not set, the detected pressure P is taken from the pressure sensor in FIG. It is determined whether P ≧ P1 (step 102). In the state shown in FIG. 3A, when P <P1, it is determined that the touch operation on the touch panel 9 has not been performed, the process returns to step 100, and a series of steps 100 to 102 is performed until the touch operation is performed. These operations are repeated, and the process A is executed during that time. A screen displayed on the display screen 2 (FIG. 1) at this time is a screen V1 in FIGS. In these screens V1, it is assumed that one icon 20 is displayed for easy explanation.

いま、タッチ操作として、一瞬にして図３（ｃ）に示すようなタッチパネル９へのタッチ操作がなされると、図９に示すように、タッチパネル９へのタッチ操作によってＰ≧Ｐ２まで圧力が変化するが、制御部１７は、まず、Ｐ≧Ｐ１と判定し（ステップ１０２）、次いで、Ｐ≧Ｐ２と判定する（ステップ１０３）動作を瞬間的に行なう。以下、かかる操作を押し込み操作という。 Now, as a touch operation, when a touch operation on the touch panel 9 as shown in FIG. 3C is performed instantaneously, the pressure changes to P ≧ P2 by the touch operation on the touch panel 9 as shown in FIG. However, the control unit 17 first determines that P ≧ P1 (step 102), and then determines that P ≧ P2 (step 103). Hereinafter, such an operation is referred to as a push-in operation.

そして、制御部１７は、タッチ位置を検出して、図６で説明したように、このタッチ位置が機能するアイコンのエリア内にあるか否か判定し（ステップ１０４）、図８に示す画面Ｖ１内のアイコン２０以外のエリアがタッチされているときには、ステップ１００に戻り、タッチ状態に変化がない限り、ステップ１００〜１０４の一連の動作を繰り返す。しかし、タッチ位置が図８に示す画面Ｖ１内のアイコン２０のエリア内である場合には（ステップ１０４）、タッチされたアイコン２０の色が変わったり、振動したりした図８の画面Ｖ２に移るが、この場合、Ｐ≧Ｐ２であることから、この画面Ｖ２も一瞬であって、アイコン２０の色をさらに変えたり、サイズを変えたり、振動をさらに激しくするなどした図８の画面Ｖ３となり、これとともに、このアイコン２０によって決められる機能が実行される（ステップ１０５）。そして、指先１６をタッチパネル９から離すなどしてＰ＜Ｐ２の状態となると、制御部１７はアイコン２０の機能を終了させ（ステップ１０７）、ステップ１００に戻ってステップ１００〜１０２の動作を繰り返し、図８の画面Ｖ４が表示されて待機する。 Then, the control unit 17 detects the touch position and determines whether or not this touch position is within the area of the functioning icon as described with reference to FIG. 6 (step 104), and the screen V1 shown in FIG. When an area other than the icon 20 is touched, the process returns to step 100, and the series of operations of steps 100 to 104 is repeated unless the touch state is changed. However, when the touch position is within the area of the icon 20 in the screen V1 shown in FIG. 8 (step 104), the screen moves to the screen V2 in FIG. 8 where the color of the touched icon 20 has changed or vibrated. However, in this case, since P ≧ P2, this screen V2 is also a moment, and the screen V3 of FIG. 8 is obtained in which the color of the icon 20 is further changed, the size is changed, the vibration is further increased, and the like. At the same time, a function determined by the icon 20 is executed (step 105). Then, when the fingertip 16 is released from the touch panel 9 and the state of P <P2 is reached, the control unit 17 ends the function of the icon 20 (step 107), returns to step 100, repeats the operations of steps 100 to 102, The screen V4 of FIG. 8 is displayed and waits.

この第１の実施形態によれば、タッチされたアイコン２０の色が変わったり、振動したりするので、使用者はタッチされた位置を明確に把握することができる。そして、このタッチされたアイコン２０を強く押し込む操作で、さらにアイコン２０を変化させるので、指の動作に連動して視覚的に押し込み操作を自覚させることができる。これにより、キーボードのようなタッチ感覚と押し込み操作の２段階操作を実現して、使用者に確かな操作感覚を提供することができる。 According to the first embodiment, since the color of the touched icon 20 changes or vibrates, the user can clearly grasp the touched position. Since the icon 20 is further changed by the operation of strongly pressing the touched icon 20, it is possible to visually recognize the pressing operation in conjunction with the operation of the finger. Accordingly, a two-step operation such as a touch feeling like a keyboard and a push-in operation can be realized, and a reliable operation feeling can be provided to the user.

以上はＰ≧Ｐ２の場合であったが、Ｐ２＞Ｐ≧Ｐ１の場合には（ステップ１０２，１０３）、制御部１７（図５）はタッチセンサの出力から指先１６のタッチ位置を検知し、これと記憶部１９（図５）のデータとを比較することにより、このタッチ位置がアイコン２０のエリア内かどうか判定する。このエリア内である場合には、このアイコン２０が移動可能であるかどうかを判定し、移動可能である場合には、制御部１７はタッチ位置が移動可能なアイコン２０のエリア内にあると判定し、アイコン２０が移動可能であるとともに、移動を開始できることを示すように表示した図１０に示す画面Ｖ２を表示画面２に表示させる（ステップ１０８）。かかる移動可能であること、移動を開始できることを示す表示方法としては、例えば、アイコン２０の表示色を変化させたり、振動させたりするなどの方法がある。また、サイズを変えるようにしてもよいし、これらを組み合わせてもよい。 The above is the case of P ≧ P2, but when P2> P ≧ P1 (steps 102 and 103), the control unit 17 (FIG. 5) detects the touch position of the fingertip 16 from the output of the touch sensor, By comparing this with the data in the storage unit 19 (FIG. 5), it is determined whether or not the touch position is within the area of the icon 20. If it is within this area, it is determined whether or not the icon 20 is movable. If it is movable, the control unit 17 determines that the touch position is within the movable icon 20 area. Then, the screen V2 shown in FIG. 10 is displayed on the display screen 2 so as to indicate that the icon 20 can be moved and the movement can be started (step 108). Examples of a display method indicating that it is possible to move and that movement can be started include a method of changing the display color of the icon 20 or vibrating the icon 20. Moreover, you may make it change a size and may combine these.

なお、そして、図示しないが、かかる状態で指先１６をタッチパネル９から離してＰ＜Ｐ１の状態にすると、もとのステップ１００の状態に戻る。 Although not shown, when the fingertip 16 is moved away from the touch panel 9 and P <P1 is set in this state, the state returns to the original step 100.

かかるＰ１≦Ｐ＜Ｐ２の状態でアイコン２０のエリア内にある指先１６（即ち、タッチ位置）を移動させると（ステップ１０９）、位置（ｘ₀，ｙ₀）のアイコン２０がこの移動する指先１６に引かれて移動するドラッグが行なわれる（ステップ１１０）。このとき、この移動を表わす図１０の画面Ｖ５が表示画面２に表示される。図１１に示すように、タッチが行なわれている限り、即ち、Ｐ≧Ｐ１である限り（ステップ１１１）、このアイコン２０のドラッグが継続する。 When the fingertip 16 (that is, the touch position) within the area of the icon 20 is moved in the state of P1 ≦ P <P2 (step 109), the icon 20 at the position (x ₀ , y ₀ ) is moved to the fingertip 16 that moves. A drag that is dragged to move is performed (step 110). At this time, the screen V5 of FIG. As shown in FIG. 11, as long as the touch is performed, that is, as long as P ≧ P1 (step 111), the dragging of the icon 20 continues.

その後、所定の位置で指先１６をタッチパネル９から離し、図１１に示すように、Ｐ＜Ｐ１の状態とすると（ステップ１１１）、そのときの位置（ｘ₁，ｙ₁）にアイコン２０の位置が決定し、ドラッグが終了する（ステップ１１２）。そして、アイコン２０がこの決定した位置にもとの表示状態で位置付けられた図１０に示す画面Ｖ６が表示画面２に表示された状態となり、ステップ１００に戻る。 After that, when the fingertip 16 is moved away from the touch panel 9 at a predetermined position and the state of P <P1 is set as shown in FIG. 11 (step 111), the position of the icon 20 is at the position (x ₁ , y ₁ ) at that time. Determination is made and the drag ends (step 112). Then, the screen V6 shown in FIG. 10 in which the icon 20 is positioned in the original display state at the determined position is displayed on the display screen 2, and the process returns to step 100.

このようにして、この第１の実施形態では、簡単なタッチ操作により、画面に表示されるアイコンなどの移動可能なオプジェクトを所定の位置に移すことができる。また、勿論、Ｐ≧Ｐ２とすることにより、このオブジェクトの機能も実行させることができる。 Thus, in the first embodiment, movable objects such as icons displayed on the screen can be moved to a predetermined position by a simple touch operation. Of course, by setting P ≧ P2, the function of this object can also be executed.

また、この第１の実施形態では、一旦ドラッグ動作に移行してオブジェクトの移動が開始されると、指を離さない限りドラッグ動作を継続するようにしている。従って、ドラッグ動作の途中でオブジェクトをＰ≧Ｐ２としても、ドラッグ動作中のオブジェクトに割り当てられた機能を実行することがないので、移動中にオブジェクトの機能を実行させてしまう誤操作がなく、使用者は安心してドラッグ動作を行なうことができる。 In the first embodiment, once the transition to the drag operation is started and the movement of the object is started, the drag operation is continued unless the finger is released. Accordingly, even if the object is set to P ≧ P2 in the middle of the drag operation, the function assigned to the object being dragged is not executed, so there is no erroneous operation that causes the object function to be executed during movement, and the user Can perform drag operations with peace of mind.

従って、この第１の実施形態によれば、指の押圧力を２段階に検知することで、オブジェクトの機能の実行とドラッグ操作を容易に、かつ間違えることなく、区別して操作することができる。 Therefore, according to the first embodiment, by detecting the finger pressing force in two stages, it is possible to easily perform the function execution of the object and the drag operation without making a mistake.

図１２は図５における制御部１７の機能制御による情報処理方法の第２の実施形態を示すフローチャートであって、この第２の実施形態も、上記の第１の実施形態と同様、表示画面２に表示されたアイコンなどのオブジェクトをドラッグ・アンド・ドロップする機能を持たせるものである。 FIG. 12 is a flowchart showing a second embodiment of the information processing method based on the function control of the control unit 17 in FIG. 5. This second embodiment is also the display screen 2 as in the first embodiment. A function of dragging and dropping an object such as an icon displayed on the screen is provided.

また、図１３はかかる第２の実施形態を実行中に表示画面２に表示される画面を示すものであって、図１２に対応する部分には同一符号を付けている。 FIG. 13 shows a screen displayed on the display screen 2 during execution of the second embodiment, and parts corresponding to those in FIG. 12 are given the same reference numerals.

さらに、図１４はこの具体例での動作を行なわせるための押圧力Ｐの変化を示す図であり、時間軸に沿って図１３に対応した画面番号Ｖ１〜Ｖ５を記載している。 Further, FIG. 14 is a diagram showing changes in the pressing force P for performing the operation in this specific example, and screen numbers V1 to V5 corresponding to FIG. 13 are described along the time axis.

図１２において、ステップ２００〜２０２，２１１は図７でのステップ１００〜１０２，１１３と同様であり、指先１６がタッチパネル９にタッチしていない状態であって、表示画面２には、図１３に示す画面Ｖ１が表示されている。この画面Ｖ１では、上記第１の実施形態と同様に、アイコン２０がこの表示画面２上の位置（ｘ₁，ｙ₁）に表示されているものとする。 12, steps 200 to 202 and 211 are the same as steps 100 to 102 and 113 in FIG. 7, and the fingertip 16 is not touching the touch panel 9. A screen V1 is displayed. In this screen V1, it is assumed that the icon 20 is displayed at a position (x ₁ , y ₁ ) on the display screen 2 as in the first embodiment.

かかる画面Ｖ１の表示状態で指先１６がアイコン２０の表示位置にタッチして、図１４に示すように、Ｐ１≦Ｐの押圧力Ｐが圧力センサで検知されたものとすると（ステップ２０２）、制御部１７（図５）はタッチセンサの出力から指先１６のタッチ位置を検知し、これと記憶部１９（図５）のデータとを比較することにより、このタッチ位置がアイコン２０のエリア内かどうか判定する（ステップ２０３）。このエリア内である場合には、制御部１７はタッチ位置が移動可能なアイコン２０のエリア内にあると判定し、図１３に示すように、アイコン２０が移動可能であることを示すように表示した画面Ｖ２を表示画面２に表示させる（ステップ２０４）。かかる移動可能であることを示す表示方法としては、例えば、アイコン２０の表示色を変化させたり、振動させたりするなどの方法がある。 When the fingertip 16 touches the display position of the icon 20 in the display state of the screen V1 and the pressing force P of P1 ≦ P is detected by the pressure sensor as shown in FIG. 14 (step 202), the control is performed. The unit 17 (FIG. 5) detects the touch position of the fingertip 16 from the output of the touch sensor, and compares this with the data in the storage unit 19 (FIG. 5) to determine whether this touch position is within the area of the icon 20 or not. Determination is made (step 203). If it is within this area, the control unit 17 determines that the touch position is within the area of the movable icon 20 and displays the icon 20 to indicate that the icon 20 is movable as shown in FIG. The completed screen V2 is displayed on the display screen 2 (step 204). Examples of the display method indicating that it is movable include a method of changing the display color of the icon 20 or vibrating the icon 20.

次いで、上記のようにタッチした状態でこのアイコン２０を押し込むようにすることにより（かかるタッチ位置を、以下、押し込み位置という）、図１４に示すように、Ｐ２≦Ｐの押圧力Ｐが圧力センサで検知されたものとすると（ステップ２０５）、制御部１７（図５）はタッチセンサの出力から指先１６の押し込み位置を検知し、これと記憶部１９（図５）のデータとを比較することにより、この押し込み位置がアイコン２０のエリア内かどうか判定する。このエリア内である場合には、制御部１７は、図１３に示すように、アイコン２０が移動開始可能であることを示すように表示した画面Ｖ３を表示画面２に表示させる（ステップ２０６）。かかる移動開始可能であることを示す表示方法としては、例えば、アイコン２０のサイズを大きくしたり、表示色を変化させたり、振動させたりするなどの方法がある。 Next, by pressing the icon 20 in the touched state as described above (this touch position is hereinafter referred to as a press position), as shown in FIG. 14, the pressing force P of P2 ≦ P is a pressure sensor. (Step 205), the control unit 17 (FIG. 5) detects the pushing position of the fingertip 16 from the output of the touch sensor, and compares this with the data in the storage unit 19 (FIG. 5). Thus, it is determined whether or not the pushing position is within the area of the icon 20. If it is within this area, the control unit 17 causes the display screen 2 to display a screen V3 displayed to indicate that the icon 20 can start moving, as shown in FIG. 13 (step 206). Examples of the display method indicating that the movement can be started include a method of increasing the size of the icon 20, changing the display color, or vibrating the icon 20.

そして、かかる画面Ｖ３の表示状態で指先１６によるアイコン２０の押し込みを解除して指先１６の押圧力Ｐを弱め、指先１６でタッチパネル９にタッチした状態で（このとき、図１４に示すように、Ｐ１≦Ｐ＜Ｐ２）指先１６を移動させると、これについてアイコン２０を移動（ドラッグ）させることができ、図１３に示すように、アイコン２０が指先１６について移動する画面Ｖ４が表示画面２に表示される（ステップ２０７）。このようなときのアイコン２０の表示方法としては、例えば、表示色をさらに変化させたり、サイズを変化させたりするなどの方法がある。ここでは、サイズが元に戻り、色がさらに変えられたものとする。 Then, in the display state of the screen V3, the pressing of the icon 20 by the fingertip 16 is released to weaken the pressing force P of the fingertip 16, and the touch panel 9 is touched with the fingertip 16 (at this time, as shown in FIG. P1 ≦ P <P2) When the fingertip 16 is moved, the icon 20 can be moved (dragged), and a screen V4 in which the icon 20 moves with respect to the fingertip 16 is displayed on the display screen 2 as shown in FIG. (Step 207). As a display method of the icon 20 in such a case, for example, there are methods such as further changing the display color or changing the size. Here, it is assumed that the size has returned to the original and the color has been further changed.

このようにして、Ｐ１≦Ｐ＜Ｐ２である限り（ステップ２０８，２０９）、指先１６でアイコン２０をドラッグさせることができるが、指先１６をタッチパネル９から離してＰ＜Ｐ１の状態とすることにより（ステップ２０８）、そのときの位置（ｘ₂，ｙ₂）にアイコン２０の位置が決定され（ドロップ）、ドラッグ・アンド・ドロップが終了する（ステップ２１０）。そして、アイコン２０がこの位置（ｘ₂，ｙ₂）にもとの表示状態で位置付けられた図１３に示す画面Ｖ５が表示画面２に表示された状態となり、ステップ２００に戻る。 In this way, as long as P1 ≦ P <P2 (steps 208 and 209), the icon 20 can be dragged with the fingertip 16, but by moving the fingertip 16 away from the touch panel 9 to a state of P <P1. (Step 208), the position of the icon 20 is determined at the position (x ₂ , y ₂ ) at that time (drop), and the drag and drop ends (step 210). Then, the screen V5 shown in FIG. 13 in which the icon 20 is positioned in the original display state at this position (x ₂ , y ₂ ) is displayed on the display screen 2, and the process returns to step 200.

このようにして、この第２の実施形態でも、簡単なタッチ操作により、画面に表示されるアイコンなどの移動可能なオプジェクトを所定の位置に移すことができる。特に、この第２の実施形態では、アイコン２０にタッチしてＰ１≦Ｐ＜Ｐ２の状態としても、アイコン２０を移動させることができない。Ｐ１≦Ｐ＜Ｐ２の状態から指先１６を押し込むようにしてＰ≧Ｐ２の状態とすることで、初めて、アイコン２０をドラッグの状態とすることができる。従って、図１４に示すように、画面Ｖ２と画面Ｖ３の間の時間があっても、ドラッグの状態とすることができない。このため、アイコン２０をタッチしても不用意にアイコン２０がずれてしまうことがないので、安心して操作することができる。特に、この第２の実施形態では、まず、目的のアイコン２０にタッチして内容を確認（アイコン２０の変化）し、それからドラッグ操作を決定することができるので、弱視の操作者などに有効である。 Thus, also in the second embodiment, movable objects such as icons displayed on the screen can be moved to a predetermined position by a simple touch operation. In particular, in the second embodiment, the icon 20 cannot be moved even if the icon 20 is touched and P1 ≦ P <P2. The icon 20 can be brought into the drag state for the first time by setting the state of P ≧ P2 by pushing the fingertip 16 from the state of P1 ≦ P <P2. Therefore, as shown in FIG. 14, even if there is a time between the screen V2 and the screen V3, it is not possible to enter the drag state. For this reason, even if the icon 20 is touched, the icon 20 is not inadvertently shifted, so that it can be operated with peace of mind. In particular, in the second embodiment, the user can first confirm the content by touching the target icon 20 (change of the icon 20), and then determine the drag operation. is there.

なお、この第２の実施形態では、説明を簡単にするために、ドラッグ・アンド・ドロップの操作を中心に説明している。勿論、アイコン２０に設定された機能を実行させるための押し込み操作と併用させてもよい。この場合、例えば、ステップ２０２において、Ｐ≧Ｐ１であるときには、Ｐ≧Ｐ２か否かの判定も行ない、Ｐ≧Ｐ２であるときには、図７でのステップ１０４〜１０７と同様の機能実行の動作を行なうようにしてもよい。 In the second embodiment, the drag and drop operation is mainly described in order to simplify the description. Of course, you may use together with pushing operation for performing the function set to the icon 20. FIG. In this case, for example, when P ≧ P1 in step 202, it is also determined whether or not P ≧ P2, and when P ≧ P2, the same function execution operation as in steps 104 to 107 in FIG. 7 is performed. You may make it perform.

この場合、上記ステップ２０５との混同を避けるために、ステップ２００〜２０２の待機中に、Ｐ＜Ｐ１の状態からＰ≧Ｐ２となるアイコン２０の押し込み操作が短時間に行なわれた場合には、アイコン２０のドラッグ動作を許可とは判定せず、このアイコン２０の機能を実行するようにするとよい。または、Ｐ≧Ｐ２となるアイコン２０の押し込み操作の後、短時間のうちに指を離したとき、即ち、Ｐ≧Ｐ１となったときにアイコン２０の機能を実行することとしてもよい。 In this case, in order to avoid confusion with the above step 205, when the operation of pushing the icon 20 that satisfies P ≧ P2 from the state of P <P1 is performed in a short time during the standby of steps 200 to 202, It is preferable to execute the function of the icon 20 without determining that the drag operation of the icon 20 is permitted. Alternatively, the function of the icon 20 may be executed when the finger is released within a short time after the pressing operation of the icon 20 that satisfies P ≧ P2, that is, when P ≧ P1.

あるいは、表示画面の特定の領域では実行動作を受け付け、他の領域ではドラッグ操作を受け付けるように、各オブジェクトに設定してもよい。 Or you may set to each object so that execution operation may be received in the specific area | region of a display screen, and drag operation may be received in another area | region.

また、図１２において、ステップ２０８の後に、ドラッグ動作中のアイコン２０に対して、指先１６を押し込むような操作（Ｐ≧Ｐ２）がなされることでも、そのときの位置（ｘ₂，ｙ₂）をアイコン２０の位置決定としてもよい（ステップ２０９）。 In FIG. 12, after step 208, an operation (P ≧ P2) in which the fingertip 16 is pushed into the icon 20 being dragged is also performed, and the position at that time (x ₂ , y ₂ ). The position of the icon 20 may be determined (step 209).

図１５は図５における制御部１７の機能制御による情報処理方法の第３の実施形態を示すフローチャートであって、この第３の実施形態も、表示画面２に表示されたアイコンなどのオブジェクトをドラッグ・アンド・ドロップする機能を持たせるものである。 FIG. 15 is a flowchart showing a third embodiment of the information processing method by the function control of the control unit 17 in FIG. 5, and this third embodiment also drags an object such as an icon displayed on the display screen 2. -It has a function to drop and drop.

また、図１６はかかる第３の実施形態を実行中に表示画面２に表示される画面を示すものであって、図１２に対応する部分には同一符号を付けている。 FIG. 16 shows a screen displayed on the display screen 2 during execution of the third embodiment, and parts corresponding to those in FIG. 12 are given the same reference numerals.

さらに、図１７はこの第３の実施形態での動作を行なわせるための押圧力Ｐの変化を示す図であり、時間軸に沿って図１６に対応した画面番号Ｖ１〜Ｖ６を記載している。 Further, FIG. 17 is a diagram showing changes in the pressing force P for performing the operation in the third embodiment, and screen numbers V1 to V6 corresponding to FIG. 16 are described along the time axis. .

図１５において、ステップ３００〜３０２，３１３は図７でのステップ１００〜１０２，１１３と同様であり、指先１６がタッチパネル９にタッチしていない状態であって、表示画面２には、図１６に示す画面Ｖ１が表示されている。この画面Ｖ１では、アイコン２０がこの表示画面２上の位置（ｘ₀，ｙ₀）に表示されているものとする。 15, steps 300 to 302 and 313 are the same as steps 100 to 102 and 113 in FIG. 7, and the fingertip 16 is not touching the touch panel 9. A screen V1 is displayed. In this screen V1, it is assumed that the icon 20 is displayed at a position (x ₀ , y ₀ ) on the display screen 2.

かかる画面Ｖ１の表示状態で指先１６がアイコン２０の表示位置にタッチし、このタッチにより、図１７に示すように、Ｐ≧Ｐ１の圧力Ｐが検知されたものとすると（ステップ３０２）、制御部１７（図５）は、上記具体例と同様にして、このタッチ位置がアイコン２０のエリア内かどうか判定する。このエリア内である場合には、制御部１７はタッチ位置が移動可能なアイコン２０のエリア内にあると判定し（ステップ３０３）、図１６に示すように、アイコン２０が移動可能であることを示すように表示した画面Ｖ２を表示画面２に表示させる（ステップ３０４）。かかる移動可能であることを示す表示方法としては、例えば、アイコン２０の表示色を変化させたり、振動させたりするなどの方法がある。 When the fingertip 16 touches the display position of the icon 20 in the display state of the screen V1, and the pressure P of P ≧ P1 is detected by this touch as shown in FIG. 17 (step 302), the control unit 17 (FIG. 5) determines whether or not the touch position is within the area of the icon 20 in the same manner as in the specific example. If it is within this area, the control unit 17 determines that the touch position is within the area of the movable icon 20 (step 303), and determines that the icon 20 is movable as shown in FIG. The displayed screen V2 is displayed on the display screen 2 (step 304). Examples of the display method indicating that it is movable include a method of changing the display color of the icon 20 or vibrating the icon 20.

そして、かかる表示状態で指先１６でアイコン２０を押し込むようにし、図１７に示すように、圧力ＰがＰ≧Ｐ２にすると（ステップ３０５）、図１６に示すように、アイコン２０が移動を開始させることができることを表わすような表示状態の画面Ｖ３が表示画面２に表示される（ステップ３０６）。このようなときのアイコン２０の表示方法としては、例えば、表示色をさらに変化させたり、サイズを変化させたりするなどの方法がある。ここでは、サイズと色が変えられたものとして示している。 Then, when the icon 20 is pushed with the fingertip 16 in such a display state and the pressure P is set to P ≧ P2 as shown in FIG. 17 (step 305), the icon 20 starts to move as shown in FIG. A screen V3 in a display state indicating that it can be displayed is displayed on the display screen 2 (step 306). As a display method of the icon 20 in such a case, for example, there are methods such as further changing the display color or changing the size. Here, the size and color are shown as being changed.

なお、図示しないが、かかる状態（ステップ３０６）で指先１６をタッチパネル９から離してＰ＜Ｐ１の状態にすると、アイコン２０に対する機能の選択がなされることになり、この選択された機能が決定してこの機能が実行される。 Although not shown, if the fingertip 16 is moved away from the touch panel 9 in this state (step 306) and the state is P <P1, the function for the icon 20 is selected, and the selected function is determined. This function is executed.

しかし、画面Ｖ３で指先１６の押圧力を弱めて図１７に示すＰ１≦Ｐ＜Ｐ２の状態にし、アイコン２０のエリア内にある指先１６を移動させると、この移動する指先１６に引かれてアイコン２０が移動するドラッグが行なわれる。図１６の画面Ｖ４は、このときに表示画面２に表示される画面を示すものであって、アイコン２０は、例えば、サイズが画面Ｖ３のときよりも小さく変化している（ステップ３０７）。この場合、この移動の途中で指先１６をタッチパネル９から離し、Ｐ＜Ｐ１の状態とすると、ドラッグが中断し、アイコン２０はもとの位置（ｘ₀，ｙ₀）に自動的に戻り（ステップ３１２）、図１６に示すもとの画面Ｖ１が表示された状態となる（ステップ３００）。 However, if the pressing force of the fingertip 16 is reduced on the screen V3 so that P1 ≦ P <P2 shown in FIG. 17 and the fingertip 16 within the area of the icon 20 is moved, the icon is drawn by the moving fingertip 16. Dragging 20 moves. A screen V4 in FIG. 16 shows the screen displayed on the display screen 2 at this time, and the icon 20 changes, for example, to be smaller than when the size is the screen V3 (step 307). In this case, if the fingertip 16 is released from the touch panel 9 in the middle of this movement and P <P1, the drag is interrupted and the icon 20 automatically returns to the original position (x ₀ , y ₀ ) (step 312), the original screen V1 shown in FIG. 16 is displayed (step 300).

また、上記ドラッグを継続し（ステップ３０７〜３０９）、その後、アイコン２０を所定の位置（ｘ₃，ｙ₃）に持ってきて、指先１６でアイコン２０を押し込むようにして、図１７に示すように、Ｐ≧Ｐ２とすると（ステップ３０９）、図１６に示すように、アイコン２０が、例えば、画面Ｖ３での状態と同じ状態で表わされた画面Ｖ５が表示され、アイコン２０の位置がこの所定の位置（ｘ₃，ｙ₃）に確定する（ステップ３１０）。そして、指先１６をタッチパネル９から離して、図１７に示すように、Ｐ＜Ｐ１の状態にすると、アイコン２０が位置（ｘ₃，ｙ₃）にもとの表示状態で位置付けられた画面Ｖ６が表示画面２に表示された状態となり（ステップ３１１）、ステップ３００に戻る。 Further, the dragging is continued (steps 307 to 309), and then the icon 20 is brought to a predetermined position (x ₃ , y ₃ ) and the icon 20 is pushed by the fingertip 16 as shown in FIG. If P ≧ P2 (step 309), as shown in FIG. 16, the icon 20 is displayed, for example, a screen V5 represented in the same state as that on the screen V3, and the position of the icon 20 is A predetermined position (x ₃ , y ₃ ) is determined (step 310). Then, when the fingertip 16 is moved away from the touch panel 9 and the state of P <P1 is set as shown in FIG. 17, the screen V6 in which the icon 20 is positioned in the original display state at the position (x ₃ , y ₃ ) is displayed. The state is displayed on the display screen 2 (step 311), and the process returns to step 300.

このようにして、この第３の実施形態でも、簡単なタッチ操作により、画面に表示されるアイコンなどの移動可能なオプジェクトを所定の位置に移すことができる。 Thus, also in the third embodiment, movable objects such as icons displayed on the screen can be moved to a predetermined position by a simple touch operation.

この第３の実施形態では、意図せずに（アイコン２０をタッチして誤って移動する）アイコン２０を移動させることがないので、複数の人で同じ端末を共有する場合に適している。また、この第３の実施形態では、移動を確定する場合においても、押し込み操作を行なうようにしているので、移動先が不用意に決定される誤操作を軽減できる。特に、移動先がその位置によって意味や価値が異なる場合（例えば、「送信トレー」や「ごみ箱」など）は、操作者が意識して押し込み操作を行なうことで移動先が決定されるので、誤操作を軽減できる。 In the third embodiment, the icon 20 is not moved unintentionally (the icon 20 is moved erroneously by touching the icon 20), so that it is suitable for a case where a plurality of people share the same terminal. In the third embodiment, since the push-in operation is performed even when the movement is confirmed, an erroneous operation in which the movement destination is unintentionally determined can be reduced. In particular, if the destination has a different meaning or value depending on its position (for example, “Send Tray” or “Trash”), the destination is determined by the operator's conscious push-in operation. Can be reduced.

なお、この第３の実施形態においても、先の各実施形態と同様な操作でアイコン２０に設定された機能を実行させるための押し込み操作と併用させてもよい。 In the third embodiment as well, a push-in operation for executing a function set in the icon 20 by the same operation as in the previous embodiments may be used.

また、表示画面２に複数の機能の種類が異なるアイコンが表示されるとき、これらアイコンのドラッグ・アンド・ドロップの操作方法として、アイコンの機能の種類毎に、上記第１〜第３の方法のいずれかを各アイコンに割り当てるようにし、機能の種類毎にドラッグ・アンド・ドロップの操作方法を異なるようにすることができる。勿論、特定の機能を持つアイコンに対しては、ドラッグ・アンド・ドロップができないようにしてもよい。 In addition, when icons having different types of functions are displayed on the display screen 2, the above-described first to third methods are used for each icon function type as a method of dragging and dropping these icons. Any one of them can be assigned to each icon, and the drag-and-drop operation method can be made different for each type of function. Of course, an icon having a specific function may not be dragged and dropped.

図１８は図５における制御部１７の機能制御による情報処理方法の第４の実施形態を示すフローチャートであって、この第４の実施形態は表示画面２に品目を表わすアイコンなどのオブジェクトをタッチ操作部材としてドラッグ・アンド・ドロップ可能とし、所望品目の購入などの処理機能を持たせる、所謂ドラック・アンド・機能選択というべきものである。この第４の具体例は、デジタルコンテンツの配信端末の機能を持つものとしている。 FIG. 18 is a flowchart showing a fourth embodiment of the information processing method by function control of the control unit 17 in FIG. 5, and this fourth embodiment is a touch operation on an object such as an icon representing an item on the display screen 2. It should be a so-called drag-and-function selection that can be dragged and dropped as a member and has a processing function such as purchase of a desired item. This fourth example is assumed to have the function of a digital content distribution terminal.

また、図１９はかかる第４の実施形態を実行中に表示画面２に表示される画面を示すものであって、２１はオブジェクト表示領域、２２は機能設定領域、２３，２３’はオブジェクト（ここでは、品目を表わすアイコンとするが、これに限るものではない）、２４は案内、２５は「購入する」ボタン、２６は「やめる」ボタンである。 FIG. 19 shows a screen displayed on the display screen 2 during execution of the fourth embodiment, in which 21 is an object display area, 22 is a function setting area, and 23 and 23 ′ are objects (here In this case, the icon represents an item, but the icon is not limited to this.) 24 is a guide, 25 is a “buy” button, and 26 is a “quit” button.

さらに、図２０はこの第４の実施形態での動作を行なわせるための圧力Ｐの変化を示す図であり、時間軸に沿って図１９に対応した画面番号Ｖ１〜Ｖ５を記載している。 Further, FIG. 20 is a diagram showing a change in the pressure P for performing the operation in the fourth embodiment, and screen numbers V1 to V5 corresponding to FIG. 19 are described along the time axis.

図１８において、ステップ４００〜４０２，４１１は図７でのステップ１００〜１０２，１１３と同様であり、指先１６がタッチパネル９にタッチしていない状態であって、表示画面２には、図１９に示す画面Ｖ１が表示されている。この画面Ｖ１では、機能設定領域２２で設定されている項目の機能の実行が可能な各種品目を示すアイコン２３が表示されるアイコン（オブジェクト）表示領域２１と、かかる品目を、例えば、音楽のコンテンツとした場合、その「購入」や「試聴」，「書評を見る」などの機能を実行可能とする項目のメニューが表わされる機能設定領域２２とが設けられている。但し、これらは品目の一例であって、本発明はこれに限るものではなく、また、品目の種類によって機能メニューも異なるものである。 18, steps 400 to 402 and 411 are the same as steps 100 to 102 and 113 in FIG. 7, and the fingertip 16 is not touching the touch panel 9. A screen V1 is displayed. In this screen V1, an icon (object) display area 21 in which icons 23 indicating various items that can execute the function of the item set in the function setting area 22 are displayed, and such items are displayed as, for example, music content. In this case, a function setting area 22 is provided in which a menu of items for enabling functions such as “purchase”, “trial listening”, and “view book review” is displayed. However, these are examples of items, and the present invention is not limited to this, and the function menu differs depending on the type of item.

かかる画面Ｖ１の表示状態で、指先１６が希望する品目のアイコン２３の表示位置にタッチし、このタッチにより、図２０に示すように、Ｐ２＞Ｐ≧Ｐ１の圧力Ｐが検知されたものとすると（ステップ４０２）、制御部１７（図５）は、先の具体例と同様にして、このタッチ位置がアイコン２３のエリア内にあるかどうか判定する。このエリア内にある場合には、制御部１７はタッチ位置が移動可能なアイコン２３のエリア内にあると判定し（ステップ４０３）、表示画面２に図１９に示す画面Ｖ２をアイコン２３が移動開始可能であるように表示させる。かかる移動可能であることを示す表示方法としては、例えば、アイコン２３の表示色を変化させたり、振動させたりするなどの方法がある。 In the display state of the screen V1, the fingertip 16 touches the display position of the icon 23 of the desired item, and it is assumed that the pressure P of P2> P ≧ P1 is detected by this touch as shown in FIG. (Step 402), the control unit 17 (FIG. 5) determines whether or not this touch position is within the area of the icon 23 in the same manner as in the previous specific example. If it is within this area, the control unit 17 determines that the touch position is within the area of the movable icon 23 (step 403), and the icon 23 starts moving the screen V2 shown in FIG. Display as possible. Examples of the display method indicating that it can be moved include a method of changing the display color of the icon 23 or vibrating the icon 23.

そして、図２０に示すように、Ｐ１≦Ｐ＜Ｐ２でのかかる表示状態で指先１６を移動させると、アイコン２３からこれと同じ内容の分身のアイコン２３’が生じ、これがこの移動する指先１６に引かれて移動するドラッグが行なわれる（ステップ４０４）。図１９の画面Ｖ３はこのときに表示画面２に表示される画面を示すものであって、アイコン２３’は指先１６にくっついて移動する。 Then, as shown in FIG. 20, when the fingertip 16 is moved in such a display state where P1 ≦ P <P2, an icon 23 ′ having the same content as the icon 23 is generated from the icon 23, and this is applied to the moving fingertip 16. A drag that is pulled and moved is performed (step 404). A screen V3 in FIG. 19 shows a screen displayed on the display screen 2 at this time, and the icon 23 'moves while sticking to the fingertip 16.

かかる移動の途中で指先１６をタッチパネル９から離し、Ｐ＜Ｐ１の状態とすると（ステップ４０５）、ドラッグが中断し、アイコン２３’は消滅して（もしくはアイコン表示領域２１でのアイコン２３の位置に自動的に戻ってこのアイコン２３と重なり）（ステップ４１０）、図１９に示すもとの画面Ｖ１が表示された状態となる（ステップ４００）。 If the fingertip 16 is released from the touch panel 9 in the middle of the movement and the state of P <P1 is established (step 405), the drag is interrupted and the icon 23 ′ disappears (or is placed at the position of the icon 23 in the icon display area 21). It automatically returns and overlaps with the icon 23 (step 410), and the original screen V1 shown in FIG. 19 is displayed (step 400).

また、図２０に示すように、Ｐ１≦Ｐ＜Ｐ２のタッチ状態で指先１６を移動させ、上記ドラッグを継続し（ステップ４０４〜４０６）、その後、アイコン２３’を機能設定領域２２内の所望の機能メニュー、例えば、この品目を購入したい場合には、機能メニュー「購入する」に合わせると（ステップ４０７）、表示画面２に表示される画面が図１９に示す画面Ｖ４となり、次に、指先１６をこのアイコン２３’から離さずに押し込むようにして、図２０に示すように、Ｐ≧Ｐ２とすると（ステップ４０７）、図１９に示すように、このアイコン２３’による品目のより詳細な案内２４を表わす画面Ｖ５が表示画面２に表示される（ステップ４０８）。これによって、誤って機能メニューを選択しても、案内２４を表示させることで、誤操作を軽減することができる。 Further, as shown in FIG. 20, the fingertip 16 is moved in the touched state of P1 ≦ P <P2, and the drag is continued (steps 404 to 406). When the user wants to purchase a function menu, for example, this item, when the function menu is set to “Purchase” (step 407), the screen displayed on the display screen 2 becomes the screen V4 shown in FIG. Is pushed without being separated from the icon 23 ′, and P ≧ P2 (step 407) as shown in FIG. 20 (step 407), as shown in FIG. Is displayed on the display screen 2 (step 408). Thereby, even if the function menu is selected by mistake, the erroneous operation can be reduced by displaying the guidance 24.

この品目を購入する場合には、この案内２４での「購入する」ボタン２５をタッチ操作することにより、ダウンロードなどによってこの品目を購入することが可能となり、「やめる」ボタン２６をタッチ操作すると、購入をやめることができる。このような処理が終わると（ステップ４０９）、ステップ４００に戻って図１９に示すもとの画面Ｖ１が表示された状態となる。 When purchasing this item, it is possible to purchase this item by touching the “Purchase” button 25 in this guide 24, and by touching the “Stop” button 26, You can stop purchasing. When such processing is completed (step 409), the process returns to step 400 and the original screen V1 shown in FIG. 19 is displayed.

このようにして、この第４の実施形態では、コンテンツの配信などを要求する場合のように、複数の操作ボタンの操作が関連されて１つの機能が実行されるような場合には、複数のタッチ操作部材のタッチ操作の経緯を確認する必要がなくなって、簡単なタッチ操作で実行させることができ、さらに、誤って所望の機能以外の領域に確定することなく、確実にコンテンツの配信などを受けるようにすることができる。 In this manner, in the fourth embodiment, when a function is executed in association with operations of a plurality of operation buttons, such as when content distribution is requested, a plurality of operations are performed. It is no longer necessary to check the background of the touch operation of the touch operation member, it can be executed with a simple touch operation, and content delivery etc. can be performed reliably without accidentally determining an area other than the desired function. You can make it receive.

特に、この第４の実施形態では、上記のアイコン（タッチ操作部材）は、押圧力ＰがＰ１≦押圧力Ｐ＜Ｐ２でタッチされたとき、指（指示手段）の移動に伴ってその表示位置が移動するドラッグ処理（第１の処理）が可能であり、かつ、ドラッグ処理でこのアイコンが移動された先の領域（所望の機能メニュー）との組み合わせにより前記アイコンに予め割り当てられた処理（第２の処理）を実行させることができる。 In particular, in the fourth embodiment, when the pressing force P is touched with P1 ≦ pressing force P <P2, the icon (touch operation member) has its display position as the finger (instruction means) moves. A drag process (first process) in which the icon is moved is possible, and a process (first process) pre-assigned to the icon by combination with the previous area (desired function menu) to which the icon has been moved by the drag process. 2 processing) can be executed.

なお、この第４の実施形態において、オブジェクト表示領域２１内で、オブジェクトが押し込まれた場合には、このオブジェクト２３に設定された機能を実行してもよい。例えば、この第４の実施の形態では、「試聴」できるようにしてもよい。 In the fourth embodiment, when an object is pushed in the object display area 21, the function set for the object 23 may be executed. For example, in the fourth embodiment, “trial listening” may be performed.

図２１は図５における制御部１７の機能制御による情報処理方法の第５の実施形態を示すフローチャートであって、この第５の実施形態はポップアップメニューの選択機能を持たせたものである。 FIG. 21 is a flowchart showing a fifth embodiment of the information processing method based on the function control of the control unit 17 in FIG. 5. This fifth embodiment has a pop-up menu selection function.

また、図２２はかかる第５の実施形態を実行中に表示画面２に表示される画面を示すものであり、２７はメニューオブジェクト、２８はポップアップメニュ、２９は選択枠（カーソル）である。 FIG. 22 shows a screen displayed on the display screen 2 during execution of the fifth embodiment, wherein 27 is a menu object, 28 is a pop-up menu, and 29 is a selection frame (cursor).

さらに、図２３はこの第５の実施形態での動作を行なわせるための押圧力Ｐの変化を示す図であり、時間軸に沿って図２２に対応した画面番号Ｖ１〜Ｖ５を記載している。 Further, FIG. 23 is a diagram showing changes in the pressing force P for performing the operation in the fifth embodiment, and screen numbers V1 to V5 corresponding to FIG. 22 are shown along the time axis. .

図２１において、ステップ５００〜５０２，５１１は図７でのステップ１００〜１０２，１１３と同様であり、指先１６がタッチパネル９にタッチしていない状態であって、表示画面２には、図２２に示す画面Ｖ１が表示されている。この画面Ｖ１では、メニューオブジェクト２７が表示されている。 In FIG. 21, steps 500 to 502 and 511 are the same as steps 100 to 102 and 113 in FIG. 7, and the fingertip 16 is not touching the touch panel 9. A screen V1 is displayed. On this screen V1, a menu object 27 is displayed.

かかる表示状態でメニューオブジェクトを変更する場合には、指先１６で現在表示されているメニューオブジェクト２７にタッチする。制御部１７は、これにより、図２３に示すように、Ｐ２＞Ｐ≧Ｐ１の圧力Ｐが検知すると（ステップ５０２）、先の具体例と同様にして、このタッチ位置がメニューオブジェクト２７のエリア内にあるかどうか判定する。このエリア内にある場合には、制御部１７はタッチ位置が移動可能なメニューオブジェクト２７のエリア内にあると判定し（ステップ５０３）、表示画面２に図２２に示す画面Ｖ２が表示される。この画面Ｖ２では、これまで表示されていたメニューオブジェクト２７ａとともに他のメニューオブジェクトが配列されてなるポップアップメニュー２８が表示され、その中の１つのメニューオブジェクト、この場合、これまで表示されていて指先１６でタッチされたメニューオブジェクト２７ａが、そのときの位置で選択枠２９によって選択された状態で表示される。 When the menu object is changed in such a display state, the menu object 27 currently displayed with the fingertip 16 is touched. Accordingly, as shown in FIG. 23, when the pressure P of P2> P ≧ P1 is detected, the control unit 17 detects that the touch position is within the area of the menu object 27 as in the previous specific example. It is determined whether it is in. If it is within this area, the control unit 17 determines that the touch position is within the area of the movable menu object 27 (step 503), and the screen V2 shown in FIG. On this screen V2, a pop-up menu 28 in which other menu objects are arranged together with the menu object 27a that has been displayed so far is displayed, and one of the menu objects, in this case, the fingertip 16 that has been displayed so far is displayed. The menu object 27a touched in is displayed in a state selected by the selection frame 29 at the position at that time.

このようなタッチ状態で、ポップアップメニュー２８内をメニューオブジェクトの配列方向に指先１６を移動させると、選択枠２９もこの指先１６とともに移動（ドラッグ）する。図２２に示す画面Ｖ３はこのときの表示画面２で表示される画面である（ステップ５０４）。Ｐ１≦Ｐ＜Ｐ２を保って指先１６を移動させている限り、ステップ５０５〜５０７の動作が繰り返され、選択枠２９が指先１６に附いてドラッグする。この操作中にタッチパネル９から指先を離し、Ｐ＜Ｐ１の状態とすると（ステップ５０５）、かかる動作が中断し、メニューオブジェクト２７はもとの位置に戻って（ステップ５１０）、図２２に示すもとの画面Ｖ１が表示された状態となる（ステップ５００）。 When the fingertip 16 is moved in the pop-up menu 28 in the arrangement direction of the menu object in such a touch state, the selection frame 29 also moves (drags) together with the fingertip 16. A screen V3 shown in FIG. 22 is a screen displayed on the display screen 2 at this time (step 504). As long as the fingertip 16 is moved while maintaining P1 ≦ P <P2, the operations in steps 505 to 507 are repeated, and the selection frame 29 is dragged on the fingertip 16. If the fingertip is removed from the touch panel 9 during this operation and P <P1 is established (step 505), the operation is interrupted, and the menu object 27 returns to the original position (step 510), as shown in FIG. The screen V1 is displayed (step 500).

また、図２３に示すように、Ｐ１≦Ｐ＜Ｐ２のタッチ状態で指先１６を移動させることにより、選択枠２９がポップアップメニュー２８の所望とするメニューオブジェクト２７ｄの位置（選択肢領域内）に達し（ステップ５０７）、指先１６をこの選択枠２９から離さずに押し込み操作を行なって、図２３に示すように、Ｐ≧Ｐ２とすると、この所望とするメニューオブジェクト２７ｄの選択が実行される（ステップ５０８）。図２２に示す画面Ｖ４はこのとき表示画面２に表示される画面を示すものであって、例えば、選択枠２９の表示色が変化して選択が実行されたことを示す。そして、図２２の画面Ｖ５となり、選択されたメニューオブジェクト２７ｄが、メニューオブジェクト２７ａに代わって、このもとのメニューオブジェクト２７ａと同じ位置に表示されることになり（ステップ５０９）、ステップ５００に戻って次の操作を待つことになる。 Further, as shown in FIG. 23, by moving the fingertip 16 in the touch state of P1 ≦ P <P2, the selection frame 29 reaches the position (in the option area) of the desired menu object 27d of the pop-up menu 28 ( In step 507), the user pushes the fingertip 16 without releasing it from the selection frame 29, and when P ≧ P2, as shown in FIG. 23, the desired menu object 27d is selected (step 508). ). A screen V4 shown in FIG. 22 shows the screen displayed on the display screen 2 at this time. For example, the display color of the selection frame 29 changes to indicate that the selection has been executed. Then, the screen V5 of FIG. 22 is displayed, and the selected menu object 27d is displayed at the same position as the original menu object 27a instead of the menu object 27a (step 509), and the process returns to step 500. Will wait for the next operation.

このようにして、この第５の実施形態では、簡単なタッチ操作により、ポップアップメニューの選択を行なうことができる。特に、ポップアップメニューでは、望所の機能を選択するためにポップアップメニューを開いて選択肢（機能）を閲覧する操作も多い。この第５の実施形態では、このような閲覧操作を、「指で触れ」，「確認し」，「指を離す」という至って簡単な操作で実行することができるとともに、いざ選択肢を実行（選択）しようとした場合には、強く押し込む操作で実行（選択）するので、不用意に指が離れて操作者自身が意図しない、気が付かずに他の選択肢が実行（選択）されてしまうような誤操作を軽減することができる。 Thus, in the fifth embodiment, the pop-up menu can be selected by a simple touch operation. In particular, in the pop-up menu, there are many operations for browsing the choices (functions) by opening the pop-up menu in order to select a desired function. In the fifth embodiment, such a browsing operation can be executed by simple operations such as “touch with a finger”, “confirm”, and “release the finger”, and execute an option (selection). ) If you try to do it, it will be executed (selected) by pushing it in too hard, so the operator will inadvertently leave the finger unintentionally, or other options will be executed (selected) without realizing it Can be reduced.

なお、この第５の実施形態では、１つのポップアップメニューで説明したが、複数のポップアップメニューを表示しても、同様な効果を得ることができる。 Although the fifth embodiment has been described with one pop-up menu, the same effect can be obtained even when a plurality of pop-up menus are displayed.

本発明によるタッチパネルを備えた表示装置の一実施形態を示す図である。It is a figure which shows one Embodiment of the display apparatus provided with the touchscreen by this invention. 図１における筐体内の表示手段の具体例を概略的に示す図である。It is a figure which shows roughly the specific example of the display means in the housing | casing in FIG. 図１におけるタッチパネルに対する指先の状態を示す図である。It is a figure which shows the state of the fingertip with respect to the touch panel in FIG. 圧力センサが検出する圧力に対する図３に示す指先の状態の判定を示す図である。It is a figure which shows determination of the state of the fingertip shown in FIG. 3 with respect to the pressure which a pressure sensor detects. 図１に示す実施形態での回路構成の具体例の要部を示すブロック図である。It is a block diagram which shows the principal part of the specific example of the circuit structure in embodiment shown in FIG. 図５における記憶部でのデータベースの具体例を模式的に示す図である。It is a figure which shows typically the specific example of the database in the memory | storage part in FIG. 図５における制御部の機能制御による情報処理方法の第１の実施形態を示すフローチャートである。It is a flowchart which shows 1st Embodiment of the information processing method by the function control of the control part in FIG. 図７に示す実施形態で図１に示す表示面に表示される画面の第１の具体例を示す図である。It is a figure which shows the 1st specific example of the screen displayed on the display surface shown in FIG. 1 by embodiment shown in FIG. 図７に示す実施形態を実行するための指先による圧力の変化の第１の具体例を示す図である。It is a figure which shows the 1st specific example of the change of the pressure by the fingertip for performing embodiment shown in FIG. 図７に示す実施形態で図１に示す表示面に表示される画面の第２の具体例を示す図である。It is a figure which shows the 2nd specific example of the screen displayed on the display surface shown in FIG. 1 by embodiment shown in FIG. 図７に示す実施形態を実行するための指先による圧力の変化の第２の具体例を示す図である。It is a figure which shows the 2nd specific example of the change of the pressure by the fingertip for performing embodiment shown in FIG. 図５における制御部の機能制御による情報処理方法の第２の実施形態を示すフローチャートである。It is a flowchart which shows 2nd Embodiment of the information processing method by the function control of the control part in FIG. 図１２に示す実施形態で図１に示す表示面に表示される画面の具体例を示す図である。It is a figure which shows the specific example of the screen displayed on the display surface shown in FIG. 1 by embodiment shown in FIG. 図１２に示す実施形態を実行するための指先による圧力の変化の具体例を示す図である。It is a figure which shows the specific example of the change of the pressure by the fingertip for performing embodiment shown in FIG. 図５における制御部の機能制御による情報処理方法の第３の実施形態を示すフローチャートである。It is a flowchart which shows 3rd Embodiment of the information processing method by the function control of the control part in FIG. 図１５に示す実施形態で図１に示す表示面に表示される画面の具体例を示す図である。It is a figure which shows the specific example of the screen displayed on the display surface shown in FIG. 1 by embodiment shown in FIG. 図１５に示す実施形態を実行するための指先による圧力の変化の具体例を示す図である。It is a figure which shows the specific example of the change of the pressure by the fingertip for implementing embodiment shown in FIG. 図５における制御部の機能制御による情報処理方法の第４の実施形態を示すフローチャートである。It is a flowchart which shows 4th Embodiment of the information processing method by the function control of the control part in FIG. 図１８に示す実施形態で図１に示す表示面に表示される画面の具体例を示す図である。It is a figure which shows the specific example of the screen displayed on the display surface shown in FIG. 1 by embodiment shown in FIG. 図１８に示す実施形態を実行するための指先による圧力の変化の具体例を示す図である。It is a figure which shows the specific example of the change of the pressure by the fingertip for implementing embodiment shown in FIG. 図５における制御部の機能制御による情報処理方法の第５の実施形態を示すフローチャートである。It is a flowchart which shows 5th Embodiment of the information processing method by the function control of the control part in FIG. 図２１に示す実施形態で図１に示す表示面に表示される画面の具体例を示す図である。It is a figure which shows the specific example of the screen displayed on the display surface shown in FIG. 1 by embodiment shown in FIG. 図２１に示す実施形態を実行するための指先による圧力の変化の具体例を示す図である。It is a figure which shows the specific example of the change of the pressure by the fingertip for performing embodiment shown in FIG.

Explanation of symbols

１筐体
１ａ開口
２表示画面
３取付部
４スタンド
５回転軸
６ピン穴
７ピン
８表示パネル
８ａ表示面
９タッチパネル
１０，１１支持部材
１２映出装置
１３ミラー
１４スクリーン
１５支持部材
１６指先
１７制御部
１８スピーカ
１９記憶部
２０アイコン
２１オブジェクト表示領域
２２機能設定領域
２３，２３’ オブジェクト（アイコン）
２４案内
２５「購入する」ボタン
２６「やめる」ボタン
２７ａ，２７ｄメニューオブジェクト
２８メニューオブジェクト欄
２９選択枠 DESCRIPTION OF SYMBOLS 1 Case 1a Opening 2 Display screen 3 Mounting part 4 Stand 5 Rotating shaft 6 Pin hole 7 Pin 8 Display panel 8a Display surface 9 Touch panel 10,11 Support member 12 Projection device 13 Mirror 14 Screen 15 Support member 16 Fingertip 17 Control part 18 Speaker 19 Storage Unit 20 Icon 21 Object Display Area 22 Function Setting Area 23, 23 ′ Object (Icon)
24 Information 25 “Purchase” button 26 “Stop” button 27a, 27d Menu object 28 Menu object field 29 Selection frame

Claims

In a display device including a touch panel provided on a display surface of a display panel for detecting a touch position by an instruction unit, and capable of being operated by touching a touch operation member displayed on the display surface,
Detecting means for detecting a pressing force P pressed by an instruction means when touch-operating the touch operation member;
When the set pressure P1 and the set pressure P2 larger than the set pressure P1 are set in advance and the pressing pressure P detected by the detecting means is set pressure P1 ≦ pressed pressure P <set pressure P2, the pressure is pressed by the indicating means. A control unit that performs a first process relating to the touch operation member, and performs a second process relating to the touch operation member pressed by the instruction unit when the pressing force P is a set pressure P2 ≦ the pressing force P; Have
The first process is a drag process for moving the touch operation member along the instruction means when the instruction means moves, and the second process is a process related to the movement of the touch operation member,
When the pressing force P by the instruction means to the touch operation member, the pressing force P <set pressure P1 via the set pressure P1 ≦ pressing force P <set pressure P2, changes the set pressure P2 ≦ pressing force P, the Performing the second process of permitting the start of movement of the touch operation member;
Next, when the pressing force P by the instruction means on the touch operation member is loosened and changes from the setting pressure P2 ≦ the pressing force P to the setting pressure P1 ≦ the pressing force P <the setting pressure P2, the setting pressure P1 ≦ the pressing force P < As long as the set pressure P2, the drag operation of the touch operation member is performed as the first process,
Next, when the pressing force P by the instruction means on the touch operation member further loosens and changes from the set pressure P1 ≦ the press force P <the set pressure P2 to the press force P <the set pressure P1 , the movement destination of the touch operation member the performs processing for determining the position at that time,
When the touch operation member is touch-operated, the pressure P of the pressure P <change from the set pressure P1 to the set pressure P2 ≦ the pressure P, or the set pressure P2 ≦ the pressure P to the pressure P <the set pressure P1 If the change to is performed within a predetermined time, the function assigned in advance to the touch operation member is executed without performing the drag process or the process of permitting the start of movement.
Display device having a touch panel, characterized in that.