[go: up one dir, main page]

WO2013187137A1 - 電子機器 - Google Patents

電子機器 Download PDF

Info

Publication number
WO2013187137A1
WO2013187137A1 PCT/JP2013/062076 JP2013062076W WO2013187137A1 WO 2013187137 A1 WO2013187137 A1 WO 2013187137A1 JP 2013062076 W JP2013062076 W JP 2013062076W WO 2013187137 A1 WO2013187137 A1 WO 2013187137A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
electronic device
application
display
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2013/062076
Other languages
English (en)
French (fr)
Inventor
上出将
泉谷俊一
土橋広和
塚本千尋
小川倫代
関口政一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2014521005A priority Critical patent/JP6311602B2/ja
Priority to US14/408,059 priority patent/US20150135145A1/en
Priority to CN201380031314.1A priority patent/CN104380227A/zh
Publication of WO2013187137A1 publication Critical patent/WO2013187137A1/ja
Anticipated expiration legal-status Critical
Priority to US17/215,226 priority patent/US20210216184A1/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033—Indexing scheme relating to G06F3/033
    • G06F2203/0339—Touch strips, e.g. orthogonal touch strips to control cursor movement or scrolling; single touch strip to adjust parameter or to implement a row of soft keys
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Definitions

  • the present invention relates to an electronic device.
  • Patent Document 1 only the arrangement and size of the character buttons are changed based on whether the mobile phone is held with the left or right hand.
  • the present invention has been made in view of the above-described problems, and an object thereof is to provide an easy-to-use electronic device.
  • the electronic apparatus specifies a holding method by a user based on a touch sensor provided on the first surface, at least a second surface other than the first surface, and a detection result of the touch sensor.
  • a processing unit that displays application information corresponding to the result on a display, and an allocation unit that allocates a function corresponding to the application to be activated to the touch sensor.
  • the assigning unit can assign an operation corresponding to the movement of the finger to the touch sensor provided on the second surface.
  • the assigning unit assigns a function for selecting an adjustment menu for an application to be activated to the touch sensor provided on the first surface, and a function for an adjustment degree of the application to be activated for the touch sensor provided on the second surface. It may be assigned.
  • the electronic apparatus further includes an imaging unit provided on the first surface and capable of imaging the user, and the processing unit is configured by the user based on an imaging result of the user by the imaging unit. It is good also as specifying the way of holding and displaying the information of the application according to the said specific result on the said display.
  • a posture detection unit that detects a posture may be provided, and the processing unit may display application information on the display based on a detection result by the posture detection unit.
  • the posture detection unit may include at least one of an acceleration sensor and an imaging device.
  • the electronic device of the present invention may further include a position detection unit that detects a position, and the processing unit may display application information on the display based on a detection result by the position detection unit.
  • the said process part is good also as specifying the motion of a user's finger
  • the processing unit may specify a user attribute from the detection result of the touch sensor, and display application information according to the identification result on the display. Furthermore, the processing unit may display information of a plurality of applications on the display with priorities.
  • the electronic device of the present invention may have a rectangular parallelepiped shape having six surfaces including the first surface, and the touch sensor may be provided on each of the six surfaces of the rectangular parallelepiped shape.
  • a pressure-sensitive sensor that detects a holding force by a user may be provided, and the assigning unit may assign a function according to an application to be activated to the pressure-sensitive sensor.
  • the display may be a transmissive display.
  • a vibration part that generates vibration may be provided on each of the first surface and the second surface. Moreover, you may provide the control part which vibrates the said vibration part according to at least one of the process of the said process part, and the allocation of the said allocation part.
  • the present invention has an effect that it is possible to provide a user-friendly electronic device.
  • FIGS. 5A to 5C are diagrams for explaining the holding pattern 1.
  • FIGS. 6A and 6B are diagrams for explaining the holding pattern 2.
  • FIGS. 7A to 7D are diagrams for explaining the holding patterns 3 and 4.
  • FIGS. 8A to 8C are diagrams for explaining the holding pattern 5. It is a figure which shows the example of assignment of the function to a touch sensor.
  • FIG. 1 schematically shows a hexahedral view of a mobile device 10 according to an embodiment.
  • FIG. 2 is a block diagram of the mobile device 10.
  • the mobile device 10 is a device such as a mobile phone, a smartphone, a PHS (Personal Handy-phone System), or a PDA (Personal Digital Assistant).
  • the mobile device 10 has a telephone function, a communication function for connecting to the Internet, a data processing function for executing a program, and the like.
  • the mobile device 10 has a thin plate shape having a rectangular first surface (front surface), a second surface (rear surface), and third to sixth surfaces (side surfaces), as shown in FIG. It is large enough to be gripped by the palm of one hand.
  • the mobile device 10 includes a front imaging unit 11, a rear imaging unit 12, a display 13, a speaker 14, a microphone 15, a GPS (Global Positioning System) module 16, and a flash memory 17. , Touch sensors 18A to 18F, an acceleration sensor 19, and a control unit 20.
  • a GPS Global Positioning System
  • the front imaging unit 11 is provided in the vicinity of the upper end of the first surface (front surface), and includes a photographing lens and an imaging device (CCD (Charge-Coupled Device) and CMOS (Complementary Metal-Oxide Semiconductor) device).
  • CCD Charge-Coupled Device
  • CMOS Complementary Metal-Oxide Semiconductor
  • the rear imaging unit 12 is provided slightly above the center of the second surface (rear surface), and has a photographic lens and an imaging element, like the front imaging unit 11. As an example, the back imaging unit 12 images the user's feet holding the mobile device 10.
  • the display 13 is a device that uses, for example, a liquid crystal display element, and displays images, various information, and operation input images such as buttons.
  • the display 13 has a rectangular shape as shown in FIG. 1, and has an area that occupies almost the entire first surface.
  • the speaker 14 is provided above the display 13 on the first surface, and is positioned in the vicinity of the user's ear when the user makes a call.
  • the microphone 15 is provided below the display 13 on the first surface, and is positioned near the mouth of the user when the user makes a call. That is, as shown in FIG. 1, the speaker 14 and the microphone 15 are provided on the short side of the portable device 10 with the display 13 interposed therebetween.
  • the GPS module 16 is a sensor that detects the position (for example, latitude and longitude) of the mobile device 10.
  • the flash memory 17 is a non-volatile semiconductor memory.
  • parameters used in processing executed by the control unit 20 data such as telephone numbers and e-mail addresses, eyes, nose, Stores data related to facial parts such as the mouth.
  • the touch sensor 18A is provided so as to cover the surface of the display 13 on the first surface, and inputs information that the user has touched the touch sensor 18A and information corresponding to the movement of the user's finger.
  • the touch sensor 18B is provided so as to cover almost the entire second surface, and inputs information that the user has touched the touch sensor 18B and information corresponding to the movement of the user's finger.
  • the other touch sensors 18C to 18F are provided so as to substantially cover the third to sixth surfaces. Similar to the touch sensors 18A and 18B, the other touch sensors 18C to 18F are used to detect that the user has touched the touch sensor and the movement of the user's finger. Enter the appropriate information. That is, in this embodiment, touch sensors 18A to 18F are provided on all six surfaces of the mobile device 10. Note that the touch sensors 18A to 18F are capacitive touch sensors and can determine that a user's finger has touched a plurality of locations.
  • the acceleration sensor 19 can be a piezoelectric element or a strain gauge.
  • the acceleration sensor 19 detects whether the user is standing, sitting, walking, running, or the like.
  • a method for detecting whether the user is standing, sitting, walking, or running using the acceleration sensor 19 is disclosed in, for example, Japanese Patent No. 3513632 (Japanese Patent Laid-Open No. Hei 8-131425). ing.
  • a gyro sensor that detects the angular velocity in place of the acceleration sensor 19 or in combination with the acceleration sensor 19 may be used.
  • position sensor which determines whether the portable apparatus 10 is hold
  • the posture sensor the position of the finger detected by each of the touch sensors 18A to 18F may be used, or the imaging result of the front imaging unit 11 (the imaging result of the user's face) may be used.
  • a triaxial acceleration sensor or a gyro sensor may be used as a dedicated posture sensor, or may be used in combination with each of the touch sensors 18A to 18F and the front imaging unit 11 described above.
  • the acceleration sensor is used as the posture sensor, the inclination of the mobile device 10 may be detected, and the acceleration sensor 19 may also be used.
  • the control unit 20 has a CPU and controls the entire mobile device 10 in an integrated manner.
  • the control unit 20 determines how to hold the mobile device 10 when the user executes a predetermined application on the mobile device 10, and displays an application icon (information) according to the way of holding the mobile device 10. Execute processing.
  • an application having a voice recognition function can be provided as an example of the application.
  • touch sensors are provided on all six surfaces of the mobile device 10
  • communication and charging with an external device are performed by wireless communication (transfer jet or wireless WiFi), contactless charging, or the like. It is preferable.
  • FIGS. 3 is a process executed when the mobile device 10 is in a standby state (a state where an application is not activated).
  • a standby state a state where an application is not activated.
  • the user when the user wants to start a predetermined application on the mobile device 10, the user needs to reproduce how to hold the mobile device 10 when using the application. It shall be defined (described). Therefore, for example, when the user wants to use a camera application, he / she holds as shown in FIG. 5B, and when he / she wants to use a game application, he / she holds as shown in FIG. 6B. It shall be.
  • step S10 the control unit 20 stands by until there is an output from the touch sensors 18A to 18F. That is, the control unit 20 stands by until the mobile device 10 is held by the user.
  • control unit 20 proceeds to step S12 and acquires the output of the touch sensor.
  • the control unit 20 may always acquire the outputs of the touch sensors 18A to 18F when the output is present.
  • the user may perform some action (for example, tapping the display n times, Only the outputs of the touch sensors 18A to 18F after a few seconds after the mobile device 10 is shaken strongly or the like may be acquired.
  • step S14 the control unit 20 executes processing for displaying application information according to the outputs of the touch sensors 18A to 18F. Specifically, the control unit 20 executes processing according to the flowchart of FIG.
  • step S30 the control unit 20 determines whether or not the holding method is the pattern 1.
  • the pattern 1 is assumed to be a holding pattern as shown in FIG.
  • ⁇ represents the output from the touch sensor 18B on the second surface (rear surface), and ⁇ represents the output from the touch sensor on the other surface.
  • the holding pattern 1 shown in FIG. 5A as shown in FIGS. 5B and 5C, the user holds the mobile device 10 in the horizontal position (the user holds the mobile device 10 in the horizontally long state). Is likely to be held in place. If the determination in step S30 is affirmative, the control unit 20 proceeds to step S32.
  • step S32 the control unit 20 executes imaging using the front imaging unit 11.
  • step S34 the control unit 20 determines whether the user has the portable device 10 in front of the face based on the imaging result. In this case, the control unit 20 determines whether the user has the mobile device 10 in front of the face based on the position of the face, the position of the eyes, the shape of the nose, or the like in the captured image. Determine if you have 10. Instead of this or in combination with this, the control unit 20 may determine the position where the user is holding the portable device 10 by detecting the inclination of the portable device 10 using the above-described attitude sensor. Specifically, as shown in FIG.
  • the control unit 20 may determine at which position the user is holding the mobile device 10 based on the inclination of the mobile device 10.
  • step S34 determines whether the user has the portable device 10 as shown in FIG. 5B. If the determination in step S34 is affirmative, that is, if the user has the portable device 10 as shown in FIG. 5B, the control unit 20 proceeds to step S36, and the camera application icon is displayed. Is displayed on the display 13. In step S36, the reason why the controller 20 does not display the game application icon is that the user is unlikely to execute the game in the posture as shown in FIG. 5B. After step S36, the process proceeds to step S16 in FIG. On the other hand, if the determination in step S34 is negative, that is, if the user has the mobile device 10 as shown in FIG. 5C, the control unit 20 displays game and camera application icons. 13 is displayed.
  • the control unit 20 may display the camera application icon with a higher priority than the game application icon. In this case, for example, the control unit 20 may display the camera application icon larger than the game application icon or display the camera application icon above the game application icon. Good.
  • step S40 the control unit 20 determines whether or not the user holds the mobile device 10 in the pattern 2.
  • the pattern 2 is assumed to be a holding pattern as shown in FIG. In the holding pattern 2 shown in FIG. 6A, the user is highly likely to hold the portable device 10 in the horizontal position as shown in FIG. 6B. Therefore, if the determination in step S40 is affirmed, the control unit 20 proceeds to step S42, displays an icon of the game application, and then proceeds to step S16 in FIG.
  • step S44 the control unit 20 determines whether or not the user holds the portable device 10 in the pattern 3.
  • the pattern 3 is assumed to be a holding pattern as shown in FIG.
  • the control unit 20 proceeds to step S46, displays the telephone application icon, and then proceeds to step S16 in FIG.
  • step S46 when the touch sensor 18A detects that the user's ear is touching the first surface, it is an application for operating the mobile device 10 with a voice.
  • a boil control application may be activated.
  • the control unit 20 automatically makes a call using the phone number stored in the flash memory 17 when the user issues the name of the other party (for example, Taro Suzuki) to call. May be. If the determination in step S44 is negative, the process proceeds to step S48. Further, when the user uses the telephone function, there are a case where the mobile device 10 is held with the right hand and a case where the mobile device 10 is held with the left hand. Display the phone application.
  • step S48 the control unit 20 determines whether or not the user holds the portable device 10 in the pattern 4.
  • the pattern 4 is, for example, a pattern in which the portable device 10 is held in a vertical position and the position of the user's mouth faces the portable device 10 as shown in FIG. 7C. That is, it is a way of holding the user's mouth that can be imaged by the front imaging unit 11.
  • the control unit 20 proceeds to step S50, displays an icon of a voice control application, and then proceeds to step S16 in FIG.
  • step S52 determines whether or not the user holds the portable device 10 in the pattern 4.
  • the pattern 4 is, for example, a pattern in which the portable device 10 is held in a vertical position and the position of the user's mouth faces the portable device 10 as shown in FIG. 7C. That is, it is a way of holding the user's mouth that can be imaged by the front imaging unit 11.
  • the control unit 20 proceeds to step S50, displays an icon of a voice control application, and then proceeds to step S16 in
  • step S52 the control unit 20 determines whether or not the user holds the portable device 10 in the pattern 5.
  • the pattern 5 is, for example, a holding pattern as shown in FIG.
  • the control unit 20 proceeds to step S54.
  • step S54 the control unit 20 determines whether or not the screen scrolling hand has moved. If the determination here is affirmed, the control unit 20 displays a browser icon on the display 13 in step S56. On the other hand, if the determination in step S54 is negative, the process proceeds to step S58.
  • step S58 the control unit 20 determines whether or not there has been a hand movement for character input. If the determination is affirmed, the control unit 20 displays a mailer icon on the display 13 in step S60. On the other hand, if the determination in step S54 is negative, that is, if there is no hand movement in FIGS. 8B and 8C, the process proceeds to step S62.
  • the control unit 20 displays browser and mailer icons on the display 13.
  • the control unit 20 may display the browser and the mailer icons side by side.
  • the control unit 20 should display the mailer with a higher priority than the browser. Good.
  • step S16 the process proceeds to step S16 in FIG. If the determination in step S52 is negative, that is, if the user holds the mobile device 10 does not correspond to any of the patterns 1 to 5 (if the icon is not displayed on the display 13). In addition, the process proceeds to step S16 in FIG.
  • step S16 the control unit 20 determines whether or not an icon is displayed on the display 13. When judgment here is denied, it returns to step S10. On the other hand, if the determination in step S16 is affirmative, the process proceeds to step S18.
  • step S18 the control unit 20 waits until an application is selected by the user (until the application icon to be activated is tapped). Then, when an application is selected by the user, the control unit 20 activates the selected application in step S20, and ends all the processes in FIG.
  • control unit 20 assigns functions to the touch sensors 18A to 18F according to the activated application. This will be specifically described below.
  • the control unit 20 allocates an annular region 118a around the rear imaging unit 12 in the touch sensor 18B to the zoom operation as shown in FIG.
  • the control unit 20 assigns a region 118b near the corner of the touch sensor 18B to an operation for adjustment.
  • an operation for determining an adjustment target is assigned to the touch sensor 18A on the display 13 side.
  • the control unit 20 assigns the region 118c in the vicinity of both ends in the longitudinal direction of the touch sensor 18E to the release operation.
  • a piezoelectric element for example, a piezo element
  • the touch sensor surface the first, second, and fifth surfaces in the above example
  • notification by vibration of the piezoelectric elements may be performed in order with a time difference.
  • piezoelectric elements are provided on the right and left sides of the fifth surface (touch sensor 18E), and the two piezoelectric elements are vibrated in the same phase.
  • the user may be notified that a plurality of release functions have been assigned.
  • the touch sensor 18E on the fifth surface has a user's finger on the left side, only the left piezoelectric element may be driven to notify the user that the release is possible with the left finger. .
  • the user in response to the user touching the adjustment area 118b provided on the second surface or the determination area provided on the first surface, the user operates the piezoelectric element on the second surface or the first surface to drive the user. May be notified by touch.
  • the piezoelectric element provided on the first surface or the surface on which the user's finger is present is vibrated to the user.
  • a change in display on the display 13 may be notified, and the piezoelectric element may be vibrated in accordance with a subsequent user operation.
  • the control unit 20 also performs vibration control of the piezoelectric element that generates vibration.
  • the user can intuitively perform an operation similar to the operation normally performed with a single-lens reflex camera, a compact digital camera, or the like (an operation that rotates the zoom ring in the annular region 118a).
  • the camera application activated on the mobile device 10 can be operated. Further, by assigning the functions to the touch sensors 18A to 18F substantially symmetrically as described above, the functions are assigned to positions that are easy for the user to operate regardless of whether the user is right-handed or left-handed. Can do. In addition, since various operations are assigned to different surfaces of the mobile device 10, smooth operation can be realized without the user's fingers crossing (interfering) with each other.
  • control unit 20 assigns necessary operation functions to the touch sensors 18A to 18F.
  • control unit 20 assigns a screen scroll function to the touch sensors 18E and 18F.
  • control unit 20 assigns a function capable of character input according to the number of fingers moved and which finger is moved to the touch sensor.
  • each determination (S30, S40, S44, S48, S52) of FIG. 6 is an example. Therefore, the order may be changed as necessary. Further, a part of each process / determination in FIG. 6 may be omitted.
  • the touch sensors 18A to 18F are provided on the surface of the mobile device 10, and the control unit 20 performs the mobile operation by the user based on the detection results of the touch sensors 18A to 18F.
  • the method of holding the device 10 is determined, an application icon corresponding to the determination result is displayed on the display 13, and a function corresponding to the application to be activated is assigned to the touch sensors 18A to 18F. Therefore, in the present embodiment, when the user holds the mobile device 10 to use a predetermined application, the icon of the predetermined application is displayed on the display 13. There is no need to search for and select an icon of an application to be used from among the icons. Thereby, the usability of the mobile device 10 can be improved.
  • the user can easily start an application to be used. Usability can be improved.
  • functions are assigned to the touch sensors 18A to 18F according to the application, the operability in the application can be improved.
  • control part 20 is based on the user's imaging result by the front imaging part 11, and the difference in how the portable device 10 is held by the user (as shown in FIG. 5B or FIG. 5C). Difference in holding method) and an application icon is displayed on the display 13 in accordance with the determination result. Based on whether the portable device 10 is held in front of the face or in front of the chest, etc. Thus, it is possible to appropriately display icons of applications that are likely to be used in the future.
  • control unit 20 displays an application icon on the display 13 based on the movement of the user's finger on the touch sensor 18A (see FIG. 8), so that it is portable like a browser or a mailer. Even when the way of holding the device 10 is almost the same, the icon of the application that the user intends to use can be appropriately displayed on the display 13 from the movement of the finger.
  • the control unit 20 displays a plurality of application icons on the display 13 with priorities. Thereby, even if the icons of a plurality of applications are displayed on the display 13 according to how the portable device 10 is held, the user is highly likely to use them by displaying them with priorities. Makes it easier to select an application.
  • the user can observe a finger (for example, an index finger) while looking at the display 13. ) Can be used to operate the mobile device 10.
  • a finger for example, an index finger
  • the operability of the mobile device 10 is improved, and various operations using the thumb or index finger are possible.
  • control unit 20 assigns a function for selecting an adjustment menu related to an application to be activated to the touch sensor 18A (a function for selecting an aperture or an exposure if the camera is a digital camera), and a function regarding an adjustment degree of the application to be activated to the touch sensor 18B Since a function (such as increasing the aperture) can be assigned, the portable device 10 can be operated by the same operation (pseudo operation on the touch panel) as a normal device (for example, a single-lens reflex camera).
  • the control unit 20 displays an application icon based on how to hold the mobile device 10 .
  • the present invention is not limited to this, and for example, further considering the position and orientation of the user.
  • An icon of an application that is likely to be used by the user may be displayed.
  • the control unit 20 determines that the user is highly likely to use the game, and displays the game application icon on the display 13 and the camera application icon.
  • control unit 20 displays a navigation application icon when the user is walking on the road, and displays a transfer guidance application icon when the user is in the station.
  • control unit 20 is not limited to determining whether the user is sitting or standing by using the detection result of the acceleration sensor 19, but may be determined using the imaging result of the rear imaging unit 12, for example. Good. For example, if the knee is imaged by the rear imaging unit 12, the control unit 20 determines that the user is sitting, and if the shoe is imaged, determines that the user is standing. Good.
  • the position of the mobile device 10 may be detected using wireless WiFi connection destination information (base station information).
  • a touch sensor may be provided on the first surface (front surface) of the mobile device 10 and at least one other surface.
  • a transmissive double-sided display may be adopted as the display 13.
  • the other side (rear surface) can be visually recognized. For this reason, it becomes possible to operate the touch sensor 18B while visually recognizing the position of the finger on the second surface (back surface).
  • the user's attribute may be detected from the fingerprint or the like by the touch sensors 18A to 18F, and the control unit 20 may display an application icon corresponding to the attribute.
  • the control unit 20 can display (preferentially display) applications that are frequently used by the user, or can not display applications that the user should not use (for example, a parental lock function).
  • fingerprint detection using a touch sensor is disclosed in, for example, Japanese Patent Application Laid-Open No. 2010-55156.
  • the control unit 20 may interfere with driving when it can be seen from the imaging result of the rear imaging unit 12 that the user is sitting in the driver's seat of the car (when the steering wheel is imaged from the front). The activation of certain applications may be restricted.
  • control unit 20 detects that the user has shaken the mobile device 10 with the acceleration sensor 19, and indicates how to hold the mobile device 10 at the time when the mobile device 10 is shaken. It is good also as discriminating using 18F. By doing so, it is possible to suppress malfunctions such as an icon being displayed when the user does not need it.
  • a pressure sensor may be provided on each surface together with the touch sensor.
  • the control unit 20 may recognize different operations depending on whether the user grips the mobile device 10 strongly or weakly. For example, the control unit 20 may capture images with high image quality when the user grips strongly while the camera application is running, and may capture images with low image quality when gripped weakly.
  • the casing of the mobile device 10 may be manufactured from a material that can be flexibly changed.
  • the control unit 20 may display an application icon or accept an operation in accordance with a change in form (twist or the like) caused by a user operation.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Description

電子機器
　本発明は、電子機器に関する。
　従来、携帯電話機の側面に設けた感圧センサの出力に基づいて表示内容を制御することで、操作者に特に意識をさせることなく、操作者にとって適切な表示を行う技術について提案されている（例えば、特許文献１参照）。
特開２００８－２７１８３号公報
　しかしながら、上記特許文献１では、左右いずれの手で携帯電話機を保持しているか等に基づいて文字ボタンの配列や大きさ等を変更するのみであった。
　本発明は上記の課題に鑑みてなされたものであり、使い勝手のよい電子機器を提供することを目的とする。
　本発明の電子機器は、第１面と、当該第１面以外の少なくとも第２面とに設けられるタッチセンサと、前記タッチセンサの検出結果に基づいて、ユーザによる持ち方を特定し、当該特定結果に応じたアプリケーションの情報をディスプレイ上に表示する処理部と、前記タッチセンサに、起動するアプリケーションに応じた機能を割り当てる割り当て部と、を備えている。
　この場合において、前記割り当て部は、前記第２面に設けられるタッチセンサに、指の動きに応じた操作を割り当てることができる。また、前記割り当て部は、前記第１面に設けられるタッチセンサに、起動するアプリケーションに関する調整メニューの選択機能を割り当て、前記第２面に設けられるタッチセンサに、起動するアプリケーションの調整度合いに関する機能を割り当てることとしてもよい。
　また、本発明の電子機器では、前記第１面に設けられた、前記ユーザを撮像可能な撮像部を備え、前記処理部は、前記撮像部による前記ユーザの撮像結果に基づいて、前記ユーザによる持ち方を特定し、当該特定結果に応じたアプリケーションの情報を前記ディスプレイ上に表示することとしてもよい。また、姿勢を検出する姿勢検出部を備え、前記処理部は、前記姿勢検出部による検出結果に基づいて、前記ディスプレイ上にアプリケーションの情報を表示することとしてもよい。この場合、前記姿勢検出部は、加速度センサ及び撮像装置の少なくとも一方を含むこととしてもよい。
　また、本発明の電子機器では、位置を検出する位置検出部を備え、前記処理部は、前記位置検出部による検出結果に基づいて、前記ディスプレイ上にアプリケーションの情報を表示することとしてもよい。また、前記処理部は、前記タッチセンサの検出結果に基づいて、ユーザの指の動きを特定し、当該特定結果に応じたアプリケーションの情報を前記ディスプレイ上に表示することとしてもよい。
　また、前記処理部は、前記タッチセンサの検出結果からユーザの属性を特定し、当該特定結果に応じたアプリケーションの情報を前記ディスプレイ上に表示することとしてもよい。更に、前記処理部は、前記ディスプレイ上に複数のアプリケーションの情報を優先順位をつけて表示することとしてもよい。
　本発明の電子機器は、前記第１面を含む６面を有する直方体形状を有し、前記直方体形状の６面それぞれに、前記タッチセンサが設けられていることとしてもよい。また、ユーザによる保持力を検出する感圧センサを備え、前記割り当て部は、前記感圧センサに、起動するアプリケーションに応じた機能を割り当てることとしてもよい。また、前記ディスプレイは、透過型ディスプレイであることとしてもよい。
　本発明の電子機器では、前記第１面と前記第２面とのそれぞれに振動を発生する振動部を設けることとしてもよい。また、前記処理部の処理と前記割り当て部の割り当てとの少なくとも一方に応じて、前記振動部を振動させる制御部を備えていてもよい。
　本発明は、使い勝手のよい電子機器を提供することができるという効果を奏する。
一実施形態に係る携帯機器の六面図である。 携帯機器の構成を示すブロック図である。 制御部の処理を示すフローチャートである。 図３のステップＳ１４の具体的処理を示すフローチャートである。 図５（ａ）～図５（ｃ）は、持ち方のパターン１について説明するための図である。 図６（ａ）および図６（ｂ）は、持ち方のパターン２について説明するための図である。 図７（ａ）～図７（ｄ）は、持ち方のパターン３，４について説明するための図である。 図８（ａ）～図８（ｃ）は、持ち方のパターン５について説明するための図である。 タッチセンサへの機能の割り当ての例を示す図である。
　以下、一実施形態に係る携帯機器について、図１～図９に基づいて、詳細に説明する。図１には、一実施形態に係る携帯機器１０の六面図が模式的に示されている。また、図２には、携帯機器１０のブロック図が示されている。
　携帯機器１０は、携帯電話やスマートフォン、ＰＨＳ（Personal Handy-phone System）、ＰＤＡ（Personal Digital Assistant）などの機器である。携帯機器１０は、電話機能、インターネット等に接続するための通信機能、及びプログラムを実行するためのデータ処理機能等を有する。携帯機器１０は、一例として、図１に示すように、長方形の第１面（前面）、第２面（背面）及び第３～第６面（側面）を有する薄板状の形状を有し、片手の手のひらで把持することができる程度の大きさを有している。
　携帯機器１０は、図２に示すように、前面撮像部１１と、背面撮像部１２と、ディスプレイ１３と、スピーカ１４と、マイク１５と、ＧＰＳ（Global Positioning System）モジュール１６と、フラッシュメモリ１７と、タッチセンサ１８Ａ～１８Ｆと、加速度センサ１９と、制御部２０と、を備える。
　前面撮像部１１は、第１面（前面）の上端部近傍に設けられ、撮影レンズや撮像素子（ＣＣＤ（Charge Coupled Device）およびＣＭＯＳ（Complementary Metal Oxide Semiconductor）デバイス）を有する。前面撮像部１１は、一例として、携帯機器１０を保持したユーザの顔を撮像する。
　背面撮像部１２は、第２面（背面）の中央やや上側に設けられ、前面撮像部１１と同様、撮影レンズや撮像素子を有する。背面撮像部１２は、一例として、携帯機器１０を保持したユーザの足元を撮像する。
　ディスプレイ１３は、例えば液晶表示素子を用いたデバイスであり、画像、各種情報、及びボタン等の操作入力用画像を表示する。ディスプレイ１３は、図１に示してあるように長方形の形状をしており、第１面のほぼ全面を占める面積を有している。
　スピーカ１４は、第１面のディスプレイ１３の上側に設けられ、ユーザが電話をかけるときに、ユーザの耳近傍に位置するようになっている。マイク１５は、第１面のディスプレイ１３の下側に設けられ、ユーザが電話をかけるときに、ユーザの口近傍に位置するようになっている。すなわち、図１に示してあるように、スピーカ１４とマイク１５とは、ディスプレイ１３を挟んで、携帯機器１０の短辺側に設けられている。
　ＧＰＳモジュール１６は、携帯機器１０の位置（例えば緯度や経度）を検出するセンサである。フラッシュメモリ１７は、不揮発性の半導体メモリであり、制御部２０が実行するプログラムや、制御部２０が実行する処理において用いるパラメータや、電話番号、メールアドレスなどのデータに加えて、目、鼻、口といった顔のパーツに関するデータ等が格納されている。
　タッチセンサ１８Ａは、第１面においてディスプレイ１３の表面を覆う状態で設けられており、ユーザがタッチセンサ１８Ａに触れたという情報や、ユーザの指の動きに応じた情報を入力する。タッチセンサ１８Ｂは、第２面のほぼ全面を覆う状態で設けられており、ユーザがタッチセンサ１８Ｂに触れたという情報や、ユーザの指の動きに応じた情報を入力する。その他のタッチセンサ１８Ｃ～１８Ｆは、第３～第６面をほぼ覆う状態で設けられており、タッチセンサ１８Ａ，１８Ｂと同様、ユーザがタッチセンサに触れたという情報や、ユーザの指の動きに応じた情報を入力する。すなわち、本実施形態では、携帯機器１０の６面全てにタッチセンサ１８Ａ～１８Ｆが設けられている。なお、タッチセンサ１８Ａ～１８Ｆは、静電容量式のタッチセンサであるものとし、ユーザの指が複数箇所に接触したことを判別できるものとする。
　加速度センサ１９は、圧電素子や歪ゲージなどを用いることができる。加速度センサ１９は、本実施形態ではユーザが立っているか、座っているか、歩いているか、走っているかなどを検出する。なお、加速度センサ１９を用いてユーザが立っているか、座っているか、歩いているか、走っているかを検出する方法については、例えば日本特許第３５１３６３２号（特開平８－１３１４２５号公報）に開示されている。また、加速度センサ１９に代えて、もしくは加速度センサ１９と併用して角速度を検出するジャイロセンサを用いてもよい。
　なお、携帯機器１０が横位置で保持されているか、縦位置で保持されているかを判定する姿勢センサを設けてもよい。姿勢センサとしては、各タッチセンサ１８Ａ～１８Ｆが検出した指の位置を利用したり、前面撮像部１１の撮像結果（ユーザの顔の撮像結果）を利用してもよい。また、専用の姿勢センサとして例えば３軸の加速度センサやジャイロセンサを用いてもよく、前述の各タッチセンサ１８Ａ～１８Ｆや前面撮像部１１などと組み合わせて用いてもよい。また、姿勢センサとして加速度センサを用いた場合には携帯機器１０の傾きを検出するようにしてもよく、加速度センサ１９を兼用してもよい。
　制御部２０は、ＣＰＵを有し、携帯機器１０全体を統括的に制御する。本実施形態においては、制御部２０は、ユーザが携帯機器１０で所定のアプリケーションを実行するときの携帯機器１０の持ち方を判別し、当該持ち方に応じたアプリケーションのアイコン（情報）を表示する処理などを実行する。なお、アプリケーションの一例として音声認識機能を備えたアプリケーションを備えることができる。
　なお、本実施形態では、携帯機器１０の６面全てにタッチセンサが設けられているので、外部機器との通信や充電等は、無線通信（トランスファージェットや無線ＷｉＦｉ）や無接点充電などにより行うことが好ましい。
　次に、制御部２０の処理について、図３及び図４のフローチャートに沿って、詳細に説明する。なお、図３の処理は、携帯機器１０が待受状態（アプリケーションが起動していない状態）で実行される処理である。なお、前提として、携帯機器１０のマニュアル等においては、ユーザが携帯機器１０で所定のアプリケーションを起動したい場合には、当該アプリケーションを利用する際の携帯機器１０の持ち方をユーザが再現する必要がある旨定められている（記載されている）ものとする。したがって、例えば、ユーザがカメラのアプリケーションを利用したい場合には、図５（ｂ）のような持ち方をし、ゲームのアプリケーションを利用したい場合には、図６（ｂ）のような持ち方をするものとする。
　図３の処理では、ステップＳ１０において、制御部２０が、タッチセンサ１８Ａ～１８Ｆの出力があるまで待機する。すなわち、制御部２０は、ユーザによって携帯機器１０が保持されるまで待機する。
　ユーザによって携帯機器１０が保持されると、制御部２０は、ステップＳ１２に移行し、タッチセンサの出力を取得する。なお、制御部２０は、タッチセンサ１８Ａ～１８Ｆの出力を、この出力があった場合に常に取得するようにしてもよいが、例えば、ユーザが何らかのアクション（例えば、ディスプレイをｎ回タップしたり、携帯機器１０を強く振るなど）した数秒後のタッチセンサ１８Ａ～１８Ｆの出力のみを取得するようにしてもよい。
　次いで、ステップＳ１４では、制御部２０が、タッチセンサ１８Ａ～１８Ｆの出力に応じたアプリケーションの情報を表示する処理を実行する。具体的には、制御部２０は、図４のフローチャートに沿った処理を実行する。
　図４では、まず、ステップＳ３０において、制御部２０が、持ち方がパターン１であったか否かを判断する。ここで、パターン１とは、例えば、図５（ａ）に示すような持ち方のパターンであるものとする。なお、図５（ａ）の●は、第２面（背面）のタッチセンサ１８Ｂによる出力を意味し、○はその他の面のタッチセンサによる出力を意味する。この図５（ａ）に示す持ち方のパターン１では、図５（ｂ）、図５（ｃ）に示すようにユーザが携帯機器１０を横位置（ユーザが携帯機器１０を横長の状態で保持している位置）で保持している可能性が高い。ステップＳ３０の判断が肯定されると、制御部２０は、ステップＳ３２に移行する。
　ステップＳ３２では、制御部２０は、前面撮像部１１を用いた撮像を実行する。次いで、ステップＳ３４では、制御部２０は、撮像結果に基づいて、ユーザが顔の前で携帯機器１０を持っているか否かを判断する。この場合、制御部２０は、撮像画像における顔の位置や、目の位置、鼻の形等に基づいて、ユーザが顔の前で携帯機器１０を持っているのか、顔の下側で携帯機器１０を持っているのかを判断する。これに代えて、またはこれと併せて、制御部２０は、前述の姿勢センサにより携帯機器１０の傾きを検出することにより、ユーザが携帯機器１０を保持している位置を判断してもよい。具体的には、図５（ｂ）に示すようにユーザが携帯機器１０を顔の前で保持している場合には、携帯機器１０が垂直に近い状態で保持されている。一方、図５（ｃ）に示すようにユーザが携帯機器１０を顔よりも下側で保持している場合には、図５（ｂ）に示した状態よりも携帯機器１０を傾斜した状態で保持している。このように、制御部２０は、携帯機器１０の傾斜の具合からユーザが携帯機器１０をどの位置で保持しているかを判断してもよい。
　ステップＳ３４の判断が肯定された場合、すなわち、ユーザが携帯機器１０を図５（ｂ）に示すように持っている場合には、制御部２０は、ステップＳ３６に移行し、カメラのアプリケーションのアイコンをディスプレイ１３上に表示する。なお、ステップＳ３６において、制御部２０が、ゲームのアプリケーションのアイコンを表示しないのは、図５（ｂ）のような姿勢では、ユーザがゲームを実行する可能性が低いためである。ステップＳ３６の後は、図３のステップＳ１６に移行する。一方、ステップＳ３４の判断が否定された場合、すなわち、ユーザが携帯機器１０を図５（ｃ）に示すように持っている場合には、制御部２０は、ゲーム及びカメラのアプリケーションのアイコンをディスプレイ１３上に表示する。なお、この場合、ユーザは、片手で携帯機器１０を保持しているので、カメラのアプリケーションを使おうとしている（カメラで下方を撮影しようとしている）可能性のほうがゲームのアプリケーションを使おうとしている可能性よりも高いと考えられる。したがって、制御部２０は、カメラのアプリケーションのアイコンの優先順位をゲームのアプリケーションのアイコンよりも高くして、表示することとすればよい。この場合、制御部２０は、例えば、カメラのアプリケーションのアイコンをゲームのアプリケーションのアイコンよりも大きく表示したり、カメラのアプリケーションのアイコンをゲームのアプリケーションのアイコンよりも上側に表示したりするなどすればよい。ステップＳ３８の処理が行われた後は、図３のステップＳ１６に移行する。なお、ユーザが図５（ｂ）に示す姿勢で両手で携帯機器１０を保持した場合もカメラのアプリケーションの表示を目立つようにする。
　一方、図４のステップＳ３０の判断が否定された場合には、制御部２０は、ステップＳ４０に移行する。ステップＳ４０では、制御部２０は、ユーザによる携帯機器１０の持ち方がパターン２であるか否かを判断する。ここで、パターン２とは、例えば、図６（ａ）に示すような持ち方のパターンであるものとする。この図６（ａ）に示す持ち方のパターン２では、図６（ｂ）に示すようにユーザが携帯機器１０を横位置で保持している可能性が高い。したがって、ステップＳ４０の判断が肯定されると、制御部２０は、ステップＳ４２に移行し、ゲームのアプリケーションのアイコンを表示した後、図３のステップＳ１６に移行する。
　これに対し、ステップＳ４０の判断が否定された場合には、ステップＳ４４において、制御部２０は、ユーザによる携帯機器１０の持ち方がパターン３であるか否かを判断する。ここで、パターン３とは、例えば、図７（ａ）に示すような持ち方のパターンであるものとする。この図７（ａ）に示す持ち方のパターン３では、図７（ｂ）に示すようにユーザが携帯機器１０を縦位置（ユーザが携帯機器１０を縦長の状態で保持している位置）で保持している可能性が高い。したがって、ステップＳ４４の判断が肯定されると、制御部２０は、ステップＳ４６に移行し、電話のアプリケーションのアイコンを表示した後、図３のステップＳ１６に移行する。なお、電話のアプリケーションには、様々なアプリケーションが存在する場合がある。例えば、携帯機器１０が有する電話機能のほか、インターネットを利用した電話のアプリケーション（スカイプやバイバーなど）もある。このような場合には、全てのアプリケーションを表示することとしてもよいし、よく利用するアプリケーションのアイコンを１又は複数表示するようにしてもよい。このステップＳ４６に代えて、図７（ｂ）に示すようにユーザの耳が第１面に触れていることをタッチセンサ１８Ａで検出した場合には、声で携帯機器１０を操作するアプリケーションであるボイルコントロールのアプリケーションを起動してもよい。この場合、ユーザが電話を掛けたい相手の名前（例えば、鈴木太郎）を発したときに、制御部２０が、フラッシュメモリ１７に記憶されている電話番号を用いて自動的に電話をかけるようにしてもよい。なお、ステップＳ４４の判断が否定された場合には、ステップＳ４８に移行する。また、ユーザが電話機能を利用する際に、右手で携帯機器１０を保持する場合と左手で携帯機器１０を保持する場合とがあるので、図７（ａ）の持ち方を反転させた場合も電話のアプリケーションを表示すればよい。
　ステップＳ４８では、制御部２０は、ユーザによる携帯機器１０の持ち方がパターン４であるか否かを判断する。ここで、パターン４とは、例えば、図７（ｃ）に示すように携帯機器１０を縦位置でかつユーザの口の位置と携帯機器１０が対向する持ち方のパターンであるものとする。すなわち、前面撮像部１１によりユーザの口が撮像できる持ち方である。この図７（ｃ）に示す持ち方のパターン４では、図７（ｄ）に示すようにユーザが携帯機器１０を保持している可能性が高い。したがって、ステップＳ４８の判断が肯定されると、制御部２０は、ステップＳ５０に移行し、ボイスコントロールのアプリケーションのアイコンを表示した後、図３のステップＳ１６に移行する。一方、ステップＳ４８の判断が否定された場合には、ステップＳ５２に移行する。
　ステップＳ５２では、制御部２０は、ユーザによる携帯機器１０の持ち方がパターン５であるか否かを判断する。ここで、パターン５とは、例えば、図８（ａ）に示すような持ち方のパターンであるものとする。この図８（ａ）に示す持ち方のパターン５では、図８（ｂ）や図８（ｃ）に示すようにユーザが携帯機器１０を縦位置で保持している可能性が高い。このステップＳ５２の判断が肯定された場合には、制御部２０は、ステップＳ５４に移行する。
　ここで、携帯機器１０のマニュアルでは、ユーザがブラウザを利用したいときには、図８（ｂ）に示すように、指をディスプレイ１３上（タッチセンサ１８Ａ上）でスクロールする動作を擬似的に行う必要があり、メーラ（電子メールの作成、送受信、保存、管理を行なうソフトウエア）を利用したいときには、図８（ｃ）に示すように、メーラで実際に行う文字入力の動作を擬似的に行う必要がある旨が定められている（記載されている）ものとする。
　ステップＳ５４では、制御部２０は、画面スクロールの手の動きがあったか否かを判断する。ここでの判断が肯定された場合には、制御部２０は、ステップＳ５６において、ブラウザのアイコンをディスプレイ１３上に表示する。一方、ステップＳ５４の判断が否定された場合には、ステップＳ５８に移行する。
　ステップＳ５８では、制御部２０は、文字入力の手の動きがあったか否かを判断する。ここでの判断が肯定された場合には、制御部２０は、ステップＳ６０において、メーラのアイコンをディスプレイ１３上に表示する。一方、ステップＳ５４の判断が否定された場合、すなわち図８（ｂ）や図８（ｃ）の手の動きが無かった場合には、ステップＳ６２に移行する。
　ステップＳ６２に移行した場合、制御部２０は、ブラウザ及びメーラのアイコンをディスプレイ１３上に表示する。制御部２０は、ブラウザとメーラの優先順位が判断できない場合には、ブラウザとメーラのアイコンを並べて表示するようにすればよい。これに対し、ブラウザとメーラのうちユーザが普段からメーラを頻繁に使用しているような場合には、制御部２０は、メーラの優先順位をブラウザよりも高くして、表示するようにすればよい。
　ステップＳ５６，Ｓ６０，Ｓ６２の各処理が終了した後は、図３のステップＳ１６に移行する。なお、ステップＳ５２の判断が否定された場合、すなわち、ユーザによる携帯機器１０の持ち方が、パターン１～５のいずれにも該当しなかった場合（アイコンがディスプレイ１３上に表示されなかった場合）にも、図３のステップＳ１６に移行する。
　図３に戻り、ステップＳ１６では、制御部２０は、ディスプレイ１３にアイコンが表示されたか否かを判断する。ここでの判断が否定された場合には、ステップＳ１０に戻る。一方、ステップＳ１６の判断が肯定された場合には、ステップＳ１８に移行する。
　ステップＳ１８に移行すると、制御部２０は、ユーザによってアプリケーションが選択されるまで（起動するアプリケーションのアイコンがタップされるまで）待機する。そして、ユーザによってアプリケーションが選択されると、制御部２０は、ステップＳ２０において、選択されたアプリケーションを起動し、図３の全処理を終了する。
　ここで、制御部２０は、アプリケーションを起動した際に、当該起動したアプリケーションに応じて、各タッチセンサ１８Ａ～１８Ｆに機能を割り当てるものとする。以下、具体的に説明する。
　例えば、制御部２０は、カメラのアプリケーションを起動した場合、図９に示すように、タッチセンサ１８Ｂのうち、背面撮像部１２の周囲の円環状の領域１１８ａをズーム操作に割り当てる。また、制御部２０は、タッチセンサ１８Ｂの角部近傍の領域１１８ｂを調整のための操作に割り当てる。この場合、調整する対象（絞りや露出など）を決定するための操作は、ディスプレイ１３側のタッチセンサ１８Ａに割り当てるものとする。また、制御部２０は、タッチセンサ１８Ｅの長手方向両端部近傍の領域１１８ｃをレリーズ操作に割り当てる。
　なお、各タッチセンサ１８Ａ～１８Ｆのうち機能の割り当てがあるタッチセンサ面（上述の例では、第１、２、５面）に圧電素子（例えばピエゾ素子）を設けて機能が割り当てられた面を振動させることにより、触覚によりユーザに機能の割り当てを報知することができる。複数の面に機能が割り当てられた場合には、時間差をつけて順番に圧電素子の振動による報知を行えばよい。また、図９に示すように複数のレリーズ１１８ｃが割り当てられる場合には、第５面（タッチセンサ１８Ｅ）の右側と左側とに圧電素子を設けて、この２つの圧電素子を同位相で振動させて、ユーザに複数のレリーズ機能が割り当てられたことを報知してもよい。また、第５面のタッチセンサ１８Ｅに左側にユーザの指がある場合には、左側の圧電素子のみを駆動させて、ユーザに左指によりレリーズが可能であることを報知させるようにしてもよい。また、第２面に設けられた調整領域１１８ｂや、第１面に設けられた決定領域をユーザがタッチしたのに応じて、第２面や第１面の圧電素子を駆動させてユーザに操作を受け付けたことを触覚により報知してもよい。
　更に、携帯機器１０の持ち方に応じてディスプレイ１３の表示を変更する場合（図４のフローチャート）に、第１面や、ユーザの指がある面に設けられた圧電素子を振動させてユーザにディスプレイ１３の表示の変更を報知してもよく、この後のユーザの操作に応じて圧電素子を振動させてもよい。なお、振動を発生させる圧電素子の振動制御も制御部２０により行われる。
　このようにすることで、ユーザは、一眼レフカメラやコンパクトデジタルカメラ等で通常行う操作と同様の操作（円環状の領域１１８ａでズームリングを回転させるような操作）を行うことで、直感的に、携帯機器１０で起動したカメラのアプリケーションを操作することができる。また、上記のように各タッチセンサ１８Ａ～１８Ｆに機能を略左右対称に割り当てることで、ユーザが右利きであるか左利きであるかに関わらず、ユーザが操作しやすい位置に各機能を割り当てることができる。また、携帯機器１０の異なる面に各種操作を割り当てているのでユーザの指同士が交差（干渉）することがなくスムーズな操作を実現することができる。
　また、例えば、制御部２０は、ゲームのアプリケーションを起動した場合には、各タッチセンサ１８Ａ～１８Ｆに、必要な操作の機能を割り当てるものとする。その他、ブラウザやメーラを起動した場合には、制御部２０は、タッチセンサ１８Ｅや１８Ｆに画面スクロールの機能を割り当てるものとする。
　また、例えば、制御部２０は、文字入力が必要なアプリケーションでは、動かした指の本数や動かしたのがどの指かに応じた文字入力が可能な機能をタッチセンサに割り当てる等する。
　なお、図６の各判断（Ｓ３０，Ｓ４０，Ｓ４４，Ｓ４８，Ｓ５２）の順番は一例である。したがって、必要に応じて、適宜順番を変更してもよい。また、図６の各処理・判断の一部を省略するなどしてもよい。
　以上、詳細に説明したように、本実施形態によると、携帯機器１０の面にタッチセンサ１８Ａ～１８Ｆが設けられ、制御部２０は、タッチセンサ１８Ａ～１８Ｆの検出結果に基づいて、ユーザによる携帯機器１０の持ち方を判別し、当該判別結果に応じたアプリケーションのアイコンをディスプレイ１３上に表示し、かつ、タッチセンサ１８Ａ～１８Ｆに、起動するアプリケーションに応じた機能を割り当てる。したがって、本実施形態では、ユーザが所定のアプリケーションを利用しようと携帯機器１０を持ったときに、当該所定のアプリケーションのアイコンがディスプレイ１３上に表示されるので、ユーザは、従来のように多数のアイコンの中からこれから利用するアプリケーションのアイコンを探しだして、選択するという操作をしなくてもよくなる。これにより携帯機器１０の使い勝手を向上することができる。また、ユーザが緊急事態で動揺している場合や、泥酔状態で手元がおぼつかない状態にある場合であっても、簡易に利用したいアプリケーションを起動することができるので、この点からも、携帯機器１０の使い勝手を向上することができる。また、本実施形態では、アプリケーションに応じてタッチセンサ１８Ａ～１８Ｆに機能が割り当てられるため、アプリケーションにおける操作性を向上することができる。
　また、本実施形態では、制御部２０は、前面撮像部１１によるユーザの撮像結果に基づいて、ユーザによる携帯機器１０の持ち方の違い（図５（ｂ）や図５（ｃ）のような持ち方の違い）を判別し、当該判別結果に応じてアプリケーションのアイコンをディスプレイ１３上に表示するので、携帯機器１０を顔の前で持っているのか胸の前で持っているのか等に基づいて、これから利用する可能性の高いアプリケーションのアイコン表示を適切に行うことが可能となる。
　また、本実施形態では、制御部２０は、タッチセンサ１８Ａ上でのユーザの指の動きに基づいてアプリケーションのアイコンをディスプレイ１３上に表示する（図８参照）ので、ブラウザやメーラのように携帯機器１０の持ち方がほぼ同一である場合でも指の動きから、ユーザが利用しようとしているアプリケーションのアイコンを適切にディスプレイ１３上に表示することができる。
　また、本実施形態では、制御部２０は、ディスプレイ１３上に複数のアプリケーションのアイコンを優先順位をつけて表示する。これにより、携帯機器１０の持ち方に応じて複数のアプリケーションのアイコンがディスプレイ１３上に表示される場合であっても、優先順位をつけて表示することで、ユーザは、利用する可能性の高いアプリケーションを選択しやすくなる。
　また、本実施形態では、図９で説明したように、ディスプレイ１３とは反対側のタッチセンサ１８Ｂに指の動きに応じた操作を割り当てることで、ユーザは、ディスプレイ１３を見ながら指（例えば人差し指）を動かすことによる携帯機器１０の操作が可能となる。これにより、携帯機器１０の操作性が向上するとともに、親指や人差し指を用いた様々な操作が可能になる。
　また、制御部２０は、タッチセンサ１８Ａに起動するアプリケーションに関する調整メニューの選択機能（デジカメであれば、絞りや露出を選択する機能）を割り当て、タッチセンサ１８Ｂに起動するアプリケーションの調整度合いに関する機能（絞りを大きくするなどの機能）を割り当てることができるので、通常の機器（例えば一眼レフカメラ）と同様の操作（タッチパネル上での擬似的操作）により、携帯機器１０を操作することができる。
　なお、上記実施形態では、制御部２０が、携帯機器１０の持ち方に基づいてアプリケーションのアイコンを表示する場合について説明したが、これに限らず、例えば、ユーザの位置や姿勢を更に考慮して、ユーザが利用する可能性の高いアプリケーションのアイコンを表示することとしてもよい。例えば、カメラとゲームのいずれかを利用する可能性が高い場合において、ＧＰＳモジュール１６による位置検出結果からユーザが電車内に存在していると判断でき、かつ加速度センサ１９の検出結果からユーザが座っていると判断できたとする。この場合、制御部２０は、ユーザが電車内で落ち着いた状態であることから、ユーザはゲームを利用する可能性が高いと判断し、ディスプレイ１３上にゲームのアプリケーションのアイコンをカメラのアプリケーションのアイコンよりも高い優先順位で表示するなどする。また、制御部２０は、ユーザが道を歩いている場合には、ナビゲーションのアプリケーションのアイコンを表示し、ユーザが駅構内に存在しているときには、乗り換え案内のアプリケーションのアイコンを表示するなどする。なお、制御部２０は、ユーザが座っているか立っているかについて、加速度センサ１９の検出結果を用いて判断する場合に限らず、例えば、背面撮像部１２の撮像結果を用いて判断することとしてもよい。例えば、制御部２０は、背面撮像部１２によって膝が撮像された場合には、ユーザが座っていると判断し、靴が撮像された場合には、ユーザが立っていると判断するなどすればよい。
　なお、携帯機器１０（ユーザ）の位置は、無線ＷｉＦｉの接続先情報（基地局情報）を用いて検出するようにしてもよい。
　なお、上記実施形態では、タッチセンサが携帯機器１０の６面全てに設けられた場合について説明したが、これに限られるものではない。例えば、携帯機器１０の第１面（前面）と、その他の少なくとも１面にタッチセンサが設けられることとしてもよい。
　また、上記実施形態では、ディスプレイ１３として、透過型両面ディスプレイを採用してもよい。この場合、第１面（前面）でメニューを視認しつつ、その向こう側（背面）が視認できることになる。このため、第２面（背面）にある指の位置を視認しながらタッチセンサ１８Ｂを操作することが可能となる。
　なお、上記実施形態では、タッチセンサ１８Ａ～１８Ｆによって指紋等からユーザの属性を検出し、制御部２０が、当該属性に応じたアプリケーションのアイコンを表示するようにしてもよい。このようにすることで、ユーザの属性に応じたアイコンの表示が可能となる。例えば、制御部２０は、ユーザがよく利用するアプリケーションを表示（優先的に表示）したり、ユーザが利用してはいけないアプリケーションを表示しないようにすることができる（例えばペアレンタルロック機能など）。なお、タッチセンサを利用した指紋の検出については、例えば、特開２０１０－５５１５６号公報等に開示されている。なお、制御部２０は、背面撮像部１２の撮像結果から、ユーザが車の運転席に座っていることがわかるような場合（ハンドルが正面から撮像されたような場合）には、運転に支障があるアプリケーションの起動を制限するようにしてもよい。
　なお、上記実施形態では、制御部２０は、ユーザが携帯機器１０を振ったことを加速度センサ１９で検出し、当該携帯機器１０を振った時点での携帯機器１０の持ち方をタッチセンサ１８Ａ～１８Ｆを用いて判別することとしてもよい。このようにすることで、ユーザが必要としていないときにアイコンが表示されてしまうなどの誤作動が生じるのを抑制することができる。
　なお、上記実施形態では、タッチセンサとあわせて感圧センサを各面に設けることとしてもよい。この場合、制御部２０は、ユーザが携帯機器１０を強く握った場合と弱く握った場合とで、異なる操作と認識するようにしてもよい。例えば、制御部２０は、カメラのアプリケーションが起動している状態でユーザが強く握った場合には高画質で撮像を行い、弱く握った場合には低画質で撮像するなどしてもよい。
　なお、上記実施形態では、携帯機器１０の筐体を柔軟な形態変化が可能な材料で製造してもよい。この場合、制御部２０は、ユーザの操作による形態の変化（ひねりなど）に応じて、アプリケーションのアイコンを表示したり、操作を受け付けたりするようにしてもよい。
　上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。なお、これまでの説明で引用した公報の開示を援用して本明細書の記載の一部とする。

Claims (20)

  1. 　第１面と、当該第１面以外の少なくとも第２面とに設けられるタッチセンサと、
    　前記タッチセンサの検出結果に基づいて、ユーザによる持ち方を特定し、当該特定結果に応じたアプリケーションの情報をディスプレイ上に表示する処理部と、
    　前記タッチセンサに、起動するアプリケーションに応じた機能を割り当てる割り当て部と、を備える電子機器。
  2. 　前記割り当て部は、前記第２面に設けられるタッチセンサに、指の動きに応じた操作を割り当てる請求項１に記載の電子機器。
  3. 　前記割り当て部は、前記第１面に設けられるタッチセンサに、起動するアプリケーションに関する調整メニューの選択機能を割り当て、前記第２面に設けられるタッチセンサに、起動するアプリケーションの調整度合いに関する機能を割り当てる請求項１又は２に記載の電子機器。
  4. 　前記第１面に設けられた、前記ユーザを撮像可能な撮像部を備え、
    　前記処理部は、前記撮像部による前記ユーザの撮像結果に基づいて、前記ユーザによる持ち方を特定し、当該特定結果に応じたアプリケーションの情報を前記ディスプレイ上に表示する請求項１～３のいずれか一項に記載の電子機器。
  5. 　姿勢を検出する姿勢検出部を備え、
    　前記処理部は、前記姿勢検出部による検出結果に基づいて、前記ディスプレイ上にアプリケーションの情報を表示する請求項１～４のいずれか一項に記載の電子機器。
  6. 　前記姿勢検出部は、加速度センサ及び撮像装置の少なくとも一方を含む請求項５に記載の電子機器。
  7. 　位置を検出する位置検出部を備え、
    　前記処理部は、前記位置検出部による検出結果に基づいて、前記ディスプレイ上にアプリケーションの情報を表示する請求項１～６のいずれか一項に記載の電子機器。
  8. 　前記処理部は、前記タッチセンサの検出結果に基づいて、ユーザの指の動きを特定し、当該特定結果に応じたアプリケーションの情報を前記ディスプレイ上に表示する請求項１～７のいずれか一項に記載の電子機器。
  9. 　前記処理部は、前記タッチセンサの検出結果からユーザの属性を特定し、当該特定結果に応じたアプリケーションの情報を前記ディスプレイ上に表示する請求項１～８のいずれか一項に記載の電子機器。
  10. 　前記処理部は、前記ディスプレイ上に複数のアプリケーションの情報を優先順位をつけて表示する請求項１～９のいずれか一項に記載の電子機器。
  11. 　前記電子機器は、前記第１面を含む６面を有する直方体形状を有し、
    　前記直方体形状の６面それぞれに、前記タッチセンサが設けられている請求項１～１０のいずれか一項に記載の電子機器。
  12. 　ユーザによる保持力を検出する感圧センサを備え、
    　前記割り当て部は、前記感圧センサに、起動するアプリケーションに応じた機能を割り当てる請求項１～１１のいずれか一項に記載の電子機器。
  13. 　前記ディスプレイは、透過型ディスプレイである請求項１～１２のいずれか一項に記載の電子機器。
  14. 　前記第１面と前記第２面とのそれぞれに振動を発生する振動部を設けた請求項１～１３のいずれか一項に記載の電子機器。
  15. 　前記処理部の処理と前記割り当て部の割り当てとの少なくとも一方に応じて、前記振動部を振動させる制御部を備えた請求項１４に記載の電子機器。
  16. 　前記処理部は、前記電子機器が縦位置で保持されているかどうかを特定する請求項１記載の電子機器。
  17. 　前記処理部は、前記電子機器が縦位置で保持されている場合に、ボイスコントロールのアプリケーションを表示または起動する請求項１６記載の電子機器。
  18. 　前記処理部は、前記撮像部が前記ユーザの口を撮像した場合に、ボイスコントロールのアプリケーションを表示または起動する請求項４記載の電子機器。
  19. 　前記処理部は、前記電子機器が垂直に保持されている場合と、前記電子機器が傾斜して保持されている場合とで表示するアプリケーションを変更する請求項５記載の電子機器。
  20. 　前記処理部は、前記ユーザが歩いているかどうかに応じて表示するアプリケーションを変更する請求項５記載の電子機器。
PCT/JP2013/062076 2012-06-15 2013-04-24 電子機器 Ceased WO2013187137A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2014521005A JP6311602B2 (ja) 2012-06-15 2013-04-24 電子機器
US14/408,059 US20150135145A1 (en) 2012-06-15 2013-04-24 Electronic device
CN201380031314.1A CN104380227A (zh) 2012-06-15 2013-04-24 电子设备
US17/215,226 US20210216184A1 (en) 2012-06-15 2021-03-29 Electronic device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012135944 2012-06-15
JP2012-135944 2012-06-15

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US14/408,059 A-371-Of-International US20150135145A1 (en) 2012-06-15 2013-04-24 Electronic device
US17/215,226 Continuation US20210216184A1 (en) 2012-06-15 2021-03-29 Electronic device

Publications (1)

Publication Number Publication Date
WO2013187137A1 true WO2013187137A1 (ja) 2013-12-19

Family

ID=49757972

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/062076 Ceased WO2013187137A1 (ja) 2012-06-15 2013-04-24 電子機器

Country Status (4)

Country Link
US (2) US20150135145A1 (ja)
JP (4) JP6311602B2 (ja)
CN (1) CN104380227A (ja)
WO (1) WO2013187137A1 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016047223A1 (ja) * 2014-09-26 2016-03-31 シャープ株式会社 持ち方判定装置、制御プログラム、および記録媒体
JP2016148900A (ja) * 2015-02-10 2016-08-18 嘉泰 小笠原 電子機器
EP3100144A4 (en) * 2014-01-31 2017-08-23 Hewlett-Packard Development Company, L.P. Touch sensor
JP2018084908A (ja) * 2016-11-22 2018-05-31 富士ゼロックス株式会社 端末装置およびプログラム
JP2019121396A (ja) * 2017-12-29 2019-07-22 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ ユーザー入力とモバイルデバイス動作とを動的に関連付けるデバイス及び方法
WO2020016966A1 (ja) * 2018-07-18 2020-01-23 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JP2022177137A (ja) * 2020-11-16 2022-11-30 マクセル株式会社 携帯情報端末及び携帯情報端末の発呼方法

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013187137A1 (ja) * 2012-06-15 2013-12-19 株式会社ニコン 電子機器
WO2015043652A1 (de) * 2013-09-27 2015-04-02 Volkswagen Aktiengesellschaft Anwenderschnittstelle und verfahren zur unterstützung eines anwenders bei bedienung einer bedieneinheit
KR102189451B1 (ko) * 2013-12-27 2020-12-14 삼성디스플레이 주식회사 전자 기기
US9891743B2 (en) * 2014-05-02 2018-02-13 Semiconductor Energy Laboratory Co., Ltd. Driving method of an input device
CN104898923A (zh) * 2015-05-14 2015-09-09 深圳市万普拉斯科技有限公司 移动终端中通知内容预览控制方法和装置
CN105094281A (zh) * 2015-07-20 2015-11-25 京东方科技集团股份有限公司 用于控制显示装置的控制方法、控制模块和显示装置
CN105847685A (zh) * 2016-04-05 2016-08-10 北京玖柏图技术股份有限公司 一种可通过智能终端App操控单反相机的单反相机控制器
JP2018151852A (ja) * 2017-03-13 2018-09-27 セイコーエプソン株式会社 入力装置、入力制御方法、およびコンピュータープログラム
CN115129112A (zh) * 2021-03-17 2022-09-30 华硕电脑股份有限公司 电子装置
JP7174817B1 (ja) 2021-07-30 2022-11-17 功憲 末次 不適切使用抑制システムおよび不適切使用抑制プログラム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07307989A (ja) * 1994-05-13 1995-11-21 Matsushita Electric Ind Co Ltd 音声入力装置
JP2008532185A (ja) * 2005-03-04 2008-08-14 アップル インコーポレイテッド マルチタッチセンシングデバイスを持つハンドヘルド電子装置
JP2010081319A (ja) * 2008-09-26 2010-04-08 Kyocera Corp 携帯電子機器
JP2010108071A (ja) * 2008-10-28 2010-05-13 Fujifilm Corp 画像表示装置、画像表示方法およびプログラム
JP2010217754A (ja) * 2009-03-18 2010-09-30 Toshiba Corp 音声入力装置、音声認識システム及び音声認識方法
JP2011043925A (ja) * 2009-08-19 2011-03-03 Nissha Printing Co Ltd 撓み振動型アクチュエータ及びこれを用いた触感フィードバック機能付タッチパネル
JP2011221094A (ja) * 2010-04-05 2011-11-04 Funai Electric Co Ltd 携帯情報表示端末

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6597384B1 (en) * 1999-12-22 2003-07-22 Intel Corporation Automatic reorienting of screen orientation using touch sensitive system
US6604419B2 (en) * 2000-12-07 2003-08-12 Bbc International, Ltd. Apparatus and method for measuring the maximum speed of a runner over a prescribed distance
US20030196202A1 (en) * 2002-04-10 2003-10-16 Barrett Peter T. Progressive update of information
EP1804472A4 (en) * 2004-10-19 2009-10-21 Vodafone Plc FUNCTION CONTROL METHOD AND TERMINAL
CN101133385B (zh) * 2005-03-04 2014-05-07 苹果公司 手持电子设备、手持设备及其操作方法
US9250703B2 (en) * 2006-03-06 2016-02-02 Sony Computer Entertainment Inc. Interface with gaze detection and voice input
KR100827236B1 (ko) * 2006-05-23 2008-05-07 삼성전자주식회사 포인팅 디바이스, 포인터 이동 방법 및 상기 포인터를디스플레이하는 디스플레이 장치
JP5023666B2 (ja) * 2006-11-13 2012-09-12 住友化学株式会社 透過型画像表示装置
US8214768B2 (en) * 2007-01-05 2012-07-03 Apple Inc. Method, system, and graphical user interface for viewing multiple application windows
US8081164B2 (en) * 2007-07-02 2011-12-20 Research In Motion Limited Controlling user input devices based upon detected attitude of a handheld electronic device
JP2009110286A (ja) * 2007-10-30 2009-05-21 Toshiba Corp 情報処理装置、ランチャー起動制御プログラムおよびランチャー起動制御方法
DE602008001493D1 (de) * 2008-01-31 2010-07-22 Research In Motion Ltd Elektronische Vorrichtung und Steuerverfahren dafür
US8433244B2 (en) * 2008-09-16 2013-04-30 Hewlett-Packard Development Company, L.P. Orientation based control of mobile device
EP3654141A1 (en) * 2008-10-06 2020-05-20 Samsung Electronics Co., Ltd. Method and apparatus for displaying graphical user interface depending on a user's contact pattern
JP5262673B2 (ja) * 2008-12-18 2013-08-14 日本電気株式会社 携帯端末、機能実行方法及びプログラム
KR20100124438A (ko) * 2009-05-19 2010-11-29 삼성전자주식회사 휴대 단말기의 페이지 제공 방법 및 이를 지원하는 휴대 단말기
KR101561703B1 (ko) * 2009-06-08 2015-10-30 엘지전자 주식회사 메뉴 실행 방법 및 이를 적용한 이동 통신 단말기
JP2011036424A (ja) * 2009-08-11 2011-02-24 Sony Computer Entertainment Inc ゲーム装置、ゲーム制御プログラム、及びゲーム制御方法
US9179239B2 (en) * 2010-04-19 2015-11-03 Netmeno Method and system for managing, delivering, displaying and interacting with contextual applications for mobile devices
US8384683B2 (en) * 2010-04-23 2013-02-26 Tong Luo Method for user input from the back panel of a handheld computerized device
US20110311144A1 (en) * 2010-06-17 2011-12-22 Microsoft Corporation Rgb/depth camera for improving speech recognition
JP4865063B2 (ja) * 2010-06-30 2012-02-01 株式会社東芝 情報処理装置、情報処理方法およびプログラム
JP2012073884A (ja) * 2010-09-29 2012-04-12 Nec Casio Mobile Communications Ltd 携帯端末、情報表示方法およびプログラム
JP5739131B2 (ja) * 2010-10-15 2015-06-24 京セラ株式会社 携帯電子機器、携帯電子機器の制御方法及びプログラム
JP2011054213A (ja) * 2010-12-14 2011-03-17 Toshiba Corp 情報処理装置および制御方法
US8788653B2 (en) * 2011-01-05 2014-07-22 F-Secure Corporation Controlling access to web content
JP5218876B2 (ja) * 2011-02-28 2013-06-26 ブラザー工業株式会社 印刷指示装置及び印刷指示システム
US20120271675A1 (en) * 2011-04-19 2012-10-25 Alpine Access, Inc. Dynamic candidate organization system
WO2011150886A2 (zh) * 2011-06-23 2011-12-08 华为终端有限公司 手持式终端设备用户界面自动切换方法及手持式终端设备
CA2751795C (en) * 2011-09-06 2014-12-09 Denis J. Alarie Method and system for selecting a subset of information to communicate to others from a set of information
WO2013187137A1 (ja) * 2012-06-15 2013-12-19 株式会社ニコン 電子機器

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07307989A (ja) * 1994-05-13 1995-11-21 Matsushita Electric Ind Co Ltd 音声入力装置
JP2008532185A (ja) * 2005-03-04 2008-08-14 アップル インコーポレイテッド マルチタッチセンシングデバイスを持つハンドヘルド電子装置
JP2010081319A (ja) * 2008-09-26 2010-04-08 Kyocera Corp 携帯電子機器
JP2010108071A (ja) * 2008-10-28 2010-05-13 Fujifilm Corp 画像表示装置、画像表示方法およびプログラム
JP2010217754A (ja) * 2009-03-18 2010-09-30 Toshiba Corp 音声入力装置、音声認識システム及び音声認識方法
JP2011043925A (ja) * 2009-08-19 2011-03-03 Nissha Printing Co Ltd 撓み振動型アクチュエータ及びこれを用いた触感フィードバック機能付タッチパネル
JP2011221094A (ja) * 2010-04-05 2011-11-04 Funai Electric Co Ltd 携帯情報表示端末

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3100144A4 (en) * 2014-01-31 2017-08-23 Hewlett-Packard Development Company, L.P. Touch sensor
CN107077284B (zh) * 2014-09-26 2020-07-14 夏普株式会社 把持方式判断装置
CN107077284A (zh) * 2014-09-26 2017-08-18 夏普株式会社 把持方式判断装置、控制程序以及记录介质
WO2016047223A1 (ja) * 2014-09-26 2016-03-31 シャープ株式会社 持ち方判定装置、制御プログラム、および記録媒体
US10082909B2 (en) 2014-09-26 2018-09-25 Sharp Kabushiki Kaisha Holding manner determination device and recording medium
JP2016148900A (ja) * 2015-02-10 2016-08-18 嘉泰 小笠原 電子機器
US10839773B2 (en) 2016-11-22 2020-11-17 Fuji Xerox Co., Ltd. Terminal device and non-transitory computer-readable medium
JP2018084908A (ja) * 2016-11-22 2018-05-31 富士ゼロックス株式会社 端末装置およびプログラム
JP2019121396A (ja) * 2017-12-29 2019-07-22 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ ユーザー入力とモバイルデバイス動作とを動的に関連付けるデバイス及び方法
WO2020016966A1 (ja) * 2018-07-18 2020-01-23 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JPWO2020016966A1 (ja) * 2018-07-18 2021-07-15 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム
US11487409B2 (en) 2018-07-18 2022-11-01 Sony Corporation Appearance configuration of information processing terminal
JP7306390B2 (ja) 2018-07-18 2023-07-11 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム
JP2022177137A (ja) * 2020-11-16 2022-11-30 マクセル株式会社 携帯情報端末及び携帯情報端末の発呼方法

Also Published As

Publication number Publication date
JP2020004447A (ja) 2020-01-09
JP2021057069A (ja) 2021-04-08
JP6311602B2 (ja) 2018-04-18
JP6593481B2 (ja) 2019-10-23
JPWO2013187137A1 (ja) 2016-02-04
JP2018107825A (ja) 2018-07-05
US20210216184A1 (en) 2021-07-15
JP6813066B2 (ja) 2021-01-13
CN104380227A (zh) 2015-02-25
US20150135145A1 (en) 2015-05-14

Similar Documents

Publication Publication Date Title
JP6593481B2 (ja) 電子機器
JP5179378B2 (ja) ユーザインターフェイス装置
CN108469878B (zh) 终端装置及其控制方法和计算机可读存储介质
US20060187204A1 (en) Apparatus and method for controlling menu navigation in a terminal
TW201035816A (en) Input apparatus, handheld apparatus, and control method
JP2012065107A (ja) 携帯端末装置
JP7495459B2 (ja) 頭部装着型ディスプレイ装置、頭部装着型ディスプレイ装置の制御方法
CN101606117B (zh) 输入装置、控制装置、控制系统、控制方法以及手持装置
JP2019175239A (ja) プログラムおよび情報処理装置
JP2019170802A (ja) プログラムおよび情報処理装置
JP2015156201A (ja) 電子装置並びにシステム、方法、プログラム
KR20160027732A (ko) 디스플레이 디바이스 및 그 제어 방법
TWI498804B (zh) 電子裝置和影像擷取方法
JP2020017215A (ja) 電子機器、制御プログラム及び表示制御方法
WO2014083052A1 (en) Apparatus and method for capturing images
JP2014215780A (ja) 操作入力装置及びプログラム並びに画像形成システム
KR102026941B1 (ko) 후면에 지문인식센서를 구비한 스마트폰의 제어방법
JP7034856B2 (ja) 電子機器、制御プログラム及び表示制御方法
TWI478046B (zh) 數位相機操作方法以及使用此方法之數位相機
JP2020184147A (ja) ジェスチャ認識装置及びジェスチャ認識装置用プログラム
JP2014033398A (ja) 電子機器
JP2018046423A (ja) 携帯可能な装置、システム、携帯可能な装置の制御方法、及びプログラム
JP7087417B2 (ja) 携帯型情報コード表示装置
JP2015216484A (ja) 撮像装置、画像処理方法、プログラム及び記憶媒体
JP2013205889A (ja) 携帯電子機器、その制御方法及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13804328

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2014521005

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 14408059

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 13804328

Country of ref document: EP

Kind code of ref document: A1