[go: up one dir, main page]

KR101652388B1 - 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스 - Google Patents

구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스 Download PDF

Info

Publication number
KR101652388B1
KR101652388B1 KR1020147023012A KR20147023012A KR101652388B1 KR 101652388 B1 KR101652388 B1 KR 101652388B1 KR 1020147023012 A KR1020147023012 A KR 1020147023012A KR 20147023012 A KR20147023012 A KR 20147023012A KR 101652388 B1 KR101652388 B1 KR 101652388B1
Authority
KR
South Korea
Prior art keywords
touch screen
gesture
icon
screen display
windows
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020147023012A
Other languages
English (en)
Other versions
KR20140119742A (ko
Inventor
바스 오딩
스캇 포스톨
그렉 크리스티
스테펜 오. 리메이
임란 챠드리
리차드 윌리암슨
크리스 블루멘버그
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=38777949&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR101652388(B1) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20140119742A publication Critical patent/KR20140119742A/ko
Application granted granted Critical
Publication of KR101652388B1 publication Critical patent/KR101652388B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Document Processing Apparatus (AREA)
  • Position Input By Displaying (AREA)
  • Telephone Function (AREA)

Abstract

터치 스크린 디스플레이를 구비한 휴대용 전자 장치와 함께 사용하기 위한 컴퓨터로 구현되는 방법은 터치 스크린 디스플레이 상에 복수의 콘텐츠 상자를 포함하는 구조화된 전자 문서의 적어도 일부를 디스플레이하는 단계, 및 구조화된 전자 문서의 디스플레이된 부분 상의 하나의 위치에서 제1 제스처를 감지하는 단계를 포함한다. 제1 제스처의 위치에서 상기 복수의 상자 내의 제1 상자가 결정된다. 상기 터치 스크린 디스플레이 상에서 상기 제1 상자를 확대되고, 실질적으로 중심에 배치된다.

Description

구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스{PORTABLE ELECTRONIC DEVICE, METHOD, AND GRAPHICAL USER INTERFACE FOR DISPLAYING STRUCTURED ELECTRONIC DOCUMENTS}
개시되는 실시예들은 일반적으로 휴대용 전자 장치들에 관한 것으로서, 보다 상세하게는 터치 스크린 디스플레이 상에 웹 페이지들과 같은 구조화된 전자 문서들을 디스플레이하는 휴대용 전자 장치들에 관한 것이다.
휴대용 전자 장치가 보다 소형화되고, 주어진 장치에 의해 수행되는 기능의 수가 증가하면서, 사용자로 하여금 다기능 장치와 용이하게 상호 작용할 수 있게 하는 사용자 인터페이스를 제공하는 것이 해결해야 할 중요한 과제가 되었다. 이러한 문제는, 데스크톱 컴퓨터 또는 랩톱 컴퓨터에 비해 훨씬 작은 스크린을 가지는 핸드핼드 휴대용 장치(handheld portable device)의 경우에 특히 중요하다. 사용자 인터페이스는 사용자가 장치의 특징, 도구 및 기능에 대한 사용자의 액세스 시도를 포함하는 사용자 액션 또는 행동에 대한 응답뿐만 아니라 콘텐츠를 수용하는 관문이기 때문에 이러한 상황은 적절하지 못하다. (흔히 모바일 폰, 셀 폰, 셀룰러 전화 등으로 지칭되는 이동 전화 등과 같은) 일부 휴대용 통신 장치는, 사용자의 데이터에 대한 액세스, 저장 및 조작을 가능하게 하기 위해, 보다 많은 푸시 버튼(push button)을 추가하는 방식, 푸시 버튼의 밀도를 증가시키는 방식, 푸시 버튼의 기능을 오버로딩(overloading)하는 방식, 또는 복잡한 메뉴 시스템을 사용하는 방식에 의존해 왔다. 이러한 종래의 사용자 인터페이스는 사용자가 암기해야만 하는 복잡한 키 순서 및 메뉴 체계로 대부분 이어진다.
또한, 물리적 푸시 버튼을 포함하는 사용자 인터페이스와 같은 다수의 종래의 사용자 인터페이스에는 유연성이 없다. 이는 사용자 또는 휴대용 장치 상에서 실행되는 애플리케이션에 의해 사용자 인터페이스가 구성 및/또는 적응되는 것을 방해할 수 있다. 이러한 비유연성은, 다중 키 순서 및 메뉴 체계를 암기한다는 시간이 걸리는 요구조건, 그리고 원하는 푸시 버튼을 활성화시키는 어려움과 결합되는 경우, 대부분의 사용자를 실망하게 만든다.
특히, 작은 스크린을 갖는 휴대용 전자 장치들에서 종래의 입력 장치들(예를 들어, 5-웨이 토글 스위치들)을 이용하여 구조화된 전자 문서들(예를 들어, 웹페이지들)을 네비게이트하는 것은 느리고 지루하다. 더욱이, 휴대용 전자 장치들 상에서 그러한 문서들 내의 멀티미디어 콘텐츠를 제어하고 보는 것은 성가시다.
따라서, 구조화된 전자 문서들 및 그러한 문서들 내의 멀티미디어 콘텐츠를 보고 네비게이트하기 위한 더 명료하고 직관적인 사용자 인터페이스들을 갖는 휴대용 전자 장치들이 필요하다. 그러한 인터페이스들은 휴대용 전자 장치들 상에서의 웹 브라우징과 같은 활동들에 대한 효과, 능률 및 사용자 만족을 향상시킨다.
구조화된 전자 문서들 및 그러한 문서들 내의 멀티미디어 콘텐츠를 보고 네비게이트하기 위한 더 명료하고 직관적인 사용자 인터페이스들을 갖는 휴대용 전자 장치를 제공한다.
휴대용 장치들의 사용자 인터페이스들과 연관된 위의 결함들 및 기타 문제들은 개시되는 휴대용 다기능 장치에 의해 감소되거나 제거될 수 있다. 일부 실시예들에서, 본 장치는 그래픽 사용자 인터페이스(GUI)를 갖는 터치 감지 디스플레이("터치 스크린"으로도 공지됨), 하나 이상의 프로세서, 메모리, 및 다수의 기능을 수행하기 위해 메모리에 저장된 하나 이상의 모듈, 프로그램 또는 명령어들의 세트를 구비한다. 일부 실시예에서, 사용자는 주로 터치 감지 디스플레이 상에서의 손가락 접촉들 및 제스처들을 통해 GUI와 상호작용한다. 일부 실시예에서, 기능들은 전화, 비디오 회의(video conferencing), 이메일, 인스턴스 메시징(instant messaging), 블로깅(blogging), 디지털 사진 촬영, 디지털 비디오 촬영, 웹 브라우징, 디지털 음악 재생, 및/또는 디지털 비디오 재생을 포함할 수 있다. 이러한 기능들을 수행하기 위한 명령어들은 하나 이상의 프로세서에 의해 실행되도록 구성된 컴퓨터 판독가능 저장 매체(computer readable storage medium) 또는 기타 컴퓨터 프로그램 제품에 포함될 수 있다.
본 발명의 일 양태에서, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치와 함께 사용하기 위한 컴퓨터로 구현되는 방법은 터치 스크린 디스플레이 상에 복수의 콘텐츠 상자를 포함하는 구조화된 전자 문서의 적어도 일부를 디스플레이하는 단계; 구조화된 전자 문서의 디스플레이된 부분 상의 하나의 위치에서 제1 제스처를 감지하는 단계; 제1 제스처의 위치에서 복수의 상자 내의 제1 상자를 결정하는 단계; 및 터치 스크린 디스플레이 상에서 제1 상자를 확대하고, 실질적으로 중심에 배치하는 단계를 포함한다.
본 발명의 다른 양태에서, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치 상의 그래픽 사용자 인터페이스는 복수의 콘텐츠 상자를 포함하는 구조화된 전자 문서의 적어도 일부를 포함한다. 구조화된 전자 문서의 일부 상의 하나의 위치에서 제1 제스처를 감지하는 것에 응답하여, 상기 제1 제스처의 위치에서 복수의 상자 내의 제1 상자가 결정되고, 터치 스크린 디스플레이 상에서 제1 상자가 확대되고, 실질적으로 중심에 배치된다.
본 발명의 또 다른 양태에서, 휴대용 전자 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고, 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부를 디스플레이하기 위한 명령어들을 포함하며, 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함한다. 하나 이상의 프로그램은 또한, 구조화된 전자 문서의 디스플레이된 부분 상의 하나의 위치에서 제1 제스처를 감지하기 위한 명령어들, 제1 제스처의 위치에서 복수의 상자 내의 제1 상자를 결정하기 위한 명령어들; 및 터치 스크린 디스플레이 상에서 제1 상자를 확대하고, 실질적으로 중심에 배치하기 위한 명령어들을 포함한다.
본 발명의 또 다른 양태에서, 컴퓨터 프로그램 제품은 컴퓨터 판독 가능 저장 매체 및 그 안에 내장된 컴퓨터 프로그램 메커니즘(예컨대, 하나 이상의 컴퓨터 프로그램)을 포함한다. 컴퓨터 프로그램 메커니즘은, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에 의해 실행될 때, 이 장치가 복수의 콘텐츠 상자를 포함하는 구조화된 전자 문서의 적어도 일부를 터치 스크린 디스플레이 상에 디스플레이하고, 구조화된 전자 문서의 디스플레이된 부분 상의 하나의 위치에서 제1 제스처를 감지하고, 제1 제스처의 위치에서 복수의 상자 내의 제1 상자를 결정하고, 터치 스크린 디스플레이 상에서 제1 상자를 확대하고 실질적으로 중앙에 배치하게 하는 명령어들을 포함한다.
본 발명의 또 다른 양태에서, 터치 스크린 디스플레이를 구비하는 휴대용 전자 장치는 복수의 콘텐츠 상자를 포함하는 구조화된 전자 문서의 적어도 일부를 터치 스크린 디스플레이 상에 디스플레이하는 수단, 구조화된 전자 문서의 디스플레이된 부분 상의 하나의 위치에서 제1 제스처를 감지하는 수단, 제1 제스처의 위치에서 복수의 상자 내의 제1 상자를 결정하는 수단, 및 터치 스크린 디스플레이 상에서 제1 상자를 확대하고 실질적으로 중앙에 배치하는 수단을 포함한다.
개시되는 실시예들은 사용자들이 휴대용 전자 장치들 상에서 구조화된 전자 문서들 및 이러한 문서들 내의 멀티미디어 콘텐츠를 더욱 쉽게 보고 네비게이트하는 것을 가능하게 한다.
휴대용 전자 장치들 상에서의 웹 브라우징과 같은 활동들에 대한 효과, 능률 및 사용자 만족을 향상시킨다.
도 1A 및 1B는 일부 실시예에 따른 터치-감지 디스플레이를 구비한 휴대용 다기능 장치를 도시하는 블록도.
도 2는 일부 실시예에 따른 터치 스크린을 가진 휴대용 다기능 장치를 도시하는 도면.
도 3은 일부 실시예에 따른 휴대용 전자 장치를 잠금해제(unlock)하기 위한 예시적인 사용자 인터페이스를 도시하는 도면.
도 4A 및 4B는 일부 실시예에 따른 휴대용 다기능 장치 상의 애플리케이션 메뉴를 위한 예시적인 사용자 인터페이스를 도시하는 도면.
도 5A 내지 5M는 일부 실시예에 따른 브라우저를 위한 예시적인 사용자 인터페이스를 도시하는 도면.
도 6A-6C는 일부 실시예에 따른 터치 스크린 디스플레이를 구비한 휴대용 전자 장치 상에 웹페이지와 같은 구조화된 전자 문서를 디스플레이하기 위한 프로세스를 나타내는 흐름도.
도 7A 내지 7F는 일부 실시예에 따른 인라인 멀티미디어 콘텐츠(inline multimedia content) 아이템을 재생하기 위한 예시적인 사용자 인터페이스를 도시하는 도면.
도 8은 일부 실시예에 따른 터치 스크린 디스플레이를 구비한 휴대용 전자 장치 상에 인라인 멀티미디어 콘텐츠를 디스플레이하기 위한 프로세스를 나타내는 흐름도.
본 발명의 상기 실시예 및 추가적인 실시예에 대한 좀 더 양호한 이해를 위하여, 첨부된 도면과 함께 이하의 실시예 항목이 참조되어야 하며, 유사한 참조 번호는 도면 전체에 걸쳐 해당 부분을 지칭한다.
이하, 첨부된 도면에 그 예가 도시된 실시예들에 대해 상세하게 언급할 것이다. 이하의 상세한 설명에서, 본 발명의 철저한 이해를 제공하기 위하여 다수의 특정 세부사항이 상술된다. 그러나, 이러한 특정 세부사항 없이도 본 발명이 실시될 수 있음은 당업자에게 자명할 것이다. 한편, 실시예의 양태를 불필요하게 모호하게 하지 않도록, 주지의 방법, 프로시저, 컴포넌트, 회로 및 네트워크에 대해서는 상세하게 설명하지 않았다.
또한, 본 명세서에 제1, 제2 등의 용어가 다양한 구성요소를 설명하기 위해 사용될 수 있지만, 이들 구성요소는 이러한 용어에 의해 한정되지 않아야 한다. 이러한 용어는 구성요소 간의 구별을 위해서 사용될 뿐이다. 예컨대, 본 발명의 기술적 사상으로부터 벗어나지 않고, 제1 제스처는 제2 제스처라고 지칭될 수 있고, 유사하게, 제2 제스처는 제1 제스처라고 지칭될 수 있다.
본 발명의 명세서에 사용된 용어는 특정 실시예를 설명하기 위한 것일 뿐이며 본 발명을 제한하는 것으로 의도된 것이 아니다. 본 발명의 명세서 및 첨부된 특허청구범위에 사용된, "일", "하나의" 및 "상기"라는 단수형은 문맥상 명확하게 달리 지적하지 않은 이상 복수형도 포함하는 것으로 의도된 것이다. 또한, 본 명세서에 사용된 "및/또는"이라는 용어는 열거된 관련 아이템들 중 하나 이상의 아이템의 가능한 모든 조합을 지칭하고 포함하는 것임을 이해할 것이다. 나아가, "포함한다" 및/또는 "포함하는"이라는 용어는, 본 명세서에서 사용되는 경우, 언급된 특징, 정수, 단계, 동작, 구성요소 및/또는 컴포넌트의 존재를 나타내지만, 하나 이상의 다른 특징, 정수, 단계, 동작, 구성요소, 컴포넌트 및/또는 이들의 그룹의 존재 또는 추가를 배제하지 않음을 이해할 것이다.
휴대용 다기능 장치, 그 장치를 위한 사용자 인터페이스, 그리고 그 장치를 사용하기 위한 관련 프로세스의 실시예가 기술된다. 일부 실시예에서, 이러한 장치는 PDA 기능 및/또는 음악 재생 기능 등의 다른 기능을 더 포함하는 이동 전화와 같은 휴대용 통신 장치이다.
사용자 인터페이스는 터치 스크린 외에 물리적 클릭 휠(physical click wheel)을 포함하거나 터치 스크린 상에 디스플레이된 가상 클릭 휠(virtual click wheel)을 포함할 수 있다. 클릭 휠은 장치의 사용자에 의한 휠과의 접촉점 또는 휠의 각 변위(angular displacement)에 기초하여 네비게이션 명령(navigation command)을 제공할 수 있는 사용자 인터페이스 장치이다. 클릭 휠은 또한, 예컨대 장치의 사용자가 휠의 적어도 일부분 또는 휠의 중심을 누르는 경우, 하나 이상의 아이템의 선택에 대응하는 사용자 명령을 제공하는데 사용될 수 있다. 또는, 터치 스크린 표면 상의 클릭 휠 이미지와 접촉을 해제하는 것이 선택에 대응하는 사용자 명령을 나타낼 수 있다. 단순화를 위해, 이하의 논의에서는, 터치 스크린을 포함하는 휴대용 다기능 장치가 예시적인 실시예로서 이용된다. 그러나, 물리적 클릭 휠, 물리적 키보드, 마우스 및/또는 조이스틱 등의 하나 이상의 다른 물리적 사용자 인터페이스 장치를 포함할 수 있는 퍼스널 컴퓨터 및 랩톱 컴퓨터 등의 다른 장치에 사용자 인터페이스 및 관련 프로세스의 일부가 적용될 수 있음을 이해하여야 한다.
장치는, 전화 애플리케이션, 비디오 회의 애플리케이션, 이메일 애플리케이션, 인스턴트 메시징 애플리케이션, 블로깅 애플리케이션, 사진 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우징 애플리케이션, 디지털 음악 재생 애플리케이션 및/또는 디지털 비디오 재생 애플리케이션 중 하나 이상의 애플리케이션과 같은 다양한 애플리케이션을 지원한다.
장치 상에서 실행될 수 있는 다양한 애플리케이션은 터치 스크린 등의 적어도 하나의 공통의 물리적 사용자 인터페이스를 사용할 수 있다. 터치 스크린의 하나 이상의 기능뿐만 아니라 장치 상에 디스플레이되는 해당 정보가 애플리케이션별로 및/또는 각 애플리케이션 내에서 조정 및/또는 변경될 수 있다. 이러한 방식으로, 장치의 (터치 스크린 등의) 공통의 물리적 아키텍처는 직관적이고 명료한 사용자 인터페이스로 다양한 애플리케이션을 지원할 수 있다.
사용자 인터페이스는 하나 이상의 소프트 키보드 실시예를 포함할 수 있다. 소프트 키보드 실시예는, 그 내용이 본 명세서에 참조문헌으로서 포함되는 2006년 7월 24일 출원된 미국 특허출원 제11/459,606호, "Keyboards For Portable Electronic Devices" 및 2006년 7월 24일 출원된 미국 특허출원 제11/459,615호, "Touch Screen Keyboards For Portable Electronic Devices"에 기술된 것과 같은, 키보드의 디스플레이된 아이콘 상에 표준 구성(QWERTY) 및/또는 비표준 구성의 심볼을 포함할 수 있다. 키보드 실시예는 타자기를 위한 것과 같은 기존 물리적 키보드의 키 개수보다 적은 수의 아이콘(또는 소프트 키)을 포함할 수 있다. 이를 통해 사용자가 키보드의 하나 이상의 아이콘을 선택하고 그에 따라 하나 이상의 해당 심볼을 선택하는 것이 용이해질 수 있다. 키보드 실시예는 적응적일 수 있다. 예컨대, 디스플레이된 아이콘은 하나 이상의 아이콘의 선택 및/또는 하나 이상의 해당 심볼의 선택과 같은 사용자 액션에 따라 수정될 수 있다. 휴대용 장치 상의 하나 이상의 애플리케이션은 공통의 키보드 실시예 및/또는 상이한 키보드 실시예를 이용할 수 있다. 따라서, 사용되는 키보드 실시예는 애플리케이션 중 적어도 일부에 대해 맞춤화될(tailored) 수 있다. 일부 실시예에서, 하나 이상의 키보드 실시예는 각 사용자에 대해 맞춤화될 수 있다. 예컨대, 하나 이상의 키보드 실시예는 각 사용자의 단어 사용 기록(사전 편찬법, 속어, 개별 사용량)에 기초하여 각 사용자에 대해 맞춤화될 수 있다. 키보드 실시예 중 일부는 소프트 키보드 실시예를 사용하는 경우 하나 이상의 아이콘을 선택하고 그에 따라 하나 이상의 심볼을 선택할 때 사용자가 실수할 확률을 줄이도록 조정될 수 있다.
이하, 장치의 실시예에 대하여 논한다. 도 1A 및 1B는 일부 실시예에 따른 터치-감지 디스플레이(112)를 구비한 휴대용 다기능 장치(100)를 도시하는 블록도이다. 터치-감지 디스플레이(112)는 흔히 "터치 스크린"이라 지칭되고, 터치-감지 디스플레이 시스템으로도 알려지거나 지칭될 수 있다. 장치(100)는 (하나 이상의 컴퓨터 판독가능 저장 매체를 포함할 수 있는) 메모리(102), 메모리 컨트롤러(122), 하나 이상의 처리 장치(CPU)(120), 주변장치 인터페이스(118), RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 입출력(I/O) 서브시스템(106), 기타 입력 또는 출력 장치(116) 및 외부 포트(124)를 포함할 수 있다. 장치(100)는 하나 이상의 광센서(164)를 포함할 수 있다. 이러한 컴포넌트들은 하나 이상의 통신 버스 또는 신호선(103)을 통해 통신할 수 있다.
장치(100)가 휴대용 다기능 장치(100)의 일례일 뿐이고 장치(100)가 도시된 것보다 많거나 적은 컴포넌트를 구비하거나, 2개 이상의 컴포넌트를 결합시키거나, 상이한 컴포넌트 구성 또는 배치를 가질 수 있음이 인정되어야 한다. 도 1A 및 1B에 도시된 다양한 컴포넌트는, 하나 이상의 신호 처리 및/또는 애플리케이션 특화된 집적 회로를 포함하는, 하드웨어, 소프트웨어, 또는 하드웨어 및 소프트웨어 양자의 조합으로 구현될 수 있다.
메모리(102)는 고속 랜덤 액세스 메모리(high-speed random access memory)를 포함할 수 있고, 또한 하나 이상의 자기 디스크 저장 장치, 플래시 메모리 장치 또는 기타 비휘발성 고체 상태 메모리 장치(non-volatile solid-state memory device) 등의 비휘발성 메모리를 포함할 수 있다. CPU(120) 및 주변장치 인터페이스(118)와 같은 장치(100)의 다른 컴포넌트에 의한 메모리(102)에 대한 액세스는 메모리 컨트롤러(122)에 의해 제어될 수 있다.
주변장치 인터페이스(118)는 장치의 입력 및 출력 주변장치를 CPU(120) 및 메모리(102)에 결합시킨다. 하나 이상의 프로세서(120)는 메모리(102)에 저장된 다양한 소프트웨어 프로그램 및/또는 명령어 집합을 실행하여 장치(100)를 위한 다양한 기능을 수행하고 데이터를 처리할 수 있다.
일부 실시예에서, 주변장치 인터페이스(118), CPU(120) 및 메모리 컨트롤러(122)는 칩(104)과 같은 단일 칩 상에 구현될 수 있다. 일부 다른 실시예에서, 이들은 개별 칩 상에 구현될 수 있다.
RF(라디오 주파수) 회로(108)는 전자기 신호(electromagnetic signal)라고도 알려진 RF 신호를 송수신한다. RF 회로(108)는 전기 신호를 전자기 신호로 변환하거나 전자기 신호로부터 전기 신호를 변환하고, 전자기 신호를 통해 통신 네트워크 및 다른 통신 장치와 통신한다. RF 회로(108)는 이러한 기능을 수행하기 위한 주지의 회로를 포함할 수 있는데, 이러한 회로는 안테나 시스템, RF 송수신기, 하나 이상의 증폭기, 튜너, 하나 이상의 발진기(oscillator), 디지털 신호 처리기, CODEC 칩셋, 가입자 식별 모듈(SIM) 카드, 메모리 등을 포함하지만 이들로 한정되지 않는다. RF 회로(108)는, 셀룰러 전화 네트워크, 무선 LAN(local area network) 및/또는 MAN(metropolitan area network) 등의 무선 네트워크, 인트라넷, 및/또는 월드 와이드 웹(WWW)이라고도 불리는 인터넷과 같은 네트워크 및 기타 장치와 무선 통신에 의해 통신할 수 있다. 이러한 무선 통신에는, GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스(Bluetooth), (IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n 등의) Wi-Fi(Wireless Fidelity), VoIP(voice over Internet Protocol), Wi-MAX, (IMAP(Internet message access protocol) 및/또는 POP(post office protocol) 등의) 이메일용 프로토콜, (XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extentions 및/또는 IMPS(Instant Messaging and Presence Service), 및/또는 SMS(Short Message Service) 등의) 인스턴트 메시징, 또는 본원의 제출일 당시에 개발되지 않은 통신 프로토콜을 포함하는 임의의 다른 적합한 통신 프로토콜을 포함하지만 이들로 한정되지 않는 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것이 사용될 수 있다.
오디오 회로(110), 스피커(111) 및 마이크로폰(113)은 사용자와 장치(100) 사이의 오디오 인터페이스를 제공한다. 오디오 회로(110)는 주변장치 인터페이스(118)로부터 오디오 데이터를 수신하고, 오디오 데이터를 전기 신호로 변환하며, 전기 신호를 스피커(111)로 송신한다. 스피커(111)는 전기 신호를 가청 음파(human-audible sound wave)로 변환한다. 오디오 회로(110)는 또한 마이크로폰(113)에 의해 음파로부터 변환된 전기 신호를 수신한다. 오디오 회로(110)는 전기 신호를 오디오 데이터로 변환하고, 처리를 위해 오디오 데이터를 주변장치 인터페이스(118)에 송신한다. 오디오 데이터는 주변장치 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로(108)로부터 검색되거나 그들로 송신될 수 있다. 일부 실시예에서, 오디오 회로(110)는 (도 2의 212와 같은) 헤드셋 잭(headset jack)을 더 포함한다. 헤드셋 잭은 (한쪽귀용 또는 양쪽귀용 헤드폰 등의) 출력과 (마이크로폰 등의) 입력을 모두 구비한 헤드셋 또는 출력-전용 헤드폰과 같은 이동식 오디오 입/출력 주변장치와 오디오 회로(110) 사이의 인터페이스를 제공한다.
I/O 서브시스템(106)은 터치 스크린(112) 및 기타 입력/제어 장치(116)와 같은 장치(100) 상의 입/출력 주변장치를 주변장치 인터페이스(118)에 결합시킨다. I/O 서브시스템(106)은 디스플레이 컨트롤러(156) 및 기타 입력 또는 제어 장치를 위한 하나 이상의 입력 컨트롤러(160)를 포함할 수 있다. 하나 이상의 입력 컨트롤러(160)는 기타 입력 또는 제어 장치(116)로부터 전기 신호를 수신하거나 그것으로 송신할 수 있다. 기타 입력/제어 장치(116)는 (푸시 버튼, 락커 버튼 등의) 물리적 버튼, 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휠 등을 포함할 수 있다. 일부 다른 실시예에서, 입력 컨트롤러(160)는 키보드, 적외선 포트, USB 포트 및 마우스 등 포인터 장치 중 임의의 것과 결합될 수 있다(또는 이들 중 아무것과도 결합되지 않을 수 있다). (도 2의 208과 같은) 하나 이상의 버튼은 스피커(111) 및/또는 마이크로폰(113)의 볼륨 제어를 위한 업/다운 버튼을 포함할 수 있다. 하나 이상의 버튼은 (도 2의 206과 같은) 푸시 버튼을 포함할 수 있다. 본 명세서에 참조문헌으로서 포함되는 2005년 12월 23일 출원된 미국 특허출원 제11/322,549호, "Unlocking a Device by Performing Gestures on an Unlock Image"에 기술된 바와 같이, 푸시 버튼을 짧게 누르면, 터치 스크린(112)이 잠금해제되거나, 터치 스크린 상의 제스처를 사용하여 장치를 잠금해제하는 프로세스가 개시될 수 있다. (206 등의) 푸시 버튼을 길게 누르면, 장치(100)에 대한 전원을 턴온 또는 턴오프할 수 있다. 사용자는 버튼들 중 하나 이상의 버튼의 기능성을 맞춤화하는 것이 가능할 수 있다. 터치 스크린(112)은 가상 버튼이나 소프트 버튼 및 하나 이상의 소프트 키보드를 구현하는데 사용된다.
터치-감지 터치 스크린(112)은 장치와 사용자 사이의 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플레이 컨트롤러(156)는 터치 스크린(112)으로부터 전기 신호를 수신하거나, 터치 스크린(112)으로 전기 신호를 송신하거나, 송수신을 모두 행할 수 있다. 터치 스크린(112)은 사용자에 대한 시각적 출력을 디스플레이한다. 시각적 출력은 그래픽, 텍스트, 아이콘, 비디오 및 이들의 임의의 조합(총괄하여 "그래픽"이라고 지칭됨)을 포함할 수 있다. 일부 실시예에서, 시각적 출력의 일부 또는 전부는 이하에서 보다 상세하게 설명되는 사용자-인터페이스 객체(user-interface object)에 대응할 수 있다.
터치 스크린(112)은 햅틱 접촉(haptic contact) 및/또는 택틸(tactile) 접촉에 기초하여 사용자로부터의 입력을 받아들이는 터치-감지 표면, 센서 또는 센서 집합을 구비한다. 터치 스크린(112) 및 디스플레이 컨트롤러(156)는 (메모리(102)의 임의의 관련 모듈 및/또는 명령어 집합과 함께) 터치 스크린(112) 상의 접촉(및 접촉의 임의의 움직임(movement)이나 해제)을 감지하고 감지된 접촉을 터치 스크린 상에 디스플레이된 (하나 이상의 소프트 키, 아이콘, 웹 페이지 또는 이미지 등의) 사용자-인터페이스 객체와의 상호 작용으로 변환한다. 예시적인 실시예에서, 터치 스크린(112)과 사용자 사이의 접촉점은 사용자의 손가락에 대응한다.
터치 스크린(112)에는 LCD(액정 디스플레이) 기술 또는 LPD(발광 중합체 디스플레이) 기술이 사용될 수 있지만, 기타 디스플레이 기술이 다른 실시예에서 사용될 수 있다. 터치 스크린(112) 및 디스플레이 컨트롤러(156)는, 정전용량식 기술(capacitive technology), 저항식 기술(resistative), 적외선 기술(infrared technology) 및 표면 음파 기술(surface acoustic wave technology) 포함하지만 이들로 한정되지 않는, 이미 공지되었거나 추후 개발될 복수의 터치 감지 기술 중 임의의 것을 이용하는 동시에, 근접 센서 배열(proximity sensor array) 또는 터치 스크린(112)과의 하나 이상의 접촉점을 판단하기 위한 기타 구성요소를 이용하여 접촉 및 그것의 임의의 움직임이나 해제를 감지할 수 있다.
터치 스크린(112)의 일부 실시예에서의 터치-감지 디스플레이는, 본 명세서에 각각 참조문헌으로 포함되는 미국 특허 제6,323,846호(Westerman 외), 제6,570,577호(Westerman 외) 및/또는 제6,677,932호(Westerman), 및/또는 미국 특허공개공보 제2002/0015024호에 설명된 멀티-터치 감지 태블릿과 유사할 수 있다. 그러나, 터치 스크린(112)은 휴대용 장치(100)로부터의 시각적 출력을 디스플레이하는 반면, 터치 감지 태블릿은 시각적 출력을 제공하지 않는다.
터치 스크린(112)의 일부 실시예에서의 터치-감지 디스플레이는 ⑴ 2006년 5월 2일 출원된 미국 특허출원 제11/381,313호, "Multipoint Touch Surface Controller", ⑵ 2004년 5월 6일 출원된 미국 특허출원 제10/840,862호, "Multipoint Touchscreen", ⑶ 2004년 7월 30일 출원된 미국 특허출원 10/903,964호, "Gestures For Touch Sensitive Input Devices", ⑷ 2005년 1월 31일 출원된 미국 특허출원 제11/048,264호, "Gestures For Touch Sensitive Input Devices", ⑸ 2005년 1월 18일 출원된 미국 특허출원 제11/038,590호, "Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices", ⑹ 2005년 9월 16일 출원된 미국 특허출원 제11/228,758호, "Virtual Input Device Placement On A Touch Screen User Interface", ⑺ 2005년 9월 16일 출원된 미국 특허출원 제11/228,700호, "Operation Of A Computer With A Touch Screen Interface", ⑻ 2005년 9월 16일 출원된 미국 특허출원 제11/228,737호, "Activating Virtual Keys Of A Touch-Screen Virtual Keyboard", ⑼ 2006년 3월 3일 출원된 미국 특허출원 제11/367,749호, "Multi-Functional Hand-Held Device"에 설명된 것과 같을 수 있다. 위 출원 모두는 본 명세서에 참조문헌으로 포함된다.
터치 스크린(112)은 100dpi를 넘는 해상도를 가질 수 있다. 예시적인 실시예에서, 터치 스크린은 대략 160dpi의 해상도를 가질 수 있다. 사용자는 스타일러스, 손가락 등과 같은 임의의 적합한 물체 또는 부속물(appendage)을 사용하여 터치 스크린(112)과 접촉할 수 있다. 일부 실시예에서, 사용자 인터페이스는 주로 손가락-기반 접촉 및 제스처를 이용하여 동작하도록 설계되는데, 이러한 손가락-기반 접촉 및 제스처는 스타일러스-기반의 입력에 비해 터치 스크린 상에서의 손가락의 접촉 면적이 보다 넓기 때문에 훨씬 덜 정확하다. 일부 실시예에서, 장치는 개략적인(rough) 손가락-기반 입력을 사용자가 원하는 액션을 수행하기 위한 정확한 포인터/커서 위치 또는 명령으로 번역한다.
일부 실시예에서, 장치는 터치 스크린 외에도 특정 기능을 활성화하거나 비활성화하기 위한 터치패드(도시 생략)를 포함할 수 있다. 일부 실시예에서, 터치패드는 터치 스크린과 달리 시각적 출력을 디스플레이하지 않는, 장치의 터치-감지 영역이다. 터치패드는 터치 스크린(112)으로부터 분리된 터치-감지 표면이거나, 터치 스크린에 의해 형성된 터치-감지 표면의 연장일 수 있다.
일부 실시예에서, 장치(100)는 입력 제어 장치(116)로서 물리적 클릭 휠 또는 가상 클릭 휠을 포함할 수 있다. 사용자는 클릭 휠을 돌리거나 (예컨대, 접촉점의 움직임 량이 클릭 휠의 중심점에 대한 접촉점의 각 변위에 의해 측정되는 경우에는) 클릭 휠과의 접촉점을 움직임으로써, 터치 스크린(112)에 디스플레이된 하나 이상의 그래픽 객체(이하 아이콘이라 함)를 네비게이션하고 그것들과 상호 작용할 수 있다. 클릭 휠은 또한 디스플레이된 아이콘들 중 하나 이상의 아이콘을 선택하는데 사용될 수 있다. 예컨대, 사용자는 관련 버튼 또는 클릭 휠의 적어도 일부분을 누를 수 있다. 클릭 휠을 통해 사용자에 의해 제공되는 사용자 명령 및 네비게이션 명령은 입력 컨트롤러(160)뿐만 아니라 메모리(102)의 명령어 집합 및/또는 모듈들 중 하나 이상에 의해 처리될 수 있다. 가상 클릭 휠의 경우, 클릭 휠 및 클릭 휠 컨트롤러는 각각 터치 스크린(112) 및 디스플레이 컨트롤러(156)의 일부일 수 있다. 가상 클릭 휠의 경우, 클릭 휠은 장치와의 사용자의 상호 작용에 응답하여 터치 스크린 디스플레이상에 나타나고 사라지는 불투명하거나 반투명한 객체일 수 있다. 일부 실시예에서, 가상 클릭 휠은 휴대용 다기능 장치의 터치 스크린 상에 디스플레이되고 터치 스크린과의 사용자 접촉에 의해 동작된다.
장치(100)는 또한 다양한 컴포넌트에 전력을 공급하는 전력 시스템(162)을 포함한다. 전력 시스템(162)은 전력 관리 시스템, (배터리, 교류(AC) 등의) 하나 이상의 전원, 충전 시스템, 전력 실패 감지 회로(power failure detecton circuit), 전력 변환기 또는 인버터, (발광 다이오드(LED) 등의) 전력 상태 표시자 및 휴대용 장치의 전력 생성, 관리 및 분배와 연관된 임의의 다른 컴포넌트를 포함할 수 있다.
장치(100)는 또한 하나 이상의 광센서(164)를 포함할 수 있다. 도 1A 및 1B는 I/O 서브시스템(106)의 광센서 컨트롤러(158)에 결합된 광센서를 도시한다. 광센서(164)는 전하 결합 소자(CCD) 또는 상보형 금속 산화막 반도체(CMOS) 포토트랜지스터를 포함할 수 있다. 광센서(164)는 하나 이상의 렌즈를 통해 투사되는, 환경으로부터의 광을 수신하고 그 광을 이미지를 나타내는 데이터로 변환한다. (카메라 모듈이라고도 지칭되는) 이미지 모듈(143)과 함께, 광센서(164)는 스틸 이미지 또는 비디오를 캡처할 수 있다. 일부 실시예에서, 터치 스크린 디스플레이가 스틸(still) 및/또는 비디오 이미지 획득 중 어느 하나를 위한 뷰파인더로서 사용될 수 있도록, 장치의 전면 상의 터치 스크린 디스플레이에 대향하여, 광센서가 장치의 후면에 배치된다. 일부 실시예에서, 사용자가 터치 스크린 디스플레이 상에서 다른 비디오 회의 참가자를 보는 동안 사용자의 이미지가 비디오 회의를 위해 획득될 수 있도록, 광센서가 장치의 전면에 배치된다. 일부 실시예에서, 하나의 광센서(164)가 비디오 회의 및 스틸 및/또는 비디오 이미지 획득 양자 모두에 대해 터치 스크린 디스플레이와 함께 사용될 수 있도록, 사용자가 (예컨대, 장치 하우징의 렌즈 및 센서를 회전시킴으로써) 광센서(164)의 위치를 변경할 수 있다.
장치(100)는 또한 하나 이상의 근접 센서(proximity sensor; 166)를 포함할 수 있다. 도 1A 및 1B는 주변장치 인터페이스(118)에 결합된 근접 센서(166)를 도시한다. 또는, 근접 센서(166)는 I/O 서브시스템(106)의 입력 컨트롤러(160)에 결합될 수 있다. 근접 센서(166)는, 본 명세서에 참조문헌으로 포함되는, 2005년 9월 30일자로 출원된 미국 특허출원 제11/241,839호, "Proximity Detector In Handheld Device"; 200년 9월 30일자로 출원된 제11/240,788호, "Proximity Detector In Handheld Device"; 2007년 1월 7일자로 출원되어 양도된 제_호, "Using Ambient Light Sensor To Augment Proximity Sensor Output", 대리인 정리 번호 04860.P4851US; 2006년 10월 24일자로 출원되어 양도된 제_호, "Automated Response To And Sensing Of User Activity In Portable Devices", 대리인 정리 번호 04860.P4293; 및 2006년 12월 12일자로 출원되어 양도된 제_호, "Methods And Systems For Automatic Configuration Of Peripherals", 대리인 정리 번호 04860.P4293에 설명된 바와 같이 동작할 수 있다. 일부 실시예에서, (예컨대, 사용자가 전화 통화 중인 경우와 같이) 다기능 장치가 사용자의 귀에 인접하여 놓이는 경우, 근접 센서는 터치 스크린(112)을 턴오프하고 디스에이블링한다. 일부 실시예에서, 근접 센서는 장치가 사용자의 주머니, 지갑 또는 다른 어두운 영역에 있는 경우 스크린을 오프 상태로 유지하여 장치가 잠금 상태일 때의 불필요한 배터리 소모를 방지한다.
장치(100)는 또한 하나 이상의 가속도계(accelerometers; 168)를 포함할 수 있다. 도 1A 및 1B는 주변장치 인터페이스(118)에 결합된 가속도계(168)를 도시한다. 또는, 가속도계(168)는 I/O 서브시스템(106)의 입력 컨트롤러(160)에 결합될 수 있다. 가속도계(168)는, 각각이 모두 본 명세서에 참조문헌으로 포함되는 미국 특허공개공보 제20050190059호, "Acceleration-based Theft Detection System for Portable Electronic Devices" 및 미국 특허공개공보 제20060017692호, "Methods and Apparatuses For Operating A Portable Device Based On An Accelerometer"에 설명된 바와 같이 동작할 수 있다. 일부 실시예에서, 정보가 하나 이상의 가속도계로부터 수신된 데이터에 대한 분석에 기초하여 세로보기 또는 가로보기로 터치 스크린 디스플레이 상에 디스플레이된다.
일부 실시예에서, 메모리(102)에 저장된 소프트웨어 컴포넌트에는, 운영 체제(126), 통신 모듈(또는 명령어 집합)(128), 접촉/운동 모듈(또는 명령어 집합)(130), 그래픽 모듈(또는 명령어 집합)(132), 텍스트 입력 모듈(또는 명령어 집합)(134), GPS 모듈(또는 명령어 집합)(135) 및 애플리케이션(또는 명령어 집합)(136)이 포함될 수 있다.
(다윈, RTXC, 리눅스, 유닉스, OS X, 윈도우즈, 또는 VxWorks 등의 임베디드 운영 체제와 같은) 운영 체제(126)는 (메모리 관리, 저장 장치 제어, 전력 관리 등의) 일반적인 시스템 태스크를 제어하고 관리하기 위한 다양한 소프트웨어 컴포넌트 및/또는 드라이버를 포함하고 다양한 하드웨어 및 소프트웨어 컴포넌트 사이의 통신을 가능하게 한다.
통신 모듈(128)은 하나 이상의 외부 포트(124)를 통한 다른 장치와의 통신을 가능하게 하며, RF 회로(108) 및/또는 외부 포트(124)에 의해 수신된 데이터를 처리하기 위한 다양한 소프트웨어 컴포넌트를 또한 포함한다. (USB, 파이어와이어 등의) 외부 포트(124)는 다른 장치에 직접 결합하거나 (인터넷, 무선 LAN 등의) 네트워크를 통해 간접적으로 결합하도록 적응된다. 일부 실시예에서, 외부 포트는 (애플 컴퓨터사의 상표인) iPod 상에서 사용되는 30핀 커넥터와 동일, 유사 및/또는 호환가능한 (예컨대 30핀의) 다중 핀 커넥터이다.
접촉/운동 모듈(130)은 (디스플레이 컨트롤러(156)와 함께) 터치 스크린(112) 및 (터치패드 또는 물리적 클릭 휠 등의) 기타 터치 감지 장치와의 접촉을 감지할 수 있다. 접촉/운동 모듈(130)은, 접촉 발생 여부를 판단하는 동작, 접촉의 움직임이 있는지 여부를 판단하고 그 움직임을 터치 스크린(112)을 따라 추적하는 동작, 그리고 접촉 해제 여부(즉, 접촉 중단 여부)를 판단하는 동작과 같은, 접촉 감지와 관련된 다양한 동작을 수행하기 위한 다양한 소프트웨어 컴포넌트를 포함한다. 접촉점의 움직임을 판단하는 동작은 접촉점의 속력(크기), 속도(크기 및 방향) 및/또는 가속도(크기 및/또는 방향의 변화)를 판단하는 동작을 포함할 수 있다. 이러한 동작은 (하나의 손가락 접촉 등의) 단일 접촉에 적용되거나 ("멀티터치"/다수의 손가락 접촉 등의) 다중 동시 접촉에 적용될 수 있다. 일부 실시예에서, 접촉/운동 모듈(130) 및 디스플레이 컨트롤러(156)는 또한 터치패드 상의 접촉을 감지한다. 일부 실시예에서, 접촉/운동 모듈(130) 및 컨트롤러(160)는 클릭 휠 상의 접촉을 감지한다.
그래픽 모듈(132)은 디스플레이된 그래픽의 밝기를 변경하기 위한 컴포넌트를 포함하는, 터치 스크린(112) 상의 그래픽을 렌더링하고 디스플레이하기 위한 다양한 알려진 소프트웨어 컴포넌트를 포함한다. 본 명세서에 사용되는 "그래픽"이라는 용어는, 텍스트, 웹 페이지, (소프트 키를 포함하는 사용자-인터페이스 객체 등의) 아이콘, 디지털 이미지, 비디오 및 애니메이션 등을 포함하지만 이들로 한정되지 않는, 사용자에게 디스플레이될 수 있는 임의의 객체를 포함한다.
그래픽 모듈(132)의 컴포넌트일 수 있는 텍스트 입력 모듈(134)은 (연락처(137), 이메일(140), IM(141), 블로깅(142), 브라우저(147) 및 텍스트 입력을 필요로 하는 임의의 다른 애플리케이션 등의) 다양한 애플리케이션에 텍스트를 입력하기 위한 소프트 키보드를 제공한다.
GPS 모듈(135)은 장치의 위치를 판단하고 이 정보를 다양한 애플리케이션에서 사용할 수 있도록 제공한다(예컨대, 위치-기반 다이얼링에 사용하도록 전화(138)에 제공하고, 픽처/비디오 메타데이터로서 카메라(143) 및/또는 블로거(142)에 제공하며, 날씨 위젯, 지역 전화번호부 위젯 및 지도/네비게이션 위젯 등의 위치-기반 서비스를 제공하는 애플리케이션 등에 제공한다).
애플리케이션(136)은 이하의 모듈(또는 명령어 집합), 또는 이들의 서브셋(subset)이나 수퍼셋(superset)을 포함할 수 있다.
● 연락처 모듈(137) (주로 주소록 또는 연락처 목록이라고 지칭됨);
● 전화 모듈(138);
● 비디오 회의 모듈(139);
● 이메일 클라이언트 모듈(140);
● 인스턴트 메시징(IM) 모듈(141);
● 블로깅 모듈(142);
● 스틸 및/또는 비디오 이미지를 위한 카메라 모듈(143);
● 이미지 관리 모듈(144);
● 비디오 플레이어 모듈(145);
● 음악 플레이어 모듈(146);
● 브라우저 모듈(147);
● 달력 모듈(148);
● 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5) 및 사용자가 획득한 기타 위젯, 그리고 사용자-생성 위젯(149-6)을 포함할 수 있는 위젯 모듈(149);
● 사용자-생성 위젯(149-6)을 작성하기 위한 위젯 생성기 모듈(150);
● 검색 모듈(151);
● 비디오 플레이어 모듈(145) 및 음악 플레이어 모듈(146)을 통합한 비디오 및 음악 플레이어 모듈(152);
● 노트 모듈(153); 및/또는
● 지도 모듈(154).
메모리(120)에 저장될 수 있는 다른 애플리케이션(136)의 예로서, 기타 워드 프로세싱 애플리케이션, JAVA-작동식 애플리케이션, 암호화, 디지털 권한 관리, 음성 인식(voice recognition) 및 음성 복제(voice replication)가 포함된다.
연락처 모듈(137)은 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께 주소록 또는 연락처 목록의 관리에 사용될 수 있는데, 이러한 관리에는 주소록에 이름을 추가하고, 주소록으로부터 이름을 삭제하며, 전화번호, 이메일 주소, 물리 주소 또는 기타 정보를 이름과 연관시키고, 이름과 이미지를 연관시키며, 이름을 분류하거나 정렬하고, 전화(138), 비디오 회의(139), 이메일(140) 또는 IM(141)에 의한 통신을 개시 및/또는 가능하게 하기 위한 전화번호 또는 이메일주소를 제공하는 것 등이 포함된다.
전화 모듈(138)은 RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 전화번호에 대응하는 문자열을 입력하고, 주소록(137)의 하나 이상의 전화번호를 액세스하며, 입력된 전화번호를 수정하고, 각각의 전화번호를 다이얼링하며, 대화를 수행하고, 대화 완료시 접속해제하거나 전화를 끊는데 사용될 수 있다. 이미 언급된 바와 같이, 무선 통신에는 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것이 사용될 수 있다.
비디오 회의 모듈(139)은 RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 컨트롤러(156), 광센서(164), 광센서 컨트롤러(158), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 연락처 목록(137) 및 전화 모듈(138)과 함께 사용자와 한 명 이상의 다른 참여자 사이의 비디오 회의를 개시하고 수행하며 종료하는데 사용될 수 있다.
이메일 클라이언트 모듈(140)은 RF 회로(108), 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께 이메일을 생성하고 송수신하며 관리하는데 사용될 수 있다. 이메일 모듈(140)은 이미지 관리 모듈(144)과 함께 카메라 모듈(143)로 획득한 스틸 또는 비디오 이미지를 포함하는 이메일을 생성하고 송신하는 것을 매우 용이하게 한다.
인스턴트 메시징 모듈(141)은 RF 회로(108), 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 인스턴트 메시지에 대응하는 문자열을 입력하고, 이미 입력된 문자를 수정하며, (예컨대, 전화-기반 인스턴트 메시지를 위한 SMS 또는 MMS(Multimedia Message Service) 프로토콜을 이용하거나, 인터넷-기반 인스턴트 메시지를 위한 XMPP, SIMPLE 또는 IMPS를 이용하여) 각각의 인스턴트 메시지를 송신하고, 인스턴트 메시지를 수신하며, 수신된 인스턴트 메시지를 보는데 사용될 수 있다. 일부 실시예에서, 송신 및/또는 수신된 인스턴트 메시지는 그래픽, 사진, 오디오 파일, 비디오 파일, 및/또는 MMS 및/또는 EMS(Enhanced Messaging Service)에서 지원되는 기타 첨부물을 포함할 수 있다. 본 명세서에 사용되는 "인스턴트 메시징(instant messaging)"은 (SMS 또는MMS를 사용해 송신된 메시지와 같은) 전화-기반 메시지 및 (XMPP, SIMPLE 또는 IMPS를 사용해 송신된 메시지와 같은) 인터넷-기반 메시지 양자 모두를 지칭한다.
블로깅 모듈(142)은 RF 회로(108), 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 이미지 관리 모듈(144) 및 브라우징 모듈(147)과 함께, 텍스트, 스틸 이미지, 비디오, 및/또는 기타 그래픽을 블로그(예컨대, 사용자의 블로그)에 송신하는데 사용된다.
카메라 모듈(143)은 터치 스크린(112), 디스플레이 컨트롤러(156), 광센서(164), 광센서 컨트롤러(158), 접촉 모듈(130), 그래픽 모듈(132) 및 이미지 관리 모듈(144)과 함께, 스틸 이미지 또는 (비디오 스트림을 포함하는) 비디오를 캡처하고 이들을 메모리(102)에 저장하거나, 스틸 이미지 또는 비디오의 특성을 수정하거나, 스틸 이미지 또는 비디오를 메모리(102)로부터 삭제하는데 사용된다.
이미지 관리 모듈(144)은 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 카메라 모듈(143)과 함께, 스틸 및/또는 비디오 이미지를 배열하고 수정 또는 조작하며 레이블링하고 삭제하며 (디지털 슬라이드 쇼 또는 앨범 형태 등으로) 디스플레이하고 저장하는데 사용된다.
비디오 플레이어 모듈(145)은 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110) 및 스피커(111)와 함께, (예컨대, 터치 스크린, 또는 외부 포트(124)를 통해 접속된 외부 디스플레이 상에) 비디오를 디스플레이하고 표시 또는 재생하는데 사용된다.
음악 플레이어 모듈(146)은 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108) 및 브라우저 모듈(147)과 함께, 사용자가 MP3 또는 AAC 파일 등의 하나 이상의 파일 포맷으로 저장된 녹음된 음악 및 기타 사운드 파일을 다운로드하고 재생할 수 있도록 한다. 일부 실시예에서, 장치(100)는 (애플 컴퓨터사의 상표인) iPod과 같은 MP3 플레이어의 기능성을 포함할 수 있다.
브라우저 모듈(147)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 웹 페이지나 그 일부 및 웹 페이지에 링크된 첨부물 및 기타 파일에 대한 검색, 링크, 수신 및 디스플레이를 포함하는 인터넷 브라우징에 사용될 수 있다. 브라우저 모듈(147)을 이용한 사용자 인터페이스 및 관련 프로세스의 실시예는 추후 상세히 설명된다.
달력 모듈(148)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 달력 및 달력과 연관된 데이터(달력 엔트리, 할일 목록 등)를 생성하고 디스플레이하며 저장하는데 사용될 수 있다.
위젯 모듈(149)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, (날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4) 및 사전 위젯(149-5)과 같이) 사용자에 의해 다운로드되고 사용될 수 있거나, (사용자-생성 위젯(149-6)과 같이) 사용자에 의해 생성될 수 있는 미니 애플리케이션이다. 일부 실시예에서, 위젯은 HTML 파일, CSS 파일 및 자바 스크립트 파일을 포함한다. 일부 실시예에서, 위젯(예컨대, 야후! 위젯)은 XML 파일 및 자바 스크립트 파일을 포함한다.
위젯 생성기 모듈(150)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께 (예컨대, 웹 페이지의 사용자-지정 부분을 위젯으로 바꾸는 등으로) 위젯을 생성하는데 사용자에 의해 이용될 수 있다.
검색 모듈(151)은 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께 (하나 이상의 사용자-지정 검색 용어 등의) 하나 이상의 검색 조건과 매칭되는 메모리(102)의 텍스트, 음악, 사운드, 이미지, 비디오 및/또는 기타 파일을 검색하는데 사용될 수 있다.
노트 모듈(153)은 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께 노트, 할일 목록 등을 생성하고 관리하는데 사용될 수 있다.
지도 모듈(154)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135) 및 브라우저 모듈(147)과 함께 (예컨대, 운전 방향, 특정 위치의 또는 인접한 가게 및 기타 관련 지점에 대한 데이터, 및 기타 위치-기반 데이터 등의) 지도 관련 데이터 및 지도를 수신하고 디스플레이하며 수정하고 저장하는데 사용될 수 있다.
이상 언급된 모듈 및 애플리케이션 각각은 지금까지 설명된 하나 이상의 기능을 수행하기 위한 명령어 집합에 대응한다. 이러한 모듈(즉, 명령어 집합)은 개별 소프트웨어 프로그램, 프로시저 또는 모듈로서 구현될 필요는 없으며, 다양한 실시예에서 이러한 모듈들의 다양한 서브셋이 통합되거나 재배치될 수 있다. 예컨대, 비디오 플레이어 모듈(145)은 음악 플레이어 모듈(146)과 (예컨대, 도 1B의 비디오 및 음악 플레이어 모듈(152)와 같은) 단일 모듈로 결합될 수 있다. 일부 실시예에서, 메모리(102)는 이상 언급된 모듈 및 데이터 구조의 서브셋을 저장할 수 있다. 나아가, 메모리(102)는 지금까지 언급되지 않은 추가적인 모듈 및 데이터 구조를 저장할 수 있다.
일부 실시예에서, 장치(100)는 터치 스크린(112) 및/또는 터치패드를 통해서만 장치 상에서의 소정의 기능 집합의 동작이 수행되는 장치이다. 장치(100)의 동작을 위한 기본적인 입력/제어 장치로서 터치 스크린 및/또는 터치패드를 사용함으로써, 장치(100) 상의 (푸시 버튼, 다이얼 등의) 물리적 입력/제어 장치의 개수가 감소될 수 있다.
터치 스크린 및/또는 터치패드를 통해서만 수행될 수 있는 소정의 기능 집합에는 사용자 인터페이스 간의 네비게이션이 포함된다. 일부 실시예에서, 터치패드는, 사용자가 터치하면, 장치(100) 상에 디스플레이될 수 있는 임의의 사용자 인터페이스로부터 메인 메뉴, 홈 메뉴 또는 루트 메뉴로 장치를 네비게이션한다. 이러한 실시예에서, 터치패드는 "메뉴 버튼"이라고 지칭될 수 있다. 일부 다른 실시예에서, 메뉴 버튼은 터치패드 대신에 물리적 푸시 버튼 또는 기타 물리적 입력/제어 장치일 수 있다.
도 2는 일부 실시예에 따른 터치 스크린(112)을 구비한 휴대용 다기능 장치(100)를 도시한다. 터치 스크린은 사용자 인터페이스(UI)(200) 내에 하나 이상의 그래픽을 디스플레이할 수 있다. 본 실시예 및 이하 기술되는 다른 실시예에서, 사용자는 예컨대 하나 이상의 손가락(202)(도면에는 축척에 맞게 도시되지 않음)을 이용해 그래픽을 터치하거나 접촉함으로써 그래픽들 중 하나 이상을 선택할 수 있다. 일부 실시예에서, 사용자가 하나 이상의 그래픽과의 접촉을 해제하면 그 하나 이상의 그래픽에 대한 선택이 이루어진다. 일부 실시예에서, 접촉은 장치(100)와 접촉된 손가락의 (좌에서 우로, 우에서 좌로, 위로 및/또는 아래로의) 롤링(rolling), (좌에서 우로, 우에서 좌로, 위로 및/또는 아래로의) 하나 이상의 스와이프(swipe) 및/또는 하나 이상의 탭(tap)과 같은 제스처를 포함할 수 있다. 일부 실시예에서, 그래픽과의 우연한 접촉에 의해서는 그 그래픽이 선택되지 않을 수 있다. 예컨대, 선택에 대응하는 제스처가 탭일 경우 애플리케이션 아이콘 상을 지나가는 스와이프 제스처에 의해서는 해당 애플리케이션이 선택되지 않을 수 있다.
장치(100)는 또한 "홈" 또는 메뉴 버튼(204) 등의 하나 이상의 물리적 버튼을 포함할 수 있다. 이미 설명된 바와 같이, 메뉴 버튼(204)은 장치(100) 상에서 실행될 수 있는 애플리케이션 집합 중 임의의 애플리케이션(136)으로 네비게이션하는데 사용될 수 있다. 또는, 일부 실시예에서, 메뉴 버튼은 터치 스크린(112)의 GUI의 소프트 키로서 구현된다.
일 실시예에서, 장치(100)는 터치 스크린(112), 메뉴 버튼(204), 장치의 전원을 온/오프하고 장치를 잠그기 위한 푸시 버튼(206), 볼륨 조정 버튼(208), 가입자 식별 모듈(SIM) 카드 슬롯(210), 헤드셋 잭(212) 및 도킹/충전용 외부 포트(124)를 포함한다. 푸시 버튼(206)은, 버튼을 눌러 소정의 시간 동안 버튼을 눌러진 상태로 유지시키는 것을 통한 장치 상의 전원의 턴온/턴오프; 버튼을 눌러 소정의 시간이 경과하기 전에 버튼을 릴리즈하는 것을 통한 장치 잠금; 및/또는 잠금해제 프로세스의 개시나 장치 잠금해제에 사용될 수 있다. 다른 실시예에서, 장치(100)는 또한 마이크로폰(113)을 통하여 일부 기능의 활성화 또는 비활성화를 위한 구두 입력(verbal input)을 받아들일 수 있다.
이하, 휴대용 다기능 장치(100) 상에 구현될 수 있는 사용자 인터페이스(UI) 및 관련 프로세스의 실시예에 대하여 논한다.
도 3은 일부 실시예에 따른 휴대용 전자 장치를 잠금 해제하기 위한 예시적인 사용자 인터페이스를 도시한다. 일부 실시예에서, 사용자 인터페이스(300A)는 이하의 구성요소, 또는 이들의 서브셋이나 수퍼셋을 포함할 수 있다.
● 장치를 잠금해제하는 손가락 제스처에 의해 움직여지는 잠금해제 이미지(302);
● 잠금해제 제스처에 대한 시각적 단서(visual cue)를 제공하는 화살표(304);
● 잠금해제 제스처에 대한 추가적인 시각적 단서를 제공하는 채널(306);
● 시간(308)
● 요일(310)
● 날짜(312); 및
● 월페이퍼 이미지(314).
일부 실시예에서, 장치가 사용자-인터페이스 잠금 상태에 있는 동안 장치는 (예컨대, 잠금해제 이미지(302) 상에서 또는 인접하여 접촉하는 사용자의 손가락과 같은) 터치-감지 디스플레이와의 접촉을 감지한다. 장치는 접촉에 따라 잠금해제 이미지(302)를 이동시킨다. 감지된 접촉이 채널(306)을 따라 잠금해제 이미지를 이동시키는 제스처와 같은 소정의 제스처인 경우, 장치는 사용자-인터페이스 잠금해제 상태로 변환된다. 반면, 감지된 접촉이 소정의 제스처에 대응하지 않는 경우, 장치는 사용자-인터페이스 잠금 상태를 유지한다. 이미 언급된 바와 같이, 터치 스크린 상의 제스처를 사용하여 장치를 잠금해제하는 프로세스는 본 명세서에 참조문헌으로서 포함되는 2005년 12월 23일 출원된 미국 특허출원 제11/322,549호, "Unlocking A Device By Performing Gestures On An Unlock Image" 및 2005년 12월 23일 출원된 제11/322,550호, "Indication Of Progress Towards Satisfaction Of A User Input Condition"에 설명되어 있다.
도 4A 및 4B는 일부 실시예에 따른 휴대용 다기능 장치 상의 애플리케이션 메뉴를 위한 예시적인 사용자 인터페이스를 도시한다. 일부 실시예에서, 사용자 인터페이스(400A)는 이하의 구성요소, 또는 이들의 서브셋이나 수퍼셋을 포함할 수 있다.
● 셀룰러 신호 및 Wi-Fi 신호 등의 무선 통신을 위한 신호 강도 표시자(402);
● 시간(404);
● 배터리 상태 표시자(406);
● 다음 중 하나 이상과 같은 자주 사용되는 애플리케이션을 위한 아이콘을 포함한 트레이(408); 및
○ 부재중 전화 또는 음성메일 메시지 개수에 대한 표시자(414)를 포함할 수 있는 전화(138),
○ 읽지 않은 이메일 개수에 대한 표시자(410)를 포함할 수 있는 이메일 클라이언트(140),
○ 브라우저(147), 및
○ 음악 플레이어(146)
● 다음 중 하나 이상과 같은 다른 애플리케이션을 위한 아이콘
○ IM(141),
○ 이미지 관리(144),
○ 카메라(143),
○ 비디오 플레이어(145),
○ 날씨(149-1),
○ 주식(149-2),
○ 블로그(142),
○ 달력(148),
○ 계산기(149-3),
○ 알람 시계(149-4),
○ 사전(149-5), 및
○ 사용자-생성 위젯(149-6).
일부 실시예에서, 사용자 인터페이스(400B)는 이하의 구성요소, 또는 이들의 서브셋이나 수퍼셋을 포함할 수 있다.
● 상기 언급된 것과 같은 구성요소들(402, 404, 406, 141, 148, 144, 143, 149-3, 149-2, 149-1, 149-4, 410, 414, 138, 140 및 147);
● 지도(154);
● 노트(153);
● 추후 상세히 설명되는 바와 같이, 장치(100) 및 그것의 다양한 애플리케이션(136)을 위한 설정에 대한 액세스를 제공하는 설정(412); 및
● (애플 컴퓨터사의 상표인) iPod 모듈(152)라고도 지칭되는 비디오 및 음악 플레이어 모듈(152).
일부 실시예에서, UI(400A 또는 400B)는 일 스크린 상에 이용가능한 모든 애플리케이션(136)을 디스플레이하여, 애플리케이션 목록을 (예컨대, 스크롤 바를 이용해) 스크롤할 필요가 없도록 한다. 일부 실시예에서, 애플리케이션의 개수가 증가할수록, 모든 애플리케이션이 스크롤 없이 단일 스크린 상에 디스플레이될 수 있도록 애플리케이션에 대응하는 아이콘의 크기를 감소시킬 수 있다. 일부 실시예에서, 메뉴 버튼 및 하나의 스크린 상에 모든 애플리케이션을 통해, 사용자는 메뉴 버튼(204)을 활성화시킨 후 (예컨대, 애플리케이션에 대응하는 아이콘 상의 탭 또는 기타 손가락 제스처에 의해) 원하는 애플리케이션을 활성화시키는 등의 최대 2번의 입력으로 임의의 원하는 애플리케이션을 액세스할 수 있게 된다.
도 5A 내지 5M은 일부 실시예에 따른 브라우저를 위한 예시적인 사용자 인터페이스를 나타낸다.
일부 실시예에서, (각각, 도 5A-5M 내의) 사용자 인터페이스(3900A 내지 3900M)는 후술하는 구성요소 또는 서브셋 또는 수퍼셋을 포함한다.
● 전술한 402, 404 및 406
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 이전 웹 페이지의 디스플레이를 개시하는 이전 페이지 아이콘(3902);
● 웹페이지 이름(3904)
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 다음 웹 페이지의 디스플레이를 개시하는 다음 페이지 아이콘(3906);
● 웹페이지의 URL(Uniform Resource Locator)을 입력하기 위한 URL 입력 상자(3908);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 웹페이지의 새로고침을 개시하는 새로고침 아이콘(3910);
● 텍스트 콘텐츠 및 기타 그래픽(이미지 및 인라인 멀티미디어)의 블록(3914)으로 이루어진 웹페이지(3912) 또는 기타 구조화된 문서;
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 브라우저에 대한 설정 메뉴의 디스플레이를 개시하는 설정 아이콘(3916);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 브라우저를 위한 책갈피(bookmark) 목록 또는 메뉴의 디스플레이를 개시하는 책갈피 아이콘(3918);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 책갈피 추가를 위한 UI(예컨대, 다른 UI 및 페이지와 같이 가로 또는 세로 보기로 디스플레이될 수 있는 도 5F의 UI 3900F)의 디스플레이를 개시하는 책갈피 추가 아이콘(3920);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 새로운 윈도우를 브라우저로 추가하기 위한 UI(예를 들어, 도 5G의 UI 3900G)의 디스플레이를 개시하는 새로운 윈도우 아이콘(3922);
● 웹페이지(3912) 또는 기타 구조화된 문서 중 어떤 부분이 디스플레이되는지 사용자에게 알려주는 웹페이지(3912) 또는 기타 구조화된 문서를 위한 수직 이동막대(3962)(도 5H);
● 웹페이지(3912) 또는 기타 구조화된 문서 중 어떤 부분이 디스플레이되는지 사용자에게 알려주는 웹페이지(3912) 또는 기타 구조화된 문서를 위한 수평 이동막대(3964)(도 5H);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 다른 사용자와 정보를 공유하기 위한 UI(예컨대, 도 5K의 UI(3900K))의 디스플레이를 개시하는 공유 아이콘(3966);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 URL 입력 상자(3908) 내에 임의의 입력을 지우는 URL 삭제 아이콘(3970)(도 5I);
● 웹 검색을 위한 검색 용어를 입력하기 위한 검색 용어 입력 상자(3972)(도 5I);
● URL 입력 상자(3908; 도 5I) 내 입력과 매칭되는 URL을 디스플레이하며 추천되는 URL의 활성화는 해당 웹 페이지 검색을 개시하는, URL 제안 목록(3974);
● 일반적인 URL 문자를 쉽게 입력하게 해주는 기간(period) 키(3978), 백슬래시키(3980) 및 ".com" 키(3982)를 갖춘 URL 입력 키보드(3976; 도 5I 및 5M);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 검색 용어 입력 상자(3972) 내에 임의의 입력을 지워주는 검색 용어 지우기 아이콘(3984);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 하나 이상의 다른 사용자에게 공유되는 링크를 포함하는 이메일을 준비하는 이메일 링크 아이콘(3986)(도 5K);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 하나 이상의 다른 사용자에게 공유되는 콘텐츠를 포함하는 이메일을 준비하는 이메일 콘텐츠 아이콘(3988)(도 5K);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 하나 이상의 다른 사용자에게 공유되는 링크를 포함하는 IM을 준비하는 IM 링크 아이콘(3990)(도 5K);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 UI(예를 들어, 도 5K의 UI 3900K)를 공유하는 것을 취소하고, 이전 UI를 디스플레이하는 취소 아이콘(3992)(도 5K).
일부 실시예에서, 블록(3914) 상에 사용자에 의한 소정의 제스처(예컨대, 단일 탭 제스처 또는 더블 탭 제스처)에 응답하여, 블록은 웹 페이지 디스플레이에서 확대되고 중앙(또는 실질적으로 중앙)에 위치된다. 예컨대, 블록(3914-5) 상에 단일 탭 제스처(3923)를 행하는 것에 응답하여, 블록(3914-5)은 도 5C의 UI(3900C)에 나타난 바와 같이 디스플레이에서 확대되고 중앙에 위치될 수 있다. 일부 실시예에서, 블록의 너비는 터치 스크린 디스플레이를 채우기 위해 스케일링(scale) 될 수 있다. 일부 실시예에서, 블록의 너비는, 디스플레이 주변을 따라 소정의 패딩(padding) 양으로 터치 스크린 디스플레이를 채우도록 스케일링 될 수 있다. 일부 실시예에서, 블록의 확대시 블록의 줌 애니메이션이 디스플레이된다. 유사하게, 블록(3914-2) 상의 단일 탭 제스처(3925)에 응답하여, 블록(3914-2)은 줌 애니메이션과 함께 확대될 수 있고, 디스플레이의 중앙으로 2차원적으로 스크롤 될 수 있다(도시 생략).
일부 실시예에서, 장치는 웹 페이지(3912)의 렌더링 구조를 분석하여 웹페이지 내의 블록(3914)을 판단할 수 있다. 일부 실시예에서, 블록(3914)은 렌더링 노드 즉, 대체된; 블록; 인라인 블록; 또는 인라인 테이블에 대응된다.
일부 실시예에서, 이미 확대되고 중앙에 위치된 블록(3914) 상의 사용자에 의한 동일한 소정의 제스처(예컨대, 단일 탭 제스처 또는 더블 탭 제스처)에 응답하여, 확대 및 중앙화는 실질적으로 또는 완전히 반전된다. 예를 들어, 블록(3914-5) 상의 단일 탭 제스처(3925; 도 5C)에 응답하여, 웹페이지 이미지는 줌아웃되고 도 5A의 UI(3900A)로 돌아갈 수 있다.
일부 실시예에서, 이미 확대되었지만 중앙에 위치하지 않은 블록(3914) 상의 사용자에 의한 (예컨대, 단일 탭 제스처 또는 더블 탭 제스처 등의) 소정의 제스처에 응답하여, 블록은 웹 페이지 디스플레이 내의 중앙에(또는 실질적으로 중앙에) 위치된다. 예를 들어, 블록(3914-4) 상의 단일 탭 제스처(3927; 도 5C)에 응답하여, 블록(3914-4)은 웹 페이지 디스플레이의 중앙에(또는 실질적으로 중앙에) 위치될 수 있다. 유사하게, 블록(3914-6) 상의 단일 탭 제스처(3935; 도 5C)에 응답하여, 블록(3914-6)은 웹 페이지 디스플레이의 중앙에(또는 실질적으로 중앙에) 위치될 수 있다. 그러므로, 이미 확대된 웹페이지 디스플레이에 대해 소정의 제스처에 응답하여 장치는 사용자가 직관적인 방법으로 사용자가 보도록 원하는 일련의 블록을 디스플레이할 수 있다. 이와 동일한 제스처는 상이한 문맥에서 상이한 액션을 개시할 수 있다 (예를 들어, (1) UI 3900A에서 웹 페이지가 줄어들어 있을 때 스크롤과 함께 줌 및/또는 확대하는 것 및 (2) 만약 블록이 이미 중앙에 위치하고 확대된 경우, 확대 및/또는 중앙화를 반전시키는 것).
일부 실시예에서, 사용자에 의한 멀티-터치(3931 및 3933) 디핀칭(depinching) 제스처에 응답하여, 웹페이지는 확대될 수 있다. 반대로, 사용자에 의한 멀티 터치 디핀칭 제스처에 응답하여, 웹페이지는 축소될 수 있다.
일부 실시예에서, 실질적으로 수직 상향(하향) 스와이프 제스처에 응답하여, 웹페이지(또는 보다 일반적으로 기타 전자 문서)는 수직 방향의 일차원적으로 상향(또는 하향) 스크롤될 수 있다. 예를 들어, 사용자에 의한 완전한 수직 방향에 대해 소정의 각도(예컨대 27도) 내로의 상향 스와이프 제스처(3937)에 응답하여 웹페이지는 수직 방향의 일차원적으로 상향 스크롤될 수 있다.
이와 반대로, 일부 실시예에서, 완전한 수직 방향에 대해 소정의 각도(예컨대 27도) 내가 아닌 스와이프 제스처에 응답하여 웹페이지는 이차원적으로 스크롤(즉, 수직 및 수평 방향 모두에 대해 동시에 움직임)될 수 있다. 예를 들어, 사용자에 의한 완전한 수직 방향에 대해 소정의 각도(예컨대 27도) 내가 아닌 상향 스와이프 제스처(3939; 도 5C)에 응답하여, 웹페이지는 스와이프(3939)의 방향을 따라서 이차원적으로 스크롤될 수 있다.
일부 실시예에서, 사용자에 의한 멀티 터치(3941 및 3943) 회전 제스처에 응답하여(도 5C), 비록 멀티 터치(3941 및 3943) 회전 제스처의 회전의 양이 실질적으로 90도와 다르다고 하여도, 웹페이지는 가로 보기를 위해 정확히 90도 회전될 수 있다(도 5D의 UI(3900D)). 유사하게, 사용자에 의한 멀티 터치(3945 및 3947) 회전 제스처에 응답하여(도 5D의 UI(3900D)), 비록 멀티 터치(3941 및 3943) 회전 제스처의 회전의 양이 실질적으로 90도와 다르다고 하여도, 웹페이지는 세로 보기를 위해 정확히 90도 회전할 수 있다.
그러므로, 사용자에 의한 부정확한 제스처에 응답하여 그래픽은 정확하게 움직인다. 장치는 사용자에 의한 부정확한 입력에도 불구하고 사용자에 의해 원하는 방법으로 동작한다. 또한, 가로 보기로 되는 UI(3900C)에 대해 기술된 제스처는 세로 보기를 갖는 UI(예컨대, 도 5D의 UI(3900D))에 또한 적용될 수 있어, 사용자는 웹 브라우징을 위해 사용자가 선호하는 보기를 선택할 수 있다는 점에 유의한다.
도 6A-6C는 일부 실시예에 따른 터치 스크린 디스플레이를 구비한 휴대용 전자 장치(예를 들어, 장치 100) 상에 웹페이지와 같은 구조화된 전자 문서를 디스플레이하기 위한 프로세스(6000)를 나타내는 흐름도이다. 휴대용 전자 장치는 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부를 디스플레이한다. 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함한다(예컨대, 도 5A의 블록(3914))(6006).
일부 실시예에서, 복수의 상자는 스타일 시트 언어(style sheet language)에 의해 정의된다. 일부 실시예에서, 스타일 시트 언어는 캐스캐이딩(cascading) 스타일 시트 언어이다. 일부 실시예에서, 구조화된 전자 문서는 웹페이지이다(예컨대, 도 5A의 웹페이지(3912)). 일부 실시예에서, 구조화된 전자 문서는 HTML 또는 XML 문서이다.
일부 실시예에서, 구조화된 전자 문서의 적어도 일부를 디스플레이하는 것은 문서 너비를 문서 길이와는 무관하게 터치 스크린 디스플레이 너비 내로 맞추도록 스케일링하는 것을 포함한다(6008).
일부 실시예에서, 터치 스크린 디스플레이는 단축과 장축(부축과 주축이라고도 함)을 갖는 직사각형이며, 디스플레이 너비는 구조화된 전자 문서가 가로 보기인 경우 짧은 축에 대응하고(예를 들어, 도 5C), 디스플레이 너비는 구조화된 전자 문서가 세로 보기인 경우 장축에 대응된다(예를 들어, 도 5D).
일부 실시예에서, 구조화된 전자 문서, 경계선, 여백 및/또는 패딩은 복수의 상자에 대해서 판단되며(6002), 터치 스크린 디스플레이 상의 디스플레이를 위해 조정된다(6004). 일부 실시예에서, 복수의 상자 내에서의 모든 상자가 조정된다. 일부 실시예에서, 제1 상자만이 조정된다. 일부 실시예에서, 제1 상자 및 제1 상자에 인접한 상자들만이 조정된다.
제1 제스처는 구조화된 전자 문서의 디스플레이된 부분의 위치에서 감지된다(예컨대, 도 5A의 제스처(3923))(6010). 일부 실시예에서, 제1 제스처는 손가락 제스처이다. 일부 실시예에서, 제1 제스처는 스타일러스 제스처이다.
일부 실시예에서, 제1 제스처는 탭 제스처이다. 일부 실시예에서, 제1 제스처는 한 손가락으로의 더블 탭, 두 손가락으로의 더블 탭, 한 손가락으로의 단일 탭 또는 두 손가락으로의 단일 탭이다.
복수의 상자 내 제1 상자(예컨대, 도 5A의 블록 5(3914-5))는 제1 제스처의 위치에서 결정된다(6012). 일부 실시예에서, 구조화된 전자 문서는 복수의 노드를 갖는 연관된 렌더링 구조를 갖고, 제1 제스처의 위치에서 제1 상자를 결정하는 것은, 제1 제스처가 감지된 위치에 해당하는 복수의 노드 중 제1 노드를 정하기 위해 렌더링 구조를 트래버싱 다운(traversing down)하는 것(6014); 제1 노드로부터 콘텐츠의 논리 그룹을 포함하는 가장 가까운 모 노드(parent node)로 렌더링 구조를 트래버싱 업(traversing up)하는 것(6016); 및 가장 가까운 모 노드에 해당하는 콘텐츠를 제1 상자로서 식별하는 것(6018)을 포함한다. 일부 실시예에서, 콘텐츠의 논리 그룹은 단락, 이미지, 플러그인 객체 또는 테이블을 포함한다. 일부 실시예에서, 가장 가까운 모 노드는 교체된 인라인, 블록, 인라인 블록 또는 인라인 테이블이다.
제1 상자는 터치 스크린 디스플레이 상에서 확대되고 실질적으로 중앙에 위치된다(예컨대, 도 5C의 블록 5(3914-5))(6020). 일부 실시예에서, 확대 및 실질적으로 중앙에 위치시키는 것은 터치 스크린 디스플레이 상의 제1 상자를 동시적으로 줌하는 것과 이동시키는 것을 포함한다(6022). 일부 실시예에서, 확대는 제1 상자를 확장하는 것을 포함하여, 제1 상자의 너비는 터치 스크린 디스플레이의 너비와 실질적으로 동일하다(6024).
일부 실시예에서, 확대된 제1 상자의 텍스트는 터치 스크린 디스플레이 상의 소정의 최소 텍스트 크기 요건을 만족하거나 이보다 커지기 위해 리사이즈된다(6026). 일부 실시예에서, 텍스트 리사이징은 제1 상자가 확대되는 스케일 인자를 판단하는 것(6028); 터치 스크린 디스플레이 상의 소정의 최소 텍스트 크기를 스케일링 인자로 나누어, 제1 상자 내 텍스트를 위한 최소 텍스트 크기를 판단하는 것(6030); 및 만약 제1 상자 내 텍스트에 대한 텍스트 크기가 판단된 최소 텍스트 크기보다 작으면, 제1 상자 내 텍스트에 대한 텍스트 크기를 적어도 판단된 최소 텍스트 크기로 증가시키는 것(6032)을 포함한다. 일부 실시예에서, 제1 상자는 너비를 갖고; 디스플레이는 디스플레이 너비를 가지며, 스케일 인자는 디스플레이 너비를 확대 전의 제1 상자의 너비로 나눈 것이다. 일부 실시예에서, 리사이징은 확대 시에 행해진다. 일부 실시예에서, 리사이징은 확대 후에 이루어진다.
예를 들어, 소정의 최소 텍스트 크기가 18 포인트 폰트이고, 스케일 인자가 2로 판단된 것으로 가정한다. 이 경우, 제1 상자 내의 텍스트에 대한 최소 텍스트 크기는 18/2, 즉 9이다. 제1 상자 내의 텍스트가 10 포인트 폰트인 경우, 그의 텍스트 크기는 증가하지 않는데, 이는 10이 9 포인트 최소보다 크기 때문이다. 스케일 인자가 적용된 경우, 텍스트는 18의 소정의 최소 텍스트 크기보다 큰 20 포인트 폰트로 디스플레이될 것이다. 그러나, 제1 상자 내의 텍스트가 8 포인트 폰트인 경우, 스케일 인자의 적용은 텍스트가 18의 소정의 최소 텍스트 크기보다 작은 16 포인트 폰트로 디스플레이되게 할 것이다. 따라서, 8이 9보다 작으므로, 텍스트 크기는 적어도 9 포인트 폰트로 증가하며, 스케일 인자의 적용 후에 적어도 18 포인트 폰트로 디스플레이된다.
일부 실시예에서, 구조화된 전자 문서 내 텍스트는 터치 스크린 디스플레이 상의 소정의 최소 텍스트 크기 요건을 만족시키거나 이보다 커지기 위해 리사이즈된다(도 6B의 6026). 일부 실시예에서, 텍스트 리사이징은, 제1 상자가 확대되는 스케일 인자를 판단하는 것(6028); 구조화된 전자 문서 내의 텍스트에 대한 최소 텍스트 크기를 판단하기 위해 터치 스크린 디스플레이 상의 소정의 최소 텍스트 크기가 스케일링 인자에 의해 나누는 것(6030); 구조화된 전자 문서 내의 텍스트에 대한 텍스트 크기가 판단된 최소 텍스트 크기보다 작은 경우, 구조화된 전자 문서 내의 텍스트에 대한 텍스트 크기를 적어도 판단된 최소 텍스트 크기로 증가시키는 것(6032)을 포함한다. 일부 실시예에서, 텍스트 리사이징은 복수의 상자 내 텍스트를 포함하는 상자를 식별하는 것; 제1 상자가 확대되는 스케일 인자를 판단하는 것; 구조화된 전자 문서 내 텍스트에 대한 최소 텍스트 크기를 판단하기 위해 터치 스크린 디스플레이 상의 소정의 최소 텍스트 크기를 스케일링 인자로 나누는 것; 및 텍스트를 포함하는 각 식별된 상자에 대하여, 만약 식별된 상자 내 텍스트에 대한 텍스트 크기가 결정된 최소 텍스트 크기보다 작으면, 식별된 상자 내 텍스트에 대한 텍스트 크기를 최소한 결정된 최소 텍스트 크기로 확대시키며, 식별된 상자의 크기를 조정하여 리사이즈된 텍스트를 수용하는 것을 포함한다.
일부 실시예에서, 제2 제스처(예컨대, 도 5C의 제스처(3929))는 확대된 제1 상자 상에서 감지된다(6034). 제2 제스처를 감지하는 것에 응답하여, 구조화된 전자 문서의 디스플레이된 부분은 크기가 줄어든다(6036). 일부 실시예에서, 제1 상자는 확대되기 전 크기로 되돌아 간다(6038).
일부 실시예에서, 제2 제스처 및 제1 제스처는 동일한 형식의 제스처이다. 일부 실시예에서, 제2 제스처는 손가락 제스처이다. 일부 실시예에서, 제2 제스처는 스타일러스 제스처이다.
일부 실시예에서, 제2 제스처는 탭 제스처이다. 일부 실시예에서, 제2 제스처는 한 손가락으로의 더블 탭, 두 손가락으로의 더블 탭, 한 손가락으로의 단일 탭 또는 두 손가락으로의 단일 탭이다.
일부 실시예에서, 제1 상자가 확대되어 있는 동안, 제3 제스처(예컨대, 도 5C의 제스처(3927) 또는 제스처(3935))가 제1 상자가 아닌 제2 상자에서 감지된다(6040). 제3 제스처를 감지하는 것에 응답하여, 제2 상자는 터치 스크린 디스플레이 상에서 실질적으로 중앙에 위치된다(6042). 일부 실시예에서, 제3 제스처와 제1 제스처는 동일한 형식의 제스처이다. 일부 실시예에서, 제3 제스처는 손가락 제스처이다. 일부 실시예에서, 제3 제스처는 스타일러스 제스처이다.
일부 실시예에서, 제3 제스처는 탭 제스처이다. 일부 실시예에서, 제3 제스처는 한 손가락으로의 더블 탭, 두 손가락으로의 더블 탭, 한 손가락으로의 단일 탭 또는 두 손가락으로의 단일 탭이다.
일부 실시예에서, 스와이프 제스처(예컨대, 도 5C의 제스처(3937) 또는 제스처(3939))가 터치 스크린 디스플레이 상에 감지된다(도 6C의 6044). 스와이프 제스처를 감지하는 것에 응답하여, 구조화된 전자 문서의 디스플레이된 부분은 터치 스크린 디스플레이 상에서 이동된다(6046). 일부 실시예에서, 이동은 터치 스크린 디스플레이 상의 구조화된 전자 문서의 수직, 수평 또는 대각선 움직임을 포함한다(6048). 일부 실시예에서, 스와이프 제스처는 손가락 제스처이다. 일부 실시예에서, 스와이프 제스처는 스타일러스 제스처이다.
일부 실시예에서, 제5 제스처(예컨대, 도 5C의 멀티 터치 제스처(3941/3943))가 터치 스크린 디스플레이 상에 감지된다(6050). 제5 제스처를 감지하는 것에 응답하여, 구조화된 전자 문서의 디스플레이된 부분이 터치 스크린 디스플레이에서 90도 회전된다(6052). 일부 실시예에서, 제5 제스처는 손가락 제스처이다. 일부 실시예에서, 제5 제스처는 다수의 손가락 제스처이다. 일부 실시예에서, 제5 제스처는 트위스팅 제스처이다.
일부 실시예에서, 장치의 방위를 변경하는 것이 감지된다(6054). 예를 들어, 하나 이상의 가속도계(168)(도 1A-1B)가 장치의 방위 변경을 감지한다. 장치의 방위를 변경하는 것을 감지하는 것에 응답하여, 구조화된 전자 문서의 디스플레이된 부분은 터치 스크린 디스플레이에서 90도 회전한다(6056).
일부 실시예에서, 다수의 손가락 디핀치 제스처(예컨대, 도 5C의 멀티 터치 제스처(3931/3933))가 터치 스크린 디스플레이 상에 감지된다(6058). 멀티 손가락 디핀치 제스처를 감지하는 것에 응답하여 구조화된 전자 문서의 디스플레이된 부분의 부분은 다수의 손가락 디핀치 제스처의 위치 및 다수의 손가락 디핀치 제스처의 움직임 양에 따라서 터치 스크린 디스플레이 상에서 확대된다(6060).
전술한 콘텐츠 디스플레이 프로세스(6000)는 특정 순서로 발생하는 것으로 나타나는 다수의 동작을 포함하지만, 프로세스(6000)는 직렬로 또는 병렬로(예를 들어, 병렬 프로세서들 또는 멀티-스레딩 환경을 이용하여) 실행될 수 있는 더 많거나 적은 동작들을 포함할 수 있고, 둘 이상의 동작들의 순서는 변경될 수 있으며, 그리고/또는 둘 이상의 동작은 단일 동작으로 결합될 수 있음은 명백할 것이다.
터치 스크린 디스플레이를 갖춘 휴대용 전자 장치의 그래픽 사용자 인터페이스(예컨대 도 5A의 UI(3900A))는 적어도 구조화된 전자 문서의 일부를 포함한다(예컨대, 도 5A의 웹페이지(3912)). 구조화된 전자 문서는 복수의 콘텐츠의 상자를 포함한다(예컨대, 도 5A의 제스처(3914)). 구조화된 전자 문서의 부분 상의 위치에 제1 제스처(예컨대, 도 5A의 제스처(3923))가 감지되는 것에 응답하여, 제1 제스처 위치의 복수의 상자 중 제1 상자(예컨대, 도 5A의 블록 5(3914-5))가 감지되고, 제1 상자는 확대되고 터치 스크린 디스플레이 상에 실질적으로 중앙에 위치된다(예컨대, 도 5C의 블록 5(3914-5)).
일부 실시예에서, URL 입력 상자(3908) 상의 탭 또는 기타 소정의 사용자 제스처에 응답하여, 터치 스크린은 확장된 입력 상자(3926) 및 키보드(616)를 디스플레이한다(예컨대, 도 5B의 UI(3900B)를 세로 보기로 및 도 5E의 UI(3900E)를 가로 보기로). 일부 실시예에서, 터치 스크린은 또한 이하를 디스플레이한다.
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 입력 상자(3926) 내 모든 텍스트의 삭제를 개시하는 컨텍스트 삭제 아이콘(3928);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 상자(3926) 내 검색어 입력을 사용하여 인터넷 검색을 개시하는 검색 아이콘(3930);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 상자(3926) 내 URL 입력으로 웹페이지를 획득하는 것을 개시하는 URL 가기 아이콘(3932).
따라서, 동일한 입력 상자(3926)가 검색어 및 URL 모두의 입력에 사용될 수 있다. 일부 실시예에서, 삭제 아이콘(3928)이 디스플레이되는지 여부는 컨텍스트에 의존한다.
UI(3900G; 도 5G)는 브라우저(147) 등의 애플리케이션에 새 윈도우를 추가하기 위한 UI 이다. UI(3900G)는 디스플레이된 윈도우(예컨대, 웹페이지(3912-2)) 및 적어도 하나의 숨은 윈도우(예컨대, 웹페이지(3912-1 및 3934-3) 및 스크린 상에서 완전히 숨어 있을 수 있는 기타 웹페이지)를 포함하는 애플리케이션(예컨대, 브라우저(147))을 디스플레이한다. UI(3900G)는 윈도우를 애플리케이션(예컨대, 새로운 윈도우 또는 새로운 페이지 아이콘(3936))에 추가하기 위한 아이콘을 디스플레이한다. 윈도우를 추가하기 위한 아이콘(3936)의 활성화를 감지함에 응답하여, 브라우저는 윈도우(예컨대, 새로운 웹페이지(3912)를 위한 새로운 윈도우)를 애플리케이션에 추가한다.
터치 스크린 디스플레이 상의 제스처를 감지함에 응답하여, 애플리케이션의 디스플레이된 윈도우는 디스플레이 밖으로 이동되고 숨은 윈도우가 디스플레이로 이동된다. 예를 들어, 스크린의 왼쪽에 탭 제스처(3949)가 감지되는 것에 응답하여, 웹페이지(3912-2)를 갖춘 윈도우는 일부 또는 전체가 오른쪽 스크린 밖으로 이동되고, 웹페이지(3912-3)를 갖춘 윈도우는 전체가 완전히 스크린 밖으로 이동되며, 부분적으로 숨은 웹페이지(3912-1)를 갖춘 윈도우는 디스플레이의 중앙으로 이동되고, 완전하게 숨겨져 있는 웹페이지(예컨대, 3912-0)를 갖춘 윈도우는 디스플레이로 부분적으로 이동될 수 있다. 대안적으로, 왼쪽에서 오른쪽으로의 스와이프 제스처(3951)도 동일한 효과를 나타낼 수 있다.
반대로, 스크린의 오른쪽에 탭 제스처(3953)가 감지되는 것에 응답하여, 웹페이지(3912-2)를 갖춘 윈도우는 일부 또는 전체가 왼쪽 스크린 밖으로 이동되고, 웹페이지(3912-1)를 갖춘 윈도우는 전체가 완전히 스크린 밖으로 이동되며, 부분적으로 숨은 웹페이지(3912-3)를 갖춘 윈도우는 디스플레이의 중앙으로 이동되고, 완전하게 숨겨져 있는 웹페이지(예컨대, 3912-4)를 갖춘 윈도우는 디스플레이로 부분적으로 이동될 수 있다. 대안적으로, 오른쪽에서 왼쪽으로의 스와이프 제스처(3951)도 동일한 효과를 나타낼 수 있다.
일부 실시예에서, 삭제 아이콘(3934) 상의 탭 또는 기타 소정의 제스처에 응답하여, 대응하는 윈도우(3912)가 삭제된다. 일부 실시예에서, 완료 아이콘(3938) 상의 탭 또는 기타 소정의 제스처에 응답하여, 디스플레이 중앙의 윈도우(예컨대, 3912-2)가 스크린을 채우기 위해 확대된다.
애플리케이션에 윈도우를 추가하는 추가적인 기술은 2007년 1월 5일 출원된 미국 특허 출원, 제11/620,647호, "Method, System, And Graphical User Interface For Viewing Multiple Application Windows"에 기재되어 있으며 이는 여기서 참조된다.
도 7A 내지 7F는 일부 실시예에 따른 인라인 멀티미디어 콘텐츠의 아이템을 재생하기 위한 예시적인 사용자 인터페이스를 나타낸다.
일부 실시예에서, 사용자 인터페이스(4000A 내지 4000F)(각각, 도 7A-7F)는 후술하는 구성요소들 또는 서브셋 또는 수퍼셋을 포함한다.
● 전술한 402, 404, 406, 3902, 3906, 3910, 3912, 3918, 3920 및 3922;
● 퀵타임 콘텐츠(4002-1), 윈도우 미디어 콘텐츠(4002-2) 또는 플래시 콘텐츠(4002-3)와 같은 인라인 멀티미디어 콘텐츠(4002);
● 텍스트와 같은 구조화된 문서 내의 다른 형식의 콘텐츠(4004);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 인라인 멀티미디어 콘텐츠 재생기 UI(예컨대, UI(4000B 또는 4000F))를 종료시키고 다른 UI(예컨대, 도 7A의 UI(4000A))로 돌아가는 것을 개시하는 종료 아이콘(4006);
● 인라인 멀티미디어 콘텐츠(4002)가 얼마나 재생되었는지 시간의 단위로 나타내는 경과된 시간(4008)
● 인라인 멀티미디어 콘텐츠(4002)의 어떠한 부분이 재생되었는지 나타내며, 사용자 제스처에 응답하여 인라인 멀티미디어 콘텐츠를 스크롤하는데 사용될 수 있는 진행 이동막대(4010);
● 인라인 멀티미디어 콘텐츠(4002)가 얼마나 재생되어야 하는지 시간의 단위로 나타내는 잔여 시간(4012);
● 인라인 멀티미디어 콘텐츠(4002)가 장치로 다운로드 또는 스트리밍되고 있는 경우를 나타내는 다운로드 아이콘(4014);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 인라인 멀티미디어 콘텐츠(4002)에 대해 되감기 또는 이전으로 건너뛰기를 개시하는 빨리 되감기/이전으로 건너뛰기 아이콘(4016);
● (예컨대, 아이콘 상에 손가락 탭(도 7C의 4026)하는 것에 의해) 활성화되었을 때 인라인 멀티미디어 콘텐츠(4002)의 재생을 시작부터 또는 인라인 멀티미디어 콘텐츠가 일시 정지된 시점부터 개시하는 재생 아이콘(4018);
● 인라인 멀티미디어 콘텐츠(4002)에 대해 감기 또는 다음으로 건너뛰기를 개시하는 빨리 감기/다음으로 건너뛰기 아이콘(4020);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 인라인 멀티미디어 콘텐츠(4002)의 볼륨 조정을 개시하는 볼륨 조정 슬라이더 아이콘(4022);
● (예컨대, 아이콘 상의 손가락 탭에 의해) 활성화되었을 때 인라인 멀티미디어 콘텐츠(4002)의 일시 정지를 개시하는 일시 정지 아이콘(4024).
도 8은 일부 실시예에 따른 터치 스크린 디스플레이를 구비한 휴대용 전자 장치(예컨대, 장치 100) 상에 인라인 멀티미디어 콘텐츠를 디스플레이하기 위한 프로세스(8000)를 나타내는 흐름도이다. 휴대용 전자 장치는 적어도 구조화된 전자 문서의 일부만을 터치 스크린 디스플레이에 디스플레이한다(8002). 구조화된 전자 문서는 콘텐츠(예컨대, 도 7A의 4002 및 4004)를 포함한다. 일부 실시예에서, 구조화된 전자 문서는 웹페이지(예컨대, 웹페이지 3912)이다. 일부 실시예에서, 구조화된 전자 문서는 HTML 또는 XML 문서이다.
제1 제스처(예컨대, 도 7A의 4028)가 구조화된 전자 문서의 디스플레이된 부분의 인라인 멀티미디어 콘텐츠의 아이템(예컨대, 도 7A의 4002-1) 상에서 감지된다(8004). 일부 실시예에서, 인라인 멀티미디어 콘텐츠는 비디오 및/또는 오디오 콘텐츠를 포함한다. 일부 실시예에서, 퀵타임, 윈도우 미디어 또는 플래시 플러그인으로써 재생될 수 있다.
제1 제스처를 감지하는 것에 응답하여, 인라인 멀티미디어 콘텐츠의 아이템은 터치 스크린 디스플레이 상에서 확대되고, 확대된 인라인 멀티미디어 콘텐츠 아이템 이외의 구조화된 전자 문서 내 다른 콘텐츠(예컨대, 도 7A의 4002-1 이외의 4004 및 기타 4002)는 디스플레이되지 않는다(예컨대, 도 7B의 UI(4000B) 또는 도 7F의 UI(4000F))(8006).
일부 실시예에서, 인라인 멀티미디어 콘텐츠의 아이템을 확대시키는 것은 아이템에 대한 애니메이션화된 줌을 포함한다. 일부 실시예에서, 인라인 멀티미디어 콘텐츠의 아이템을 확대시키는 것은 동시적으로 줌하고 터치 스크린 디스플레이 상의 인라인 멀티미디어 콘텐츠의 아이템을 이동시키는 것을 포함한다. 일부 실시예에서, 인라인 멀티미디어 콘텐츠의 아이템을 확대하는 것은 인라인 멀티미디어 콘텐츠의 아이템을 90도 회전하는 것을 포함한다(예컨대, 도 7A의 UI(4000A) 내지 도 7B의 UI(4000B)).
일부 실시예에서, 인라인 멀티미디어 콘텐츠의 아이템은 전체 크기를 갖으며, 터치 스크린은 크기를 갖고, 인라인 멀티미디어 콘텐츠의 아이템을 확대하는 것은 인라인 멀티미디어 콘텐츠의 아이템을 아이템의 전체 크기보다는 작으며 터치 스크린 디스플레이의 크기로 확대하는 것을 포함한다.
일부 실시예에서, 인라인 멀티미디어 콘텐츠의 아이템을 확대하는 것은 인라인 멀티미디어 콘텐츠의 아이템을 확장시켜 인라인 멀티미디어 콘텐츠의 아이템의 너비를 터치 스크린 디스플레이의 너비와 실질적으로 같도록 할 수 있다(예컨대, 도 7B의 UI(4000B) 또는 도 7F의 UI(4000F)).
일부 실시예에서, 인라인 멀티미디어 콘텐츠의 아이템 이외의 구조화된 전자 문서 내 다른 콘텐츠를 디스플레이하는 것을 중지하는 것은 인라인 멀티미디어 콘텐츠의 아이템 이외의 구조화된 전자 문서 내 다른 콘텐츠를 페이딩 아웃(fading out)하는 것을 포함한다.
인라인 멀티미디어 콘텐츠의 확대된 아이템이 디스플레이되는 동안, 제2 제스처가 터치 스크린 디스플레이가 감지된다(예컨대, 도 7B의 4030)(8080).
제2 제스처를 감지하는 것에 응답하여, 인라인 멀티미디어 콘텐츠의 확대된 아이템을 재생하기 위한 하나 이상의 재생 제어부가 디스플레이된다(8010). 일부 실시예에서, 하나 이상의 재생 제어부는 재생 아이콘(예컨대, 도 7C의 아이콘 4018), 일시 정지 아이콘(예컨대, 도 7E의 아이콘 4024), 사운드 볼륨 아이콘(예컨대, 아이콘 4022) 및/또는 재생 진행 이동막대 아이콘(예컨대, 아이콘 4010)을 포함한다.
일부 실시예에서, 하나 이상의 재생 제어부를 디스플레이하는 것은 인라인 멀티미디어 콘텐츠의 확대된 아이템의 상부에 하나 이상의 재생 제어부를 디스플레이하는 것을 포함한다(예컨대, 도 7C에서 재생 제어부(4016, 4018, 4020 및 4022)는 확대된 인라인 멀티미디어 콘텐츠(4002-1)의 상부에 존재한다). 일부 실시예에서, 하나 이상의 재생 제어부는 인라인 멀티미디어 콘텐츠의 확대된 아이템의 상부에 중첩(superimpose)된다. 일부 실시예에서, 하나 이상의 재생 제어부는 반투명하다.
일부 실시예에서, 인라인 멀티미디어 콘텐츠의 아이템을 자동 재생 시작하도록 하는 구조화된 전자 문서 내의 명령이 우선되어, 재생을 시작하기 전에 선택된 인라인 멀티미디어 콘텐츠를 더 다운로드하도록 하는 시간을 장치에 부여한다.
제3 제스처가 재생 제어부 중 하나에서 감지된다(예컨대, 도 7C의 재생 아이콘(4018)의 제스처(4026))(8012).
제3 제스처를 감지하는 것에 응답하여, 인라인 멀티미디어 콘텐츠의 확대된 아이템이 재생된다(8014). 일부 실시예에서, 인라인 멀티미디어 콘텐츠의 확대된 아이템을 재생하는 것은 인라인 멀티미디어 콘텐츠와 연관된 콘텐츠 타입을 위한 플러그인을 갖춘 인라인 멀티미디어 콘텐츠의 확대된 아이템을 재생하는 것을 포함한다.
일부 실시예에서, 인라인 멀티미디어 콘텐츠의 확대된 아이템이 재생되는 동안, 하나 이상의 재생 제어부의 디스플레이가 중단된다(예컨대, 도 7D 재생 제어부 (4016, 4018, 4020 및 4022)는 디스플레이하지 않지만 재생 제어부(4006, 4008, 4010 및 4012)는 여전히 보임). 일부 실시예에서, 모든 재생 제어부의 디스플레이가 중단된다. 일부 실시예에서, 하나 이상의 재생 제어부의 디스플레이를 중단하는 것은 하나 이상의 재생 제어부를 페이딩 아웃시키는 것을 포함한다. 일부 실시예에서, 하나 이상의 재생 제어부의 디스플레이는 소정의 시간이 지난 이후 중단된다. 일부 실시예에서, 하나 이상의 재생 제어부의 디스플레이는 소정의 시간 동안 터치 스크린 디스플레이에 아무런 접촉이 감지되지 않으면 중단된다.
일부 실시예에서, 제4 제스처가 터치 스크린 디스플레이에 감지된다(8016). 제4 제스처가 감지되는 것에 응답하여, 구조화된 전자 문서의 적어도 일부가 다시 디스플레이된다(예컨대, 도 7A)(8018). 일부 실시예에서, 제4 제스처는, 완료 아이콘과 같은 재생 완료 아이콘 상의 탭 제스처를 포함한다(예컨대, 도 7D의 완료 아이콘(4006) 상의 제스처(4032)). 일부 실시예에서, 인라인 멀티미디어 콘텐츠의 아이템은 확대되기 이전 크기로 돌아간다.
일부 실시예에서, 제1, 제2 및 제3 제스처는 손가락 제스처이다. 일부 실시예에서, 제1, 제2 및 제3 제스처는 스타일러스 제스처이다.
일부 실시예에서, 제1, 제2 및 제3 제스처는 탭 제스처이다. 일부 실시예에서, 탭 제스처는 한 손가락으로의 더블 탭, 두 손가락으로의 더블 탭, 한 손가락으로의 단일 탭 또는 두 손가락으로의 단일 탭이다.
전술한 콘텐츠 디스플레이 프로세스(8000)는 특정 순서로 발생하는 것으로 나타나는 다수의 동작을 포함하지만, 프로세스(8000)는 직렬로 또는 병렬로(예를 들어, 병렬 프로세서들 또는 멀티-스레딩 환경을 이용하여) 실행될 수 있는 더 많거나 적은 동작들을 포함할 수 있고, 둘 이상의 동작들의 순서는 변경될 수 있으며, 그리고/또는 둘 이상의 동작은 단일 동작으로 결합될 수 있음은 명백할 것이다.
터치 스크린을 갖춘 휴대용 전자 장치 상의 그래픽 사용자 인터페이스는 구조화된 전자 문서의 적어도 일부를 포함하며, 구조화된 전자 문서는 구조화된 전자 문서의 부분 내에 인라인 멀티미디어 콘텐츠의 아이템; 및 하나 이상의 재생 제어부를 포함한다. 인라인 멀티미디어 콘텐츠의 아이템 상의 제1 제스처를 감지하는 것에 응답하여, 터치 스크린 디스플레이 상의 인라인 멀티미디어 콘텐츠의 아이템이 확대되고, 인라인 멀티미디어 콘텐츠의 확대된 아이템 이외의 구조화된 전자 문서의 기타 콘텐츠의 디스플레이는 중단된다. 인라인 멀티미디어 콘텐츠의 확대된 아이템이 디스플레이되는 동안 터치 스크린 디스플레이 상의 제2 제스처를 감지하는 것에 응답하여, 인라인 멀티미디어 콘텐츠의 확대된 아이템을 재생하기 위한 하나 이상의 재생 제어부가 디스플레이된다. 재생 제어부 중 하나 상에 제3 제스처를 감지하는 것에 응답하여, 인라인 멀티미디어 콘텐츠의 확대된 아이템이 재생된다.
전술한 상기 내용은, 설명을 위하여 구체적인 실시예를 참조하여 설명되었다. 하지만, 전술한 예시적인 설명은 포괄적인 것이 아니며, 개시된 특정 형태로 본 발명을 한정하고자 하는 것이 아니다. 본 명세서에 교시된 내용에 따라 다양한 수정 및 변경이 가능하다. 본 명세서의 실시예들은, 본 발명의 원리와 실제의 응용을 가장 잘 설명하기 위하여 선택되고 설명되었으며, 이는 본 발명 및 고려된 특정한 사용에 적합한 여러 가지 수정 사항을 가지는 다양한 실시예들을 당업자가 가장 잘 활용할 수 있도록 한다.
100: 휴대용 다기능 장치
102: 메모리
106: I/O 서브시스템
112: 터치 감지 디스플레이 시스템
164: 광센서

Claims (19)

  1. 하나 이상의 프로그램들을 저장하는 비일시적인 컴퓨터 판독가능 기록 매체로서,
    상기 하나 이상의 프로그램들은 명령어들을 포함하고,
    상기 명령어들은, 터치 스크린 디스플레이를 갖는 휴대용 전자 장치에 의해 실행될 때, 상기 장치로 하여금,
    상기 터치 스크린 디스플레이 상에 사용자 인터페이스를 디스플레이하고 - 상기 사용자 인터페이스는 제1 윈도우를 포함하는 애플리케이션의 적어도 2개의 윈도우들 및 상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘을 포함하고, 상기 제1 윈도우 상에 제1 아이콘이 디스플레이됨 -;
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 터치 스크린 디스플레이 상에서 상기 제1 윈도우 상의 제1 아이콘 상의 제스처를 검출하고;
    상기 터치 스크린 디스플레이 상에서 상기 제1 윈도우 상의 제1 아이콘 상의 제스처를 검출하는 것에 응답하여,
    상기 제스처에 대응하는 상기 적어도 2개의 디스플레이된 윈도우들 중의 상기 제1 윈도우를 상기 디스플레이로부터 제거하고;
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘 상에서 제2 제스처를 검출하고;
    상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘 상에서 상기 제2 제스처를 검출하는 것에 응답하여, 상기 터치 스크린 디스플레이 상에 상기 애플리케이션의 새로운 윈도우를 디스플레이하도록 야기하는 명령어들을 포함하는,
    컴퓨터 판독가능 기록 매체.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 제1항에 있어서, 상기 장치로 하여금,
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 터치 스크린 디스플레이 상에서 제3 제스처를 검출하고;
    상기 터치 스크린 디스플레이 상에서 상기 제3 제스처를 검출하는 것에 응답하여,
    상기 적어도 2개의 디스플레이된 윈도우들 중의 제2 윈도우를 완전히 상기 터치 스크린 디스플레이 밖으로 이동시키도록 야기하는 명령어들을 포함하는,
    컴퓨터 판독가능 기록 매체.
  7. 휴대용 전자 장치로서,
    터치 스크린 디스플레이;
    하나 이상의 프로세서들;
    메모리; 및
    하나 이상의 프로그램들을 포함하며,
    상기 하나 이상의 프로그램들은 상기 메모리 내에 저장되고 또한 상기 하나 이상의 프로세스들에 의해 실행되도록 구성되며,
    상기 하나 이상의 프로그램들은,
    상기 터치 스크린 디스플레이 상에 사용자 인터페이스를 디스플레이하고 - 상기 사용자 인터페이스는 제1 윈도우를 포함하는 애플리케이션의 적어도 2개의 윈도우들 및 상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 디스플레이되는 제2 아이콘을 포함하고, 상기 제1 윈도우 상에 제1 아이콘이 디스플레이됨 -;
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 터치 스크린 디스플레이 상에서 상기 제1 윈도우 상의 제1 아이콘 상의 제스처를 검출하고;
    상기 터치 스크린 디스플레이 상에서 상기 제1 윈도우 상의 제1 아이콘 상의 제스처를 검출하는 것에 응답하여,
    상기 제스처에 대응하는 상기 적어도 2개의 디스플레이된 윈도우들 중의 상기 제1 윈도우를 상기 디스플레이로부터 제거하고;
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘 상에서 제2 제스처를 검출하고;
    상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘 상에서 상기 제2 제스처를 검출하는 것에 응답하여, 상기 터치 스크린 디스플레이 상에 상기 애플리케이션의 새로운 윈도우를 디스플레이하기 위한 명령어들을 포함하는,
    휴대용 전자 장치.
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 제7항에 있어서,
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 터치 스크린 디스플레이 상에서 제3 제스처를 검출하고;
    상기 터치 스크린 디스플레이 상에서 상기 제3 제스처를 검출하는 것에 응답하여,
    상기 적어도 2개의 디스플레이된 윈도우들 중의 제2 윈도우를 완전히 상기 터치 스크린 디스플레이 밖으로 이동시키기 위한 명령어들을 포함하는,
    휴대용 전자 장치.
  13. 방법으로서,
    터치 스크린 디스플레이를 갖는 휴대용 전자 장치에서:
    상기 터치 스크린 디스플레이 상에 사용자 인터페이스를 디스플레이하는 단계 - 상기 사용자 인터페이스는 제1 윈도우를 포함하는 애플리케이션의 적어도 2개의 윈도우들 및 상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘을 포함하고, 상기 제1 윈도우 상에 제1 아이콘이 디스플레이됨 -;
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 터치 스크린 디스플레이 상에서 상기 제1 윈도우 상의 제1 아이콘 상의 제스처를 검출하는 단계;
    상기 터치 스크린 디스플레이 상에서 상기 제1 윈도우 상의 제1 아이콘 상의 제스처를 검출하는 것에 응답하여,
    상기 제스처에 대응하는 상기 적어도 2개의 디스플레이된 윈도우들 중의 상기 제1 윈도우를 상기 디스플레이로부터 제거하는 단계;
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘 상에서 제2 제스처를 검출하는 단계; 및
    상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘 상에서 상기 제2 제스처를 검출하는 것에 응답하여, 상기 터치 스크린 디스플레이 상에 상기 애플리케이션의 새로운 윈도우를 디스플레이하는 단계
    를 포함하는 방법.
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 제13항에 있어서,
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 터치 스크린 디스플레이 상에서 제3 제스처를 검출하는 단계; 및
    상기 터치 스크린 디스플레이 상에서 상기 제3 제스처를 검출하는 것에 응답하여,
    상기 적어도 2개의 디스플레이된 윈도우들 중의 제2 윈도우를 완전히 상기 터치 스크린 디스플레이 밖으로 이동시키는 단계
    를 포함하는 방법.
  19. 터치 스크린 디스플레이를 갖는 휴대용 전자 장치로서,
    상기 터치 스크린 디스플레이 상에 사용자 인터페이스를 디스플레이하기 위한 수단 - 상기 사용자 인터페이스는 제1 윈도우를 포함하는 애플리케이션의 적어도 2개의 윈도우들 및 상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘을 포함하고, 상기 제1 윈도우 상에 제1 아이콘이 디스플레이됨 -;
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 터치 스크린 디스플레이 상에서 상기 제1 윈도우 상의 제1 아이콘 상의 제스처를 검출하기 위한 수단;
    상기 터치 스크린 디스플레이 상에서 상기 제1 윈도우 상의 제1 아이콘 상의 제스처를 검출하는 것에 응답하여, 상기 제스처에 대응하는 상기 적어도 2개의 디스플레이된 윈도우들 중의 상기 제1 윈도우를 상기 디스플레이로부터 제거하기 위한 수단;
    상기 적어도 2개의 윈도우들을 디스플레이하는 동안, 상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘 상에서 제2 제스처를 검출하기 위한 수단; 및
    상기 애플리케이션의 적어도 2개의 윈도우들과 상이한 위치에 있는 제2 아이콘 상에서 상기 제2 제스처를 검출하는 것에 응답하여, 상기 터치 스크린 디스플레이 상에 상기 애플리케이션의 새로운 윈도우를 디스플레이하기 위한 수단
    을 포함하는 휴대용 전자 장치.
KR1020147023012A 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스 Active KR101652388B1 (ko)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
US82476906P 2006-09-06 2006-09-06
US60/824,769 2006-09-06
US87925307P 2007-01-07 2007-01-07
US60/879,253 2007-01-07
US87946907P 2007-01-08 2007-01-08
US60/879,469 2007-01-08
US94671507P 2007-06-27 2007-06-27
US60/946,715 2007-06-27
US93799307P 2007-06-29 2007-06-29
US60/937,993 2007-06-29
US11/850,013 US7864163B2 (en) 2006-09-06 2007-09-04 Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US11/850,013 2007-09-04
PCT/US2007/077644 WO2008030879A2 (en) 2006-09-06 2007-09-05 Portable electronic device, method, and graphical user interface for displaying structured electronic documents

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020137028362A Division KR101569980B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020167023037A Division KR20160104095A (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스

Publications (2)

Publication Number Publication Date
KR20140119742A KR20140119742A (ko) 2014-10-10
KR101652388B1 true KR101652388B1 (ko) 2016-08-30

Family

ID=38777949

Family Applications (8)

Application Number Title Priority Date Filing Date
KR1020177037416A Active KR102077383B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020167023037A Ceased KR20160104095A (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020137028362A Active KR101569980B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020117019633A Active KR101152582B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020117026453A Active KR101522446B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020097009491A Active KR101083545B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020147023012A Active KR101652388B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020097007064A Active KR101085768B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스

Family Applications Before (6)

Application Number Title Priority Date Filing Date
KR1020177037416A Active KR102077383B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020167023037A Ceased KR20160104095A (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020137028362A Active KR101569980B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020117019633A Active KR101152582B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020117026453A Active KR101522446B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스
KR1020097009491A Active KR101083545B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020097007064A Active KR101085768B1 (ko) 2006-09-06 2007-09-05 구조화된 전자 문서들을 디스플레이하기 위한 휴대용 전자 장치, 방법 및 그래픽 사용자 인터페이스

Country Status (9)

Country Link
US (9) US7864163B2 (ko)
EP (6) EP2166438A1 (ko)
JP (7) JP5559538B2 (ko)
KR (8) KR102077383B1 (ko)
CN (3) CN101727275A (ko)
AU (2) AU2007292383B2 (ko)
CA (4) CA3075071C (ko)
DE (1) DE112007002107T5 (ko)
WO (1) WO2008030879A2 (ko)

Families Citing this family (403)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7760187B2 (en) * 2004-07-30 2010-07-20 Apple Inc. Visual expander
US7813954B1 (en) * 2001-12-14 2010-10-12 Keen Personal Media, Inc. Audiovisual system and method for displaying segmented advertisements tailored to the characteristic viewing preferences of a user
US8074248B2 (en) 2005-07-26 2011-12-06 Activevideo Networks, Inc. System and method for providing video content associated with a source image to a television in a communication network
US8225231B2 (en) 2005-08-30 2012-07-17 Microsoft Corporation Aggregation of PC settings
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7956849B2 (en) 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US8842074B2 (en) 2006-09-06 2014-09-23 Apple Inc. Portable electronic device performing similar operations for different gestures
US9128596B2 (en) * 2006-09-22 2015-09-08 Opera Software Asa Method and device for selecting and displaying a region of interest in an electronic document
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
EP1926075B1 (en) * 2006-11-27 2013-01-16 Harman Becker Automotive Systems GmbH Handheld computer device with display which adapts to the orientation of the device and method for displaying information on such a device
US9001047B2 (en) 2007-01-07 2015-04-07 Apple Inc. Modal change based on orientation of a portable multifunction device
US20080168402A1 (en) 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US20080168478A1 (en) 2007-01-07 2008-07-10 Andrew Platzer Application Programming Interfaces for Scrolling
US7844915B2 (en) 2007-01-07 2010-11-30 Apple Inc. Application programming interfaces for scrolling operations
US8689132B2 (en) 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US9826197B2 (en) 2007-01-12 2017-11-21 Activevideo Networks, Inc. Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device
US9042454B2 (en) 2007-01-12 2015-05-26 Activevideo Networks, Inc. Interactive encoded content system including object models for viewing on a remote device
US20080276194A1 (en) * 2007-02-06 2008-11-06 Access Systems Americas, Inc. Method of exposing fully editable text fields on a mobile device
JP4976899B2 (ja) * 2007-03-30 2012-07-18 株式会社東芝 携帯型電子機器および音声出力制御プログラム
US8265166B2 (en) * 2007-05-14 2012-09-11 Sandisk Il Ltd. Dual decoder portable media device
TWI337321B (en) * 2007-05-15 2011-02-11 Htc Corp Electronic device with switchable user interface and accessable touch operation
TWI357012B (en) * 2007-05-15 2012-01-21 Htc Corp Method for operating user interface and recording
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US20090144667A1 (en) * 2007-11-30 2009-06-04 Nokia Corporation Apparatus, method, computer program and user interface for enabling user input
TWI420341B (zh) * 2007-12-31 2013-12-21 Htc Corp 顯示螢幕上選單之方法及其行動裝置
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US8174502B2 (en) * 2008-03-04 2012-05-08 Apple Inc. Touch event processing for web pages
US8201109B2 (en) * 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
US8717305B2 (en) * 2008-03-04 2014-05-06 Apple Inc. Touch event model for web pages
US8416196B2 (en) * 2008-03-04 2013-04-09 Apple Inc. Touch event model programming interface
TWI428814B (zh) 2008-04-15 2014-03-01 Htc Corp 在螢幕鎖定狀態下切換背景圖的方法、其行動電子裝置與儲存媒體
USD616891S1 (en) 2008-05-06 2010-06-01 Apple Inc. Graphical user interface for a display screen or portion thereof
US8174503B2 (en) 2008-05-17 2012-05-08 David H. Cain Touch-based authentication of a mobile device through user generated pattern creation
USD616892S1 (en) 2008-05-20 2010-06-01 Apple Inc. Graphical user interface for a display screen or portion thereof
US8477139B2 (en) * 2008-06-09 2013-07-02 Apple Inc. Touch screen device, method, and graphical user interface for manipulating three-dimensional virtual objects
DE102009003995A1 (de) * 2008-08-06 2010-02-11 Rohde & Schwarz Gmbh & Co. Kg Verfahren zur Vergrößerung eines Darstellungsbereichs auf einer Darstellungseinrichtung
US20100060588A1 (en) * 2008-09-09 2010-03-11 Microsoft Corporation Temporally separate touch input
KR101508778B1 (ko) * 2008-09-17 2015-04-03 주식회사 엘지유플러스 이동통신단말기 및 화면 처리 방법
US9087337B2 (en) * 2008-10-03 2015-07-21 Google Inc. Displaying vertical content on small display devices
WO2010045427A1 (en) * 2008-10-15 2010-04-22 Inputive Corporation System and method for seamlessly integrated navigation of applications
TW201017487A (en) * 2008-10-17 2010-05-01 Asustek Comp Inc Method for operating displayed page and electronic device
US20100107100A1 (en) 2008-10-23 2010-04-29 Schneekloth Jason S Mobile Device Style Abstraction
KR101078929B1 (ko) * 2008-11-06 2011-11-01 엘지전자 주식회사 단말기 및 그 인터넷 이용 방법
US8954894B2 (en) * 2008-11-15 2015-02-10 Adobe Systems Incorporated Gesture-initiated symbol entry
US9477396B2 (en) * 2008-11-25 2016-10-25 Samsung Electronics Co., Ltd. Device and method for providing a user interface
EP3232315B1 (en) * 2008-11-25 2021-08-25 Samsung Electronics Co., Ltd. Device and method for providing a user interface
US8543415B2 (en) * 2008-11-26 2013-09-24 General Electric Company Mobile medical device image and series navigation
US20100138732A1 (en) * 2008-11-28 2010-06-03 Nokia Corporation Method for implementing small device and touch interface form fields to improve usability and design
US8159465B2 (en) * 2008-12-19 2012-04-17 Verizon Patent And Licensing Inc. Zooming techniques for touch screens
US8566403B2 (en) 2008-12-23 2013-10-22 At&T Mobility Ii Llc Message content management system
US7870211B2 (en) * 2008-12-23 2011-01-11 At&T Mobility Ii Llc Conversation message routing supporting dynamic class transitions
US8700072B2 (en) 2008-12-23 2014-04-15 At&T Mobility Ii Llc Scalable message fidelity
US8799820B2 (en) * 2008-12-23 2014-08-05 At&T Mobility Ii Llc Dynamically scaled messaging content
US8428626B2 (en) * 2008-12-23 2013-04-23 At&T Mobility Ii Llc Selective caching of real time messaging threads
US20100162133A1 (en) * 2008-12-23 2010-06-24 At&T Mobility Ii Llc User interface paradigm for next-generation mobile messaging
US8893040B2 (en) 2008-12-23 2014-11-18 At&T Mobility Ii Llc Systems, devices, or methods for accessing information employing a tumbler-style graphical user interface
US20100162138A1 (en) * 2008-12-23 2010-06-24 At&T Mobility Ii Llc Conversation bubbles including visual cues for threaded messaging applications
US8319736B2 (en) * 2009-01-19 2012-11-27 Microsoft Corporation Touch sensitive computing device and method
JP4913834B2 (ja) * 2009-01-23 2012-04-11 シャープ株式会社 情報処理装置、制御方法及びプログラム
JP2010191739A (ja) * 2009-02-19 2010-09-02 Fujitsu Ltd 文書表示装置、文書表示方法、及びこの方法を実行するコンピュータプログラム
US8285499B2 (en) 2009-03-16 2012-10-09 Apple Inc. Event recognition
US8566045B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US8566044B2 (en) * 2009-03-16 2013-10-22 Apple Inc. Event recognition
US9684521B2 (en) 2010-01-26 2017-06-20 Apple Inc. Systems having discrete and continuous gesture recognizers
US9311112B2 (en) * 2009-03-16 2016-04-12 Apple Inc. Event recognition
US20100235784A1 (en) * 2009-03-16 2010-09-16 Bas Ording Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
US8175653B2 (en) * 2009-03-30 2012-05-08 Microsoft Corporation Chromeless user interface
US10191654B2 (en) * 2009-03-30 2019-01-29 Touchtype Limited System and method for inputting text into electronic devices
GB0905457D0 (en) 2009-03-30 2009-05-13 Touchtype Ltd System and method for inputting text into electronic devices
KR101553842B1 (ko) * 2009-04-21 2015-09-17 엘지전자 주식회사 멀티 햅틱 효과를 제공하는 휴대 단말기 및 그 제어방법
KR101613838B1 (ko) * 2009-05-19 2016-05-02 삼성전자주식회사 휴대 단말기의 홈 스크린 지원 방법 및 이를 지원하는 휴대 단말기
JP5493490B2 (ja) * 2009-06-16 2014-05-14 ソニー株式会社 表示制御装置、表示制御方法及び表示制御プログラム
US8499000B2 (en) * 2009-07-30 2013-07-30 Novell, Inc. System and method for floating index navigation
US9152317B2 (en) * 2009-08-14 2015-10-06 Microsoft Technology Licensing, Llc Manipulation of graphical elements via gestures
US20110043538A1 (en) * 2009-08-18 2011-02-24 Sony Ericsson Mobile Communications Ab Method and Arrangement for Zooming on a Display
US20110043461A1 (en) * 2009-08-24 2011-02-24 Ming-Te Lai Systems and methods for application management
US9310907B2 (en) 2009-09-25 2016-04-12 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
EP2480957B1 (en) * 2009-09-22 2017-08-09 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8832585B2 (en) 2009-09-25 2014-09-09 Apple Inc. Device, method, and graphical user interface for manipulating workspace views
US8766928B2 (en) * 2009-09-25 2014-07-01 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8799826B2 (en) * 2009-09-25 2014-08-05 Apple Inc. Device, method, and graphical user interface for moving a calendar entry in a calendar application
US9177484B2 (en) * 2009-10-01 2015-11-03 Andrew Chan Apparatus and method of supporting communication and performance among a group of musicians
USD640711S1 (en) * 2009-10-09 2011-06-28 Research In Motion Limited Display screen of a mobile communication device with graphical user interface
KR20110063297A (ko) * 2009-12-02 2011-06-10 삼성전자주식회사 휴대용단말기 및 그 제어방법
US10156979B2 (en) 2009-12-02 2018-12-18 Samsung Electronics Co., Ltd. Method and apparatus for providing user interface of portable device
EP2336906A1 (en) 2009-12-21 2011-06-22 Research in Motion Limited Method and device to modify an electronic document from a mobile environment with server assistance
KR20110072970A (ko) * 2009-12-23 2011-06-29 엘지전자 주식회사 영상표시장치 및 그 동작 방법
USD654925S1 (en) * 2009-12-25 2012-02-28 Sony Computer Entertainment Inc. Display panel or screen with computer generated animated image
US8698845B2 (en) * 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface with interactive popup views
US8736561B2 (en) 2010-01-06 2014-05-27 Apple Inc. Device, method, and graphical user interface with content display modes and display rotation heuristics
US9052894B2 (en) 2010-01-15 2015-06-09 Apple Inc. API to replace a keyboard with custom controls
US8677268B2 (en) 2010-01-26 2014-03-18 Apple Inc. Device, method, and graphical user interface for resizing objects
US8539385B2 (en) * 2010-01-26 2013-09-17 Apple Inc. Device, method, and graphical user interface for precise positioning of objects
US8539386B2 (en) * 2010-01-26 2013-09-17 Apple Inc. Device, method, and graphical user interface for selecting and moving objects
TWI495322B (zh) * 2010-01-29 2015-08-01 Htc Corp 訊息顯示方法、行動電話及電腦程式產品
US20110239114A1 (en) * 2010-03-24 2011-09-29 David Robbins Falkenburg Apparatus and Method for Unified Experience Across Different Devices
US9052925B2 (en) 2010-04-07 2015-06-09 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9264659B2 (en) 2010-04-07 2016-02-16 Apple Inc. Video conference network management for a mobile device
US9513801B2 (en) 2010-04-07 2016-12-06 Apple Inc. Accessing electronic notifications and settings icons with gestures
USD660868S1 (en) 2010-04-07 2012-05-29 Apple Inc. Icon for a display screen or portion thereof
US9823831B2 (en) * 2010-04-07 2017-11-21 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
USD657796S1 (en) * 2010-04-08 2012-04-17 Apple Inc. Display screen or portion thereof with graphical user interface
JP4976520B2 (ja) 2010-04-09 2012-07-18 株式会社ソニー・コンピュータエンタテインメント 情報処理装置
NL2004670C2 (nl) * 2010-05-04 2012-01-24 Activevideo Networks B V Werkwijze voor multimodale afstandsbediening.
US20110289435A1 (en) * 2010-05-19 2011-11-24 Samsung Electronics Co., Ltd. Display apparatus displaying web page and displaying method of the same
US20110302516A1 (en) * 2010-06-02 2011-12-08 Oracle International Corporation Mobile design patterns
US9542091B2 (en) 2010-06-04 2017-01-10 Apple Inc. Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator
US20110304556A1 (en) * 2010-06-09 2011-12-15 Microsoft Corporation Activate, fill, and level gestures
USD641373S1 (en) * 2010-06-11 2011-07-12 Microsoft Corporation Display screen with user interface
USD641372S1 (en) * 2010-06-11 2011-07-12 Microsoft Corporation Display screen with animated user interface
USD643438S1 (en) * 2010-06-11 2011-08-16 Microsoft Corporation Display screen with animated user interface
US8552999B2 (en) 2010-06-14 2013-10-08 Apple Inc. Control selection approximation
USD640280S1 (en) * 2010-06-25 2011-06-21 Microsoft Corporation Display screen with user interface
USD640275S1 (en) * 2010-06-25 2011-06-21 Microsoft Corporation Display screen with user interface
USD640281S1 (en) * 2010-06-25 2011-06-21 Microsoft Corporation Display screen with user interface
US9081494B2 (en) 2010-07-30 2015-07-14 Apple Inc. Device, method, and graphical user interface for copying formatting attributes
US8972879B2 (en) 2010-07-30 2015-03-03 Apple Inc. Device, method, and graphical user interface for reordering the front-to-back positions of objects
US9098182B2 (en) * 2010-07-30 2015-08-04 Apple Inc. Device, method, and graphical user interface for copying user interface objects between content regions
USD671550S1 (en) 2010-09-01 2012-11-27 Apple Inc. Display screen or portion thereof with graphical user interface
USD676858S1 (en) 2010-09-01 2013-02-26 Apple Inc. Display screen or portion thereof with graphical user interface
USD803227S1 (en) * 2010-10-08 2017-11-21 Oath (Americas) Inc. Display apparatus including a computer generated icon
AU2011315950B2 (en) 2010-10-14 2015-09-03 Activevideo Networks, Inc. Streaming digital video between video devices using a cable television system
KR101522345B1 (ko) 2010-11-12 2015-05-21 주식회사 케이티 이동 통신 단말에서의 배경화면 표시 방법 및 그 장치
US9785289B2 (en) 2010-11-23 2017-10-10 Red Hat, Inc. GUI control improvement using a capacitive touch screen
US9244606B2 (en) 2010-12-20 2016-01-26 Apple Inc. Device, method, and graphical user interface for navigation of concurrently open software applications
US20120159395A1 (en) 2010-12-20 2012-06-21 Microsoft Corporation Application-launching interface for multiple modes
US8689123B2 (en) 2010-12-23 2014-04-01 Microsoft Corporation Application reporting in an application-selectable user interface
US8612874B2 (en) 2010-12-23 2013-12-17 Microsoft Corporation Presenting an application change through a tile
US9423951B2 (en) 2010-12-31 2016-08-23 Microsoft Technology Licensing, Llc Content-based snap point
US8717381B2 (en) 2011-01-11 2014-05-06 Apple Inc. Gesture mapping for image filter input parameters
USD677689S1 (en) 2011-02-08 2013-03-12 Microsoft Corporation Display screen with graphical user interface
USD673170S1 (en) 2011-02-09 2012-12-25 Microsoft Corporation Display screen with graphical user interface
US9383917B2 (en) 2011-03-28 2016-07-05 Microsoft Technology Licensing, Llc Predictive tiling
US9588673B2 (en) * 2011-03-31 2017-03-07 Smart Technologies Ulc Method for manipulating a graphical object and an interactive input system employing the same
US9204203B2 (en) 2011-04-07 2015-12-01 Activevideo Networks, Inc. Reduction of latency in video distribution networks using adaptive bit rates
KR101758164B1 (ko) * 2011-04-08 2017-07-26 엘지전자 주식회사 이동 단말기 및 3ｄ 멀티 앵글 뷰 제어방법
US9298363B2 (en) 2011-04-11 2016-03-29 Apple Inc. Region activation for touch sensitive surface
KR101199618B1 (ko) 2011-05-11 2012-11-08 주식회사 케이티테크 화면 분할 표시 장치 및 방법
US9323402B1 (en) 2011-05-26 2016-04-26 D.R. Systems, Inc. Image navigation
US9104440B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US9158445B2 (en) 2011-05-27 2015-10-13 Microsoft Technology Licensing, Llc Managing an immersive interface in a multi-application immersive environment
US20120304113A1 (en) * 2011-05-27 2012-11-29 Patten Michael J Gesture-based content-object zooming
US8893033B2 (en) 2011-05-27 2014-11-18 Microsoft Corporation Application notifications
US9104307B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
WO2012165830A2 (ko) * 2011-05-27 2012-12-06 주식회사 내일이비즈 전자 문서 표시 방법 및 시스템
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
US9032338B2 (en) 2011-05-30 2015-05-12 Apple Inc. Devices, methods, and graphical user interfaces for navigating and editing text
US8677232B2 (en) 2011-05-31 2014-03-18 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US8854491B2 (en) 2011-06-05 2014-10-07 Apple Inc. Metadata-assisted image filters
US8719725B2 (en) * 2011-07-18 2014-05-06 Oracle International Corporation Touch optimized pivot table
US9311426B2 (en) 2011-08-04 2016-04-12 Blackberry Limited Orientation-dependent processing of input files by an electronic device
WO2013022486A1 (en) 2011-08-05 2013-02-14 Thomson Licensing Video peeking
US8971572B1 (en) 2011-08-12 2015-03-03 The Research Foundation For The State University Of New York Hand pointing estimation for human computer interaction
US20130042197A1 (en) * 2011-08-12 2013-02-14 Daniel Amare Chemistry and physics calculator
US8806369B2 (en) 2011-08-26 2014-08-12 Apple Inc. Device, method, and graphical user interface for managing and interacting with concurrently open software applications
US20130057587A1 (en) 2011-09-01 2013-03-07 Microsoft Corporation Arranging tiles
US8176435B1 (en) * 2011-09-08 2012-05-08 Google Inc. Pinch to adjust
US10353566B2 (en) 2011-09-09 2019-07-16 Microsoft Technology Licensing, Llc Semantic zoom animations
US20130067420A1 (en) * 2011-09-09 2013-03-14 Theresa B. Pittappilly Semantic Zoom Gestures
US9557909B2 (en) 2011-09-09 2017-01-31 Microsoft Technology Licensing, Llc Semantic zoom linguistic helpers
US8922575B2 (en) 2011-09-09 2014-12-30 Microsoft Corporation Tile cache
US9244802B2 (en) 2011-09-10 2016-01-26 Microsoft Technology Licensing, Llc Resource user interface
US8933952B2 (en) 2011-09-10 2015-01-13 Microsoft Corporation Pre-rendering new content for an application-selectable user interface
US9146670B2 (en) 2011-09-10 2015-09-29 Microsoft Technology Licensing, Llc Progressively indicating new content in an application-selectable user interface
US8959430B1 (en) * 2011-09-21 2015-02-17 Amazon Technologies, Inc. Facilitating selection of keys related to a selected key
JP5805601B2 (ja) * 2011-09-30 2015-11-04 京セラ株式会社 装置、方法、及びプログラム
USD722080S1 (en) * 2011-10-12 2015-02-03 Sony Corporation Portion of display panel or screen with an icon
US9544759B2 (en) 2011-11-01 2017-01-10 Google Inc. Systems, methods, and computer program products for managing states
KR101515768B1 (ko) 2011-11-01 2015-04-28 제이브이엘 벤쳐스, 엘엘씨 보안 요소를 관리하기 위한 시스템, 방법 및 컴퓨터 프로그램 제품
TW201319921A (zh) * 2011-11-07 2013-05-16 Benq Corp 觸控螢幕畫面控制方法及觸控螢幕畫面顯示方法
CN103186505B (zh) 2011-12-30 2015-12-02 北大方正集团有限公司 一种确定电子文档显示模式的方法和装置
CA2798507C (en) * 2012-01-06 2015-03-17 Microsoft Corporation Input pointer delay and zoom logic
EP2815582B1 (en) 2012-01-09 2019-09-04 ActiveVideo Networks, Inc. Rendering of an interactive lean-backward user interface on a television
JP5539415B2 (ja) * 2012-01-19 2014-07-02 シャープ株式会社 情報処理装置及びプログラム
US9645724B2 (en) 2012-02-01 2017-05-09 Facebook, Inc. Timeline based content organization
US9557876B2 (en) 2012-02-01 2017-01-31 Facebook, Inc. Hierarchical user interface
US9235318B2 (en) 2012-02-01 2016-01-12 Facebook, Inc. Transitions among hierarchical user-interface layers
USD709086S1 (en) 2012-02-07 2014-07-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
CN103294674B (zh) * 2012-02-23 2017-02-15 宇龙计算机通信科技(深圳)有限公司 调整页面浏览位置的方法及其通信终端
EP2786371A2 (en) 2012-03-06 2014-10-08 Apple Inc. Determining the characteristic of a played chord on a virtual instrument
KR101931676B1 (ko) 2012-03-23 2018-12-24 삼성디스플레이 주식회사 광 센서, 이를 포함하는 표시 장치 및 그 구동 방법
US9800945B2 (en) 2012-04-03 2017-10-24 Activevideo Networks, Inc. Class-based intelligent multiplexing over unmanaged networks
US9123084B2 (en) 2012-04-12 2015-09-01 Activevideo Networks, Inc. Graphical application integration with MPEG objects
KR101452038B1 (ko) 2012-04-26 2014-10-22 삼성전기주식회사 모바일 기기 및 그 화면 제어 방법
DE102012103887B4 (de) * 2012-05-03 2018-12-13 Thomas Reitmeier Anordnung aus einem Tisch und einer bildprojizierenden Vorrichtung sowie Verwendung und Steuerungsverfahren
CN109298789B (zh) 2012-05-09 2021-12-31 苹果公司 用于针对激活状态提供反馈的设备、方法和图形用户界面
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
CN104487929B (zh) 2012-05-09 2018-08-17 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
EP2847659B1 (en) 2012-05-09 2019-09-04 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to a gesture
WO2013169882A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving and dropping a user interface object
EP3594797B1 (en) 2012-05-09 2024-10-02 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169877A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting user interface objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
US8977967B2 (en) 2012-05-11 2015-03-10 Microsoft Technology Licensing, Llc Rules for navigating to next content in a browser
US10311428B2 (en) 2012-05-24 2019-06-04 Google Llc Systems, methods, and computer program products for providing a contactless protocol
USD740832S1 (en) 2012-06-06 2015-10-13 Apple Inc. Display screen or portion thereof with a graphical user interface
USD730364S1 (en) 2012-06-05 2015-05-26 Apple Inc. Display screen or portion thereof with a graphical user interface
USD718783S1 (en) 2012-06-05 2014-12-02 Apple Inc. Display screen or portion thereof with graphical user interface
USD739859S1 (en) 2012-06-06 2015-09-29 Apple Inc. Display screen or portion thereof with graphical user interface
USD719973S1 (en) * 2012-06-06 2014-12-23 Apple Inc. Display screen or portion thereof with graphical user interface
WO2013188890A1 (en) * 2012-06-15 2013-12-19 Alexander Kay Method and apparatus for initiating an interactive learning experience
US8904304B2 (en) * 2012-06-25 2014-12-02 Barnesandnoble.Com Llc Creation and exposure of embedded secondary content data relevant to a primary content page of an electronic book
JP5994428B2 (ja) * 2012-06-26 2016-09-21 ブラザー工業株式会社 プログラムおよび携帯端末
US9495065B2 (en) 2012-07-06 2016-11-15 Navico Holding As Cursor assist mode
US9361693B2 (en) 2012-07-06 2016-06-07 Navico Holding As Adjusting parameters of marine electronics data
WO2014011453A2 (en) 2012-07-09 2014-01-16 Jvl Ventures, Llc Systems, methods, and computer program products for integrating third party services with a mobile wallet
US9021437B2 (en) 2012-07-13 2015-04-28 Microsoft Technology Licensing, Llc Declarative style rules for default touch behaviors
MY171073A (en) * 2012-07-13 2019-09-24 Singapore Airlines Ltd A method and device for controlling a display device
US8676709B2 (en) 2012-07-31 2014-03-18 Google Inc. Merchant category codes in a proxy card transaction
US9460416B2 (en) * 2012-08-16 2016-10-04 Microsoft Technology Licensing, Llc Reading mode for interactive slide presentations with accompanying notes
US9268423B2 (en) 2012-09-08 2016-02-23 Stormlit Limited Definition and use of node-based shapes, areas and windows on touch screen devices
CN107241353B (zh) 2012-09-18 2020-08-28 谷歌有限责任公司 用于服务供应商计算系统与安全元件的接口连接方法、系统和计算机可读存储介质
USD712920S1 (en) * 2012-09-28 2014-09-09 Nest Labs, Inc. Display screen or portion thereof with an animated graphical user interface
CN103777739A (zh) * 2012-10-17 2014-05-07 中兴通讯股份有限公司 一种终端及控制终端的操作方法
USD756383S1 (en) * 2012-10-31 2016-05-17 Google Inc. Display screen with graphical user interface
USD726203S1 (en) * 2012-11-07 2015-04-07 Microsoft Corporation Display screen with animated graphical user interface
USD759704S1 (en) * 2012-12-05 2016-06-21 Ivoclar Vivadent Ag Display screen or a portion thereof having an animated graphical user interface
CN103034468B (zh) * 2012-12-18 2016-02-24 小米科技有限责任公司 一种显示文本的方法及装置
JP6099961B2 (ja) * 2012-12-18 2017-03-22 キヤノン株式会社 画像表示装置、画像表示装置の制御方法およびコンピュータプログラム
KR20140082434A (ko) * 2012-12-24 2014-07-02 삼성전자주식회사 전자장치에서 화면 표시 방법 및 장치
CN104903835B (zh) 2012-12-29 2018-05-04 苹果公司 用于针对多接触手势而放弃生成触觉输出的设备、方法和图形用户界面
AU2013368440B2 (en) 2012-12-29 2017-01-05 Apple Inc. Device, method, and graphical user interface for navigating user interface hierarchies
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
AU2013368445B8 (en) 2012-12-29 2017-02-09 Apple Inc. Device, method, and graphical user interface for determining whether to scroll or select contents
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
KR101958517B1 (ko) 2012-12-29 2019-03-14 애플 인크. 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
JP5231687B1 (ja) * 2013-01-12 2013-07-10 春佳 西守 タッチパネルを有する携帯端末によって実行されるコンピュータプログラム
CN104395880B (zh) 2013-01-25 2018-06-29 谷歌有限责任公司 用于管理数据重新安装的系统、方法和计算机程序产品
WO2014125403A2 (en) * 2013-02-12 2014-08-21 Amit Kumar Jain Amit Method of video interaction using poster view
US9292264B2 (en) 2013-03-15 2016-03-22 Paschar Llc Mobile device user interface advertising software development kit
US9477404B2 (en) 2013-03-15 2016-10-25 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US8829365B1 (en) 2013-03-15 2014-09-09 Pure Imagination, LLC System and method for maintaining recipe ratios when measuring ingredients for culinary combinations
WO2014145921A1 (en) 2013-03-15 2014-09-18 Activevideo Networks, Inc. A multiple-mode system and method for providing user selectable video content
US9165203B2 (en) * 2013-03-15 2015-10-20 Arris Technology, Inc. Legibility enhancement for a logo, text or other region of interest in video
US9658740B2 (en) 2013-03-15 2017-05-23 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
WO2014158331A1 (en) 2013-03-26 2014-10-02 Jvl Ventures, Llc Systems, methods, and computer program products for managing wallet activation
WO2014160715A1 (en) 2013-03-26 2014-10-02 Jvl Ventures, Llc Systems, methods, and computer program products for managing access control
WO2014160636A1 (en) 2013-03-26 2014-10-02 Jvl Ventures Llc Systems, methods, and computer program products for managing service installation
US20140298245A1 (en) * 2013-03-28 2014-10-02 Microsoft Corporation Display Instance Management
KR102094013B1 (ko) 2013-04-02 2020-03-26 삼성전자주식회사 전자 장치에서 메시지를 전송하기 위한 장치 및 방법
US9063576B1 (en) * 2013-04-04 2015-06-23 Amazon Technologies, Inc. Managing gesture input information
US9875017B2 (en) * 2013-04-26 2018-01-23 Kyocera Corporation Device, method, and program
US20160077723A1 (en) * 2013-05-13 2016-03-17 Realitygate (Pty) Ltd. Dynamic adaptation of interactive information containers' content and state
US10572124B2 (en) 2013-05-20 2020-02-25 Citrix Systems, Inc. Bound based contextual zoom
US11030315B2 (en) 2013-05-21 2021-06-08 Google Llc Systems, methods, and computer program products for managing disabling of services
CN104182119B (zh) * 2013-05-27 2018-02-09 腾讯科技（深圳）有限公司 多窗口页面的状态控制方法及装置
US9326047B2 (en) 2013-06-06 2016-04-26 Activevideo Networks, Inc. Overlay rendering of user interface onto source video
US9219922B2 (en) 2013-06-06 2015-12-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
US9294785B2 (en) 2013-06-06 2016-03-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
US9699019B2 (en) 2013-06-14 2017-07-04 Microsoft Technology Licensing, Llc Related content display associated with browsing
US9408075B2 (en) 2013-06-17 2016-08-02 Google Inc. Systems, methods, and computer program products for processing a request relating to a mobile communication device
JP2015007949A (ja) * 2013-06-26 2015-01-15 ソニー株式会社 表示装置、表示制御方法及びコンピュータプログラム
WO2015006215A1 (en) 2013-07-08 2015-01-15 Jvl Ventures, Llc Systems, methods, and computer program products for processing sets of instructions for mobile devices
WO2015004496A1 (en) * 2013-07-09 2015-01-15 Google Inc. Full screen content viewing interface entry
KR102189679B1 (ko) * 2013-07-12 2020-12-14 삼성전자주식회사 외부 기기에 디스플레이된 정보와 관련된 기능을 실행하는 휴대용 기기, 휴대용 기기에서 외부 기기에 디스플레이된 정보와 관련된 기능을 실행하는 방법 및 컴퓨터 판독 가능한 기록 매체
US9043425B2 (en) * 2013-07-29 2015-05-26 Google Inc. Resource locator remarketing
USD776124S1 (en) * 2013-09-03 2017-01-10 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
US12287962B2 (en) 2013-09-03 2025-04-29 Apple Inc. User interface for manipulating user interface objects
EP3053081B1 (en) 2013-09-30 2019-11-06 Google LLC Systems, methods, and computer program products for securely managing data on a secure element
US9536106B2 (en) 2013-10-08 2017-01-03 D.R. Systems, Inc. System and method for the display of restricted information on private displays
WO2015053924A1 (en) 2013-10-10 2015-04-16 Jvl Ventures, Llc Systems, methods, and computer program products for storing and managing program data
CA2926717C (en) 2013-10-10 2018-01-16 Google Inc. Systems, methods, and computer program products for managing contactless transactions
USD752058S1 (en) * 2013-11-22 2016-03-22 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
US20150169531A1 (en) * 2013-12-17 2015-06-18 Microsoft Corporation Touch/Gesture-Enabled Interaction with Electronic Spreadsheets
USD755830S1 (en) 2013-12-18 2016-05-10 Apple Inc. Display screen or portion thereof with graphical user interface
EP3085011A4 (en) 2013-12-19 2017-08-16 Google, Inc. Systems, methods, and computer program products for service processing
KR101810622B1 (ko) 2013-12-19 2017-12-20 구글 엘엘씨 모바일 디바이스 데이터를 획득하기 위한 시스템들, 방법들, 및 컴퓨터 프로그램 제품들
US10120451B1 (en) 2014-01-09 2018-11-06 D.R. Systems, Inc. Systems and user interfaces for dynamic interaction with two- and three-dimensional medical image data using spatial positioning of mobile devices
USD765092S1 (en) 2014-03-03 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
USD766318S1 (en) 2014-03-07 2016-09-13 Apple Inc. Display screen or portion thereof with animated graphical user interface
CN103885712B (zh) * 2014-03-21 2017-08-15 小米科技有限责任公司 网页调整方法、装置及电子设备
US10402034B2 (en) 2014-04-02 2019-09-03 Microsoft Technology Licensing, Llc Adaptive user interface pane manager
EP2930049B1 (de) 2014-04-08 2017-12-06 Volkswagen Aktiengesellschaft Anwenderschnittstelle und Verfahren zur Anpassung einer Ansicht auf einer Anzeigeeinheit
US9788029B2 (en) 2014-04-25 2017-10-10 Activevideo Networks, Inc. Intelligent multiplexing using class-based, multi-dimensioned decision logic for managed networks
US10269062B2 (en) 2014-05-08 2019-04-23 Xero Limited Systems and methods of mobile banking reconciliation
CN111443773B (zh) * 2014-05-23 2024-04-26 三星电子株式会社 可折叠装置及其控制方法
US11256294B2 (en) 2014-05-30 2022-02-22 Apple Inc. Continuity of applications across devices
US9898162B2 (en) 2014-05-30 2018-02-20 Apple Inc. Swiping functions for messaging applications
US9971500B2 (en) 2014-06-01 2018-05-15 Apple Inc. Displaying options, assigning notification, ignoring messages, and simultaneous user interface displays in a messaging application
USD771112S1 (en) 2014-06-01 2016-11-08 Apple Inc. Display screen or portion thereof with graphical user interface
DE102014108559A1 (de) * 2014-06-18 2015-12-24 Amazonen-Werke H. Dreyer Gmbh & Co. Kg Bedienterminal einer landwirtschaftlichen Arbeitsmaschine
CN105278771A (zh) * 2014-07-25 2016-01-27 南京瀚宇彩欣科技有限责任公司 无挡触控的手持式电子装置、方法及图形化使用者界面
CN105278772A (zh) * 2014-07-25 2016-01-27 南京瀚宇彩欣科技有限责任公司 检测手指输入的方法、触控外盖以及手持式电子装置
US9538316B2 (en) 2014-07-25 2017-01-03 Hannstar Display (Nanjing) Corporation Smart monitor system and hand-held electronic device
US10254942B2 (en) 2014-07-31 2019-04-09 Microsoft Technology Licensing, Llc Adaptive sizing and positioning of application windows
US10678412B2 (en) 2014-07-31 2020-06-09 Microsoft Technology Licensing, Llc Dynamic joint dividers for application windows
US10592080B2 (en) 2014-07-31 2020-03-17 Microsoft Technology Licensing, Llc Assisted presentation of application windows
TWI613582B (zh) 2014-09-02 2018-02-01 蘋果公司 用於重新組態使用者介面物件之方法、觸敏式電子器件及非暫時性電腦可讀儲存媒體
USD735754S1 (en) 2014-09-02 2015-08-04 Apple Inc. Display screen or portion thereof with graphical user interface
US10073590B2 (en) 2014-09-02 2018-09-11 Apple Inc. Reduced size user interface
USD762693S1 (en) 2014-09-03 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
US10347018B2 (en) 2014-09-08 2019-07-09 Tableau Software, Inc. Interactive data visualization user interface with hierarchical filtering based on gesture location on a chart
US10521092B2 (en) * 2014-09-08 2019-12-31 Tableau Software, Inc. Methods and devices for adjusting chart magnification asymmetrically
US10347027B2 (en) 2014-09-08 2019-07-09 Tableau Software, Inc. Animated transition between data visualization versions at different levels of detail
US10380770B2 (en) 2014-09-08 2019-08-13 Tableau Software, Inc. Interactive data visualization user interface with multiple interaction profiles
US10635262B2 (en) 2014-09-08 2020-04-28 Tableau Software, Inc. Interactive data visualization user interface with gesture-based data field selection
US10642365B2 (en) 2014-09-09 2020-05-05 Microsoft Technology Licensing, Llc Parametric inertia and APIs
USD783683S1 (en) 2014-12-23 2017-04-11 Mcafee, Inc. Display screen with animated graphical user interface
US10209849B2 (en) * 2015-01-21 2019-02-19 Microsoft Technology Licensing, Llc Adaptive user interface pane objects
US10042655B2 (en) 2015-01-21 2018-08-07 Microsoft Technology Licensing, Llc. Adaptable user interface display
JP2015130184A (ja) * 2015-02-03 2015-07-16 株式会社ソニー・コンピュータエンタテインメント 情報処理装置、情報処理方法、及びプログラム
USD765098S1 (en) 2015-03-06 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
USD771670S1 (en) 2015-03-09 2016-11-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
USD760746S1 (en) 2015-06-04 2016-07-05 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD772269S1 (en) 2015-06-05 2016-11-22 Apple Inc. Display screen or portion thereof with graphical user interface
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
USD847162S1 (en) * 2015-06-16 2019-04-30 Airwatch Llc Display screen, or portion thereof, with a transitional user interface search component
USD771653S1 (en) * 2015-07-29 2016-11-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD791806S1 (en) * 2015-08-08 2017-07-11 Youfolo, Inc. Display screen or portion thereof with animated graphical user interface
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10896532B2 (en) 2015-09-08 2021-01-19 Tableau Software, Inc. Interactive data visualization user interface with multiple interaction profiles
US9996254B2 (en) * 2015-09-23 2018-06-12 Samsung Electronics Co., Ltd. Hidden application icons
USD800766S1 (en) * 2015-12-11 2017-10-24 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD800159S1 (en) * 2015-12-11 2017-10-17 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD801381S1 (en) * 2015-12-16 2017-10-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
US10319049B2 (en) * 2016-02-24 2019-06-11 Sony Interactive Entertainment LLC Re-sharing media content on a network
USD807379S1 (en) * 2016-03-24 2018-01-09 Adp, Llc Display screen with graphical user interface
TWD185987S (zh) * 2016-04-29 2017-10-11 姚秉洋 顯示螢幕之圖形化使用者介面
TWD184720S (zh) * 2016-04-29 2017-08-01 姚秉洋 顯示螢幕之圖形化使用者介面
TWD185989S (zh) * 2016-04-29 2017-10-11 姚秉洋 顯示螢幕之圖形化使用者介面
TWD185990S (zh) * 2016-04-29 2017-10-11 姚秉洋 顯示螢幕之圖形化使用者介面
TWD184724S (zh) * 2016-04-29 2017-08-01 姚秉洋 顯示螢幕之圖形化使用者介面
TWD184725S (zh) * 2016-04-29 2017-08-01 姚秉洋 顯示螢幕之圖形化使用者介面
TWD185986S (zh) * 2016-04-29 2017-10-11 姚秉洋 顯示螢幕之圖形化使用者介面
TWD185985S (zh) * 2016-04-29 2017-10-11 姚秉洋 顯示螢幕之圖形化使用者介面
TWD185988S (zh) * 2016-04-29 2017-10-11 姚秉洋 顯示螢幕之圖形化使用者介面
TWD185991S (zh) * 2016-04-29 2017-10-11 姚秉洋 顯示螢幕之圖形化使用者介面
TWD184721S (zh) * 2016-04-29 2017-08-01 姚秉洋 顯示螢幕之圖形化使用者介面
TWD184719S (zh) * 2016-04-29 2017-08-01 姚秉洋 顯示螢幕之圖形化使用者介面
TWD184723S (zh) * 2016-04-29 2017-08-01 姚秉洋 顯示螢幕之圖形化使用者介面
TWD184722S (zh) * 2016-04-29 2017-08-01 姚秉洋 顯示螢幕之圖形化使用者介面
US9805702B1 (en) 2016-05-16 2017-10-31 Apple Inc. Separate isolated and resonance samples for a virtual instrument
US10620812B2 (en) 2016-06-10 2020-04-14 Apple Inc. Device, method, and graphical user interface for managing electronic communications
US10637986B2 (en) 2016-06-10 2020-04-28 Apple Inc. Displaying and updating a set of application views
DK201670595A1 (en) 2016-06-11 2018-01-22 Apple Inc Configuring context-specific user interfaces
JP2018038503A (ja) * 2016-09-06 2018-03-15 ソニー株式会社 医療用画像処理装置、画像処理方法、及びプログラム
US10521107B2 (en) * 2016-09-24 2019-12-31 Apple Inc. Devices, methods, and graphical user interfaces for selecting and interacting with different device modes
US12242707B2 (en) 2017-05-15 2025-03-04 Apple Inc. Displaying and moving application views on a display of an electronic device
USD849759S1 (en) * 2017-08-01 2019-05-28 Roku, Inc. Display screen or portion thereof with animated graphical user interface
USD849760S1 (en) * 2017-08-01 2019-05-28 Roku, Inc. Display screen or portion thereof with animated graphical user interface
USD847850S1 (en) * 2017-08-15 2019-05-07 Amazon Technologies, Inc. Display screen having a graphical user interface
USD843442S1 (en) 2017-09-10 2019-03-19 Apple Inc. Type font
USD910046S1 (en) 2017-09-29 2021-02-09 Apple Inc. Electronic device with graphical user interface
US10149659B1 (en) 2017-09-29 2018-12-11 Varex Imaging Corporation Hand-held X-ray sensor with gesture-activated wake function
USD857033S1 (en) 2017-11-07 2019-08-20 Apple Inc. Electronic device with graphical user interface
USD829239S1 (en) * 2017-12-08 2018-09-25 Technonet Co., Ltd. Video player display screen or portion thereof with graphical user interface
DK201870334A1 (en) 2018-05-07 2019-12-05 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROACTIVE MANAGEMENT OF NOTIFICATIONS
DK180118B1 (en) 2018-05-07 2020-05-15 Apple Inc. Devices and methods for adjusting the provision of notifications
US11079919B1 (en) 2018-05-10 2021-08-03 Wells Fargo Bank, N.A. Personal computing devices with improved graphical user interfaces
USD916862S1 (en) 2018-05-10 2021-04-20 Wells Fargo Bank, N.A. Display screen or portion thereof with graphical user interface
USD879132S1 (en) 2018-06-03 2020-03-24 Apple Inc. Electronic device with graphical user interface
USD885426S1 (en) 2018-06-03 2020-05-26 Apple Inc. Electronic device with graphical user interface
JP2018190444A (ja) * 2018-07-19 2018-11-29 シャープ株式会社 表示装置、表示方法、およびプログラム
US12135859B2 (en) 2018-08-07 2024-11-05 Wen-Chieh Geoffrey Lee Pervasive 3D graphical user interface
USD882615S1 (en) 2018-09-06 2020-04-28 Apple Inc. Electronic device with animated graphical user interface
US11307730B2 (en) 2018-10-19 2022-04-19 Wen-Chieh Geoffrey Lee Pervasive 3D graphical user interface configured for machine learning
USD962244S1 (en) * 2018-10-28 2022-08-30 Apple Inc. Electronic device with graphical user interface
USD883319S1 (en) 2018-10-29 2020-05-05 Apple Inc. Electronic device with graphical user interface
USD902221S1 (en) 2019-02-01 2020-11-17 Apple Inc. Electronic device with animated graphical user interface
USD900871S1 (en) 2019-02-04 2020-11-03 Apple Inc. Electronic device with animated graphical user interface
US11978448B2 (en) 2019-02-26 2024-05-07 Lg Electronics Inc. Display device and method of operating the same
USD961603S1 (en) 2019-06-01 2022-08-23 Apple Inc. Electronic device with animated graphical user interface
US11379113B2 (en) 2019-06-01 2022-07-05 Apple Inc. Techniques for selecting text
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces
US11216150B2 (en) 2019-06-28 2022-01-04 Wen-Chieh Geoffrey Lee Pervasive 3D graphical user interface with vector field functionality
USD921669S1 (en) 2019-09-09 2021-06-08 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD949184S1 (en) 2020-06-17 2022-04-19 Apple Inc. Display screen or portion thereof with graphical user interface
USD974371S1 (en) 2020-07-29 2023-01-03 Apple Inc. Display screen or portion thereof with graphical user interface
USD965014S1 (en) * 2020-09-28 2022-09-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD965015S1 (en) * 2020-09-28 2022-09-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD965016S1 (en) * 2020-09-28 2022-09-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
CN112230812A (zh) * 2020-10-16 2021-01-15 北京字节跳动网络技术有限公司 一种多媒体数据处理方法、装置、电子设备和存储介质
CN112989766B (zh) * 2021-05-11 2021-08-03 金锐同创(北京)科技股份有限公司 文档标注信息的处理方法、装置及终端设备
US12307079B2 (en) 2021-05-12 2025-05-20 Apple Inc. Devices, methods, and graphical user interfaces for adjusting the provision of notifications
CN113286159B (zh) * 2021-05-14 2022-05-31 北京字跳网络技术有限公司 应用程序的页面显示方法、装置和设备
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11822761B2 (en) 2021-05-15 2023-11-21 Apple Inc. Shared-content session user interfaces
US12449961B2 (en) 2021-05-18 2025-10-21 Apple Inc. Adaptive video conference user interfaces
WO2023108475A1 (en) 2021-12-15 2023-06-22 Citrix Systems, Inc. Application hotspot on endpoint device
US12405706B2 (en) 2022-05-10 2025-09-02 Apple Inc. Devices, methods, and graphical user interfaces for providing focus modes
US12405631B2 (en) 2022-06-05 2025-09-02 Apple Inc. Displaying application views
JP1754597S (ja) * 2023-02-10 2023-10-05 揚重シミュレーション用画像
US20240419306A1 (en) * 2023-06-16 2024-12-19 Yae, Llc Method and application for fast sharing of images between mobile electronic devices using an innovative platform and artificial intelligence
USD1101787S1 (en) 2024-06-09 2025-11-11 Apple Inc. Display screen or portion thereof with graphical user interface

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001014133A (ja) * 1999-07-02 2001-01-19 Matsushita Electric Ind Co Ltd 複数画面制御装置
JP2002259001A (ja) * 2001-03-05 2002-09-13 Shingo Tsuda ウィンドウ操作方法及び装置

Family Cites Families (276)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US5051736A (en) 1989-06-28 1991-09-24 International Business Machines Corporation Optical stylus and passive digitizing tablet data input system
JP2816395B2 (ja) * 1989-12-20 1998-10-27 清水建設株式会社 画面表示方式
JP3241362B2 (ja) * 1990-03-02 2001-12-25 ソニー株式会社 情報入力制御装置及び方法
US5119079A (en) 1990-09-17 1992-06-02 Xerox Corporation Touch screen user interface with expanding touch locations for a reprographic machine
US5347295A (en) 1990-10-31 1994-09-13 Go Corporation Control of a computer through a position-sensed stylus
JPH0736142B2 (ja) 1991-10-10 1995-04-19 インターナショナル・ビジネス・マシーンズ・コーポレイション 移動指示手段の運動停止を認識する方法および情報処理装置
US5610653A (en) 1992-02-07 1997-03-11 Abecassis; Max Method and system for automatically tracking a zoomed video image
JPH0695794A (ja) 1992-09-16 1994-04-08 Mutoh Ind Ltd データ入力装置
US5612719A (en) 1992-12-03 1997-03-18 Apple Computer, Inc. Gesture sensitive buttons for graphical user interfaces
US6262732B1 (en) 1993-10-25 2001-07-17 Scansoft, Inc. Method and apparatus for managing and navigating within stacks of document pages
JP2602001B2 (ja) 1993-11-01 1997-04-23 インターナショナル・ビジネス・マシーンズ・コーポレイション 縮小可能キーボード付パーソナル通信機
JPH07225829A (ja) 1994-02-15 1995-08-22 Hitachi Ltd データ表示方法及び装置
JPH0844253A (ja) * 1994-07-27 1996-02-16 Canon Inc 画像形成装置
DE69521575T2 (de) 1994-09-12 2002-05-16 Adobe Systems Inc Verfahren und Anordnung zur Darstellung elektronischer Dokumente
US5559301A (en) 1994-09-15 1996-09-24 Korg, Inc. Touchscreen interface having pop-up variable adjustment displays for controllers and audio processing systems
US5760773A (en) 1995-01-06 1998-06-02 Microsoft Corporation Methods and apparatus for interacting with data objects using action handles
GB2301217B (en) 1995-05-26 1999-12-15 Nokia Mobile Phones Ltd Display driver
US6496182B1 (en) 1995-06-07 2002-12-17 Microsoft Corporation Method and system for providing touch-sensitive screens for the visually impaired
US6199082B1 (en) 1995-07-17 2001-03-06 Microsoft Corporation Method for delivering separate design and content in a multimedia publishing system
US6486895B1 (en) 1995-09-08 2002-11-26 Xerox Corporation Display system for displaying lists of linked documents
US5761485A (en) 1995-12-01 1998-06-02 Munyan; Daniel E. Personal electronic book system
US5828370A (en) 1996-07-01 1998-10-27 Thompson Consumer Electronics Inc. Video delivery system and method for displaying indexing slider bar on the subscriber video screen
JP3171145B2 (ja) * 1996-07-31 2001-05-28 アイシン・エィ・ダブリュ株式会社 タッチパネルを併設した情報表示装置及び記憶媒体
KR100260760B1 (ko) 1996-07-31 2000-07-01 모리 하루오 터치패널을 병설한 정보표시장치
JPH1097543A (ja) * 1996-09-19 1998-04-14 Mitsubishi Plastics Ind Ltd 医薬品添付文書解説支援方法及びシステム並びに記録媒体
US5870083A (en) 1996-10-04 1999-02-09 International Business Machines Corporation Breakaway touchscreen pointing device
KR19980032331U (ko) 1996-12-02 1998-09-05 사공영활 카드를 개봉하면 내용물이 돌출되는 카드
US6683628B1 (en) 1997-01-10 2004-01-27 Tokyo University Of Agriculture And Technology Human interactive type display system
JPH10198517A (ja) 1997-01-10 1998-07-31 Tokyo Noukou Univ 表示装置の表示内容制御方法
US5739821A (en) 1997-01-30 1998-04-14 Primax Electronics Ltd. Method for pointing a window frame or an icon of a window interface
JP2957507B2 (ja) 1997-02-24 1999-10-04 インターナショナル・ビジネス・マシーンズ・コーポレイション 小型情報処理機器
US6069626A (en) 1997-02-27 2000-05-30 International Business Machines Corporation Method and apparatus for improved scrolling functionality in a graphical user interface utilizing a transparent scroll bar icon
US6073036A (en) 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
US6069606A (en) 1997-05-15 2000-05-30 Sony Corporation Display of multiple images based on a temporal relationship among them with various operations available to a user as a function of the image size
US6326970B1 (en) 1997-05-16 2001-12-04 Liberate Technologies TV centric layout
JPH1115817A (ja) * 1997-06-24 1999-01-22 Sharp Corp 情報表示装置
JP4223680B2 (ja) * 1997-08-28 2009-02-12 トムソン コンシユーマ エレクトロニクス インコーポレイテツド 異なる表示セクションを有する表示におけるナビゲーションシステム及び方法
US6034688A (en) 1997-09-15 2000-03-07 Sony Corporation Scrolling navigational display system
GB9722766D0 (en) 1997-10-28 1997-12-24 British Telecomm Portable computers
US6025842A (en) 1997-11-04 2000-02-15 International Business Machines Corporation System and method for window queues and white space activation for toggling windows
JPH11143604A (ja) 1997-11-05 1999-05-28 Nec Corp 携帯端末装置
US6613100B2 (en) 1997-11-26 2003-09-02 Intel Corporation Method and apparatus for displaying miniaturized graphical representations of documents for alternative viewing selection
US20070177804A1 (en) 2006-01-30 2007-08-02 Apple Computer, Inc. Multi-touch gesture dictionary
KR100595925B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
JPH11242539A (ja) 1998-02-25 1999-09-07 Sharp Corp 表示装置
US6285374B1 (en) 1998-04-06 2001-09-04 Microsoft Corporation Blunt input device cursor
US6133916A (en) 1998-04-08 2000-10-17 International Business Machines Corporation Graphical user interface providing access to files downloaded over a network
US6211856B1 (en) 1998-04-17 2001-04-03 Sung M. Choi Graphical user interface touch screen with an auto zoom feature
JPH11327433A (ja) * 1998-05-18 1999-11-26 Denso Corp 地図表示装置
US6181316B1 (en) 1998-06-04 2001-01-30 International Business Machines Corporation Graphical user interface inline scroll control
JP2000010702A (ja) * 1998-06-23 2000-01-14 Pioneer Electron Corp 画面表示メニューの選択方法および装置
US6570594B1 (en) 1998-06-30 2003-05-27 Sun Microsystems, Inc. User interface with non-intrusive display element
US6243080B1 (en) 1998-07-14 2001-06-05 Ericsson Inc. Touch-sensitive panel with selector
US20010015719A1 (en) 1998-08-04 2001-08-23 U.S. Philips Corporation Remote control has animated gui
JP2000056889A (ja) 1998-08-04 2000-02-25 Matsushita Electric Ind Co Ltd 携帯端末装置及びウインドウ制御方法
US6177936B1 (en) 1998-08-20 2001-01-23 International Business Machines Corporation Browser hierarchical contextual information for web pages
US6184886B1 (en) * 1998-09-04 2001-02-06 International Business Machines Corporation Apparatus and method for staging bookmarks
US20050131992A1 (en) * 2003-12-11 2005-06-16 Eric Goldstein System, method and apparatus for selecting, displaying, managing, tracking and transferring access to content of web pages and other sources
JP2000115527A (ja) * 1998-10-09 2000-04-21 Canon Inc 電子化文書閲覧装置、電子化文書表示方法、情報端末装置、データ表示方法及び記憶媒体
JP2000163444A (ja) 1998-11-25 2000-06-16 Seiko Epson Corp 携帯情報機器及び情報記憶媒体
JP2000181436A (ja) 1998-12-14 2000-06-30 Sharp Corp 文書表示装置
US6489975B1 (en) 1998-12-14 2002-12-03 International Business Machines Corporation System and method for improved navigation between open windows in an application program using window tabs
US6643824B1 (en) 1999-01-15 2003-11-04 International Business Machines Corporation Touch screen region assist for hypertext links
JP2000242390A (ja) 1999-02-18 2000-09-08 Sony Corp 情報の表示方法及び、情報表示装置
US6590594B2 (en) 1999-03-25 2003-07-08 International Business Machines Corporation Window scroll-bar
US6847778B1 (en) 1999-03-30 2005-01-25 Tivo, Inc. Multimedia visual progress indication system
US20050166232A1 (en) 1999-04-21 2005-07-28 Lamkin Allan B... Presentation of media content from multiple media sources
JP2000312360A (ja) 1999-04-27 2000-11-07 Matsushita Electric Ind Co Ltd 情報提供装置
US6359615B1 (en) 1999-05-11 2002-03-19 Ericsson Inc. Movable magnification icons for electronic device display screens
US6411283B1 (en) 1999-05-20 2002-06-25 Micron Technology, Inc. Computer touch screen adapted to facilitate selection of features at edge of screen
ATE443946T1 (de) * 1999-05-27 2009-10-15 Tegic Communications Inc Tastatursystem mit automatischer korrektur
US6639584B1 (en) 1999-07-06 2003-10-28 Chuang Li Methods and apparatus for controlling a portable electronic device using a touchpad
US6771250B1 (en) 1999-07-27 2004-08-03 Samsung Electronics Co., Ltd. Portable computer system having application program launcher for low power consumption and method of operating the same
US6349410B1 (en) 1999-08-04 2002-02-19 Intel Corporation Integrating broadcast television pause and web browsing
US6898307B1 (en) 1999-09-22 2005-05-24 Xerox Corporation Object identification method and system for an augmented-reality display
US6546393B1 (en) * 1999-10-07 2003-04-08 Clickmarks, Inc. System method and article of manufacture for dynamically user-generated internet search directory based on prioritized server-sided user bookmarks
EP1208476A2 (en) 1999-10-20 2002-05-29 Koninklijke Philips Electronics N.V. Device and method of browsing an image collection
US6724403B1 (en) 1999-10-29 2004-04-20 Surfcast, Inc. System and method for simultaneous display of multiple information sources
US6466198B1 (en) 1999-11-05 2002-10-15 Innoventions, Inc. View navigation and magnification of a hand-held device with a display
JP2001175386A (ja) * 1999-12-21 2001-06-29 Fujitsu Ltd 表示装置及び表示方法並びに記憶媒体
US6313855B1 (en) 2000-02-04 2001-11-06 Browse3D Corporation System and method for web browsing
JP2001222404A (ja) * 2000-02-14 2001-08-17 Sharp Corp データ転送装置
US6859909B1 (en) 2000-03-07 2005-02-22 Microsoft Corporation System and method for annotating web-based documents
DE10013074A1 (de) 2000-03-17 2001-09-20 Linde Ag Verfahren zur Gewinnung von gasförmigem Stickstoff
JP2001265481A (ja) 2000-03-21 2001-09-28 Nec Corp ページ情報表示方法及び装置並びにページ情報表示用プログラムを記憶した記憶媒体
JP4325075B2 (ja) 2000-04-21 2009-09-02 ソニー株式会社 データオブジェクト管理装置
US20040049737A1 (en) 2000-04-26 2004-03-11 Novarra, Inc. System and method for displaying information content with selective horizontal scrolling
JP2001312347A (ja) * 2000-05-01 2001-11-09 Sony Corp 情報処理装置および方法、並びにプログラム格納媒体
JP3822024B2 (ja) * 2000-05-24 2006-09-13 シャープ株式会社 データ転送装置
US7210099B2 (en) 2000-06-12 2007-04-24 Softview Llc Resolution independent vector display of internet content
JP3252959B2 (ja) * 2000-06-20 2002-02-04 インターネットオーナーズ株式会社 インターネットにおける検索結果画面の表示方法
US7149549B1 (en) 2000-10-26 2006-12-12 Ortiz Luis M Providing multiple perspectives for a venue activity through an electronic hand held device
JP4543513B2 (ja) * 2000-07-17 2010-09-15 ソニー株式会社 双方向通信システム、表示装置、ベース装置および双方向通信方法
WO2002008948A2 (en) 2000-07-24 2002-01-31 Vivcom, Inc. System and method for indexing, searching, identifying, and editing portions of electronic multimedia files
US20050204385A1 (en) 2000-07-24 2005-09-15 Vivcom, Inc. Processing and presentation of infomercials for audio-visual programs
US20020015064A1 (en) 2000-08-07 2002-02-07 Robotham John S. Gesture-based user interface to multi-level and multi-modal sets of bit-maps
TW466415B (en) 2000-08-28 2001-12-01 Compal Electronics Inc Hand-held device with zooming display function
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US6590568B1 (en) 2000-11-20 2003-07-08 Nokia Corporation Touch screen drag and drop input technique
WO2002046903A1 (de) 2000-12-07 2002-06-13 Siemens Aktiengesellschaft Verfahren zum auswählen und aktivieren einer funktion aus einem bedienungsmenü und bedienungsorgan zum durchführen des verfahrens
US7139982B2 (en) 2000-12-21 2006-11-21 Xerox Corporation Navigation methods, systems, and computer program products for virtual three-dimensional books
US20020093531A1 (en) 2001-01-17 2002-07-18 John Barile Adaptive display for video conferences
US6928461B2 (en) 2001-01-24 2005-08-09 Raja Singh Tuli Portable high speed internet access device with encryption
WO2002059761A1 (en) * 2001-01-26 2002-08-01 Pictureiq Corporation Method and apparatus for dynamic optimization and network delivery of multimedia content
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US20050183017A1 (en) 2001-01-31 2005-08-18 Microsoft Corporation Seekbar in taskbar player visualization mode
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7030861B1 (en) 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
JP2002244635A (ja) * 2001-02-20 2002-08-30 Fujitsu General Ltd 画像表示装置
DE10117457A1 (de) 2001-04-06 2002-10-17 T Mobile Deutschland Gmbh Verfahren zur Anzeige von standardisierten großformatigen Internet-Seiten mit beispielsweise HTML-Protokoll in Einhandendgeräten mit Mobilfunkanschluss
US7039643B2 (en) 2001-04-10 2006-05-02 Adobe Systems Incorporated System, method and apparatus for converting and integrating media files
US7446783B2 (en) 2001-04-12 2008-11-04 Hewlett-Packard Development Company, L.P. System and method for manipulating an image on a screen
US6901585B2 (en) 2001-04-12 2005-05-31 International Business Machines Corporation Active ALT tag in HTML documents to increase the accessibility to users with visual, audio impairment
JP3618303B2 (ja) * 2001-04-24 2005-02-09 松下電器産業株式会社 地図表示装置
US20020158908A1 (en) * 2001-04-30 2002-10-31 Kristian Vaajala Web browser user interface for low-resolution displays
US20020163545A1 (en) 2001-05-01 2002-11-07 Hii Samuel S. Method of previewing web page content while interacting with multiple web page controls
EP1393190A4 (en) 2001-05-02 2007-07-18 Bitstream Inc METHOD AND SYSTEMS FOR DISPLAYING MEDIA SCALED AND / OR ORIENTED
US6966837B1 (en) * 2001-05-10 2005-11-22 Best Robert M Linked portable and video game systems
US7730401B2 (en) 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US20030013483A1 (en) 2001-07-06 2003-01-16 Ausems Michiel R. User interface for handheld communication device
US20030117427A1 (en) 2001-07-13 2003-06-26 Universal Electronics Inc. System and method for interacting with a program guide displayed on a portable electronic device
JP2003030121A (ja) * 2001-07-17 2003-01-31 Hitachi Commun Syst Inc Ｗｅｂ共有システムおよびＷｅｂ共有システムにおける通信端末
US20030025676A1 (en) * 2001-08-02 2003-02-06 Koninklijke Philips Electronics N.V. Sensor-based menu for a touch screen panel
JP2003091347A (ja) 2001-09-18 2003-03-28 Sony Corp 情報処理装置、並びに画面表示方法、画面表示プログラム及び画面表示プログラムが記録された記録媒体
FR2830093A3 (fr) 2001-09-25 2003-03-28 Bahia 21 Corp Procede de navigation par ecran tactile
US20040205496A1 (en) 2001-10-11 2004-10-14 International Business Machines Corporation Displaying subheadings and hyperlinks in a scrollable long document
US7084856B2 (en) 2001-10-22 2006-08-01 Apple Computer, Inc. Mouse having a rotary dial
US7345671B2 (en) 2001-10-22 2008-03-18 Apple Inc. Method and apparatus for use of rotational user inputs
US7312785B2 (en) 2001-10-22 2007-12-25 Apple Inc. Method and apparatus for accelerated scrolling
US6970200B2 (en) 2001-10-26 2005-11-29 Hewlett-Packard Development Company, L.P. System and method for a simplified digital camera interface for viewing images and controlling camera operation
US7714880B2 (en) 2001-11-16 2010-05-11 Honeywell International Inc. Method and apparatus for displaying images on a display
JP3943383B2 (ja) 2001-12-13 2007-07-11 インターナショナル・ビジネス・マシーンズ・コーポレーション ウィンドウ・システムを備えたコンピュータ・システム、ウィンドウを操作をするための方法、コンピュータ・プログラム。
AUPR947701A0 (en) 2001-12-14 2002-01-24 Activesky, Inc. Digital multimedia publishing system for wireless devices
US7346855B2 (en) 2001-12-21 2008-03-18 Microsoft Corporation Method and system for switching between multiple computer applications
JP3776350B2 (ja) 2001-12-27 2006-05-17 みかど化工株式会社 農業用フィルム
US7284069B2 (en) * 2002-01-11 2007-10-16 Xerox Corporation Method for document viewing
US7075512B1 (en) 2002-02-07 2006-07-11 Palmsource, Inc. Method and system for navigating a display screen for locating a desired item of information
JP2003252808A (ja) 2002-02-27 2003-09-10 Yoshito Oshima 臨界点近傍の水を反応場とする水和反応生成物の製造方法
US6907576B2 (en) 2002-03-04 2005-06-14 Microsoft Corporation Legibility of selected content
JP2003263256A (ja) * 2002-03-11 2003-09-19 Omron Corp ウインドウ表示方法
US7433546B2 (en) 2004-10-25 2008-10-07 Apple Inc. Image scaling arrangement
US7568149B2 (en) * 2002-04-29 2009-07-28 At&T Labs, Inc. Method and system for controlling the operation of hyperlinks
TWI238348B (en) 2002-05-13 2005-08-21 Kyocera Corp Portable information terminal, display control device, display control method, and recording media
US7171625B1 (en) 2002-06-18 2007-01-30 Actify, Inc. Double-clicking a point-and-click user interface apparatus to enable a new interaction with content represented by an active visual display element
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US7166791B2 (en) 2002-07-30 2007-01-23 Apple Computer, Inc. Graphical user interface and methods of use thereof in a multimedia player
FI115255B (fi) 2002-09-02 2005-03-31 Myorigo Oy Kannettavan päätelaitteen näytön ohjausmenetelmä ja kannettava päätelaite
NO318991B1 (no) 2002-09-05 2005-05-30 Opera Software Asa Presentasjon av HTML-innhold på en liten terminalskjerm
US8015259B2 (en) 2002-09-10 2011-09-06 Alan Earl Swahn Multi-window internet search with webpage preload
FI20021682L (fi) 2002-09-20 2004-03-21 Nokia Corp Menetelmä laitteen lukitustilan avaamiseksi ja elektroninen laite
JP4606692B2 (ja) * 2002-09-26 2011-01-05 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
JP2004132741A (ja) * 2002-10-08 2004-04-30 Kenwood Corp ナビゲーション装置
JP4005470B2 (ja) 2002-10-09 2007-11-07 オリンパス株式会社 情報処理装置及び情報処理プログラム
US7124125B2 (en) 2002-11-01 2006-10-17 Loudeye Corp. System and method for providing media samples on-line in response to media related searches on the internet
US7203901B2 (en) 2002-11-27 2007-04-10 Microsoft Corporation Small form factor web browsing
JP4446728B2 (ja) * 2002-12-17 2010-04-07 株式会社リコー 複数のマルチメディア文書に格納された情報の表示法
JP2004206230A (ja) 2002-12-24 2004-07-22 Casio Comput Co Ltd 電子機器
FI20022282A0 (fi) 2002-12-30 2002-12-30 Nokia Corp Menetelmä vuorovaikutuksen mahdollistamiseksi elektronisessa laitteessa ja elektroninen laite
JP2004227108A (ja) * 2003-01-20 2004-08-12 Katsuyoshi Nagashima 広告付き番組配信サーバ及びネットワーク広告登録方法
US7054965B2 (en) 2003-03-18 2006-05-30 Oqo Incorporated Component for use as a portable computing device and pointing device
US20040215719A1 (en) 2003-04-09 2004-10-28 Altshuler Dennis Wayne Method and system for designing, editing and publishing web page content in a live internet session
US20040201595A1 (en) 2003-04-11 2004-10-14 Microsoft Corporation Self-orienting display
JP4046000B2 (ja) * 2003-04-16 2008-02-13 日本電信電話株式会社 構造化文書の抽出方法及び装置及びプログラム
KR20040095410A (ko) * 2003-04-28 2004-11-15 에스케이텔레텍주식회사 이동통신 단말기에서의 멀티 윈도우를 이용한 데이터서비스 처리 방법
US20040223004A1 (en) 2003-05-05 2004-11-11 Lincke Scott D. System and method for implementing a landscape user experience in a hand-held computing device
US20050044509A1 (en) 2003-05-07 2005-02-24 Hunleth Frank A. Item selection using helical menus
KR100817394B1 (ko) * 2003-05-08 2008-03-27 힐크레스트 래보래토리스, 인크. 미디어 항목들을 편성하고, 선택하며, 개시하기 위한주밍(ｚｏｏｍｉｎｇ) 가능한 그래픽 유저 인터페이스를갖춘 제어 프레임워크
US20040268393A1 (en) 2003-05-08 2004-12-30 Hunleth Frank A. Control framework with a zoomable graphical user interface for organizing, selecting and launching media items
CN1303552C (zh) * 2003-06-02 2007-03-07 英业达股份有限公司 网页块浏览的方法
JP2004363892A (ja) 2003-06-04 2004-12-24 Canon Inc 携帯機器
JP2005018229A (ja) * 2003-06-24 2005-01-20 Seiko Epson Corp 文書閲覧端末、文書表示制御方法及び文書表示制御プログラム
US20040268400A1 (en) 2003-06-26 2004-12-30 Microsoft Corporation Quick starting video content
US7210107B2 (en) 2003-06-27 2007-04-24 Microsoft Corporation Menus whose geometry is bounded by two radii and an arc
WO2005008444A2 (en) 2003-07-14 2005-01-27 Matt Pallakoff System and method for a portbale multimedia client
KR100522940B1 (ko) * 2003-07-25 2005-10-24 삼성전자주식회사 활성영역을 설정 가능한 터치스크린 시스템 및 그 제어방법
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
WO2005029353A1 (ja) * 2003-09-18 2005-03-31 Fujitsu Limited 注釈管理システム、注釈管理方法、文書変換サーバ、文書変換プログラム、電子文書付加プログラム
US7594194B2 (en) 2003-09-24 2009-09-22 Nokia Corporation Portrayal of navigation objects
BRPI0414379A (pt) 2003-09-24 2006-11-21 Nokia Corp método para apresentar pelo menos uma parte de um objeto, programa de computação, produto de programa de computação, e, dispositivo e sistema para apresentar pelo menos uma parte de um objeto
US20050071778A1 (en) 2003-09-26 2005-03-31 Nokia Corporation Method for dynamic key size prediction with touch displays and an electronic device using the method
US20050071736A1 (en) 2003-09-26 2005-03-31 Fuji Xerox Co., Ltd. Comprehensive and intuitive media collection and management tool
US7290006B2 (en) 2003-09-30 2007-10-30 Microsoft Corporation Document representation for scalable structure
US20050071782A1 (en) * 2003-09-30 2005-03-31 Barrett Peter T. Miniaturized video feed generation and user-interface
JP4274887B2 (ja) * 2003-09-30 2009-06-10 キヤノンマーケティングジャパン株式会社 情報処理装置および動画再生制御方法および制御プログラムおよび記録媒体
US7231231B2 (en) 2003-10-14 2007-06-12 Nokia Corporation Method and apparatus for locking a mobile telephone touch screen
FR2861206B1 (fr) 2003-10-16 2006-11-24 Michel Rissons Procede et dispositif d'adaptation automatique d'affichage
NO20034724D0 (no) * 2003-10-22 2003-10-22 Opera Software Asa Presentasjon av HTML-innhold på en skjermterminal
US20050091107A1 (en) * 2003-10-22 2005-04-28 Scott Blum Media player and access system and method and media player operating system architecture
FI116641B (fi) 2003-10-24 2006-01-13 Nokia Corp Menetelmä elektronisessa laitteessa olevan pikavalinnan muuttamiseksi, laitteen näyttöyksikkö sekä elektroninen laite
KR100537280B1 (ko) 2003-10-29 2005-12-16 삼성전자주식회사 휴대용 단말기에서 터치스크린을 이용한 문자 입력 장치및 방법
JP4478863B2 (ja) * 2003-11-19 2010-06-09 ソニー株式会社 表示装置、双方向通信システムおよび表示情報利用方法
US7814419B2 (en) 2003-11-26 2010-10-12 Nokia Corporation Changing an orientation of a user interface via a course of motion
US7085590B2 (en) 2003-12-31 2006-08-01 Sony Ericsson Mobile Communications Ab Mobile terminal with ergonomic imaging functions
JP4419056B2 (ja) * 2004-01-13 2010-02-24 ソニー株式会社 情報処理装置および方法、並びにプログラム
EP1714481A1 (en) 2004-01-29 2006-10-25 Koninklijke Philips Electronics N.V. On-screen control of a video playback device
US7551187B2 (en) 2004-02-10 2009-06-23 Microsoft Corporation Systems and methods that utilize a dynamic digital zooming interface in connection with digital inking
US7437005B2 (en) 2004-02-17 2008-10-14 Microsoft Corporation Rapid visual sorting of digital files and data
JP2005234199A (ja) * 2004-02-19 2005-09-02 Nec Saitama Ltd 画像表示制御方法及び画像表示制御装置並びにこれを備えた携帯情報端末
JP2005234291A (ja) * 2004-02-20 2005-09-02 Nissan Motor Co Ltd 表示装置および表示方法
JP4438448B2 (ja) * 2004-02-26 2010-03-24 セイコーエプソン株式会社 構造化文書表示処理装置、構造化文書表示方法、構造化文書表示プログラム
US7788583B1 (en) 2004-03-04 2010-08-31 Google Inc. In-page full screen internet video method
JP2005267049A (ja) 2004-03-17 2005-09-29 Sharp Corp 携帯情報機器、その制御方法、および、その制御プログラム
JP2005277847A (ja) * 2004-03-25 2005-10-06 Ntt Comware Corp 画像再生システム、画像送信装置、画像受信装置、画像再生方法、画像再生プログラム、記録媒体
US7546554B2 (en) 2004-03-31 2009-06-09 Fuji Xerox Co., Ltd. Systems and methods for browsing multimedia content on small mobile devices
JP2005303907A (ja) * 2004-04-15 2005-10-27 Fuji Photo Film Co Ltd 画像編集装置，方法およびプログラム
EP2487644A3 (en) * 2004-04-30 2012-10-31 Access Co., Ltd. Method for dynamic image enlarging/reducing display in browsing, terminal device, and program
JP4063246B2 (ja) 2004-05-11 2008-03-19 日本電気株式会社 ページ情報表示装置
CN100507811C (zh) * 2004-06-03 2009-07-01 希尔克瑞斯特实验室公司 用于生成可缩放的用户界面的系统及方法
US20050283739A1 (en) * 2004-06-18 2005-12-22 Julia Mohr Method and system to improve usability of a web application by providing a zoom function
US20050285880A1 (en) 2004-06-23 2005-12-29 Inventec Appliances Corporation Method of magnifying a portion of display
WO2006003591A2 (en) 2004-06-29 2006-01-12 Koninklijke Philips Electronics, N.V. Discontinuous zoom
JP2006018348A (ja) * 2004-06-30 2006-01-19 Hitachi Ltd 大画面ディスプレイを用いたときの、入力・表示システムとその方法
JP2006018645A (ja) 2004-07-02 2006-01-19 Sharp Corp 表示装置
US20060001656A1 (en) * 2004-07-02 2006-01-05 Laviola Joseph J Jr Electronic ink system
DE202005021492U1 (de) 2004-07-30 2008-05-08 Apple Inc., Cupertino Elektronische Vorrichtung mit berührungsempfindlicher Eingabeeinrichtung
EP1774427A2 (en) 2004-07-30 2007-04-18 Apple Computer, Inc. Mode-based graphical user interfaces for touch sensitive input devices
US7724242B2 (en) * 2004-08-06 2010-05-25 Touchtable, Inc. Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter
US8560972B2 (en) 2004-08-10 2013-10-15 Microsoft Corporation Surface UI for gesture-based interaction
US7721197B2 (en) 2004-08-12 2010-05-18 Microsoft Corporation System and method of displaying content on small screen computing devices
US7071939B2 (en) 2004-08-12 2006-07-04 Broadcom Corporation Unique method for performing zoom-in and zoom-out operations with horizontal and vertical video decimation within a wireless device having a video display
US8028250B2 (en) 2004-08-31 2011-09-27 Microsoft Corporation User interface having a carousel view for representing structured data
WO2006030862A1 (ja) 2004-09-17 2006-03-23 Nikon Corporation 電子機器
US20060064647A1 (en) 2004-09-23 2006-03-23 Tapuska David F Web browser graphical user interface and method for implementing same
EP1640878A1 (en) 2004-09-23 2006-03-29 Research In Motion Limited Web browser graphical user interface and method for implementing same
US7345688B2 (en) * 2004-10-18 2008-03-18 Microsoft Corporation Semantic thumbnails
US8169410B2 (en) 2004-10-20 2012-05-01 Nintendo Co., Ltd. Gesture inputs for a portable display device
WO2006042417A1 (en) 2004-10-20 2006-04-27 Mary Louise Jackson Graphical interface for repetitive data entry and data visualization
JP3989929B2 (ja) * 2004-11-15 2007-10-10 インターナショナル・ビジネス・マシーンズ・コーポレーション ブラウザ・ナビゲーション関係を維持するため、および新規文書用にブラウザ・ウィンドウを選択するための方法および装置
US20060123360A1 (en) * 2004-12-03 2006-06-08 Picsel Research Limited User interfaces for data processing devices and systems
JP4440173B2 (ja) * 2004-12-13 2010-03-24 キヤノン株式会社 画像形成装置、制御方法ならびにプログラム
EP1677182B1 (en) 2004-12-28 2014-04-23 Sony Mobile Communications Japan, Inc. Display method, portable terminal device, and display program
TW200622661A (en) 2004-12-30 2006-07-01 Tatung Co Ltd Method of zooming out a display image for a portable electrical device
KR101085447B1 (ko) 2004-12-31 2011-11-21 삼성전자주식회사 터치 위치 검출 장치 및 이의 터치 위치 검출 방법과,이를 구비한 터치 스크린 표시 장치
EP1834491A4 (en) 2005-01-05 2010-06-02 Hillcrest Lab Inc DISTRIBUTED SOFTWARE STRUCTURE FOR USER INTERFACES
US20060164382A1 (en) * 2005-01-25 2006-07-27 Technology Licensing Company, Inc. Image manipulation in response to a movement of a display
JP2006229559A (ja) * 2005-02-17 2006-08-31 Ntt Resonant Inc 通信システム、通信装置、通信方法、および通信プログラム
CA3150860C (en) 2005-03-02 2025-07-08 Rovi Guides Inc READING LISTS AND BOOKMARKS IN AN INTERACTIVE CONTENT GUIDE APPLICATION SYSTEM
US7587671B2 (en) 2005-05-17 2009-09-08 Palm, Inc. Image repositioning, storage and retrieval
US20060262336A1 (en) 2005-05-23 2006-11-23 Sharp Laboratories Of America, Inc. Manual annotation document reformation
US20070024646A1 (en) 2005-05-23 2007-02-01 Kalle Saarinen Portable electronic apparatus and associated method
US7523409B2 (en) * 2005-05-24 2009-04-21 Microsoft Corporation Methods and systems for operating multiple web pages in a single window
US20060277588A1 (en) 2005-06-01 2006-12-07 Madison Software Inc. Method for making a Web-DVD
US9098597B2 (en) 2005-06-03 2015-08-04 Apple Inc. Presenting and managing clipped content
US7676767B2 (en) * 2005-06-15 2010-03-09 Microsoft Corporation Peel back user interface to show hidden functions
US20070004451A1 (en) 2005-06-30 2007-01-04 C Anderson Eric Controlling functions of a handheld multifunction device
US20070067738A1 (en) 2005-09-16 2007-03-22 Microsoft Corporation Extensible, filtered lists for mobile device user interface
US7480870B2 (en) 2005-12-23 2009-01-20 Apple Inc. Indication of progress towards satisfaction of a user input condition
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US7812826B2 (en) 2005-12-30 2010-10-12 Apple Inc. Portable electronic device with multi-touch input
US20070157228A1 (en) 2005-12-30 2007-07-05 Jason Bayer Advertising with video ad creatives
US7860536B2 (en) 2006-01-05 2010-12-28 Apple Inc. Telephone interface for a portable communication device
US7596761B2 (en) 2006-01-05 2009-09-29 Apple Inc. Application user interface with navigation bar showing current and prior application contexts
US7844661B2 (en) 2006-06-15 2010-11-30 Microsoft Corporation Composition of local media playback with remotely generated user interface
KR100781706B1 (ko) 2006-08-16 2007-12-03 삼성전자주식회사 휴대 단말기의 리스트 스크롤 장치 및 방법
US8842074B2 (en) 2006-09-06 2014-09-23 Apple Inc. Portable electronic device performing similar operations for different gestures
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US7956849B2 (en) 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
US20080062137A1 (en) 2006-09-11 2008-03-13 Apple Computer, Inc. Touch actuation controller for multi-state media presentation
US8214768B2 (en) 2007-01-05 2012-07-03 Apple Inc. Method, system, and graphical user interface for viewing multiple application windows
US7889185B2 (en) 2007-01-05 2011-02-15 Apple Inc. Method, system, and graphical user interface for activating hyperlinks
US8519964B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface supporting user navigations of graphical objects on a touch screen display
US20080165148A1 (en) 2007-01-07 2008-07-10 Richard Williamson Portable Electronic Device, Method, and Graphical User Interface for Displaying Inline Multimedia Content
US9001047B2 (en) 2007-01-07 2015-04-07 Apple Inc. Modal change based on orientation of a portable multifunction device
KR20080084156A (ko) * 2007-03-15 2008-09-19 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 인터페이스 제공 방법및 장치
JP2009014796A (ja) 2007-06-30 2009-01-22 Sony Corp Ｅｌ表示パネル、電源線駆動装置及び電子機器
JP2013222229A (ja) 2012-04-12 2013-10-28 Konica Minolta Inc 入力操作装置、該装置を備えた画像形成装置、入力操作方法及び入力操作プログラム
JP6004868B2 (ja) 2012-09-27 2016-10-12 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US20140092125A1 (en) 2012-09-28 2014-04-03 Apple Inc. Filtering Documents Based on Device Orientation
CN110968435A (zh) 2018-09-30 2020-04-07 杭州海康威视数字技术股份有限公司 多语言调度方法及装置、嵌入式设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001014133A (ja) * 1999-07-02 2001-01-19 Matsushita Electric Ind Co Ltd 複数画面制御装置
JP2002259001A (ja) * 2001-03-05 2002-09-13 Shingo Tsuda ウィンドウ操作方法及び装置

Also Published As

Publication number Publication date
CA2662134C (en) 2015-11-03
CA3075071A1 (en) 2008-03-13
US20110154188A1 (en) 2011-06-23
US11592952B2 (en) 2023-02-28
WO2008030879A3 (en) 2008-07-24
US20230280872A1 (en) 2023-09-07
EP2078239B1 (en) 2016-12-07
US8669950B2 (en) 2014-03-11
EP3889751A2 (en) 2021-10-06
CA3075071C (en) 2021-01-05
CA2986163A1 (en) 2008-03-13
US11106326B2 (en) 2021-08-31
KR20180004302A (ko) 2018-01-10
CA2986163C (en) 2020-04-28
KR101085768B1 (ko) 2011-11-21
JP2019016381A (ja) 2019-01-31
EP2078239A2 (en) 2009-07-15
KR102077383B1 (ko) 2020-02-13
JP2010503124A (ja) 2010-01-28
JP2021064394A (ja) 2021-04-22
JP6034836B2 (ja) 2016-11-30
KR20140119742A (ko) 2014-10-10
DE112007002107T5 (de) 2009-07-02
EP3889751A3 (en) 2021-10-27
US10656778B2 (en) 2020-05-19
US20080094368A1 (en) 2008-04-24
KR20090066315A (ko) 2009-06-23
KR20110125680A (ko) 2011-11-21
US20150046849A1 (en) 2015-02-12
CA2662134A1 (en) 2008-03-13
AU2009100760A4 (en) 2009-09-10
KR101083545B1 (ko) 2011-11-14
KR20130137689A (ko) 2013-12-17
KR20110104123A (ko) 2011-09-21
JP5615956B2 (ja) 2014-10-29
KR101522446B1 (ko) 2015-05-21
AU2007292383B2 (en) 2012-01-19
US9690446B2 (en) 2017-06-27
EP2495647A1 (en) 2012-09-05
US12189913B2 (en) 2025-01-07
CN103226444B (zh) 2016-09-21
EP2508976B1 (en) 2016-10-26
EP3306460A1 (en) 2018-04-11
US20210389848A1 (en) 2021-12-16
JP5559538B2 (ja) 2014-07-23
JP2015018566A (ja) 2015-01-29
WO2008030879A2 (en) 2008-03-13
JP6818111B2 (ja) 2021-01-20
JP2013157016A (ja) 2013-08-15
EP2166438A1 (en) 2010-03-24
US7864163B2 (en) 2011-01-04
JP6409035B2 (ja) 2018-10-17
US11921969B2 (en) 2024-03-05
KR101569980B1 (ko) 2015-11-18
CN103226444A (zh) 2013-07-31
AU2007292383A1 (en) 2008-03-13
US10228815B2 (en) 2019-03-12
KR101152582B1 (ko) 2012-06-01
AU2009100760B4 (en) 2010-01-28
KR20090057421A (ko) 2009-06-05
JP7311484B2 (ja) 2023-07-19
HK1186787A1 (zh) 2014-03-21
JP6611886B2 (ja) 2019-11-27
JP2020061153A (ja) 2020-04-16
CA2894056A1 (en) 2008-03-13
JP2017016686A (ja) 2017-01-19
KR20160104095A (ko) 2016-09-02
US20170269794A1 (en) 2017-09-21
CN101727275A (zh) 2010-06-09
CN103176701B (zh) 2017-08-01
EP2508976A1 (en) 2012-10-10
CA2894056C (en) 2019-01-08
CN103176701A (zh) 2013-06-26
US20190155458A1 (en) 2019-05-23
US20240152243A1 (en) 2024-05-09
US20210055834A1 (en) 2021-02-25

Similar Documents

Publication Publication Date Title
US12189913B2 (en) Portable electronic device, method, and graphical user interface for displaying structured electronic documents
CN101535938B (zh) 用于显示结构化电子文档的便携式电子设备、方法和图形用户界面
WO2008085747A2 (en) Portable electronic device, method and graphical user interface for displaying inline multimedia content
AU2017245373B2 (en) Portable electronic device, method, and graphical user interface for displaying structured electronic documents
AU2011101190B4 (en) Portable electronic device, method, and graphical user interface for displaying structured electronic documents
HK1186265A (en) Device and method for navigating website
HK1177276A (en) Portable electronic device, method and graphical user interface for displaying structured electronic documents
HK1177276B (en) Portable electronic device, method and graphical user interface for displaying structured electronic documents
HK1133708B (en) Portable electronic device, method, and graphical user interface for displaying structured electronic documents
HK1133708A (en) Portable electronic device, method, and graphical user interface for displaying structured electronic documents
HK1186787B (en) Device and method for navigating website
HK1175278A (en) Portable electronic device, method and graphical user interface for displaying structured electronic documents

Legal Events

Date Code Title Description
A107 Divisional application of patent
PA0104 Divisional application for international application

Comment text: Divisional Application for International Patent

Patent event code: PA01041R01D

Patent event date: 20140818

Application number text: 1020137028362

Filing date: 20131028

A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20140917

Comment text: Request for Examination of Application

PG1501 Laying open of application
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20141201

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20160524

A107 Divisional application of patent
PA0104 Divisional application for international application

Comment text: Divisional Application for International Patent

Patent event code: PA01041R01D

Patent event date: 20160823

Application number text: 1020137028362

Filing date: 20131028

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20160824

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20160825

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20190729

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20190729

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20200730

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20210728

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20220718

Start annual number: 7

End annual number: 7

PR1001 Payment of annual fee

Payment date: 20240722

Start annual number: 9

End annual number: 9