[go: up one dir, main page]

JP2015518194A - ウェブ・ページ・アプリケーション制御 - Google Patents

ウェブ・ページ・アプリケーション制御 Download PDF

Info

Publication number
JP2015518194A
JP2015518194A JP2015500448A JP2015500448A JP2015518194A JP 2015518194 A JP2015518194 A JP 2015518194A JP 2015500448 A JP2015500448 A JP 2015500448A JP 2015500448 A JP2015500448 A JP 2015500448A JP 2015518194 A JP2015518194 A JP 2015518194A
Authority
JP
Japan
Prior art keywords
web page
content
application
presented
menu
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015500448A
Other languages
English (en)
Other versions
JP6093432B2 (ja
JP2015518194A5 (ja
Inventor
ホーク,トム
ウォルドマン,ローレンス
リン,エイミー
キャンベル,ジョニー
プリッシュ,シャハル
バッタジン,ダニエル
ゴードン,ハリソン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US13/418,489 external-priority patent/US9003298B2/en
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2015518194A publication Critical patent/JP2015518194A/ja
Publication of JP2015518194A5 publication Critical patent/JP2015518194A5/ja
Application granted granted Critical
Publication of JP6093432B2 publication Critical patent/JP6093432B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

コンテンツのカスタム化、編集、共有、分析、エクスポート、および/または注釈付けというような、ウェブ・ページ・コンテンツの一部に対するアクションをユーザーが実行することを可能にするために、ウェブ・ページ行動制御(WPBC)メニューが、レンダリングされたウェブ・ページ上に設けられる。ユーザーは、レンダリングされたウェブ・ページ上で一意のジェスチャーを行うことによって、および/またはウェブ・ページ・コンテンツの一部を選択することによって、メニューを自動的にアクティブ化することができる。WPBCメニューは、選択されたウェブ・ページ・コンテンツの部分を変更および管理するために選択することができるアプリケーションのリストを供給することができる。アプリケーションは、別のユーザー・インターフェースにおいておよび/または直接レンダリングされたウェブ・ページにおいてウェブ・ページ・コンテンツを管理するための機能全てを提供することができる。更に、スプレッドシートの表プロパティのような、レンダリングされたウェブ・ページ上におけるデーターの提示操作を、自然なジェスチャーによって可能にすることができる。
【選択図】図3

Description

[0001] ウェブ・アプリケーションは、広範囲の種々のサービスおよびデーターをユーザーにネットワークを介して提供する。データーは、異なる場所で収集され、処理され、格納される。ウェブ・アプリケーションは、そのデーターを引き出し、提示用にそれを定式化し、ウェブ・ページをレンダリングするためにクライアント・デバイスにおけるブラウザーにそれを供給する。ウェブ・ページには静的なものもあり、データーは非対話的である。他には、ウェブ・ベース・モジュールのリンクまたはアクティブ化によって、追加の情報のような何らかの対話処理を提供できるものもある。一般には、しかしながら、ウェブ・ページは、ウェブ・ページ著作者によって決められたフォーマットおよび量でデーターを提示する。
[0002] 一般に、従来のウェブ・ページにおけるデーターは、対話処理が限られており、ウェブ・ページの著作者がその用途(usefulness)をユーザーに対して規制することによって定められる。ページの著作者が明示的にコンテンツに対するエクスポート、即ち、「データー・フィード」機能を提供しても、ユーザーは、そのデーターにアクセスし変更するためには、外部アプリケーションにナビゲートし、従前の入力方法を使用して、レンダリングされたウェブ・ページ上に提示されたデーターを管理するというような、様々な比較的複雑な動作を実行しなければならない。加えて、ウェブ・ページ自体にデーターの1つの提示を提供し、一層豊富な提示において提供されるデーターとユーザーが対話処理することを可能にすることは、難しい作業(undertaking)である。更に、ジェスチャーおよびタッチ・ベースの対話処理が増々普及しつつあるが、ウェブ・ページとの自然なジェスチャー・ベースの対話処理は、通例、ウェブ・ページの制御および設定の選択に限定される。
[0003] この摘要は、詳細な説明において以下で更に説明する概念から選択したものを、簡略化した形態で紹介するために設けられている。この摘要は、特許請求する主題の主要な特徴や必須の特徴を特定することを意図するのではなく、特許請求する主題の範囲を判断するときに補助として使用されることを意図するのでもない。
[0004] 実施形態は、ジェスチャーおよび/またはタッチ・ベース入力によってコンテンツのカスタム化、編集、共有、分析、エクスポート、および/または注釈付けというような、ウェブ・ページ・コンテンツの一部に対するアクションをユーザーが実行することを可能にするために、レンダリングされたウェブ・ページ上にウェブ・ページ行動制御(WPBC)メニューを提供することを目的とする。WPBCメニューは、レンダリングされたウェブ・ページ上において一意のジェスチャーを検出することによって、および/またはウェブ・ページ・コンテンツの一部の選択によって、自動的にアクティブ化することができる。WPBCメニューは、アプリケーションのリストを提供することができ、選択されたウェブ・ページ・コンテンツのその一部を変更および管理するために、これらのアプリケーションから選択することができる。アプリケーションは、別のユーザー・インターフェースにおいて、および/またはレンダリングされたウェブ・ページ上において直接ウェブ・ページ・コンテンツを管理する機能全てを提供することができる。更に、スプレッドシートの表プロパティというような、レンダリングされたウェブ・ページ上におけるデーターの提示操作を、自然ジェスチャーによって可能にすることもできる。
[0005] これらおよびその他の特徴ならびに利点は、以下の詳細な説明を読み、添付図面を検討することによって明白になろう。尚、以上の概略的な説明および以下の詳細な説明は双方共、説明を目的とするのであり、特許請求される形態を限定するのではないことは言うまでもない。
図1は、利用可能なアクションのウェブ・ページ行動制御メニューの一例のアクティブ化および提示を示す。 図2は、選択されたコンテンツに基づく、利用可能な項目のウェブ・ページ行動制御メニューのアクティブ化の一例を示す。 図3は、ジェスチャー・アクションを使用した、ウェブ・ページ行動制御メニューのアクティブ化の一例を示す。 図4は、マルチタッチ可能デバイスにおけるウェブ・ページの複数のコンテンツ部分の選択の一例を示す。 図5は、ウェブ・ページの選択されたコンテンツを変更し動かすためのジェスチャー・アクションの一例を示す。 図6は、マルチタッチ可能デバイスにおけるウェブ・ページの選択されたコンテンツを融合するためのジェスチャー・アクションの一例を示す。 図7は、ウェブ・ページ上で行われるズーミング・ジェスチャーの一例を示す。 図8は、実施形態によるシステムを実現することができるネットワーク接続環境である。 図9は、実施形態を実現することができる計算動作環境の一例のブロック図である。 図10は、実施形態にしたがってウェブ・ページ行動拡張制御メニューを提供するプロセスの論理流れ図を示す。
[0016] 以上で端的に説明したように、コンテンツのカスタム化、編集、共有、分析、エクスポート、および/または注釈付けというような、ウェブ・ページ・コンテンツの一部に対するアクションをユーザーが実行することを可能にするために、レンダリングされたウェブ・ページ上にウェブ・ページ行動制御(WPBC)メニューを提供する。WPBCメニューは、アプリケーションのリストを提供することができ、選択されたウェブ・ページ・コンテンツのその一部を変更および管理するために、これらのアプリケーションから選択することができる。アプリケーションは、ジェスチャーおよびタッチ入力を使用して、別のユーザー・インターフェースにおいて、および/またはレンダリングされたウェブ・ページ上において直接ウェブ・ページ・コンテンツを管理する機能全てを提供することができる。以下の詳細な説明では、その一部をなす添付図面を参照する。添付図面では、具体的な実施形態または例が、例示として示される。本開示の主旨や範囲から逸脱せずに、これらの形態が組み合わされてもよく、他の形態が利用されてもよく、構造的な変更を行ってもよい。したがたって、以下の詳細な説明は、限定的な意味で捕らえてはならず、本発明の範囲は添付した特許請求の範囲およびその均等物によって定められるものとする。
[0017] 実施形態は、パーソナル・コンピュータにおけるオペレーティング・システムにて実行するアプリケーション・プログラムと合わせて実行するプログラム・モジュールという一般的なコンテンツで説明されるが、他のプログラム・モジュールとの組み合わせでも形態を実現できることは当業者には認められよう。
[0018] 一般に、プログラム・モジュールは、ルーチン、プログラム、コンポーネント、データー構造、および特定のタスクを実行するかまたは特定の抽象データー型を実装する他のタイプの構造を含む。更に、ハンド・ヘルド、デバイス、マルチプロセッサー・システム、マイクロプロセッサー・ベースのプログラマブル消費者用電子機器、ミニコンピューター、メインフレーム・コンピューター、およびこれらに相当する計算デバイスを含む、他のコンピューター・システム構成とでも、実施形態が実施されてもよいことは、当業者には認められよう。また、実施形態は分散型計算環境において実施することもでき、この場合、通信ネットワークを通じてリンクされたリモート処理デバイスによってタスクが実行される。分散型計算環境では、プログラム・モジュールはローカルおよびリモート双方の記憶デバイスに配置されてもよい。
[0019] 実施形態は、コンピューター実装プロセス(方法)、計算システム、あるいはコンピューター・プログラム製品またはコンピューター読み取り可能媒体というような製品として実現することもできる。コンピューター・プログラム製品は、コンピューター・システムによって読み取り可能であり、コンピューター・プログラムをエンコードするコンピューター記憶媒体とすることができる。コンピューター・プログラムは、コンピューターまたは計算システムにプロセス例(1つまたは複数)を実行させる命令を含む。コンピューター読み取り可能記憶媒体は、例えば、揮発性コンピューター・メモリー、不揮発性メモリー、ハード・ドライブ、フラッシュ・ドライブ、フロッピー・ディスク、またはコンパクト・ディスク、およびこれらに相当する記憶媒体の内1つ以上によって実現することができる。
[0020] 本明細書全体を通じて、「プラットフォーム」という用語は、ウェブ・ページを介したウェブ・ページおよびデーターの提示のためのソフトウェアおよびハードウェア・コンポーネントの組み合わせとすることができる。プラットフォームの例には、複数のサーバーにまたがってホストされ実行されるサービス、1つのサーバー上で実行されるアプリケーション、およびこれらに相当するシステムが含まれるが、これらに限定されるのではない。一般に、「サーバー」という用語は、通例ではネットワーク接続環境において1つ以上のソフトウェア・プログラムを実行する計算デバイスを指す。しかしながら、サーバーは、ネットワークにおいてサーバーと見なされる1つ以上の計算デバイス上で実行される仮想サーバー(ソフトウェア・アプリケーション)として実現されてもよい。これらの技術および動作例についての更なる詳細を以下に示す。
[0021] 実施形態によれば、タッチ可能またはジェスチャー可能入力デバイスおよび表示画面を、ユーザー・インターフェースを介してユーザーから入力を受けるために利用することができる。このタッチ入力デバイスおよび表示画面は、ユーザーによるタッチまたはジェスチャー入力を認識することを可能にする任意の技術を利用することができる。例えば、熱、指圧、高速撮影カメラ(high capture rate camera)、赤外線光、光取り込み、同調電磁誘導(tuned electromagnetic induction)、超音波受信機、変換マイクロフォン、レーザー距離計、シャドー・キャプチャー(shadow capture)等を含む技術であってもよいが、これらに限定されるのではない。タッチ可能またはジェスチャー可能デバイスのユーザー・インターフェースは、ウェブ・ページ・コンテンツ、ウェブ・ページ・コンテンツを管理するためのアプリケーション、およびウェブ・ページ・コンテンツと対話処理するためのアクションのメニューを表示することができる。ユーザーは、ジェスチャーを使用して、ユーザー・インターフェースと対話処理して、ウェブ・ページ・コンテンツを管理することができる。ユーザーのジェスチャーは、デバイス(タッチ)との物理的相互作用によって、またはユーザーが直接デバイスにタッチすることなく、ユーザーの光学的取り込みまたは同様の取り込みによって、例えば、ビデオ・キャプチャー・デバイスによって取り込むことができる。このような入力デバイスの一例に、WA、RedmondのMicrosoft CorporationによるKinect(登録商標)モーション・キャプチャー・デバイスがある。ウェブ・ページ・コンテンツと対話処理するためのアクションのメニューは、文書、表、スプレッドシート、チャート、リスト、および任意のコンテンツ(例えば、オーディオ、ビデオ等)というような、ウェブ・ページ・コンテンツを管理および編集するためのアプリケーションへのアクセスを与えるために使用することができる。タッチ可能またはジェスチャー可能入力デバイスは、タッチまたはジェスチャー可能計算デバイスに特定の機構を利用すればよいが、従前のマウスおよびキーボードとでも動作することができる。本明細書において使用されるようなタップ・アクションまたはスワイプ・アクションというようなタッチ入力および/またはジェスチャーは、ユーザーによって、指、ペン、マウス、または同様のデバイスを介して、更には予め定められたキーボード入力の組み合わせまたは音声コマンドを介して供給することができる。
[0022] 図1は、実施形態による、利用可能なアクションのウェブ・ページ行動制御メニューの一例のアクティブ化および提示を示す。ウェブ・ページ例100は、メニュー項目102、グラフィカル制御手段104、ならびに2つのコンテンツ部分例110および116のような標準的なウェブ・ページ・エレメントを含む。ウェブ・ページ100上に提示されるデーターとの対話処理は、一般に、ウェブ・ページの著作者(またはウェブ・ページを提供するウェブ・アプリケーション)によって設定される境界によって制限される。例えば、コンテンツ部分110は、車のリスト、それらの製造年、価格等を提示する。ウェブ・ページは、これらのデーターの一部(または全部)におけるリンクを介して追加の情報を提供することもできるが、このページを見ているユーザーは、リストのフォーマットおよび構成に限定される。更に、ウェブ・ページの著作者によって機能が提供されなければ、ユーザーは、データーの更なる分析を、結果、他の表、またはチャートの形態でも見ることができず、リスト上の個々の項目を変更/並び替え/フィルタリング/定式化することも、データーに注釈を付けることもできない。
[0023] 実施形態によるウェブ・ページは、1つ以上のウェブ・ページ行動拡張(WPBE)制御エレメント(106、108、および114)を含むことができ、これらは、提示されたデーターまたは他のデーター(例えば、ウェブ・ページを提示するウェブ・アプリケーションにまたはから入手可能であるが表示されない暗示データー(implied data)、あるいは他の場所に格納されている関連データー)に対して、ユーザーが種々のアクションを実行することを可能にすることができる。WPBE制御エレメント106は、ウェブ・ページ全体に関連する制御エレメントの一例である。つまり、WPBE制御エレメント106によって提供されるアクションは、ウェブ・ページ全体に適用可能である。WPBE制御エレメント108および114は、それぞれ、コンテンツ部分110および116に関連する。つまり、これらのエレメントは、これらそれぞれのコンテンツ部分に適用可能なアクションを提供する。WPBE制御エレメントによって提供されるアクションはコンテンツ部分毎に別々であってもよいが、これらは同じであってもよい。
[0024] ウェブ・ページ100は、通例、クライアント・デバイスにおいてブラウジング・アプリケーションによってレンダリングすることができ、クライアント・デバイスは、パーソナル・コンピュータ、タブレット・コンピュータ、ラップトップというような任意の計算デバイス、スマート・フォンのような移動体デバイス、サーバー、車載計算デバイス、およびネットワークを介してウェブ・サーバーに接続される他のものを含むことができる。計算デバイスの例は、タッチまたはジェスチャー可能であるとよく、ユーザーが、タッチ・アクションによっておよび/または光学的に(またはそれ以外で)取り込まれるジェスチャーによって、クライアント・デバイスのブラウジング・アプリケーションにおいてレンダリングされるウェブ・ページ100と対話処理できるとよい。タッチ・アクションおよびジェスチャーの例には、タップ・アクションまたはスワイプ・アクションを含むことができ、これらは、ユーザーによって、指、ペン、マウス、タッチ感応インターフェース、光学的取り込み(optical capture)、または同様のデバイスによって、更には予め定められたキーボード入力の組み合わせまたは音声コマンドによって供給することができる。
[0025] ウェブ・ページの第2例118は、ユーザーに利用可能なアクションのリストに対するWPBE制御エレメント106のアクティブ化を示す。ユーザーは、タッチまたはジェスチャー・アクション112を使用して、WPBE制御エレメント106をアクティブ化することができる。例えば、ユーザーは、WPBE制御エレメント106をアクティブ化するためには、WPBE制御エレメント106に向かってタップする、スワイプする、または同様にジェスチャーすればよい。また、WPBEエレメントを選択するためには、他のアクションを利用してもよく、既に説明したように、指、ペン、マウス、または同様のジェスチャー・キャプチャー・デバイスを使用して、アクションを供給すればよい。WPBE制御エレメント106がユーザーによってアクティブ化されると、利用可能なアクションのウェブ・ページ行動制御(WPBC)メニュー(テキスト、グラフィック、または組み合わせ)120をユーザーに提供することができる。例えば、利用可能なアクションのWPBCメニュー120は、種々のアプリケーションのアイコンを含むことができ、これらによって、コンテンツの表示、編集、カスタム化、分析等を行うことができる。このようなアプリケーションの例には、ワード・プロセッシング・アプリケーション122、スプレッドシート・アプリケーション124、およびプレゼンテーション・アプリケーション126を含むことができる。アプリケーションの他の例には、描画アプリケーション、ブラウジング・アプリケーション、コンテンツ集計アプリケーション、および同様のものを含むことができる。これらのアプリケーションは、ローカルでも、ウェブ・ベースでも、埋め込みでもよい。
[0026] ユーザーは、WPBE制御エレメント106に関連するウェブ・ページ・コンテンツ部分110を管理および編集するために、WPBCメニュー120上に提示されたアプリケーションから1つを選択することができる。アプリケーション122、124、126から1つを選択すると、レンダリングされたウェブ・ページ100の代わりに、または別のユーザー・インターフェース上に、コンテンツの一層豊富な/一層対話処理に適した(more interactive)表現をユーザーに提示することができる。例えば、ハイパーテキスト・マークアップ言語(HTML)表が、スプレッドシート表と置き換えられてもよく、ユーザーが、表示されたデーターを、とりわけ、ソートする、フィルタリングする、定式化する、分析する、およびグラフに表すことができる。他の例では、WPBCメニュー120からアプリケーションの1つを選択すると、選択されたアプリケーションを別のユーザー・インターフェースにおいて起動することができ、ユーザーが、選択されたアプリケーションの機能全てを使用してコンテンツおよびデーターと対話処理することが可能になる。別のアプリケーション・ユーザー・インターフェースにおいてコンテンツを編集した後、ユーザーは、変更したコンテンツを保存してウェブ・ページ118に戻ることができ、ウェブ・ページ118上に、変更されたコンテンツを表示することができる。
[0027] 実施形態では、コンテンツの表示、編集、カスタム化、分析等を行うのに適したアプリケーションが、WPBE制御エレメント108上におけるアクション(タッチ、ジェスチャー、その他)によって、またはウェブ・ページ上に表示されたコンテンツの少なくとも一部の選択時に、WPBCメニュー120の表示を必要とせずに、直接アクティブ化されるのでもよい。例えば、テーブルの一部の選択、および/またはWPBE制御エレメント上におけるジェスチャー(または一意のジェスチャー)に応答して、表の選択された部分をコンテンツとして、スプレッドシート・アプリケーション124がアクティブ化されるのでもよい。すると、ユーザーは、スプレッドシート・アプリケーション124の機能全てを使用して、選択されたコンテンツに対してタスクを実行することができる。勿論、ワード・プロセッシング・アプリケーション122、スプレッドシート・アプリケーション124、プレゼンテーション・アプリケーション126、描画アプリケーション、ブラウジング・アプリケーション、コンテンツ集計アプリケーションというような、他のタイプのコンテンツおよびアプリケーションでも使用することができる。
[0028] 図2は、実施形態による、選択されたコンテンツに基づく利用可能な項目のウェブ・ページ行動制御メニューのアクティブ化の例を示す。ウェブ・ページ例200は、ユーザーに利用可能なアクションを提供するときの動的な手法を示す。以前に説明したように、ウェブ・ページ例200は、メニュー項目、グラフィック制御手段、およびウェブ・ページ・コンテンツ例210というような、標準的なウェブ・ページ・エレメントを含む。ユーザーは、ウェブ・ページ・コンテンツ210の内、ユーザーが変更および管理することを望むかもしれない部分208を選択することができる。ウェブ・ページ・コンテンツ210の部分208の選択を検出すると、利用可能なアクションのウェブ・ページ行動制御(WPBC)メニュー(テキスト、グラフィック、または組み合わせ)220を、自動的にユーザーにユーザー・インターフェース上に提示することができ、このインターフェースは、提示されたデーターおよび他のデーター(例えば、ウェブ・ページを提示するウェブ・アプリケーションにまたはから入手可能であるが表示されない暗示データー(implied data)、あるいは他の場所に格納されている関連データー)を含むウェブ・ページ・コンテンツ210の選択された部分208に対して、ユーザーが種々のアクションを実行することを可能にすることができる。
[0029] 提示されるWPBCメニュー220は、ウェブ・ページ・コンテンツ210の選択された部分208に関連するメニューの一例である。つまり、WPBCメニュー220を介して提供されるアクションは、ウェブ・ページ・コンテンツ210の選択された部分208に適用可能である。利用可能なアクションのWPBCメニュー220は、ワード・プロセッシング・アプリケーション222、スプレッドシート・アプリケーション224、およびプレゼンテーション・アプリケーション226、ならびに他のコンテンツ集計アプリケーションというような、種々のアプリケーションに対するアイコンを含むことができ、これらによって、コンテンツを表示する、編集する、カスタム化する、分析する等ができる。これらのアプリケーションは、ローカルでも、ウェブ・ベースでも、埋め込みでもよい。
[0030] ユーザーは、ウェブ・ページ・コンテンツ210の選択された部分208を管理および編集するために、WPBCメニュー220上に提示されたアプリケーションから1つを選択することができる。アプリケーション222、224、226から1つを選択すると、選択されたアプリケーションに関連するユーザー・インターフェースにおいてコンテンツを提示することができ、レンダリングされたウェブ・ページ220の代わりにまたは別のユーザー・インターフェース上に、一層豊富な/一層対話処理に適したコンテンツの表現をユーザーに提示することができる。
[0031] 第2のウェブ・ページ例250は、ウェブ・ページ・コンテンツ210の選択された部分208と対話処理するために利用可能なアクションをユーザーに提供するときにける他の手法を示す。このシナリオでは、利用可能なアクションのドロップダウン・メニューまたはホバーオン(hover-on)メニュー230を、ウェブ・ページ・コンテンツの部分208の選択の検出に応答して、提示することができる。また、利用可能なアクションのドロップダウン・メニューまたはホバーオン・メニュー230は、図1に関連して既に説明したように、ウェブ・ページまたはウェブ・ページ上に表示されるコンテンツの一部に関連すると考えられる WPBE制御エレメント206のアクティブ化に応答して提供されるのでもよい。主メニュー上における項目から1つを選択したことに応答して、1つ以上の追加のメニュー・レベル(例えば、メニュー232)が表示されてもよい。勿論、オーディオのような、他の提示形態も、ユーザーに利用可能なアクションを提示するときに採用することもできる。図2の主メニュー上に提示されたアクション、および副メニュー(またはユーザー・インターフェース)上のリストは、ウェブ・ページを提示するウェブ・アプリケーションの能力、ユーザーのローカル・ブラウザー・アプリケーションまたはシステムの能力、および/またはユーザーの好み/使用履歴に基づいて決定すればよい。
[0032] 図3は、ジェスチャー・アクションを使用した、ウェブ・ページ行動制御メニューのアクティブ化の一例を示す。ウェブ・ページ・コンテンツ310を表示するウェブ・ページ例300上に示すように、ユーザーがウェブ・ページ・コンテンツ310と対話処理することを可能にするために、ウェブ・ページ・コンテンツ310を管理および編集するためのWPBCメニュー320を提示することができる。一実施形態例では、WPBCメニュー320は、ウェブ・ページ表示のユーザー・インターフェース上におけるユーザーによる一意のジェスチャー308またはタッチ・アクションによってアクティブ化することができる。一意のジェスチャー308は、WPBCメニュー220をアクティブ化するために使用することができ、ウェブ・ページと対話処理するための他のジェスチャーと混同しないのであれば、任意のジェスチャーでよい。更に、一意のジェスチャー308は、特定的にWPBCメニューをアクティブ化するための一意のジェスチャー・アクションの内任意のものとなるように構成可能であってもよい。
[0033] 一実施形態例では、ユーザーはウェブ・ページ300上において、表示されたウェブ・ページ・コンテンツ310の部分312を選択することができ、この部分312の選択後に、ユーザーは、ウェブ・ページ・コンテンツ310の選択された部分312に関連するWPBCメニュー320をアクティブ化するために、ユーザー・インターフェース表示上のいずれの場所でも一意のジェスチャー308を実行することができる。WPBCメニュー320は、例えば、ワード・プロセッシング・アプリケーション、スプレッドシート・アプリケーション、およびプレゼンテーション・アプリケーションを表す、アイコン322、324、および326を含むことができる。加えて、ユーザーは、ユーザーが変更および管理することを望むウェブ・ページ・コンテンツ310上でまたはその隣で、一意のジェスチャー308を実行するのでもよく、一意のジェスチャー308は、この一意のジェスチャー308が実行されたウェブ・ページ・コンテンツ310に関連するWPBCメニュー320を自動的にアクティブ化することができる。以前に説明したように、WPBCメニュー320は、アプリケーションおよび/またはアクションのリストを提示することができ、ユーザーはこれらから選択して、ウェブ・ページ・コンテンツ310上でユーザーが種々のアクションを実行することを可能にする。
[0034] 図4は、実施形態による、マルチタッチまたはマルチジェスチャー可能デバイスにおけるウェブ・ページの複数のコンテンツ部分の選択の一例を示す。ウェブ・ページ例400は、ウェブ・ページ200または300と同様であり、ジェスチャー可能クライアント・デバイスにおいてブラウジング・アプリケーションによってウェブ・ページがレンダリングされ、ユーザーがタッチ・アクションおよびジェスチャーによって、ウェブ・ページ100上のコンテンツと対話処理できるようになっている。このジェスチャー可能クライアント・デバイス例は、ユーザーが、ウェブ・コンテンツ410を選択する、収集する、およびこれと対話処理するために、2つの手というような、2つ以上の入力方法を使用することができるように、マルチジェスチャー可能であるとよい。タッチ・アクションおよびジェスチャーの例には、タップ・アクション、スワイプ・アクション、およびホールド・アクションを含むことができ、これらは、ユーザーによって、指、ペン、マウス、または同様のジェスチャー・キャプチャー・デバイスによって、更には予め定められたキーボード入力の組み合わせまたは音声コマンドによって供給することができる。
[0035] 実施形態によるシステムでは、ユーザーはウェブ・ページ・コンテンツ410を管理するために、アプリケーションに送る複数のコンテンツ部分を選択し収集することができる。マルチジェスチャー可能デバイスは、ユーザーが第1入力方法またはアクションを使用して対話処理することを望む、ウェブ・ページ・コンテンツ410の2つ以上の部分412、414を選択し、ウェブ・ページ・コンテンツ410の位置部分を選択および保持し、第2入力方法またはアクションを使用して利用可能なアクションのWPBCメニュー420から所望のアプリケーションおよび/またはアクションを選択することを可能にすることができる。
[0036] 一実施形態例では、ユーザーが第1選択416を使用して変更および/または管理することを望む、ウェブ・ページ・コンテンツ410の第1部分414およびウェブ・ページ・コンテンツ410の第2部分412を、ユーザーが選択することができる。ユーザーが第1選択416を使用してウェブ・ページ・コンテンツ410の1つ以上の部分を選択して、選択部分412、414を選択し保持する一方、この選択の検出時にWPBCメニュー420を自動的に提供することができる。ユーザーの他方の手(または他の入力方法)によって第2選択408を使用して、WPBCメニュー420上に提示されたアクションからユーザーが選択することを可能にすることができる。既に説明したように、WPBCメニュー420からのアプリケーションおよび/またはアクションの選択を検出したとき、選択されたアプリケーションは、一層豊富な/一層対話処理に適した表現で選択されたコンテンツを表示する別のユーザー・インターフェースにおいて起動することができ、または代わりに、選択されたコンテンツの一層豊富な/一層対話処理に適した表現が、レンダリングされたウェブ・ページの代わりに表示されてもよい。WPBCメニュー420は、例えば、ワード・プロセッシング・アプリケーション、スプレッドシート・アプリケーション、およびプレゼンテーション・アプリケーションを表すアイコン422、424、および426を含むことができる。
[0037] 図5は、実施形態にしたがって、ウェブ・ページの選択されたコンテンツを変更し動かすためのジェスチャー・アクション例を示す。以前に説明したように、ウェブ・ページ例500は、標準的なウェブ・ページ・エレメントおよび1つ以上のコンテンツ部分を含む。ウェブ・ページ500上に提示されたデーターとの対話処理は、一般に、ウェブ・ページの著作者(またはウェブ・ページを提供するウェブ・アプリケーション)によって設定された境界に限定される。例えば、コンテンツ部分510は、車のリスト、その製造年、価格等がある表を提示する。このウェブ・ページは、データーの一部(または全部)上にあるリンクを介して追加の情報を提供することができるが、ページを見るユーザーは、リストのフォーマットおよび構成に限定され、ユーザーは、関連アプリケーションの機能全てを使用して、表またはコンテンツを編集、変更、または対話処理することができない場合がある。更に、ユーザーは、データーの更なる分析を、結果、他の表、またはチャートの形態で見ることができず、リスト上の個々の項目を変更/ソート/フィルタリング/定式化することができず、ウェブ・ページの著作者によって機能が提供されなければ、データーに注釈を付けることもできない。
[0038] 実施形態によるシステムでは、ウェブ・ページ500は、表、チャート、文書、グラフィクス、および他のコンテンツを含む、ウェブ・ページ・コンテンツとユーザーが対話処理することを可能にするために、ウェブ・ページが関連アプリケーションの機能全てを有することができるように、レンダリングされたコンテンツ部分510を変換(transform)することができる。コンテンツ部分510に対してアプリケーション機能全てを可能にすると、ユーザーは、外部アプリケーションにナビゲートすることなく、直接ウェブ・ページ上において提示されたコンテンツおよび他のデーターに対して種々のアクションを実行することを可能にすることができる。
[0039] ウェブ・ページ500は、実施形態にしたがって、ウェブ・ページ・コンテンツに対してアプリケーション機能全てを可能にする例を示す。図示するシナリオでは、車のリストの表から選択されたコンテンツ部分510を、ウェブ・ページ上において同じデーターを含むスプレッドシート512に変換することができる。コンテンツ部分510は、WPBCメニュー520を利用して変換することができ、WPBCメニュー520は、ウェブ・ページ上におけるコンテンツの選択を検出したときに、既に説明したように、ウェブ・ページ上における一意のジェスチャーに応答して、および/またはWPBE制御エレメントのアクティブ化に応答して、自動的に表示することができる。ユーザーは、提示されたWPBCメニューから関連アプリケーションを選択することができ、この選択に応答して ウェブ・ページ・コンテンツを自動的に変換することができる。
[0040] 一シナリオ例では、ユーザーはウェブ・ページ・コンテンツの一部を選択することができ、更に自動的に表示されるWPBCメニューから、ユーザーは、ウェブ・ページ・コンテンツにおいて表を編集するためにスプレッドシート・アプリケーション524を選択することができ、コンテンツ部分510をスプレッドシート512に自動的に変換することができる。コンテンツ部分510をスプレッドシート512に変換することにより、コンテンツがスプレッドシート・アプリケーションにおいて開いたかのように、ユーザーがウェブ・ページ・コンテンツ上で直接スプレッドシート・アクションを実行することを可能にすることができる。例えば、ユーザーは、コンテンツ部分510において表示されたデーターに対して、選択および編集(532)、定式化、ソート、分析、および他のスプレッドシート機能を実行することができる。変換されたスプレッドシート512は、ウェブ・ページ・コンテンツ上に別のユーザー・インターフェースとして表示されてもよく、または代わりに、ウェブ・ページ・コンテンツ自体が変換され、変換されたスプレッドシートが、コンテンツ部分510が元々レンダリングされた場所を占めるようにしてもよい。
[0041] 追加の実施形態では、アプリケーション機能全てを可能にするためにウェブ・ページ・コンテンツが変換されるとき、コンテンツがスプレッドシート・アプリケーションにおいて開いているかのように、選択、移動、融合、フィルタリング、および同様のアクションというようなアクションをデーターに対してユーザーが実行することを可能にすることができる。例えば、図示するシナリオでは、ユーザーは、例えば、タップおよびホールド・ジェスチャーを使用して、スプレッドシート512における表の行を選択する(534)ことができ、そして選択した行をドラッグして、新たな表530を形成する新たな位置536にこれらを動かすことができる。新たな表530は、選択されたウェブ・ページ・コンテンツと、これが元々レンダリングされた場所で置き換わることができる。項目の選択、編集および移動というような同様のアクションも、テキストおよびグラフィック項目、ならびにウェブ・ページ・コンテンツに含まれる項目の組み合わせに対して実行することができる。
[0042] 図6は、実施形態にしたがって、ウェブ・ページの選択されたコンテンツを融合するためのジェスチャー・アクション例を示す。以前に説明したように、実施形態によるウェブ・ページは、ユーザーが、表、チャート、文書、グラフィクス、および他のコンテンツを含むウェブ・ページ・コンテンツと直接対話処理することを可能にするために、このウェブ・ページが関連アプリケーションの機能全てを有するように、レンダリングされたウェブ・ページ・コンテンツを変換することができる。ウェブ・ページ600は、実施形態にしたがって、ウェブ・ページ・コンテンツ610上においてアプリケーション機能全てを可能にするシナリオ例を示す。アプリケーション機能全てを可能にするためにウェブ・ページ・コンテンツが変換されると、ウェブ・ページ上のデーターに対して、ユーザーが直接、選択、移動、融合、フィルタリング、および他の同様のアプリケーション・アクションを実行することを可能にすることができる。
[0043] 図示するシナリオでは、ユーザーはウェブ・ページ・コンテンツ604、610の2つ以上の部分を選択することができる。これらのコンテンツは、車のリストおよび関連情報を含むウェブ表であってもよい。選択に応答して、選択されたウェブ・ページ・コンテンツに対して利用可能なアクションのWPBCメニュー620を自動的に表示することができる。コンテンツを選択し、スプレッドシート・アプリケーション624のようなアクションをWPBCメニュー606から選択すると(612)、ウェブ・ページ・コンテンツ604、610の選択された部分を、自動的に、ウェブ・ページ上と同じデーターを含みスプレッドシート機能全てを有するスプレッドシートに変換することができる。一旦スプレッドシート機能全てを可能にするスプレッドシートに変換されると、選択されたウェブ・ページ・コンテンツを直接ウェブ・ページ上で変更および操作するために、ユーザーがタッチ入力またはジェスチャーを使用することを可能にすることができる。
[0044] 更に、ウェブ・ページ・コンテンツがマルチジェスチャー可能デバイスにレンダリングされて、ユーザーが、ウェブ・ページ・コンテンツを選択し、収集し、これと対話処理するために、2つの手というような、2つ以上の入力方法を使用できるようにしてもよい。図示するシナリオでは、ユーザーは1つの手または第1アクション608を使用して、変換されたウェブ・ページ・コンテンツの第1部分を選択および保持することができ、更に他方の手または第2アクション614を使用して、変換されたウェブ・ページ・コンテンツ・データーの第2部分を選択することができる。ユーザーは、新たな表618を形成する2つの選択された部分を融合するために、ウェブ・ページ・コンテンツ604、610の2つの選択された部分を一緒に保持しドラッグすることができる。融合されたコンテンツ部分を有する新たな表618は、ウェブ・ページ・コンテンツと、それが元々レンダリングされた場所で置き換わることができる。項目を選択、移動、および融合するというような同様のアクションも、テキストおよびグラフィクス項目、ならびに項目の組み合わせに対しても同様に実行することができる。第1および第2アクション608、614、ならびに任意の他のジェスチャーも、タッチ・ベース・インターフェースによって、あるいは光学的または他の間接的取り込みメカニズムによって、ユーザーが物理的に計算デバイスにタッチすることなく、取り込むこともできる。
[0045] 図7は、実施形態にしたがって、ウェブ・ページ上で実行されるズーミング・ジェスチャーの一例を示す。以前に説明したように、実施形態によるウェブ・ページは、ユーザーが、表、チャート、文書、グラフィクス、および他のコンテンツを含むウェブ・ページ・コンテンツと直接対話処理することを可能にするために、このウェブ・ページが関連アプリケーションの全機能を有するように、レンダリングされたウェブ・ページ・コンテンツを変換することができる。ウェブ・ページ・コンテンツ上でアプリケーション機能全てを可能にすることによって、外部アプリケーションにナビゲートすることなく、直接ウェブ・ページ上において提示されたコンテンツおよび他のデーターに対してユーザーが種々のアクションを実行することを可能にすることができる。アクションの例には、選択および編集、定式化、ソート、分析、移動、融合、フィルタリング、ズーミング、およびデーター上における他の同様のアックションを実行することを含むことができる。
[0046] 一実施形態例では、線図700において実証されるように、ウェブ・ページ702はウェブ・ページ・コンテンツ710、712、716の内1つ以上の部分を提示することができる。ユーザーがタッチ入力およびジェスチャーを使用してデーターと対話処理してウェブ・ページ・コンテンツを変更および操作できるように、ウェブ・ページ上において直接アプリケーション機能全てを可能にするために、ウェブ・ページ・コンテンツを変換することができる。スプレッドシート・アプリケーションと対話処理するためのジェスチャー例には、例えば、スワイプ・ジェスチャー、カット/ペースト・ジェスチャー、挿入ジェスチャー、ボルテックス・ジェスチャー(vortex gesture)、グリップ・ジェスチャー、チャート・ジェスチャー、トレンド・ライン・ジェスチャー、コメント・ジェスチャー、ズーム・ジェスチャー、ソート・ジェスチャー、取り消し/再実行ジェスチャー等を含むことができる。
[0047] 図示するシナリオでは、ウェブ・ページ702は、ズーミング前における、変換されたウェブ・ページ・コンテンツ710、712、716を表示し、ウェブ・ページ720は、ズーム・ジェスチャー706の動作を実行した後における、拡大図(zoomed view)を表示する。一実施形態によれば、ズームイン動作は、ズーム・ジェスチャー706によって示されるように、ユーザーがその指の内2本を広げるときに検出することができる。ズームアウト・ジェスチャーは、ユーザーがその指の内2本を閉じるときに検出することができる。図示例では、ユーザーがウェブ・ページ・コンテンツ710の一部の上でズーム・ジェスチャー706を実行すると、拡大図ウェブ・ページ720が図を拡大して、ユーザー・インターフェースが、拡大されたウェブ・ページ・コンテンツの部分724を表示し、ウェブ・ページ・コンテンツの残りが表示ウィンドウ(viewing window)の外側にはみ出す。また、ユーザーは、拡大図のウェブ・ページ720に対してズームアウト・ジェスチャーを実行して、ズーミング前の元のウェブ・ページ702に戻すこともできる。
[0048] 図1から図7において説明したユーザー・インターフェース・エレメントおよび対話処理の例は、例示に限られ、実施形態に対する限定を構成するのではない。レンダリングされたウェブ・ページにおいてコンテンツを管理するためのウェブ・ページ行動制御メニューには、本明細書において説明した原理を使用して、他のユーザー・インターフェース、インターフェース・エレメント、提示、および構成を実装することもできる。
[0049] 図8は、実施形態を実現することができるネットワーク接続環境の一例である。ウェブ・ページ行動制御メニューおよび関連するアクションを提供するプラットフォームは、1つ以上のサーバー824またはホストされたサービスのような1つのサーバー(例えば、ウェブ・サーバー)826において実行されるソフトウェアによって実現することができる。このプラットフォームは、スマート・フォン823、ラップトップ・コンピュータ822、またはデスクトップ・コンピュータ821(「クライアント・デバイス」)のような個々の計算デバイスにおけるクライアント・アプリケーションと、ネットワーク(1つまたは複数)820を介して通信することができる。
[0050] 以上で説明したように、1つ以上のWPBE制御エレメントを、著作者によって、またはクライアント・デバイス821〜823におけるローカル・ブラウザーによって、ウェブ・ページに埋め込むことができる。アクティブ化すると、WPBCメニューは、ユーザーに利用可能なアクションおよびアプリケーションのリストを提示することができ、ユーザーがこのメニューからアプリケーションおよび/またはアクションを選択すると、選択されたアプリケーションの機能全てを使用して、レンダリングされたウェブ・ページのカスタム化、編集、分析、格納等をユーザーが行うことを可能にすることができる。ユーザーは、タッチ入力およびジェスチャーを使用して、ウェブ・ページ上においてウェブ・ページ・コンテンツがレンダリングされた場所で直接、そして別のユーザー・インターフェースにおいて、そのウェブ・ページ・コンテンツを変更および管理することができる。
[0051] 変更されたウェブ・ページ・コンテンツのローカル・バージョンはクライアント・デバイス821〜823の内任意のものにおいて格納することができるが、コンテンツは離れて格納されて(例えば、データー・ストア829に)、元のウェブ・ページ・コンテンツが変化するに連れて更新されてもよい。ウェブ・ページを提供するプラットフォームが、直接またはデーターベース・サーバー828を介して、ウェブ・サイトに関連するデーター(例えば、公開された、暗示された、または関係するコンテンツ)をデーター・ストア829に格納し、そしてデーター・ストア829から引き出すのでもよい。
[0052] ネットワーク(1つまたは複数)820は、サーバー、クライアント、インターネット・サービス・プロバイダー、および通信媒体の任意のトポロジーを含むことができる。実施形態によるシステムは、静的または動的トポロジーを有することができる。ネットワーク(1つまたは複数)820は、企業ネットワークのような安全なネットワーク、ワイヤレス・オープン・ネットワークのような安全でないネットワーク、またはインターネットを含むことができる。また、ネットワーク(1つまたは複数)820は、公衆電話交換網(PSTN)またはセルラ・ネットワークというような、他のネットワークを介した通信を調整することもできる。更に、ネットワーク(1つまたは複数)820は、Bluetoothまたは同様のものというような、短距離ワイヤレス・ネットワークも含むことができる。ネットワーク(1つまたは複数)820は、本明細書において説明したノード間において通信を提供する。一例として、そして限定ではなく、ネットワーク(1つまたは複数)820は、音響、RF、赤外線および他のワイヤレス媒体というような、ワイヤレス媒体を含むことができる。
[0053] 計算デバイス、アプリケーション、データー・ソース、およびデーター分散システムの多くの他の構成も、ウェブ・ページ行動制御メニューおよびウェブ・ページ行動拡張制御を実現するために採用することもできる。更に、図8において説明したネットワーク接続環境は、例示を目的にするに過ぎない。実施形態は、アプリケーション、モジュール、およびプロセスのいずれの例にも限定されない。
[0054] 図9および関連する説明は、実施形態を実現することができる適した計算環境の端的で全体的な説明を行うことを意図している。図9を参照すると、計算デバイス900のような、実施形態によるアプリケーションのための計算動作環境例のブロック図が示されている。基本的な構成では、計算デバイス900が、ウェブ・アプリケーションを実行するサーバーであり、少なくとも1つの処理ユニット902とシステム・メモリー904とを含むのであればよい。また、計算デバイス900は、プログラムを実行するときに協働する複数の処理ユニットを含むのでもよい。計算デバイスの正確な構成およびタイプに依存して、システム・メモリー904は揮発性(RAMのような)、不揮発性(ROM、フラッシュ・メモリー等のような)、またはこれら2つの何らかの組み合わせであればよい。システム・メモリー904は、通例、ワシントン州、RedmondのMICROSOFT CORPORATIONからのWINDOWS(登録商標)オペレーティング・システムのような、プラットフォームの動作を制御するのに適したオペレーティング・システム905を含む。また、システム・メモリー904は、プログラム・モジュール906、ウェブ・アプリケーション922、ジェスチャー・エンジン924、およびコンテンツ管理エンジン926のような、1つ以上のソフトウェア・アプリケーションも含むことができる。
[0055] ウェブ・アプリケーション922は、テキスト、グラフィック、オーディオ、ビデオ、および他のデーターをユーザーに、そのクライアント・ブラウジング・アプリケーションを介してウェブ・ページとして提示する任意のアプリケーションまたはサービスであればよい。ウェブ・アプリケーション922は、ウェブ・ページに埋め込まれたWPBE制御エレメント、およびWPBCメニューを提供することができ、ユーザーがウェブ・ページ上でコンテンツの部分を選択し、関連アプリケーションの機能全てを使用してウェブ・コンテンツを管理および変更することを可能にする。ユーザーは、タッチ入力およびジェスチャーを使用して、ウェブ・ページ・コンテンツを変更および管理して、既に説明したように、ジェスチャー・エンジン924を介して、ウェブ・コンテンツに対して選択、移動、編集、フィルタリング、融合、および他の同様のアクションを実行することができるとよい。加えて、コンテンツ管理エンジン926は、関連アプリケーションの機能全てを有することができるように、表、チャート、文書、グラフィクス、および他のコンテンツを含むウェブ・ページ・コンテンツとユーザーが対話処理することを可能にするために、レンダリングされたウェブ・ページ・コンテンツを変換することができる。この基本的構成は、図9では、破線908内部にあるコンポーネントによって示される。
[0056] 計算デバイス900は、追加の機構(feature)または機能(functionality)を有することもできる。例えば、計算デバイス900は、例えば、磁気ディスク、光ディスク、またはテープというような、追加のデーター記憶デバイス(リムーバブルおよび/または非リムーバブル)を含んでもよい。このような追加のストレージは、図9では、リムーバブル・ストレージ909および非リムーバブル・ストレージ910によって例示される。コンピューター読み取り可能記憶媒体は、揮発性および不揮発性、リムーバブルおよび非リムーバブル媒体を含むことができ、コンピューター読み取り可能命令、データー構造、プログラム・モジュール、または他のデーターというような、情報の格納のためのいずれかの方法または技術で実現される。システム・メモリー904、リムーバブル・ストレージ909、および非リムーバブル・ストレージ910は全て、コンピューター読み取り可能媒体の例である。コンピューター読み取り可能記憶媒体は、RAM、ROM、EEPROM、フラッシュ・メモリーまたは他のメモリー技術、CD−ROM、ディジタル・バーサタイル・ディスク(DVD)または他の光ストレージ、磁気カセット、磁気テープ、磁気ディスク・ストレージまたは他の磁気記憶デバイス、あるいは所望の情報を格納するために使用することができ計算デバイス900によってアクセスすることができる他のあらゆる媒体を含むが、これらに限定されるのではない。このようなコンピューター読み取り可能記憶媒体はいずれも、計算デバイス900の一部であってもよい。また、計算デバイス900は、キーボード、マウス、ペン、音声入力デバイス、タッチ入力デバイス、ジェスチャー・キャプチャー・デバイス、および相当の入力デバイスというような、入力デバイス(1つまたは複数)912も有することができる。ディスプレイ、スピーカー、プリンター、およびその他のタイプの出力デバイスというような、出力デバイス(1つまたは複数)914も含むことができる。これらのデバイスは、全て当技術分野では周知であり、ここで長々と論ずる必要はない。
[0057] また、計算デバイス900は、通信接続916も内蔵することができる。通信接続916は、本デバイスが、分散型計算環境におけるワイヤレス・ネットワーク、衛星リンク、セルラ・リンク、および相当のメカニズムを介してというようにして、他のデバイス918と通信することを可能にする。他のデバイス918は、ウェブ・サービス、分析サービス、データー記憶サービスを実行するコンピューター・デバイス(1つまたは複数)、および相当するデバイスを含むことができる。通信接続(1つまたは複数)916は、通信媒体の一例である。通信媒体は、搬送波のような変調データー信号または他の伝達メカニズムにおいて、その中に、コンピューター読み取り可能命令、データー構造、プログラム・モジュール、または他のデーターを含むことができ、あらゆる情報配信媒体を含む。「変調データー信号」という用語は、その信号内に情報をエンコードするようなやり方で、その特性の1つ以上が設定または変更された信号を意味する。一例として、そして限定ではなく、通信媒体は、有線ネットワークまたは直接有線接続というような有線媒体と、音響、RF、赤外線、および他のワイヤレス媒体というようなワイヤレス媒体とを含む。
[0058] また、実施形態例は方法も含む。これらの方法は、本文書において記載された構造を含む、任意の数の方法でも実現することができる。このような方法の1つは、本文書において記載されたタイプのデバイスの機械動作(machine operation)によって行われる。
[0059] 他のオプションの方法は、前述の方法の個々の動作の内1つ以上を、一部を実行する1人以上の人間の操作者と共に実行することである。これらの人間の操作者は一緒にいる必要はなく、各々が、プログラムの一部を実行する装置を有するだけでよい。
[0060] 図10は、実施形態にしたがってウェブ・ページ行動拡張制御を提供するプロセス1000の論理流れ図を示す。プロセス1000は、ウェブ・サーバーまたはクライアント・デバイスにおいて実行されるウェブ・アプリケーション、ジェスチャー・エンジン、およびコンテンツ管理エンジンによって実現することができる。
[0061] プロセス1000は動作1010から開始し、ここでウェブ・ページをWPBE制御エレメントと共に提示する。動作1020において、WPBECのアクティブ化を検出することができる。WPBECは、タップまたはスワイプというような、WPBEC上におけるユーザー・アクションによってアクティブ化することができる。実施形態では、WPBE制御エレメントが提示されず、ウェブ・ページ上に表示されたコンテンツの一部をユーザーが選択したことを検出すると、WPBECのアクティブ化が自動的に暗示される場合もある。WPBE制御エレメントのアクティブ化を検出すると、動作1030において、ウェブ・ページ行動制御メニューを提示することができる。WPBCは、選択されたウェブ・ページ・コンテンツと対話処理するために利用可能なアクションおよびアプリケーションのリストを提示することができる。また、WPBCメニューは、ウェブ・ページをレンダリングするブラウザーの能力、ウェブ・アプリケーションの能力、ユーザーの好み、および/または使用パターン(1つまたは複数)に基づいて、WPBE制御エレメントのアクティブ化のときに、利用可能なアクションのリストを提示することもできる。
[0062] 動作1040において、ユーザーは、タッチまたはジェスチャー・アクションを使用して、選択したコンテンツと対話処理するために、関連するアクションおよび/またはアプリケーションを選択することができ、選択されたアプリケーションをアクティブ化することができる。動作1050において、ユーザーがタッチ入力およびジェスチャーを使用してウェブ・ページ・コンテンツの選択した部分を変更および管理することができるように、タッチまたはジェスチャー・ベースのデーター操作を可能にすることができる。アクションの例は、選択、編集、フィルタリング、移動、融合、ズーミング、およびコンテンツを管理するための同様のアクションとすればよい。
[0063] 動作1060において、ウェブ・ページ・コンテンツにおいてジェスチャー・ベースの操作のために選択され可能にされた部分を、元のレンダリングされたウェブ・ページ上にまたは別のユーザー・インターフェースとして提示することができる。ユーザーがウェブ・ページ・コンテンツを別のユーザー・インターフェースにおいて変更するとき、変更されたウェブ・ページ・コンテンツを格納し、元のレンダリングされたウェブ・ページに関連するコンテンツが変化するに連れて、格納されたウェブ・ページ・コンテンツを更新すればよい。動作1070において、ウェブ・ページ上で直接ジェスチャー入力によってウェブ・ページ・コンテンツを操作することを可能にするために、ウェブ・ページ・コンテンツを変換することができる。ウェブ・ページ・コンテンツを変換すると、外部アプリケーションにナビゲートすることなく、ウェブ・ページ上において直接提示されたコンテンツ上においてユーザーが種々のアクションを実行することを可能にするために、ウェブ・ページ・コンテンツ上でアプリケーション機能全てを可能にすることができる。
[0064] プロセス1000に含まれる動作は、例示を目的とするに限る。実施形態にしたがってレンダリングされたウェブ・ページ上でコンテンツを管理するためのウェブ・ページ行動制御メニューは、ステップがそれよりも少ないまたは多い同様のプロセスによって実現することもでき、更に本明細書において説明した原理を使用して異なる動作順序でも実現することができる。
[0065] 以上の明細書、例、およびデーターは、実施形態の構成(composition)の製造および使用について、完全な説明に配慮する。構造的特徴および/または方法論的動作に特定的な文言で、主題について説明したが、添付した特許請求の範囲に定められている主題は、必ずしも、前述した特定の特徴や動作には限定されないことは言うまでもない。逆に、前述した特定の特徴および動作は、特許請求の範囲および実施形態を実現する形態例として開示したのである。

Claims (10)

  1. レンダリングされたウェブ・ページ上に提示されたコンテンツのジェスチャー・ベースの操作を行うために計算デバイスにおいて少なくとも部分的に実行される方法であって、
    レンダリングされたウェブ・ページ上にウェブ・ページ行動拡張(WPBE)制御エレメントを提示するステップと、
    ジェスチャーによって前記WPBE制御エレメントのアクティブ化を検出したときに、
    前記提示されたコンテンツを管理するのに適したアプリケーションをアクティブ化するステップ、
    前記レンダリングされたウェブ・ページ上に提示された前記コンテンツを操作するのに適した1つ以上のアプリケーションを表示するウェブ・ページ行動制御(WPBC)メニューを提示するステップ、
    前記WPBCメニューからのアプリケーションの選択を検出するステップ、
    前記提示されたコンテンツを管理するために前記選択されたアプリケーションをアクティブ化するステップ、
    の内1つを実行するステップと、
    ジェスチャーによる操作を可能にするために、前記適したアプリケーションおよび前記選択されたアプリケーションの内1つに関連する別のユーザー・インターフェースにおいて前記提示されたコンテンツを表示するステップと、
    を含む、方法。
  2. 請求項1記載の方法において、前記提示されたコンテンツが、テキスト・データー、スプレッドシート・データー、グラフィカル・データー、およびビデオ・データーを含む1組から少なくとも1つを含む、方法。
  3. 請求項2記載の方法であって、更に、
    前記レンダリングされたウェブ・ページ上において提示された前記コンテンツの一部の選択を検出するステップと、
    前記提示されたコンテンツの一部の選択に応答して、前記ウェブ・ページ行動制御(WPBC)メニューを自動的に提示するステップであって、前記WPBCメニューが、前記提示されたコンテンツの前記選択された一部を管理するために利用可能なアプリケーションを表示する、ステップと、
    を含む、方法。
  4. 請求項2記載の方法において、提示されたコンテンツが、前記レンダリングされたウェブ・ページ上において提示された前記コンテンツのカスタム化、分析、編集、選択、移動、ズーミング、フィルタリング、ソート、融合、および定式化の内1つ以上によって操作される、方法。
  5. 請求項1記載の方法であって、更に、
    前記提示されたコンテンツが、前記選択されたアプリケーションに関連する別のユーザー・インターフェースにおいて表示される場合、前記別のユーザー・インターフェース上におけるジェスチャー入力によって前記提示されたコンテンツの操作を可能にするステップと、
    前記操作の完了時に、変更を前記提示されたコンテンツに保存するステップと、
    前記レンダリングされたウェブ・ページ上において前記変更されたコンテンツを表示するステップと、
    を含む、方法。
  6. クライアント・アプリケーションによってレンダリングされたウェブ・ページ上に提示されたコンテンツのジェスチャー・ベースの操作を行うためのサーバーであって、
    メモリーと、
    前記メモリーに結合され、ウェブ・アプリケーションを実行するプロセッサーであって、前記メモリー内に格納された命令と共に、前記クライアント・アプリケーションによってレンダリングされるウェブ・ページ行動拡張(WPBE)制御エレメントをウェブ・ページに供給する、プロセッサーと、
    を含み、前記ウェブ・アプリケーションが、
    前記ウェブ・ページに関連するユーザー・インターフェースとジェスチャー入力によってユーザーが対話処理することを可能にし、
    前記WPBE制御エレメントのアクティブ化および前記提示されたコンテンツの一部の選択の内1つを検出したときに、前記提示されたコンテンツを操作するための1つ以上のアプリケーションを表示するウェブ・ページ行動制御(WPBC)メニューを提示し、
    ジェスチャー入力による前記WPBCメニューからのアプリケーションの選択を検出し、
    前記提示されたコンテンツを管理するために選択された前記アプリケーションをアクティブ化し、
    操作を可能にするために、前記選択されたアプリケーションに関連する別のユーザー・インターフェースにおいて、前記提示されたコンテンツを表示する、
    ように構成される、サーバー。
  7. 請求項6記載のサーバーにおいて、前記WPBE制御エレメントが、前記ウェブ・ページ全体、および前記ウェブ・ページ上に表示された前記提示コンテンツの1つ以上の部分の内1つに関連する、サーバー。
  8. 請求項6記載のサーバーにおいて、前記ウェブ・アプリケーションが、更に、
    前記ウェブ・ページ上に提示された公開コンテンツ、利用可能であるが前記ウェブ・ページ上で提示されない暗示コンテンツ、ならびに前記WPBCメニューによって供給されるワード・プロセッシング・アプリケーション、スプレッドシート・アプリケーション、描画アプリケーション、プレゼンテーション・アプリケーション、コンテンツ集計アプリケーション、およびブラウジング・アプリケーションの内1つ以上によって、前記レンダリングされたウェブ・ページに関連するデーター・ストアからの関連コンテンツを含む1組からの少なくとも1つの操作を可能にするように構成される、サーバー。
  9. 請求項6記載のサーバーにおいて、前記ウェブ・アプリケーションが、更に、
    前記提示されたコンテンツの2つ以上の部分の選択を同時に可能にし、
    前記提示されたコンテンツの前記2つ以上の部分の選択を検出したときに、前記提示されたコンテンツの前記選択部分を管理するための1つ以上のアプリケーションを表示する前記WPBCメニューを自動的に提示し、
    前記WPBCメニューからのアプリケーションの選択を検出し、
    前記提示されたコンテンツの前記2つ以上の選択部分を操作するために、前記選択されたアプリケーションをアクティブ化する、
    ように構成される、サーバー。
  10. レンダリングされたウェブ・ページ上に提示されたスプレッドシート・コンテンツの操作のジェスチャー・ベースの操作を行うための命令が格納されたコンピューター読み取り可能記憶媒体であって、前記命令が、
    埋め込まれたウェブ・ページ行動拡張(WPBE)制御エレメントのアクティブ化、前記レンダリングされたウェブ・ページ上に表示された提示スプレッドシート・コンテンツの一部の選択、およびジェスチャー入力によって前記レンダリングされたウェブ・ページと関連付けられた一意のジェスチャーの内1つを検出したときに、前記レンダリングされたウェブ・ページ上に表示された提示スプレッドシート・コンテンツを管理するための1つ以上のアプリケーションを表示するウェブ・ページ行動制御(WPBC)メニューを自動的に提示し、
    前記WPBCメニューからのアプリケーションの選択を検出し、
    前記レンダリングされたウェブ・ページおよび前記WPBCメニューから選択された前記アプリケーションの別のユーザー・インターフェースの内1つにおけるジェスチャー入力による、前記提示スプレッドシート・コンテンツの操作を可能にする、
    ことを含む、コンピューター読み取り可能記憶媒体。
JP2015500448A 2012-03-13 2013-02-25 ウェブ・ページ・アプリケーション制御 Active JP6093432B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/418,489 US9003298B2 (en) 2010-09-21 2012-03-13 Web page application controls
US13/418,489 2012-03-13
PCT/US2013/027547 WO2013138052A1 (en) 2012-03-13 2013-02-25 Web page application controls

Publications (3)

Publication Number Publication Date
JP2015518194A true JP2015518194A (ja) 2015-06-25
JP2015518194A5 JP2015518194A5 (ja) 2016-04-14
JP6093432B2 JP6093432B2 (ja) 2017-03-08

Family

ID=49161655

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015500448A Active JP6093432B2 (ja) 2012-03-13 2013-02-25 ウェブ・ページ・アプリケーション制御

Country Status (5)

Country Link
EP (1) EP2825947A4 (ja)
JP (1) JP6093432B2 (ja)
KR (1) KR102099995B1 (ja)
CN (1) CN104169853B (ja)
WO (1) WO2013138052A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023210849A1 (ko) * 2022-04-26 2023-11-02 쿠팡 주식회사 전자 장치 및 그의 동작 방법

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9251144B2 (en) 2011-10-19 2016-02-02 Microsoft Technology Licensing, Llc Translating language characters in media content
US9329692B2 (en) 2013-09-27 2016-05-03 Microsoft Technology Licensing, Llc Actionable content displayed on a touch screen
US20160173541A1 (en) * 2014-12-12 2016-06-16 Microsoft Technology Licensing, Llc Presentation of content from within spreadsheet application
CN107678812A (zh) * 2017-09-07 2018-02-09 北京海泰方圆科技股份有限公司 浏览器界面的处理方法及装置
US11080358B2 (en) * 2019-05-03 2021-08-03 Microsoft Technology Licensing, Llc Collaboration and sharing of curated web data from an integrated browser experience
CN112115690B (zh) * 2019-06-20 2024-06-11 珠海金山办公软件有限公司 一种移动端表格中选区的方法、系统、存储介质和终端
CN112241235B (zh) * 2019-07-01 2022-08-09 珠海金山办公软件有限公司 一种电子表格批注方法、显示方法和对应装置
KR102810584B1 (ko) * 2020-04-06 2025-05-22 삼성전자주식회사 에어 제스처에 의한 편집 기능을 제공하기 위한 전자 장치, 그 동작 방법 및 저장 매체
CN112333518B (zh) * 2020-09-22 2022-12-27 北京达佳互联信息技术有限公司 用于视频的功能配置方法、装置及电子设备

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1027089A (ja) * 1996-07-11 1998-01-27 Fuji Xerox Co Ltd コンピュータ操作支援装置
JPH1165795A (ja) * 1997-08-27 1999-03-09 Canon Inc 情報処理装置及び該装置におけるプログラムの起動方法
GB2354851A (en) * 1999-10-01 2001-04-04 Ibm Web browser extension and method for processing data content of Web pages
JP2002189595A (ja) * 2000-07-21 2002-07-05 Microsoft Corp リフレッシュ可能なWebクエリを作成するための統合された方法
US20040119727A1 (en) * 2002-12-19 2004-06-24 International Business Machines Corporation Extracting displayed numerical data from displayed documents received from communication networks, e.g. World Wide Web, and processing the extracted numerical data independent of the received document
US20040125130A1 (en) * 2001-02-26 2004-07-01 Andrea Flamini Techniques for embedding custom user interface controls inside internet content
US6961905B1 (en) * 2000-06-23 2005-11-01 Microsoft Corporation Method and system for modifying an image on a web page
JP2007141190A (ja) * 2004-12-09 2007-06-07 Ricoh Co Ltd 情報処理装置、情報処理方法、およびそのプログラム
US20080036743A1 (en) * 1998-01-26 2008-02-14 Apple Computer, Inc. Gesturing with a multipoint sensing device
JP2010524095A (ja) * 2008-03-04 2010-07-15 アップル インコーポレイテッド ウェブページのためのタッチイベント処理
US20110163968A1 (en) * 2010-01-06 2011-07-07 Hogan Edward P A Device, Method, and Graphical User Interface for Manipulating Tables Using Multi-Contact Gestures
US20120030567A1 (en) * 2010-07-28 2012-02-02 Victor B Michael System with contextual dashboard and dropboard features

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3396177B2 (ja) * 1999-01-26 2003-04-14 インターナショナル・ビジネス・マシーンズ・コーポレーション ウェブページカスタマイズシステム
US7058902B2 (en) * 2002-07-30 2006-06-06 Microsoft Corporation Enhanced on-object context menus
US20050268215A1 (en) * 2004-06-01 2005-12-01 Microsoft Corporation Method and apparatus for viewing and interacting with a spreadsheet from within a web browser
EP2027548A2 (en) * 2006-05-10 2009-02-25 Google, Inc. Web notebook tools
US9841980B2 (en) * 2008-04-25 2017-12-12 Microsoft Technology, LLC Extensible and application-adaptable toolbar for web services
US20090307762A1 (en) * 2008-06-05 2009-12-10 Chorus Llc System and method to create, save, and display web annotations that are selectively shared within specified online communities

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1027089A (ja) * 1996-07-11 1998-01-27 Fuji Xerox Co Ltd コンピュータ操作支援装置
JPH1165795A (ja) * 1997-08-27 1999-03-09 Canon Inc 情報処理装置及び該装置におけるプログラムの起動方法
US20080036743A1 (en) * 1998-01-26 2008-02-14 Apple Computer, Inc. Gesturing with a multipoint sensing device
GB2354851A (en) * 1999-10-01 2001-04-04 Ibm Web browser extension and method for processing data content of Web pages
US6961905B1 (en) * 2000-06-23 2005-11-01 Microsoft Corporation Method and system for modifying an image on a web page
JP2002189595A (ja) * 2000-07-21 2002-07-05 Microsoft Corp リフレッシュ可能なWebクエリを作成するための統合された方法
US20040125130A1 (en) * 2001-02-26 2004-07-01 Andrea Flamini Techniques for embedding custom user interface controls inside internet content
US20040119727A1 (en) * 2002-12-19 2004-06-24 International Business Machines Corporation Extracting displayed numerical data from displayed documents received from communication networks, e.g. World Wide Web, and processing the extracted numerical data independent of the received document
JP2007141190A (ja) * 2004-12-09 2007-06-07 Ricoh Co Ltd 情報処理装置、情報処理方法、およびそのプログラム
JP2010524095A (ja) * 2008-03-04 2010-07-15 アップル インコーポレイテッド ウェブページのためのタッチイベント処理
US20110163968A1 (en) * 2010-01-06 2011-07-07 Hogan Edward P A Device, Method, and Graphical User Interface for Manipulating Tables Using Multi-Contact Gestures
US20120030567A1 (en) * 2010-07-28 2012-02-02 Victor B Michael System with contextual dashboard and dropboard features

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023210849A1 (ko) * 2022-04-26 2023-11-02 쿠팡 주식회사 전자 장치 및 그의 동작 방법
TWI861831B (zh) * 2022-04-26 2024-11-11 韓商韓領有限公司 電子設備及其操作方法
TWI901378B (zh) * 2022-04-26 2025-10-11 韓商韓領有限公司 電子設備及其操作方法

Also Published As

Publication number Publication date
JP6093432B2 (ja) 2017-03-08
EP2825947A4 (en) 2015-12-16
KR20140132731A (ko) 2014-11-18
WO2013138052A1 (en) 2013-09-19
EP2825947A1 (en) 2015-01-21
KR102099995B1 (ko) 2020-04-10
CN104169853A (zh) 2014-11-26
CN104169853B (zh) 2018-05-18

Similar Documents

Publication Publication Date Title
US9003298B2 (en) Web page application controls
JP6093432B2 (ja) ウェブ・ページ・アプリケーション制御
JP7174734B2 (ja) タッチ感知式セカンダリディスプレイにおいてユーザインタフェースコントロールを動的に提供するシステム、デバイス、及び方法
CN102609188B (zh) 基于插入点的用户界面交互行为
US8990732B2 (en) Value interval selection on multi-touch devices
US10705707B2 (en) User interface for editing a value in place
US8996978B2 (en) Methods and systems for performing analytical procedures by interactions with visual representations of datasets
US8990686B2 (en) Visual navigation of documents by object
US20150193549A1 (en) History as a branching visualization
KR20140051228A (ko) 컨텍스트 기반 메뉴 시스템에 대한 서브메뉴
CN104350495B (zh) 在全景显示中管理对象以导航电子表格
JP2014534533A (ja) 仮想入力パネルによるオクリュージョンを回避するためのコンテンツ調整
CN105593801A (zh) 可滚动智能菜单
US8572500B2 (en) Application screen design allowing interaction
HK1181158A (en) Adjusting content to avoid occlusion by a virtual input panel
HK1173814B (en) User interface interaction behavior based on insertion point

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160224

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160224

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170113

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170210

R150 Certificate of patent or registration of utility model

Ref document number: 6093432

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: R3D02