JP2014112420A - サービス開始技法 - Google Patents
サービス開始技法 Download PDFInfo
- Publication number
- JP2014112420A JP2014112420A JP2014024137A JP2014024137A JP2014112420A JP 2014112420 A JP2014112420 A JP 2014112420A JP 2014024137 A JP2014024137 A JP 2014024137A JP 2014024137 A JP2014024137 A JP 2014024137A JP 2014112420 A JP2014112420 A JP 2014112420A
- Authority
- JP
- Japan
- Prior art keywords
- service
- services
- user
- text
- user interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
- Stored Programmes (AREA)
Abstract
【解決手段】1つの実施形態では、コンピューティング装置は、アプリケーションによりユーザーインターフェース中に表示されたテキストの選択を受け取る。ユーザーインターフェース中に表示された複数のサービスのうちの1つの選択が検出される。その検出に応じて、ユーザーがさらに介入することなく、テキストの選択が、選択されたサービスに提供される。
【選択図】図1
Description
構成することができる。例えば、サービスは、所望のレストランへの指示を提供する、特
定の用語に対する定義を見出す、好みの休暇スポットに関する天気予報を特定するなどの
ために使用されうる。しかし、これらのサービスにアクセスするために利用されていた従
来の技法は面倒であることが多く、ユーザーが対話するのを妨げることがあった。したが
って、ユーザーは、しばしば、サービスとの対話を見送ることを選ぶが、それはまた、サ
ービスのプロバイダーに対して不都合な金銭的問題を有していた。
ティング装置は、アプリケーションによりユーザーインターフェース中に表示されたテキ
ストの選択を受け取る。ユーザーインターフェース中に表示された複数のサービスのうち
の1つの選択が検出される。その検出に応じて、ユーザーがさらに介入をすることなく、
テキストの選択を用いて選択されたサービスのオペレーションを開始するために、選択さ
れたサービスにテキストの選択が提供される。
うちどのサービスが、音声入力に基づいてアプリケーションによりユーザーインターフェ
ース中に表示されたテキストを受け取るべきかを決定するために実行可能な命令を含む。
命令はまた、ユーザーが介入することなく、決定されたサービスに対してテキストを提供
することが実行可能である。
紹介するために提供される。この要約は、特許請求される主題の重要な特徴または本質的
な特徴を特定することは意図されておらず、あるいは特許請求される主題の範囲を限定す
るために使用されることも意図されていない。
前に述べたように、広範囲な機能を提供するためにサービスが使用されうるが、サービ
スとの対話を開始するために使用される従来の技法は面倒なものであった。例えば、ユー
ザーは、電子メールで受信し、電子メールアプリケーションを用いて閲覧したレストラン
の住所など、アプリケーションからのテキスト出力を見ることができる。ユーザーが、レ
ストランへの指示を望む場合、ユーザーは、地図作成サービスと対話することができる。
しかし、これらの指示を得るためには、ユーザーは、住所を含む電子メール中のテキスト
を選択し、マウスを右クリックしてコピーコマンドを有するメニューを表示させること、
または「ctrl−c」キーの組合せを用いることなどにより、そのテキストをコピーす
る。
例えば、どこで曲がるかの指示を提供するウェブサービスを提供するウェブサイトへとナ
ビゲートする。ウェブサイト「に(at)」入ると、ユーザーは、次いで、そのテキスト
をペーストし(または他の例では、テキストを再度タイプする)、次いで、「enter
」を押して所望の指示を受け取ることができる。したがって、この例で示されるように、
ユーザーは従来、コンテキストを手動で(例えば、電子メールアプリケーションからブラ
ウザーアプリケーションへと)切り替えるが、それは破壊的になる可能性があり、またサ
ービスと対話するために冗長であり、しばしば面倒なプロセスに従事するようになる可能
性がある。
スのオペレーションを開始するために、サービスの選択を使用してテキストがサービスに
提供される。前の例を続けると、ユーザーは、レストランの住所を含む電子メール中のテ
キストを選択することができる。次いで、ユーザーは、ホットキーを押して話をすること
や、この例では、地図作成サービスの名前である所望のサービスの表現をクリックもしく
はタッチすることができる。選択されたテキストは、次いで、サービスに送られて、ユー
ザーがさらに対話することなく指示が生成される。したがって、ユーザーは、サービスの
オペレーションを開始するために「選択し問い合わせる」ことができる。実施形態では、
テキストを用いたサービスのオペレーションの結果が、コンテキストを切り替えることな
く表示されるようにプレビュー機能を使用することもできるが、そのさらなる論議は、以
下のセクションに関連して見出すことができる。
実施形態が使用されうる1つの環境を述べる。これに続いて、「例示的な多層化されたサ
ービスプラットフォーム」と題するセクションが提供され、1つまたは複数の実施形態に
よる多層化されたプラットフォームを述べる。多層化された構造は、少なくともいくつか
の実施形態では、レガシーアプリケーションとサービスとを統合するように設計された大
域統合レイヤー、ならびに共通のコントロール統合レイヤー、およびカスタムの統合レイ
ヤーを含む。共通のコントロール統合レイヤーは、アプリケーションが対応しているサー
ビスだけではなく、アプリケーションが未対応のサービスを統合するために、アプリケー
ションを横断して使用できる共通のコントロールを提供するために使用することができる
。カスタムの統合レイヤーは、様々な提供されたサービスを統合するように設計されたユ
ーザーインターフェースをカスタマイズするために様々なアプリケーションにより使用す
ることができる。
フォームの例示的な実施形態を述べる。これに続いて、「大域統合レイヤー/ユーザーイ
ンターフェースの例」、「共通のコントロール統合レイヤー/ユーザーインターフェース
の例」、および「カスタムの統合レイヤー/ユーザーインターフェースの例」と題するセ
クションはそれぞれ、1つまたは複数の実施形態によるユーザーインターフェースの例を
提供する。次に、「例示的な手順」と題するセクションは、1つまたは複数の実施形態に
よる例示的な手順を述べる。最後に、「例示的なシステム」と題するセクションは、1つ
または複数の実施形態を実施するために使用されうる例示的なシステムを述べる。
図1は、1つまたは複数の実施形態による動作環境を全体的に100で示す。環境10
0は、1つまたは複数のプロセッサー104と、1つまたは複数のコンピューター可読媒
体106と、コンピューター可読媒体上に常駐し、かつプロセッサー(複数可)により実
行可能な1つまたは複数のアプリケーション108とを有するコンピューティング装置1
02含む。アプリケーション108は、例示のためでありこれだけに限らないが、ブラウ
ザーアプリケーション、リーダーアプリケーション、電子メールアプリケーション、イン
スタントメッセージング・アプリケーション、および様々な他のアプリケーションなど、
任意の適切なタイプのアプリケーションを含むことができる。コンピューター可読媒体は
、例示のためでありこれだけに限らないが、様々な形態の揮発性および不揮発性メモリー
、および/または、通常、コンピューティング装置と関連付けられた記憶媒体を含むこと
ができる。このような媒体は、ROM、RAM、フラッシュメモリー、ハードディスク、
取外し可能媒体などを含むことができる。コンピューティング装置の1つの具体的な例が
、図19で示され、以下で述べられる。
含む。実施形態では、サービスプラットフォームは、上記で述べたもの、および他のもの
など、様々なアプリケーションにわたるウェブサービス(例えば、1つまたは複数のウェ
ブサイト114からネットワーク112を介してアクセス可能なサービス)、および/ま
たはローカルなサービスなどのサービスを統合することができる。少なくともいくつかの
実施形態では、サービスは、このようなサービスに「未対応の(unaware)」レガ
シーアプリケーションを有するものと、このようなサービスに対応したアプリケーション
を有するものとを統合することが可能であり、それは以下で明らかとなろう。図で示され
るように、サービスプラットフォーム110は、コンピューター可読媒体106上に常駐
するコンピューター可読命令、またはコードの形式で存在する。
ば、図1で示すように、サービスプラットフォーム110は、サービスのオペレーション
を開始する機能を表すサービス開始モジュール116を含むものとして示されている。例
えば、サービス開始モジュール116は、コピー機能、例えば、ホットキーの組合せ「C
TRL C」によりアクセス可能な「クリップボード」を含むオペレーティングシステム
の一部として組み込まれうる。この機能を用いると、サービス開始モジュール116は、
1つまたは複数のアプリケーション108により出力されたテキストを受け取ることがで
きる。「ドラッグ・アンド・ドロップ」など、テキスト選択の様々な他の例もまた企図さ
れる。さらに、この例は、テキストをコピーするために、オペレーティングシステム内に
組み込まれた機能を使用することを述べているが、「スタンドアロン」モジュールとして
のサービス開始モジュール116の構成、1つまたは複数のアプリケーション108内へ
の組込み、および以下同様のものなどによる他の例もまた企図される。
ションを実施する特定のサービスを選択する機能を表す。サービス選択は、様々な方法で
実施することができる。例えば、サービス開始モジュール116は、音声認識技法を利用
し、したがって、音声入力を受け入れることができる。音声認識技法は、サービス開始モ
ジュール116内に、コンピューティング装置102上で実行されるオペレーティングシ
ステム内に、スタンドアロンのモジュールとしてなど、以下同様のものに組み込むことが
できる。サービス開始モジュール116はまた、特定のサービスを選択するために、タッ
チ入力、従来のマウス/キーボード入力などを受け入れることができる。
れたサービスのオペレーションを開始するための技法を表す。例えば、特定のサービスが
選択された後、サービス開始モジュール116は、ユーザーがさらに対話することなく、
例えば、サービスを選択した後、ユーザーにテキストをサービスへと手動で「ペースト」
させることなく、選択されたテキストを(例えば、「クリップボード」から)特定のサー
ビスへと提供することができる。したがって、サービス開始モジュール116は、サービ
スに対して効率的なアクセスを行うことができるが、そのさらなる論議は、以下のセクシ
ョンに関連して見出されるはずである。
スクトップコンピューター、可搬型コンピューター、PDA(携帯情報端末)などのハン
ドヘルドコンピューター、携帯電話など、任意の適切なコンピューティング装置として実
施することができる。
えば固定論理回路)、手動処理、またはこれらの実施形態の組合せを用いて実施すること
ができる。本明細書で使用される場合、用語「モジュール」、「機能」、および「論理」
は、概して、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアの組
合せを表す。ソフトウェア実施形態の場合、モジュール、機能、または論理は、プロセッ
サー(例えば、1つまたは複数のCPU)上で実行されたとき、特定のタスクを実施する
プログラムコードを表す。プログラムコードは、1つまたは複数のコンピューター可読メ
モリー装置、例えば、コンピューター可読媒体106に記憶されうる。以下で述べるサー
ビス開始技法の特徴は、プラットフォームに依存しないこと、すなわち、本技法が、様々
なプロセッサーを有する様々な市販のコンピューティングプラットフォーム上で実施でき
ることを意味する。
図2は、1つまたは複数の実施形態による多層化されたサービスプラットフォームを有
するシステムを全体的に200で示す。この例では、システム200は、複数の様々なア
プリケーション202、204、206、208、および210を含む。アプリケーショ
ンは、上記で、また以下でその例が提供される様々なアプリケーションを含むことができ
る。さらに、システム200は、この例では、アプリケーション202〜210などの様
々なアプリケーションにわたってウェブサービスおよび/またはローカルなサービスの両
方で、サービスを統合するように設計された複数の異なるプラットフォームレイヤーを含
む。この特定の例では、複数の異なるレイヤーは、大域統合レイヤー212、共通のコン
トロール統合レイヤー214、およびカスタムの統合レイヤー216を含む。
(aware)」していないアプリケーションを、それにもかかわらず、ユーザーがアプ
リケーション内からこのようなサービスにアクセスし、かつ使用できるようにすることを
可能にするように設計される。この目的のために、少なくともいくつかの実施形態では、
大域統合レイヤーは、アプリケーション内から利用可能であり、かつ呼び出すことのでき
る1つまたは複数のサービスを表示する包括的なユーザーインターフェースを提供する。
この実施形態では、大域統合レイヤーの機能は、ローカルなクライアント装置上で動作す
るオペレーティングシステムによりサポートされる。
用できるかを確認したい場合、ユーザーは、(例えば、ホットキーの組合せを打ち込むな
ど)オペレーティングシステムにより検出されるオペレーティングシステムのデスクトッ
プ上のショートカットを用いるなど、特定のアクションを行うことができる。ユーザーア
クションを検出したことに応じて、オペレーティングシステムは、利用可能なサービスの
一覧表示を受け取るために、ローカルなサービスストアに対してAPI呼出しを行うこと
ができる。オペレーティングシステムは、次いで、ユーザーが利用可能なサービスを一覧
表示した包括的なユーザーインターフェースを提示することができる。
に提示された後、ユーザーは、いくつかの異なるアクションを取ることができる。例えば
、いくつかの実施形態では、ユーザーは、そのカーソルを、特定のサービス記述またはア
イコン上に重ねて、そのサービスのプレビューを受け取ることができる。代替的に、また
はさらに、ユーザーは、特定のサービス記述またはアイコン上をクリックすることができ
、次いで、そのサービスの機能へとナビゲートされうる。さらに、ユーザーは、複数のサ
ービスから特定のサービスを選択するのに適切な名前もしくは他の識別子を話すことによ
り音声入力を行うことができる。特定のサービス機能へのナビゲーションは、ローカルな
ナビゲーション、またはウェブベースのナビゲーションを含むことができる。1つまたは
複数の実施形態では、ナビゲーションは、サービスによるオペレーションのために、ユー
ザーにより選択されたものなどのデータをサービスに対して送信することを含むことがで
きる。
括的なユーザーインターフェースは、利用可能なサービスを提示し、かつユーザーが1つ
または複数のサービスを選択できるようにするために使用される特定のAPI呼出しにつ
いて十分理解力がある。この方法では、「サービス対応」ではないアプリケーションを、
ユーザーがサービスにアクセスするための出発点として、なお使用することができる。
1つまたは複数のアプリケーションによりホストされうるコントロールを提供する。その
コントロールは、アプリケーションが、本来サポートするサービスを取り込むこと、なら
びにアプリケーションにより本来はサポートされないサービスが、それにもかかわらず、
ユーザーに提供できるようになる手段を提供することを可能にすることができる。
たい場合、ユーザーは、テキスト選択もしくはファイル選択などの特定の選択を行うなど
特定のアクションを取ることができる。ユーザーアクションの検出に応じて、ホストされ
たコントロールは、ローカルなサービスストアに対してAPI呼出しを行って、利用可能
なサービスの一覧表示を受け取ることができる。コントロールは次いで、ユーザーに対し
て利用可能なサービスを一覧表示するユーザーインターフェースを提示することができる
。これらのサービスは、アプリケーションにより本来提供されるサービス、ならびにロー
カルに、または遠隔的に他のサービスプロバイダーにより提供されるサービスを含むこと
ができる。
れた後、ユーザーは、いくつかの異なるアクションを取ることができる。例えば、ユーザ
ーは、サービスを選択するために、サービスのうちの特定の1つの識別子(例えば、地図
作成サービスの場合、「その地図を作成する」など、サービスにより行われる名前および
/またはアクション)を話すこと、ユーザーを選択するためにユーザーにより以前に入力
されカスタマイズされた識別子を話すことなど、以下同様に行うことなどにより、音声を
用いてサービスの1つを選択することができる。
レビューする」など)を介して、特定のサービスの「プレビュー」を要求すること、特定
のサービス記述もしくはアイコン上にカーソルを「重ねる」ことなど、以下同様に行うこ
とができる。代替的に、またはさらに、ユーザーは、次いで、特定のサービス記述もしく
はアイコンを選択する(例えば、その上をクリックする)ことができ、次いで、そのサー
ビスの機能へとナビゲートされうる。特定のサービスの機能へのナビゲーションは、ロー
カルなナビゲーション、またはウェブベースのナビゲーションを含むことができる。
るために、かつユーザーに1つまたは複数のサービスを選択できるようにするために使用
される特定のAPI呼出しについて十分理解力がある。この方法では、アプリケーション
は、サービスをその固有のものとして提供するために、かつ他のサービスプロバイダーに
より提供されるサービスを提供するために、コントロールを使用することができる。さら
に、コントロールは、多くの様々なアプリケーションによりホストされうるので、様々な
アプリケーションにわたって共通のユーザー体験を提供することができる。
応するアプリケーションにより使用されうる1組のAPIを提供して、提供されるサービ
スのリストを受け取り、次いで、それ自体のユーザーインターフェースと、提供されたサ
ービスをそれを介してユーザーが消費できるユーザー体験とを生成する。
多層化されたサービスプラットフォームの1つの特有の例を述べる実施形態の例を検討す
る。以下の記述は、一例を提供するに過ぎず、特許請求される主題のアプリケーションを
、特有の実施形態に限定するために使用されるべきではないことを認識され理解されたい
。したがって、他の実施形態を、特許請求される主題の趣旨および範囲を逸脱することな
く使用することができる。
図3は、1つまたは複数の実施形態による多層化されたサービスプラットフォームを有
する例示的なシステムを全体的に300で示す。この例では、システム300は、ウェブ
ブラウザー302、リーダーアプリケーション304、電子メールアプリケーション30
6、インスタントメッセージング・アプリケーション308、および1つまたは複数のい
わゆるレガシーアプリケーション310の形のアプリケーションを含む。この文書のコン
テキストでは、レガシーアプリケーションとは、そのアプリケーションの使用中に、ユー
ザーがアクセスできる少なくともいくつかのサービスに未対応のアプリケーションと見な
すことができる。示されたアプリケーションは、例示のために提供されており、特許請求
される主題のアプリケーションを限定することは意図されていない。したがって、他のア
プリケーションを、特許請求される主題の趣旨および範囲から逸脱することなく使用する
こともできる。
よびサービス管理コンポーネント314を含み、また共通のコントロール統合レイヤーは
、共通のコンテキストメニュー316を含む。さらに、1つまたは複数の実施形態では、
カスタムの統合レイヤーは、データ認識コンポーネント318、アプリケーション・プロ
グラム・インターフェースすなわちAPI320、サービスストア322、プレビューコ
ンポーネント324、および実行コンポーネント326を含む。
312は、1つまたは複数のアプリケーションを使用している間にユーザーにより呼び出
すことができ、コンテキストがアプリケーション(複数可)により提供される。実際に、
「サービス対応」ではないアプリケーションを使用して、システムサービスメニューを呼
び出すことができる。1つまたは複数の実施形態では、システムサービスメニューは、ク
ライアント装置のオペレーティングシステムによりサポートされ、様々な方法で呼び出す
ことができる。例えば、アプリケーションにより表示されるテキストの選択は、選択され
たテキストの隣にポップアップメニューとして、システムサービスメニュー312を出力
させることができる。
ービスメニューに、特定のホットキーの組合せでキー入力することによりアクセスするこ
とができる。オペレーティングシステムにより検出された後、ホットキーの組合せは、ア
プリケーション・プログラム・インターフェース320へのAPI呼出しを行って、利用
可能なサービスのリストを受け取る。利用可能なサービスは、ローカルに提供されるサー
ビス、および/または遠隔のサービスプロバイダーにより提供されるサービスとすること
ができる。システムサービスメニュー312は、次いで、ユーザーによりアクセスされう
る利用可能なサービスを一覧表示するユーザーインターフェースを提示する。1つまたは
複数の実施形態では、システムサービスメニュー312により提示されたユーザーインタ
ーフェースは、様々なアプリケーションにわたり包括的であり、したがって、統合され、
統一されたユーザー体験を提供することになる。
ーフェースを介してユーザーに一覧表示された後、ユーザーは、例えば、サービスの識別
子(例えば、メニュー中に表示された名前、以前に記憶されたカスタムの識別子など)を
話すこと、サービスを選択するためにカーソル制御装置を使用することなどにより、特定
のサービスを選択することができる。1つまたは複数の実施形態では、ユーザーは、プレ
ビューコンポーネント324を介して、表示されたサービスに関する何らかのアクション
を取ることにより、サービスのプレビューを受け取ることができる。
ために音声入力を提供すること(例えば、サービスにより選択されたテキストの定義に対
して「定義をプレビューする」など)、そのサービスに関連付けられた特定の記述または
アイコンの上、もしくはその近傍にカーソルを置いて、そのサービスのプレビューを受け
取ることなど、以下同様に行うことができる。1つまたは複数の実施形態では、ユーザー
がアプリケーションのコンテキストから離れさせることなくプレビューをユーザーに提供
することができる。例えば、カーソルがこのように置かれるとき、オペレーティングシス
テムは、プレビューコンポーネント324に対してAPI呼出しを行って、プレビューの
一部として提示される情報またはデータを受け取ることができる。代替的に、またはさら
に、特定のサービス記述もしくはアイコン上をクリックすることにより、ユーザーは、サ
ービスを実行させることができる。これが生じたとき、オペレーティングシステムは、実
行コンポーネント326に対してAPI呼出しを行うことができ、それは、次いで、サー
ビスを実行させることができる。サービスの実行は、例示のためでありこれだけに限らな
いが、ローカルナビゲーションと遠隔ナビゲーションのいずれか、もしくは両方とするこ
とのできるナビゲーション活動を含むことができる。これをどのようにして行うことがで
きるかの例は、以下で提供される。
スと関連する様々な管理機能を提供する。例えば、1つまたは複数の実施形態では、サー
ビス管理コンポーネント314は、ユーザーが特定のサービスを追加し、削除し、かつ/
または更新することを可能にする機能を提供することができる。さらに、1つまたは複数
の実施形態では、サービス管理コンポーネントは、容易にアクセスできるように、特定の
サービスをデフォルトサービスとしてユーザーが設定できるようにする。さらに他の実施
形態では、サービス管理コンポーネント314は、ユーザーが、例えば、サービスを開始
するためにユーザーにより話すことのできる、サービスに対するカスタムの識別子を使用
するために、テキストおよび/またはサービスを選択する方法をカスタマイズできるよう
にすることが可能である。
テキストメニュー316は、様々なアプリケーションにわたる共通のコンテキストメニュ
ーを提供する。1つまたは複数の実施形態では、共通のコンテキストメニューは、様々な
アプリケーションによりホストすることのできるコントロールである。少なくともいくつ
かの実施形態では、サービスまたは関連する活動がどのように働くかを、これらのアプリ
ケーションがその固有のものとして理解する必要はない。それにもかかわらず、コントロ
ールをホストすることによって、アプリケーションは、アプリケーション体験の一部とし
て、なおサービスを提供することができる。
ーションは、それが提供するサービス、ならびに他のサービスプロバイダーにより提供さ
れる他のサービスと共にメニューを取り込むことができる。したがって、アプリケーショ
ンは、固有のサービス、ならびにその固有のものではないサービスを共に提供することが
できる。さらに、これらのサービスは、コンピューティング装置102にローカルなもの
(例えば、デスクトップ検索)、かつ/またはウェブサービスおよび他のネットワークサ
ービスなどのネットワーク112を介してアクセス可能なものとすることができる。1つ
または複数の実施形態では、共通のコンテキストメニューは、アプリケーション・プログ
ラム・インターフェース320に対して十分理解力があり、また適切なAPI呼出しを行
って、サービスストア322中で提供されかつ記述されるサービスに関する情報を受け取
ることができる。具体的には、1つまたは複数の実施形態では、共通のコンテキストメニ
ューは、特定のサービスAPIに対応している。
がその中で要求される特定のAPI呼出しと関連するデータを認識するように構成される
。したがって、データ認識装置318は、次いで、サービスの適切な組が発呼者に返され
ることを保証することができる。例えば、ユーザーが、住所などのテキストの特定部分を
選択する場合、サービスの特定のサブセットが、送り返すには不適切である場合がある。
この場合、データ認識装置318は、サービスの正しい一覧表示が返されるように注意を
払うことができる。
ース320は、ユーザーに提示されうるサービスを追加し、削除し、またはその他の形で
管理するために使用できる1組のAPIを提供する。APIは、サービスの一覧表示を受
け取るために使用されるものを含むことができる。「例示的なAPI」と題するセクショ
ンで、APIの組を一例だけ以下で提供する。
サービスと関連する情報および/またはデータを維持するために使用される。サービスは
、サービスストアから柔軟に追加され、かつ削除されうる。これは、様々な方法で行うこ
とができる。1つまたは複数の実施形態では、これは、提供されるサービスを記述するた
めにサービスプロバイダーが使用する宣言的モデルを使用することにより行うことができ
る。アプリケーション・プログラム・インターフェース320により呼出しが受信された
とき、その呼出しに関連する情報が、サービスストア322から取得され、かつそれに従
って、提示することができる。
は複数の提供されるサービスのプレビューを提供するために使用されうる。これをどのよ
うにして行うことができるかの例が以下で示される。
または複数のサービスを実行するために使用されうる。これをどのようにして行うことが
できるかの例が以下で示される。
図4は、リーダーアプリケーションのためのユーザーインターフェースを全体的に40
0で示す。この例では、ユーザーは、そのデスクトップ上のリーダーアプリケーションを
開き、リーダーアプリケーションを用いて文書402を開いている。この例では、リーダ
ーアプリケーションは、ユーザーに提供される1つまたは複数のサービスを本来はサポー
トしていない。
カーソルでテキスト「ブロギング(Blogging)」を選択している。このユーザー
アクションに応じて、オペレーティングシステムは、アプリケーション・プログラム・イ
ンターフェース320(図3)に対してAPI呼出しを行い、それに応じて、いくつかの
利用可能なサービスを一覧表示するシステムサービスメニュー502を提示する。図示の
ように、サービスは、例示のためであり、これだけに限らないが、検索サービス、定義サ
ービス、調査サービス、地図サービス、ニュースサービス、画像サービス、および翻訳サ
ービスを含む。例示され述べられた実施形態では、一覧表示されたサービスのいずれも、
リーダーアプリケーション400により本来はサポートされない。
、ユーザーは、プレビューを開始する音声入力を提供すること(例えば、「定義をプレビ
ューする」)、定義サービスの一覧表示上または近傍にカーソルを重ねることなど、以下
同様に行うことができる。この特定の例では、プレビューは、ユーザーにより選択された
用語を簡単に定義する。この例では、プレビュー600の提示は、例えば、「ブロギング
」などの選択されたテキストを含むユーザーによる介入なしに、プレビューコンポーネン
ト324と協調して、アプリケーション・プログラム・インターフェース320(図3)
に対してオペレーティングシステムにより行われたAPI呼出しの結果である。この特定
の例では、提示されたプレビューは、遠隔サービスプロバイダーへのナビゲーションを行
わせて、それにより、テキストを用いて遠隔サービスプロバイダーにより行われたオペレ
ーションの結果であるプレビュー中で表示される情報が提供される。
しないことも可能である。ユーザーが、例えば、プレビュー600上をクリックすること
、サービスの話された識別子を提供することなど、以下同様に行うことにより、サービス
を実行することを選択した場合、定義サイトへの完全なナビゲーションが行われうる。例
えば、図7は、定義サイトへのナビゲーションとして提供されたユーザーインターフェー
ス700を示す。この例では、ユーザーにより選択された用語の完全な定義、ならびに定
義サイトで提供される他の情報を提供することができる。
れにもかかわらず、オペレーティングシステムのサポートを介して、いくつかのサービス
へのアクセスを提供することができる。さらにこのアクセスは、アプリケーションにより
表示される選択されたテキストをサービスに提供するために使用されうる話し言葉もしく
は他の入力により効率的な方法で行うことができる。
よび文書402が示されている。この例では、ユーザーは、カーソルを用いて、800で
破線のボックスにより示された住所を選択している。
ーザーに提示されている。プレビュー上をクリックすることにより、ユーザーは、例えば
、特定の住所への運転指示、ならびに地図サイトで一般に提供される他の機能を受け取る
ための選択肢をユーザーに提供できる地図サイトへとナビゲートされうる。
ーションが、それにもかかわらず、オペレーティングシステムのサポートにより、地図作
成サービスへのアクセスを提供することができる。
1つまたは複数の実施形態では、共通のコントロール統合レイヤーは、アプリケーショ
ンによりアクセスされうるサービスを示すためにアプリケーションにより使用できる共通
のコントロールを提供することができる。1つまたは複数の実施形態では、共通のコント
ロールは、システムサービスメニュー312(図3)により提供されるものなど、システ
ムサービスメニューの形を取る。例として、電子メールアプリケーションにより提供され
るユーザーインターフェースを全体的に1000で示す図10を検討する。この例では、
ユーザーは、カーソル制御装置を使用するなどにより、1002で示された住所を選択し
ている。
は、アプリケーションにより提供されるサービスだけではなく、他のサービスプロバイダ
ーにより提供されるサービスもユーザーに対して表示することができる。例として、図1
1を検討すると、それは、アプリケーションにより提供されるサービス、ならびに他のサ
ービスプロバイダーにより提供されるサービスを一覧表示する共通のコントロール110
0を示す。具体的にこの例では、アプリケーションにより提供されるサービスは、「コピ
ー」サービス、および「すべてを選択する」サービスを含む。
することができる。具体的にこの例では、このようなサービスは、「Windows(登
録商標) Live(ウィンドウズ(登録商標)ライブ)上で地図を作成する」サービス、
「Gmailへ送信する」サービス、および「BabelFish(バベルフィッシュ)
で翻訳する」サービスを含む。この例では、共通のコントロール1100内で提示される
サービスは、そのコントロールにより行われたAPI呼出しの結果である。
Windows(登録商標) Live上で地図を作成する」ために、サービスに提供され
るテキスト(例えば、1002で示された住所)のコピーを有する部分を含めて示されて
いる。この方法では、共通のコントロール1100は、どのテキストがサービスに送られ
るかを確認することができる。さらに共通のコントロール1100はまた、サービスの各
表現の隣に配置された指示の例1104、1106を含むものとして示され、示されたサ
ービスが、音声入力を用いて選択可能であることを示している。
ソルを置いており、それに応じて、サービスのプレビューを提供する地図プレビュー12
00が提示されている。次に、プレビュー1200上をクリックすることにより、ユーザ
ーは、上記で述べたように他の地図作成機能を提供する関連する地図作成サイトへとナビ
ゲートされうる。前に述べた他の選択技法も利用することができる。
することができ、アプリケーションにより本来サポートされるサービス、ならびにアプリ
ケーションにより本来はサポートされないサービスを、ユーザーに提示できるようにする
。様々なアプリケーションにわたって共通のコントロールを使用することは、統一され、
統合されたユーザー体験を提供する。
1つまたは複数の実施形態では、カスタムの統合レイヤーは、提供されるサービスのリ
ストを受け取り、次いで、それ自体のユーザーインターフェースと、ユーザーが提供され
たサービスを消費することのできるユーザー体験とを作成するために、APIに対応して
いるアプリケーションにより使用できる1組のAPIを提供する。例として、ユーザーイ
ンターフェース1300を有するインスタントメッセージング・アプリケーションの形の
アプリケーションを示す図13を検討する。この例では、ユーザーは、他の人物との対話
に参加している。対話は、参加者が食事をしたい場所に関する。参加者の1人が、特定の
カフェについて述べている。
テキスト「カフェ プレス(presse)」を選択している。このテキスト選択の検出
に応じて、この例では、プラットフォームのAPIに対応しているインスタントメッセー
ジング・アプリケーションが、提供されるサービスのリストの返信を受け取るためにAP
I呼出しを行った。この例では、ユーザーは、コマンドを話し(例えば、「その地図を作
成する」)、対応する地図作成サービスが提供され、1402で示されるアイコンと関連
付けられる。この実施形態では、コマンドを話した後、ユーザーによってさらに対話を行
うことなく、地図作成サービスが提供される。
離れてユーザーをナビゲートすることなく、テキストを用いて、サービスにより行われる
オペレーションの「プレビュー」を提供することができる。例として、図15を検討する
。そこでは、地図ユーザーインターフェース1500の形でプレビューがユーザーに対し
て提供される。プレビューは、ユーザーを地図のプレビューに関連付けられたさらなる機
能へとナビゲートできるように、選択可能に構成することができる。例えば、ユーザーは
、例えば、ユーザーの特定の選択と関連する運転指示を提供する可能性のある地図サイト
へとナビゲートされうる。サービス選択のさらなる論議は、以下の手順に関して見出すこ
とができる。
以下の論議は、前に述べたシステムおよび装置を用いて実施されうる技法を述べる。各
手順の諸態様は、ハードウェア、ファームウェア、もしくはソフトウェア、またはそれら
の組合せで実施することができる。手順は、1つまたは複数の装置により実施されるオペ
レーションを指定する1組のブロックとして示されており、また各ブロックによりオペレ
ーションを実施するために示された順序に必ずしも限定されない。以下の論議の部分では
、前に述べた環境および/またはユーザーインターフェースへの参照を行うことになる。
記述する流れ図である。手順は、任意の適切なハードウェア、ソフトウェア、ファームウ
ェア、またはそれらの組合せと共に実施することができる。少なくともいくつかの実施形
態では、手順の諸態様は、上記で示され、述べられたものなど、サービスプラットフォー
ムにより実施することができる。
0)。上記の例では、ユーザーは、提供されることが望ましいサービスを必ずしもサポー
トしないレガシーアプリケーションなどのアプリケーション内で作業をしている。ここで
、ユーザーアクションは、ユーザーが、そのアプリケーションにより提供されない1つま
たは複数のサービスについて知りたいと望むこと、かつおそらくそれを消費したいと望む
ことを示すものであるはずである。したがって、ホットキーの組合せ、音声入力などの任
意のタイプのアクションを構成しうるユーザーのアクションを介して、ユーザーは、提供
されるサービスについて知りたいと望むことを示すことができる。例えば、ユーザーは、
テキストを選択し、音声機能を開始し(例えば、ボタンを押す)、かつサービスの特定の
ものを識別するために使用されうる1つまたは複数の単語を話すことができる。
じて、アプリケーションにより本来はサポートされないサービスのリストが取得される(
ブロック1602)。サービスのリストは、様々な方法で取得することができる。上記の
例では、リストは、プラットフォームでサポートされるAPIに対するオペレーティング
システム呼出しを介して取得される。
々なユーザーインターフェースを用いて様々な方法で行うことができる。1つまたは複数
のサービスのプレビューが提供される(ブロック1606)。このステップもまた様々な
方法で行うことができる。上記の例では、プレビューは、ユーザーが、サービスと関連付
けられたアイコンまたはサービス記述の上もしくはその近傍に、自分のカーソルを重ねる
こと、サービスの特定の1つのプレビューを開始するのに適した音声入力を行うこと(例
えば、「定義をプレビューする」)、および以下同様のものなど、何らかのアクションを
取ることに応じて提供される。この例では、サービス機能が提供される遠隔のウェブサイ
トにユーザーをナビゲートすることを含むことのできるサービスの機能へのアクセスが提
供される(ブロック1608)。代替的に、またはさらに、サービスの機能は、ローカル
にも提供されうる。プレビューは任意選択のものであり、特定のサービスを識別した後、
省略してもよいことは容易に明らかとなるはずであり、その例を以下で述べる。
プを記述する流れ図である。手順は、任意の適切なハードウェア、ソフトウェア、ファー
ムウェア、またはそれらの組合せと共に実施することができる。少なくともいくつかの実
施形態では、手順の諸態様は、上記で示され、かつ述べられたものなど、サービスプラッ
トフォームにより実施することができる。
択が受け取られる(ブロック1700)。例えば、図1のサービス開始モジュール116
が、アプリケーション108により表示されたテキストを受け取ることができる。テキス
トは、カーソル制御装置、キーボード、タッチスクリーン、音声入力、および以下同様の
ものを用いることなどにより、様々な方法で選択することができる。
スの表現が出力される(ブロック1702)。例えば、サービス開始モジュール116は
、テキストが選択されたとき、アプリケーション108により本来はサポートされないサ
ービスを含むことのできるサービスの表現を自動的に出力することができる。他の実施形
態では、その表現は、例えば、ホットキーの組合せ、音声入力、および以下同様のものな
ど、コマンドに応じて出力される。
検出される(ブロック1704)。例えば、ユーザーは、音声入力を提供する、メニュー
中の表現を「クリックする」、または「タッチする」(例えば、タッチスクリーンを介し
て)ことができる。音声入力の例では、表現を提供するために使用される単語が話され(
例えば、サービスの名前)、サービスにより行われるオペレーションの名前が話され(例
えば、「その地図を作成する」)、コンピューティング装置のユーザーにより以前に記憶
されカスタマイズされた名前が話されるなど、以下同様に行うことができる。したがって
、サービスは、様々な異なる音声入力を用いて選択することができる。
開始するために、ユーザーがさらに介入を行うことなく、選択されたサービスに対して、
テキストの選択が提供される(ブロック1706)。例えば、サービス開始モジュール1
16は、(例えば、ネットワーク112を介して、またはコンピューティング装置102
に対してローカルに)選択されたサービスへとナビゲートし、かつ選択されたクリップボ
ードのコンテンツ(例えば、テキスト)をペーストすることができる。テキストのこのナ
ビゲーションおよびペーストは、ユーザー側で対話を行うことなく実施することが可能で
あり、したがって、サービスを選択した後、自動的に提供されうる。様々な他の例もまた
企図される。
述する流れ図である。その手順は、任意の適切なハードウェア、ソフトウェア、ファーム
ウェア、またはそれらの組合せと共に実施することができる。少なくともいくつかの実施
形態では、手順の諸態様は、上記で示され、かつ述べられたものなど、サービスプラット
フォームにより実施することができる。
ムの一部として構成されうるサービス開始モジュール116などにより検出される(ブロ
ック1800)。
の組合せ、音声入力などが、選択されたテキストに隣接して表示されるポップアップメニ
ューなど、複数のサービスの表現を有するメニューの出力を開始するために使用されうる
。
ンによりユーザーインターフェース中に表示されたテキストを受け取るべきかに関する決
定が行われる(ブロック1804)。例えば、ユーザーは、メニュー中に表示された表現
の名前(例えば、図6の「地図」)を話すことができ、サービスにより行われるオペレー
ションを表現する(例えば、「住所の地図を作成する」)ことができ、ユーザーによりサ
ービスのために以前に記憶されたカスタマイズした名前を使用することができるなど、以
下同様に行うことができる。実施形態では、カスタマイズされた音声入力は、特定のサー
ビスに対する「音声ショートカット」を提供することができる。
れたサービスに提供されうる(ブロック1806)。前の例で続けると、特定のサービス
が選択される決定が行われた後、テキストは、ユーザー側でさらにコンピューティング装
置102と対話を行うことなく、サービスに提供することができる。
に続く音声入力の変換を停止することができる(ブロック1808)。例えば、音声開始
モジュール116は、モジュールのオペレーションをさらに複雑化することのないように
、音声入力のその内在する意味を決定する(例えば、「何が話されたか」を決定する)こ
とに使用されるマイクロフォンを「遮断する」ことができ、それにより、コンピューティ
ング装置102の資源を保存することができる。
図19は、上記で述べた様々な実施形態を実施できる例示的なコンピューティング装置
1900を示す。コンピューティング装置1900は、例えば、図1のコンピューティン
グ装置102、または任意の他の適切なコンピューティング装置とすることができる。
理装置1902、1つまたは複数のメモリーおよび/またはストレージコンポーネント1
904、1つまたは複数の入力/出力(I/O)装置1906、ならびに様々なコンポー
ネントおよび装置が互いに通信できるようにするバス1908を含む。バス1908は、
メモリーバスもしくはメモリーコントローラ、周辺バス、AGP(accelerate
d graphics port)、およびプロセッサーバスもしくは任意の様々なバス
アーキテクチャを用いるローカルバスを含む、任意のいくつかのタイプのバス構造のうち
の1つまたは複数のものを表す。バス1908は、有線バスおよび/または無線バスを含
むことができる。
ター記憶媒体を表す。コンポーネント1904は、揮発性媒体(ランダムアクセスメモリ
ー(RAM)など)および/または不揮発性媒体(読取り専用メモリー(ROM)、フラ
ッシュメモリー、光ディスク、磁気ディスクなど)を含むことができる。コンポーネント
1904は、固定された媒体(例えば、RAM、ROM、固定されたハードドライブなど
)、ならびに取外し可能媒体(例えば、フラッシュメモリードライブ、取外し可能なハー
ドドライブ、光ディスクなど)を含むことができる。
置1900にコマンドおよび情報を入力できるようにし、さらにユーザーおよび/または
他のコンポーネントもしくは装置に対して情報を提示できるようにする。入力装置の例は
、キーボード、カーソル制御装置(例えば、マウス)、マイクロフォン、スキャナなどを
含む。出力装置の例は、表示装置(例えば、モニターまたはプロジェクター)、スピーカ
ー、プリンター、ネットワークカードなどを含む。
般的なコンテキストで述べることができる。一般に、ソフトウェアは、特定のタスクを行
う、または特定の抽象データ型を実施するルーチン、プログラム、オブジェクト、コンポ
ーネント、データ構造などを含む。これらのモジュールおよび技法の実施形態は、コンピ
ューター可読媒体の何らかの形態上に記憶され、またはそれを介して送信されうる。コン
ピューター可読媒体は、コンピューティング装置によりアクセスされうる任意の利用可能
な1つまたは複数の媒体とすることができる。例示のためであり、これだけに限らないが
、コンピューター可読媒体は、「コンピューター記憶媒体」を含むことができる。
ラムモジュール、または他のデータなどの情報を記憶するための任意の方法もしくは技術
で実装される揮発性および不揮発性、取外し可能および取外し不能媒体を含む。コンピュ
ーター記憶媒体は、これだけに限らないが、RAM、ROM、EEPROM、フラッシュ
メモリー、もしくは他の記憶技術、CD−ROM、DVD(digital versa
tile disk)、もしくは他の光ストレージ、磁気カセット、磁気テープ、磁気デ
ィスクストレージ、もしくは他の磁気記憶装置、あるいは所望の情報を記憶するために使
用することができ、かつコンピューターによりアクセス可能な任意の他の媒体を含む。
るが、添付の特許請求の範囲で定義される主題は、必ずしも、上記で述べた特有の機能ま
たは行為に限定されないことを理解されたい。そうではなくて、上記で述べた特有の機能
および行為は、特許請求の範囲を実施する例示的な形態として開示されている。
Claims (14)
- コンピューティング装置により実施される(implemented)方法であって、
アプリケーションによりユーザーインターフェース中に表示されたテキストの選択(sel
ection)を受け取るステップ(1700)と、
前記ユーザーインターフェース中に表示された複数のサービスのうちの1つの選択を検
出(detecting)するステップ(1704)と、
前記検出するステップに応じて、ユーザーがさらに介入(intervention)することなく、
テキストの前記選択を用いて前記選択されたサービスのオペレーションを開始(initiate)
するために、前記選択されたサービスにテキストの前記選択を提供(providing)するステ
ップ(1706)と
を含む方法。 - 前記複数のサービスのうちの前記1つの前記選択が、カーソル制御装置を用いて行われ
る、請求項1に記載の方法。 - 前記テキストの前記選択の前記受け取るステップに応じて(responsive to)、ユーザー
が介入(intervention)することなく、前記複数のサービスのそれぞれの表現(representat
ions)を出力するステップをさらに含む、請求項1に記載の方法。 - 前記テキストが、カーソル制御装置を用いて前記ユーザーインターフェース中で選択さ
れ、それによって(such that)、前記ユーザーインターフェース中の他のテキストは、選
択されることなく前記決定されたサービスに提供されない、請求項1に記載の方法。 - 前記複数のサービスのそれぞれの表現(representation)を含むユーザーインターフェー
スを出力するステップをさらに含む、請求項1に記載の方法。 - 少なくとも1つの前記表現が、音声入力(speech input)を行うことにより、対応する(c
orresponding)前記サービスの選択が実施可能(performable)であることを示す(indicates
)識別子(identifier)を含む、請求項5に記載の方法。 - 前記提供されたテキストを用いて、前記決定されたサービスにより行われる処理(proce
ssing)の結果であるプレビューを出力するステップをさらに含む、請求項1に記載の方法
。 - 前記プレビューが、ブラウザーを開くことなく行われる、請求項7に記載の方法。
- 前記プレビューが、音声を用いて開始される(initiated)、請求項7に記載の方法。
- 前記音声入力が、前記決定されたサービスの名前に相当する(corresponds)、請求項9
に記載の方法。 - 前記音声入力が、ユーザーにより前記決定されたサービスに与えられた、前に記憶され
、カスタマイズされた名前に相当する、請求項9に記載の方法。 - 後続する(subsequent)音声入力の変換(translation)は、一旦、前記音声入力を用いて
前記サービスの前記決定を行うことができた(may be performed)なら停止する(ceases)、
請求項9に記載の方法。 - 少なくとも1つの前記サービスが、命令を実行するコンピューティング装置にとってロ
ーカル(local)なものである、請求項1に記載の方法。 - 少なくとも1つの前記サービスが、命令を実行するコンピューティング装置にとって遠
隔(remote)のものである、請求項1に記載の方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US12/055,291 | 2008-03-25 | ||
| US12/055,291 US20090248397A1 (en) | 2008-03-25 | 2008-03-25 | Service Initiation Techniques |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011501868A Division JP2011517813A (ja) | 2008-03-25 | 2009-02-27 | サービス開始技法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2014112420A true JP2014112420A (ja) | 2014-06-19 |
Family
ID=41114274
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011501868A Pending JP2011517813A (ja) | 2008-03-25 | 2009-02-27 | サービス開始技法 |
| JP2014024137A Pending JP2014112420A (ja) | 2008-03-25 | 2014-02-12 | サービス開始技法 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011501868A Pending JP2011517813A (ja) | 2008-03-25 | 2009-02-27 | サービス開始技法 |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US20090248397A1 (ja) |
| EP (1) | EP2257928A4 (ja) |
| JP (2) | JP2011517813A (ja) |
| KR (1) | KR20110000553A (ja) |
| CN (1) | CN101978390A (ja) |
| BR (1) | BRPI0908169A2 (ja) |
| RU (1) | RU2504824C2 (ja) |
| WO (1) | WO2009120450A1 (ja) |
Families Citing this family (82)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8019742B1 (en) | 2007-05-31 | 2011-09-13 | Google Inc. | Identifying related queries |
| US8689203B2 (en) * | 2008-02-19 | 2014-04-01 | Microsoft Corporation | Software update techniques based on ascertained identities |
| US9183323B1 (en) | 2008-06-27 | 2015-11-10 | Google Inc. | Suggesting alternative query phrases in query results |
| US20130219333A1 (en) * | 2009-06-12 | 2013-08-22 | Adobe Systems Incorporated | Extensible Framework for Facilitating Interaction with Devices |
| US9106685B2 (en) | 2009-10-28 | 2015-08-11 | Advanced Businesslink Corporation | Dynamic extensions to legacy application tasks |
| US8849785B1 (en) | 2010-01-15 | 2014-09-30 | Google Inc. | Search query reformulation using result term occurrence count |
| US9329851B2 (en) | 2011-09-09 | 2016-05-03 | Microsoft Technology Licensing, Llc | Browser-based discovery and application switching |
| US8469816B2 (en) * | 2011-10-11 | 2013-06-25 | Microsoft Corporation | Device linking |
| US9441982B2 (en) * | 2011-10-13 | 2016-09-13 | Telenav, Inc. | Navigation system with non-native dynamic navigator mechanism and method of operation thereof |
| GB2498554A (en) * | 2012-01-20 | 2013-07-24 | Jaguar Cars | Automatic local search triggered by selection of search terms from displayed text |
| US9311407B2 (en) * | 2013-09-05 | 2016-04-12 | Google Inc. | Native application search results |
| US9916059B2 (en) * | 2014-07-31 | 2018-03-13 | Microsoft Technology Licensing, Llc | Application launcher sizing |
| US9811314B2 (en) | 2016-02-22 | 2017-11-07 | Sonos, Inc. | Metadata exchange involving a networked playback system and a networked microphone system |
| US10264030B2 (en) | 2016-02-22 | 2019-04-16 | Sonos, Inc. | Networked microphone device control |
| US9965247B2 (en) | 2016-02-22 | 2018-05-08 | Sonos, Inc. | Voice controlled media playback system based on user profile |
| US9947316B2 (en) | 2016-02-22 | 2018-04-17 | Sonos, Inc. | Voice control of a media playback system |
| US10743101B2 (en) | 2016-02-22 | 2020-08-11 | Sonos, Inc. | Content mixing |
| US10095470B2 (en) | 2016-02-22 | 2018-10-09 | Sonos, Inc. | Audio response playback |
| US9978390B2 (en) | 2016-06-09 | 2018-05-22 | Sonos, Inc. | Dynamic player selection for audio signal processing |
| CN106200874B (zh) * | 2016-07-08 | 2019-09-06 | 北京金山安全软件有限公司 | 一种信息显示方法、装置及电子设备 |
| US10134399B2 (en) | 2016-07-15 | 2018-11-20 | Sonos, Inc. | Contextualization of voice inputs |
| US10152969B2 (en) | 2016-07-15 | 2018-12-11 | Sonos, Inc. | Voice detection by multiple devices |
| US10115400B2 (en) | 2016-08-05 | 2018-10-30 | Sonos, Inc. | Multiple voice services |
| US10685656B2 (en) | 2016-08-31 | 2020-06-16 | Bose Corporation | Accessing multiple virtual personal assistants (VPA) from a single device |
| US9942678B1 (en) | 2016-09-27 | 2018-04-10 | Sonos, Inc. | Audio playback settings for voice interaction |
| US9743204B1 (en) | 2016-09-30 | 2017-08-22 | Sonos, Inc. | Multi-orientation playback device microphones |
| US10181323B2 (en) | 2016-10-19 | 2019-01-15 | Sonos, Inc. | Arbitration-based voice recognition |
| CN106933636B (zh) * | 2017-03-16 | 2020-08-18 | 北京奇虎科技有限公司 | 启动插件服务的方法、装置和终端设备 |
| US11183181B2 (en) | 2017-03-27 | 2021-11-23 | Sonos, Inc. | Systems and methods of multiple voice services |
| US10475449B2 (en) | 2017-08-07 | 2019-11-12 | Sonos, Inc. | Wake-word detection suppression |
| US10048930B1 (en) | 2017-09-08 | 2018-08-14 | Sonos, Inc. | Dynamic computation of system response volume |
| US10446165B2 (en) | 2017-09-27 | 2019-10-15 | Sonos, Inc. | Robust short-time fourier transform acoustic echo cancellation during audio playback |
| US10051366B1 (en) | 2017-09-28 | 2018-08-14 | Sonos, Inc. | Three-dimensional beam forming with a microphone array |
| US10621981B2 (en) | 2017-09-28 | 2020-04-14 | Sonos, Inc. | Tone interference cancellation |
| US10482868B2 (en) | 2017-09-28 | 2019-11-19 | Sonos, Inc. | Multi-channel acoustic echo cancellation |
| US10466962B2 (en) | 2017-09-29 | 2019-11-05 | Sonos, Inc. | Media playback system with voice assistance |
| US10880650B2 (en) | 2017-12-10 | 2020-12-29 | Sonos, Inc. | Network microphone devices with automatic do not disturb actuation capabilities |
| US10818290B2 (en) | 2017-12-11 | 2020-10-27 | Sonos, Inc. | Home graph |
| WO2019152722A1 (en) | 2018-01-31 | 2019-08-08 | Sonos, Inc. | Device designation of playback and network microphone device arrangements |
| US11175880B2 (en) | 2018-05-10 | 2021-11-16 | Sonos, Inc. | Systems and methods for voice-assisted media content selection |
| US10847178B2 (en) | 2018-05-18 | 2020-11-24 | Sonos, Inc. | Linear filtering for noise-suppressed speech detection |
| US10959029B2 (en) | 2018-05-25 | 2021-03-23 | Sonos, Inc. | Determining and adapting to changes in microphone performance of playback devices |
| US10681460B2 (en) | 2018-06-28 | 2020-06-09 | Sonos, Inc. | Systems and methods for associating playback devices with voice assistant services |
| US11076035B2 (en) | 2018-08-28 | 2021-07-27 | Sonos, Inc. | Do not disturb feature for audio notifications |
| US10461710B1 (en) | 2018-08-28 | 2019-10-29 | Sonos, Inc. | Media playback system with maximum volume setting |
| US10587430B1 (en) | 2018-09-14 | 2020-03-10 | Sonos, Inc. | Networked devices, systems, and methods for associating playback devices based on sound codes |
| US10878811B2 (en) | 2018-09-14 | 2020-12-29 | Sonos, Inc. | Networked devices, systems, and methods for intelligently deactivating wake-word engines |
| US11024331B2 (en) | 2018-09-21 | 2021-06-01 | Sonos, Inc. | Voice detection optimization using sound metadata |
| US10811015B2 (en) | 2018-09-25 | 2020-10-20 | Sonos, Inc. | Voice detection optimization based on selected voice assistant service |
| US11100923B2 (en) | 2018-09-28 | 2021-08-24 | Sonos, Inc. | Systems and methods for selective wake word detection using neural network models |
| US10692518B2 (en) | 2018-09-29 | 2020-06-23 | Sonos, Inc. | Linear filtering for noise-suppressed speech detection via multiple network microphone devices |
| US11899519B2 (en) | 2018-10-23 | 2024-02-13 | Sonos, Inc. | Multiple stage network microphone device with reduced power consumption and processing load |
| EP3654249A1 (en) | 2018-11-15 | 2020-05-20 | Snips | Dilated convolutions and gating for efficient keyword spotting |
| US11183183B2 (en) | 2018-12-07 | 2021-11-23 | Sonos, Inc. | Systems and methods of operating media playback systems having multiple voice assistant services |
| US11132989B2 (en) | 2018-12-13 | 2021-09-28 | Sonos, Inc. | Networked microphone devices, systems, and methods of localized arbitration |
| US10602268B1 (en) | 2018-12-20 | 2020-03-24 | Sonos, Inc. | Optimization of network microphone devices using noise classification |
| US10867604B2 (en) | 2019-02-08 | 2020-12-15 | Sonos, Inc. | Devices, systems, and methods for distributed voice processing |
| US11315556B2 (en) | 2019-02-08 | 2022-04-26 | Sonos, Inc. | Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification |
| US11120794B2 (en) | 2019-05-03 | 2021-09-14 | Sonos, Inc. | Voice assistant persistence across multiple network microphone devices |
| US11361756B2 (en) | 2019-06-12 | 2022-06-14 | Sonos, Inc. | Conditional wake word eventing based on environment |
| US11200894B2 (en) | 2019-06-12 | 2021-12-14 | Sonos, Inc. | Network microphone device with command keyword eventing |
| US10586540B1 (en) | 2019-06-12 | 2020-03-10 | Sonos, Inc. | Network microphone device with command keyword conditioning |
| US11373221B2 (en) | 2019-07-26 | 2022-06-28 | Ebay Inc. | In-list search results page for price research |
| US11138975B2 (en) | 2019-07-31 | 2021-10-05 | Sonos, Inc. | Locally distributed keyword detection |
| US11138969B2 (en) | 2019-07-31 | 2021-10-05 | Sonos, Inc. | Locally distributed keyword detection |
| US10871943B1 (en) | 2019-07-31 | 2020-12-22 | Sonos, Inc. | Noise classification for event detection |
| US11189286B2 (en) | 2019-10-22 | 2021-11-30 | Sonos, Inc. | VAS toggle based on device orientation |
| US11200900B2 (en) | 2019-12-20 | 2021-12-14 | Sonos, Inc. | Offline voice control |
| US11562740B2 (en) | 2020-01-07 | 2023-01-24 | Sonos, Inc. | Voice verification for media playback |
| US11556307B2 (en) | 2020-01-31 | 2023-01-17 | Sonos, Inc. | Local voice data processing |
| US11308958B2 (en) | 2020-02-07 | 2022-04-19 | Sonos, Inc. | Localized wakeword verification |
| US11482224B2 (en) | 2020-05-20 | 2022-10-25 | Sonos, Inc. | Command keywords with input detection windowing |
| US11308962B2 (en) | 2020-05-20 | 2022-04-19 | Sonos, Inc. | Input detection windowing |
| US11727919B2 (en) | 2020-05-20 | 2023-08-15 | Sonos, Inc. | Memory allocation for keyword spotting engines |
| US12387716B2 (en) | 2020-06-08 | 2025-08-12 | Sonos, Inc. | Wakewordless voice quickstarts |
| US11698771B2 (en) | 2020-08-25 | 2023-07-11 | Sonos, Inc. | Vocal guidance engines for playback devices |
| US12283269B2 (en) | 2020-10-16 | 2025-04-22 | Sonos, Inc. | Intent inference in audiovisual communication sessions |
| US11984123B2 (en) | 2020-11-12 | 2024-05-14 | Sonos, Inc. | Network device interaction by range |
| US11551700B2 (en) | 2021-01-25 | 2023-01-10 | Sonos, Inc. | Systems and methods for power-efficient keyword detection |
| EP4409933A1 (en) | 2021-09-30 | 2024-08-07 | Sonos, Inc. | Enabling and disabling microphones and voice assistants |
| US12327549B2 (en) | 2022-02-09 | 2025-06-10 | Sonos, Inc. | Gatekeeping for voice intent processing |
| CN115391598A (zh) * | 2022-08-29 | 2022-11-25 | Oppo广东移动通信有限公司 | 服务提供方法、装置、终端、存储介质及程序产品 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000311040A (ja) * | 1998-10-19 | 2000-11-07 | Toshihiko Okabe | データ引き渡し装置、データ引き渡し方法、及びデータ引き渡しプログラムを記録した記録媒体 |
| JP2005521130A (ja) * | 2002-03-15 | 2005-07-14 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | コンピュータ・システム上のドキュメントのプレビュー |
| US20070011258A1 (en) * | 2002-09-18 | 2007-01-11 | Advenix, Corp. (Ca Corporation) | Enhancement of e-mail client user interfaces and e-mail message formats |
| JP2007510188A (ja) * | 2003-08-05 | 2007-04-19 | ヤフー! インコーポレイテッド | コンテキスト・メニューの制御方法およびシステム |
| WO2007142430A1 (en) * | 2006-06-02 | 2007-12-13 | Parang Fish Co., Ltd. | Keyword related advertisement system and method |
Family Cites Families (52)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3286339B2 (ja) * | 1992-03-25 | 2002-05-27 | 株式会社リコー | ウインドウ画面制御装置 |
| US5410703A (en) * | 1992-07-01 | 1995-04-25 | Telefonaktiebolaget L M Ericsson | System for changing software during computer operation |
| US5933599A (en) * | 1995-07-17 | 1999-08-03 | Microsoft Corporation | Apparatus for presenting the content of an interactive on-line network |
| US6151643A (en) * | 1996-06-07 | 2000-11-21 | Networks Associates, Inc. | Automatic updating of diverse software products on multiple client computer systems by downloading scanning application to client computer and generating software list on client computer |
| US6360363B1 (en) * | 1997-12-31 | 2002-03-19 | Eternal Systems, Inc. | Live upgrade process for object-oriented programs |
| US6138100A (en) * | 1998-04-14 | 2000-10-24 | At&T Corp. | Interface for a voice-activated connection system |
| US6256623B1 (en) * | 1998-06-22 | 2001-07-03 | Microsoft Corporation | Network search access construct for accessing web-based search services |
| US6185535B1 (en) * | 1998-10-16 | 2001-02-06 | Telefonaktiebolaget Lm Ericsson (Publ) | Voice control of a user interface to service applications |
| US6754848B1 (en) * | 1999-09-30 | 2004-06-22 | International Business Machines Corporation | Method, system and program products for operationally migrating a cluster through emulation |
| US6988249B1 (en) * | 1999-10-01 | 2006-01-17 | Accenture Llp | Presentation service architectures for netcentric computing systems |
| KR20000063555A (ko) * | 2000-07-21 | 2000-11-06 | 박형준 | 웹브라우져 상의 텍스트 정보를 이용한 웹사이트 검색방법 |
| US7308408B1 (en) * | 2000-07-24 | 2007-12-11 | Microsoft Corporation | Providing services for an information processing system using an audio interface |
| US6795806B1 (en) * | 2000-09-20 | 2004-09-21 | International Business Machines Corporation | Method for enhancing dictation and command discrimination |
| US7085716B1 (en) * | 2000-10-26 | 2006-08-01 | Nuance Communications, Inc. | Speech recognition using word-in-phrase command |
| US20030182414A1 (en) * | 2003-05-13 | 2003-09-25 | O'neill Patrick J. | System and method for updating and distributing information |
| US20020077830A1 (en) * | 2000-12-19 | 2002-06-20 | Nokia Corporation | Method for activating context sensitive speech recognition in a terminal |
| US20030004746A1 (en) * | 2001-04-24 | 2003-01-02 | Ali Kheirolomoom | Scenario based creation and device agnostic deployment of discrete and networked business services using process-centric assembly and visual configuration of web service components |
| US6976251B2 (en) * | 2001-05-30 | 2005-12-13 | International Business Machines Corporation | Intelligent update agent |
| US7308439B2 (en) * | 2001-06-06 | 2007-12-11 | Hyperthink Llc | Methods and systems for user activated automated searching |
| US8126722B2 (en) * | 2001-12-20 | 2012-02-28 | Verizon Business Global Llc | Application infrastructure platform (AIP) |
| US7203644B2 (en) * | 2001-12-31 | 2007-04-10 | Intel Corporation | Automating tuning of speech recognition systems |
| US7246063B2 (en) * | 2002-02-15 | 2007-07-17 | Sap Aktiengesellschaft | Adapting a user interface for voice control |
| JP4017887B2 (ja) * | 2002-02-28 | 2007-12-05 | 富士通株式会社 | 音声認識システムおよび音声ファイル記録システム |
| US20060005162A1 (en) * | 2002-05-16 | 2006-01-05 | Agency For Science, Technology And Research | Computing system deployment planning method |
| US7200210B2 (en) * | 2002-06-27 | 2007-04-03 | Yi Tang | Voice controlled business scheduling system and method |
| US6847970B2 (en) * | 2002-09-11 | 2005-01-25 | International Business Machines Corporation | Methods and apparatus for managing dependencies in distributed systems |
| US7072807B2 (en) * | 2003-03-06 | 2006-07-04 | Microsoft Corporation | Architecture for distributed computing system and automated design, deployment, and management of distributed applications |
| US20040260438A1 (en) * | 2003-06-17 | 2004-12-23 | Chernetsky Victor V. | Synchronous voice user interface/graphical user interface |
| US7424706B2 (en) * | 2003-07-16 | 2008-09-09 | Microsoft Corporation | Automatic detection and patching of vulnerable files |
| RU2336553C2 (ru) * | 2003-08-21 | 2008-10-20 | Майкрософт Корпорейшн | Система и способ для обеспечения приложений, минимизированных с расширенным набором функций |
| US20050091259A1 (en) * | 2003-10-24 | 2005-04-28 | Microsoft Corporation Redmond Wa. | Framework to build, deploy, service, and manage customizable and configurable re-usable applications |
| GB0326626D0 (en) * | 2003-11-14 | 2003-12-17 | Filewave International Holding | A method in a network of the delivery of files |
| US7496910B2 (en) * | 2004-05-21 | 2009-02-24 | Desktopstandard Corporation | System for policy-based management of software updates |
| WO2005119398A1 (en) * | 2004-06-04 | 2005-12-15 | Koninklijke Philips Electronics N.V. | Authentication method for authenticating a first party to a second party |
| US7840911B2 (en) * | 2004-09-27 | 2010-11-23 | Scott Milener | Method and apparatus for enhanced browsing |
| US7650284B2 (en) * | 2004-11-19 | 2010-01-19 | Nuance Communications, Inc. | Enabling voice click in a multimodal page |
| US10162618B2 (en) * | 2004-12-03 | 2018-12-25 | International Business Machines Corporation | Method and apparatus for creation of customized install packages for installation of software |
| US7599915B2 (en) * | 2005-01-24 | 2009-10-06 | At&T Intellectual Property I, L.P. | Portal linking tool |
| JP4802522B2 (ja) * | 2005-03-10 | 2011-10-26 | 日産自動車株式会社 | 音声入力装置および音声入力方法 |
| US20060245354A1 (en) * | 2005-04-28 | 2006-11-02 | International Business Machines Corporation | Method and apparatus for deploying and instantiating multiple instances of applications in automated data centers using application deployment template |
| US20060277482A1 (en) * | 2005-06-07 | 2006-12-07 | Ilighter Corp. | Method and apparatus for automatically storing and retrieving selected document sections and user-generated notes |
| US20070111906A1 (en) * | 2005-11-12 | 2007-05-17 | Milner Jeffrey L | Relatively low viscosity transmission fluids |
| TWI298844B (en) * | 2005-11-30 | 2008-07-11 | Delta Electronics Inc | User-defines speech-controlled shortcut module and method |
| US7925716B2 (en) * | 2005-12-05 | 2011-04-12 | Yahoo! Inc. | Facilitating retrieval of information within a messaging environment |
| US20070240151A1 (en) * | 2006-01-29 | 2007-10-11 | Microsoft Corporation | Enhanced computer target groups |
| US7539795B2 (en) * | 2006-01-30 | 2009-05-26 | Nokia Corporation | Methods and apparatus for implementing dynamic shortcuts both for rapidly accessing web content and application program windows and for establishing context-based user environments |
| US20070297581A1 (en) * | 2006-06-26 | 2007-12-27 | Microsoft Corporation | Voice-based phone system user interface |
| US20090150872A1 (en) * | 2006-07-04 | 2009-06-11 | George Russell | Dynamic code update |
| US7748000B2 (en) * | 2006-07-27 | 2010-06-29 | International Business Machines Corporation | Filtering a list of available install items for an install program based on a consumer's install policy |
| US20080148248A1 (en) * | 2006-12-15 | 2008-06-19 | Michael Volkmer | Automatic software maintenance with change requests |
| US7865952B1 (en) * | 2007-05-01 | 2011-01-04 | Symantec Corporation | Pre-emptive application blocking for updates |
| US8689203B2 (en) * | 2008-02-19 | 2014-04-01 | Microsoft Corporation | Software update techniques based on ascertained identities |
-
2008
- 2008-03-25 US US12/055,291 patent/US20090248397A1/en not_active Abandoned
-
2009
- 2009-02-27 BR BRPI0908169A patent/BRPI0908169A2/pt not_active Application Discontinuation
- 2009-02-27 CN CN2009801105741A patent/CN101978390A/zh active Pending
- 2009-02-27 EP EP09726134A patent/EP2257928A4/en not_active Withdrawn
- 2009-02-27 KR KR1020107021342A patent/KR20110000553A/ko not_active Ceased
- 2009-02-27 JP JP2011501868A patent/JP2011517813A/ja active Pending
- 2009-02-27 WO PCT/US2009/035471 patent/WO2009120450A1/en not_active Ceased
- 2009-02-27 RU RU2010139457/08A patent/RU2504824C2/ru not_active IP Right Cessation
-
2014
- 2014-02-12 JP JP2014024137A patent/JP2014112420A/ja active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000311040A (ja) * | 1998-10-19 | 2000-11-07 | Toshihiko Okabe | データ引き渡し装置、データ引き渡し方法、及びデータ引き渡しプログラムを記録した記録媒体 |
| JP2005521130A (ja) * | 2002-03-15 | 2005-07-14 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | コンピュータ・システム上のドキュメントのプレビュー |
| US20070011258A1 (en) * | 2002-09-18 | 2007-01-11 | Advenix, Corp. (Ca Corporation) | Enhancement of e-mail client user interfaces and e-mail message formats |
| JP2007510188A (ja) * | 2003-08-05 | 2007-04-19 | ヤフー! インコーポレイテッド | コンテキスト・メニューの制御方法およびシステム |
| WO2007142430A1 (en) * | 2006-06-02 | 2007-12-13 | Parang Fish Co., Ltd. | Keyword related advertisement system and method |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2257928A4 (en) | 2011-06-22 |
| RU2504824C2 (ru) | 2014-01-20 |
| KR20110000553A (ko) | 2011-01-03 |
| RU2010139457A (ru) | 2012-03-27 |
| JP2011517813A (ja) | 2011-06-16 |
| CN101978390A (zh) | 2011-02-16 |
| BRPI0908169A2 (pt) | 2015-12-15 |
| US20090248397A1 (en) | 2009-10-01 |
| WO2009120450A1 (en) | 2009-10-01 |
| EP2257928A1 (en) | 2010-12-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2014112420A (ja) | サービス開始技法 | |
| JP5249755B2 (ja) | セマンティックリッチオブジェクトによる動的なユーザエクスペリエンス | |
| US8146110B2 (en) | Service platform for in-context results | |
| US9646611B2 (en) | Context-based actions | |
| US9934782B2 (en) | Automatic performance of user interaction operations on a computing device | |
| WO2019206158A1 (zh) | 一种界面显示方法、装置及设备 | |
| JP5670470B2 (ja) | クイックアクセスユーティリティ | |
| US20110087739A1 (en) | Routing User Data Entries to Applications | |
| JP2012022685A (ja) | データ処理装置およびサイズ変更可能なグラフィカル要素の表示方法 | |
| CN110085222B (zh) | 用于支持语音对话服务的交互装置和方法 | |
| JP2020518905A (ja) | 選択可能なグラフィック要素を介する自動化されたエージェントとの会話の初期化 | |
| JP2015528619A (ja) | 複数のページを有するフォルダを管理するためのデバイス、方法、及びグラフィカルユーザインタフェース | |
| CN105229565A (zh) | 日历项的自动创建 | |
| US20180052573A1 (en) | Interaction with a file storage service through a messaging bot | |
| JP2011516942A (ja) | アプリケーション・ページからのサービス・プレビュー及びアクセス | |
| US20260010564A1 (en) | User activity history experiences powered by a machine learning model | |
| CN108369607A (zh) | 用于个人数字助理的动态反应性上下文策略 | |
| KR20150004817A (ko) | 사용자 인터페이스 웹 서비스 | |
| CN113127671A (zh) | 用于上下文信息显示的统一资源标识符和图像共享 | |
| KR102468164B1 (ko) | 계층화된 콘텐츠 선택 | |
| US10514826B2 (en) | Contextual command bar | |
| US20240184604A1 (en) | Constraining generation of automated assistant suggestions based on application running in foreground |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140314 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140314 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20150512 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150617 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150708 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20160107 |