[go: up one dir, main page]

JP2006092370A - Activity logging apparatus, activity logging method and program - Google Patents

Activity logging apparatus, activity logging method and program Download PDF

Info

Publication number
JP2006092370A
JP2006092370A JP2004278370A JP2004278370A JP2006092370A JP 2006092370 A JP2006092370 A JP 2006092370A JP 2004278370 A JP2004278370 A JP 2004278370A JP 2004278370 A JP2004278370 A JP 2004278370A JP 2006092370 A JP2006092370 A JP 2006092370A
Authority
JP
Japan
Prior art keywords
activity
document
information
content
context
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004278370A
Other languages
Japanese (ja)
Inventor
Yoshihiro Masuda
佳弘 増田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2004278370A priority Critical patent/JP2006092370A/en
Publication of JP2006092370A publication Critical patent/JP2006092370A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an activity logging apparatus capable of later accessing a variety of targets existing within actual activities. <P>SOLUTION: The activity logging apparatus 50 includes an activity content detecting means for detecting information about documents used, participants, and the content of conversations as the content of activities during cooperative work; an activity content storage means 31 for storing the content of the activities detected by the activity content detecting means, in such a way that the content is associated with the time and place that the cooperative work took place; a context creating and retaining means 32 for combining information about objects detected in the same time zone and in the same place to create information about the same context; and a context history retrieval means 33 for creating display information by taking out according to user-designated retrieval conditions the content of the activities stored in the activity content storage means 31. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、活動記録装置、活動記録方法およびプログラムに関する。   The present invention relates to an activity recording apparatus, an activity recording method, and a program.

従来から会議を支援するためのシステムが提案されている。このような会議を支援するための従来技術として以下のようなものが提案されている。特許文献1の共同作業支援システムは、会議中に情報表示装置に表示されたファイルの保管場所情報などを情報表示装置から端末装置に送信することで、会議参加者は終了後に自分の端末装置を持ち帰り、ネットワークに接続したり、ネットワークにつながっている出力機でその情報を参照することで、会議中の資料を取得したり、その資料データに対して操作を行うことができるというものである。   Conventionally, a system for supporting a conference has been proposed. The followings have been proposed as conventional techniques for supporting such a conference. The collaborative work support system of Patent Document 1 transmits information such as the storage location of a file displayed on the information display device during the conference from the information display device to the terminal device, so that the conference participant can use his / her terminal device after completion. By taking home, connecting to a network, or referring to the information with an output device connected to the network, it is possible to acquire materials during the meeting and to operate the material data.

特開2002−49595号公報JP 2002-49595 A

しかしながら、従来、現実の作業空間内での活動は、ビデオ映像などの単一メディアのデータとして記録されていたが、現実世界の活動では、電子文書、紙文書、参加者、使用機器などのさまざまな対象が存在し、ビデオデータの映像からのみでは、それらの対象を直接的に取り出すことはできないという問題があった。このような問題は特許文献1記載のシステムでは解決されない。   However, in the past, activities in real work spaces were recorded as single media data such as video images, but in real-world activities, there are a variety of electronic documents, paper documents, participants, devices used, etc. However, there is a problem that these objects cannot be extracted directly only from video data. Such a problem cannot be solved by the system described in Patent Document 1.

そこで、本発明は上記問題点に鑑みてなされたもので、現実の活動の中に存在する様々な対象へあとで容易にアクセスすることができる活動記録装置、活動記録方法およびプログラムを提供することを目的とする。   Therefore, the present invention has been made in view of the above problems, and provides an activity recording device, an activity recording method, and a program that can easily access various objects existing in actual activities later. With the goal.

上記課題を解決するために、請求項1に記載のように、共同作業の場面において使用した文書、参加者または会話内容に関する情報を活動内容として検出する活動内容検出手段と、前記活動内容検出手段によって検出された活動内容を、前記共同作業のおこなわれた時間と場所に対応付けて保存する活動内容保存手段と、前記活動内容保存手段に保存されている活動内容を、利用者が指定する検索条件に基づいて取り出して表示情報を生成する活動履歴検索手段とを備える活動記録装置である。本発明によれば、現実の活動の中に存在する様々な対象への参照を電子的に記録しておき、利用者が、必要に応じてあとで容易にアクセスすることができる。   In order to solve the above-mentioned problem, as described in claim 1, activity content detecting means for detecting information on a document, a participant or conversation content used in a scene of collaborative work as activity content, and the activity content detecting means The activity content storing means for storing the activity content detected by the association with the time and place where the joint work was performed, and the search for specifying the activity content stored in the activity content storing means by the user It is an activity recording device provided with activity history search means for extracting and generating display information based on conditions. According to the present invention, references to various objects existing in actual activities are recorded electronically, and the user can easily access them later as needed.

本発明の活動記録装置は、請求項2に記載のように、更に、同一時間帯かつ同一場所で検出されたオブジェクトに関する情報をまとめて、同一コンテクストに関する情報として生成するコンテクスト生成手段を備え、前記活動内容保存手段は、当該コンテクスト生成手段によって生成されたコンテクストを単位として活動内容を保持し、前記活動履歴検索手段は、前記活動内容保存手段からコンテクストを単位として過去の活動内容を検索して表示する。本発明によれば、同一時間帯、同一場所の活動内容をまとめて保存しておくことにより、活動履歴の検索が効率的におこなえる。   The activity recording apparatus according to the present invention further includes context generation means for generating information relating to the same context by collecting information relating to objects detected in the same time zone and in the same place, as described in claim 2, The activity content storage means holds the activity contents in units of the context generated by the context generation means, and the activity history search means searches and displays past activity contents from the activity content storage means in units of context. To do. According to the present invention, the activity history can be efficiently searched by collectively storing the activity contents in the same time zone and the same place.

本発明の活動記録装置は、請求項3に記載のように、更に、前記コンテクスト生成保持手段に対してコンテクストの生成を依頼し、前記コンテクスト履歴公開手段によって公開される当該生成されたコンテクスト情報への参照(URI:Uniform Resource Identifiers)を取得して保持するコンテクスト情報取得手段を備える。本発明によれば、個々の利用者自身の意志によって、当該コンテクストに関する情報の取得をおこなうかどうかを決め、生成されたコンテクスト情報を利用者側で保持することができる。   As described in claim 3, the activity recording apparatus of the present invention further requests the context generation and holding means to generate a context, and to the generated context information disclosed by the context history disclosure means. Context information acquisition means for acquiring and holding references (URI: Uniform Resource Identifiers). According to the present invention, it is possible to determine whether or not to acquire information related to the context according to the will of each individual user, and to hold the generated context information on the user side.

前記活動内容検出手段は、請求項4に記載のように、ホワイトボードに書かれた内容をスチルカメラで撮影した画像、ビデオカメラによって撮影された映像、または、マイクによって収録された音声を取得する。本発明によれば、作業空間に設置されたさまざまな種類の入力機器から得られる情報を、活動内容としてコンテクストに対応付けて記録保存し、コンテクスト履歴から検索することで再利用することができる。   As described in claim 4, the activity content detection means acquires an image captured by a still camera of content written on a whiteboard, an image captured by a video camera, or an audio recorded by a microphone. . According to the present invention, information obtained from various types of input devices installed in a work space can be recorded and stored in association with a context as activity contents, and can be reused by searching from the context history.

前記活動内容検出手段は、請求項5に記載のように、所定の生体認証手段(顔認識、網膜スキャン、手の骨格パターン、指紋等)を利用して利用者を識別する。本発明によれば、作業空間内に存在する利用者を、IDカードや特別なセンシング機器を携帯することなく、生体的な特徴をセンサによって認識することで検出し、参加者の情報として時間と場所に対応付けて記録しておき、参加者へ連絡をとる場合などに利用することができる。   As described in claim 5, the activity content detection means identifies a user using predetermined biometric authentication means (face recognition, retinal scan, hand skeleton pattern, fingerprint, etc.). According to the present invention, a user existing in a work space is detected by recognizing a biological characteristic by a sensor without carrying an ID card or a special sensing device, and time and time as participant information is detected. It can be recorded in association with a place and used when contacting participants.

前記活動内容検出手段は、請求項6に記載のように、利用者が作業で使用している電子文書を識別する。本発明によれば、作業空間内で使用されている電子文書(例えば、プレゼンテーション資料)を識別し、当該活動で使用された電子文書として時間と場所に対応付けて記憶しておくことで、会議等の場面で使用された文書を取り出すことができる。   As described in claim 6, the activity content detection means identifies an electronic document used by a user for work. According to the present invention, an electronic document (for example, presentation material) used in a work space is identified and stored in association with time and place as an electronic document used in the activity. Documents used in such situations can be taken out.

前記活動内容検出手段は、請求項7に記載のように、所定の情報処理装置上で手書き入力されたイメージ情報またはテキストによるコメント、および対話型ディスプレイ上に描画された手書きイメージのうちのいずれか一方を取得する。本発明によれば、作業空間内で共有されている電子文書に対して入力された、手書きの注釈、テキストによるコメントなどを時間と場所に対応付けて記憶しておくことにより、会議等の場面で注目した内容を想起することができる。ここで、所定の情報処理装置には例えば、PDAやノートPCなどの携帯機器が含まれる。   The activity content detection means may be any one of image information input by handwriting on a predetermined information processing apparatus or a comment by text and a handwritten image drawn on an interactive display. Get one. According to the present invention, a scene such as a meeting can be obtained by storing handwritten annotations, text comments, etc. input to an electronic document shared in the work space in association with time and place. You can recall the content you noticed in. Here, the predetermined information processing apparatus includes, for example, a portable device such as a PDA or a notebook PC.

本発明の活動記録装置は、請求項8に記載のように、更に、紙文書を出力する際に、出力される紙文書に対して一意のID情報を付与する出力時ID付与手段と、前記紙文書を印刷する際に生成される文書イメージを前記紙文書と同じIDを付与してストレージに保管する文書イメージ保持手段とを備え、前記活動内容検出手段は、前記紙文書中に埋め込まれたID情報を識別して、該IDによって特定される文書イメージ保持手段が保持する該当IDで識別される文書イメージを取り出す。本発明によれば、プリンタから紙文書を出力する際に一意のIDを付与するとともに、その紙文書の文書イメージを、同じIDによってネットワーク経由で取得できるようにしておく。さらに、作業空間で使用された紙文書を紙文書に付与されたIDによって識別し、当該活動で使用された紙文書として時間と場所に対応付けて記憶しておくことで、会議等の場面で使用された文書を取り出すことができる。   The activity recording apparatus according to the present invention, as described in claim 8, further includes an output-time ID assigning unit that assigns unique ID information to the output paper document when the paper document is output; A document image holding means for storing a document image generated when printing a paper document in a storage with the same ID as that of the paper document, and the activity content detecting means embedded in the paper document The ID information is identified, and the document image identified by the corresponding ID held by the document image holding means specified by the ID is taken out. According to the present invention, a unique ID is assigned when a paper document is output from a printer, and a document image of the paper document can be acquired via the network with the same ID. Further, by identifying the paper document used in the work space by the ID given to the paper document and storing it in association with the time and place as the paper document used in the activity, it can be used in a meeting or the like. Used documents can be retrieved.

本発明の活動記録装置は、請求項9に記載のように、更に、紙文書をスキャンインした際に、生成した文書イメージに対して、IDを付与して前記文書イメージ保持手段に格納する入力時ID付与手段を備え、前記活動内容検出手段は、前記出力時ID付与手段によって印刷時に付与された紙文書のIDを検出することで、前記文書イメージ保持手段が保持する該当IDで識別される文書イメージを取り出す。本発明によれば、書籍等の予め紙文書によって提供されている文書の複製を利用可能にすることができる。   The activity recording apparatus according to the present invention is further characterized in that when a paper document is scanned in, an ID is assigned to the generated document image and stored in the document image holding means when the paper document is scanned in. The activity content detection means is identified by the corresponding ID held by the document image holding means by detecting the ID of the paper document given at the time of printing by the output time ID giving means. Retrieve the document image. According to the present invention, it is possible to use a copy of a document, such as a book, previously provided by a paper document.

前記文書イメージ保持手段は、請求項10に記載のように、ネットワーク上に複数分散して配置し、文書イメージ保持手段間に関係を設定し、ピア・ツー・ピア型のネットワークを構成するとともに、利用者によって指定された文書IDに関する文書イメージの検索要求があった場合、文書イメージ保持手段間で検索依頼を転送しあうことによって目的とする文書イメージを取り出す。本発明によれば、検出されたIDに該当する文書イメージを検索する際に、文書イメージが格納されるストレージシステムを意識することなく、検索をおこなうことができるとともに、異なる組織間での文書交換を可能にできる。   A plurality of the document image holding means are arranged in a distributed manner on the network as set forth in claim 10 to set a relationship between the document image holding means to constitute a peer-to-peer network, When there is a document image search request related to the document ID specified by the user, the target document image is taken out by transferring the search request between the document image holding means. According to the present invention, when searching for a document image corresponding to the detected ID, the search can be performed without being aware of the storage system in which the document image is stored, and document exchange between different organizations. Can be made possible.

前記活動内容検出手段は、請求項11に記載のように、現実の作業空間内に設置されている情報提示板上に公開されている情報のIDを取得する。本発明によれば、提示している情報に関するIDを発信しており、そのIDを識別し、そのときの日時や場所に対応付けて保存するとともに、日時や場所の記憶にもとづいて利用者が後でアクセスすることができる。   As described in claim 11, the activity content detection means acquires the ID of information published on an information presentation board installed in an actual work space. According to the present invention, the ID relating to the information being presented is transmitted, the ID is identified, stored in association with the date and time at that time, and the user can also store the date and location based on the memory. You can access it later.

本発明は、請求項12に記載のように、共同作業の場面において使用した文書、参加者、会話内容に関する情報を活動内容として検出する活動内容検出ステップと、前記活動内容検出ステップによって検出された活動内容を、前記共同作業のおこなわれた時間と場所に対応付けて保存する活動内容保存ステップと、前記活動内容保存ステップで保存された活動内容を、指定された検索条件に基づいて取り出して表示情報を生成する活動履歴検索ステップとを含む活動記録方法である。本発明によれば、現実の活動の中に存在する様々な対象への参照を電子的に記録しておき、利用者が、必要に応じてあとで容易にアクセスすることができる。   According to the present invention, an activity content detecting step for detecting information on documents, participants, and conversation content used in a collaborative work scene as activity content, and the activity content detecting step. Activity content storage step for storing the activity content in association with the time and place where the collaborative work was performed, and the activity content stored in the activity content storage step is extracted and displayed based on the specified search condition An activity recording method including an activity history search step for generating information. According to the present invention, references to various objects existing in actual activities are recorded electronically, and the user can easily access them later as needed.

本発明は、請求項13に記載のように、共同作業の場面において使用した文書、参加者、会話内容に関する情報を活動内容として前記共同作業のおこなわれた時間と場所に対応付けて保存する活動内容保存ステップ、前記活動内容保存ステップで保存された活動内容を、指定された検索条件に基づいて取り出して表示情報を生成する活動履歴検索ステップをコンピュータに実行させるプログラムである。本発明によれば、現実の活動の中に存在する様々な対象への参照を電子的に記録しておき、利用者が、必要に応じてあとで容易にアクセスすることができる。   According to the present invention, as described in claim 13, an activity for storing information relating to documents, participants, and conversation contents used in a scene of collaborative work as activity contents in association with the time and place where the collaborative work was performed. A program for causing a computer to execute a content history storing step, and an activity history search step for generating display information by extracting the activity content stored in the activity content storing step based on a specified search condition. According to the present invention, references to various objects existing in actual activities are recorded electronically, and the user can easily access them later as needed.

本発明によれば、現実の活動の中に存在する様々な対象へあとで容易にアクセスすることができる活動記録装置、活動記録方法およびプログラムを提供することができる。   According to the present invention, it is possible to provide an activity recording apparatus, an activity recording method, and a program that can easily access various objects existing in an actual activity later.

以下、本発明を実施するための最良の形態について説明する。図1は本実施形態によるシステムの構成を示す図である。図1に示すように、システム1は、リポジトリサーバ2、コンテクストサーバ3、タブレットPC4、無線LAN基地局5、赤外線発生装置6、RFIDアンテナ内蔵テーブル7、カメラ(ビデオカメラも含む)8、マイク9、スピーカ10、プロジェクタ11、投影スクリーン12、RFIDタグ付き紙文書13、ミーティングキャプチャサーバ14、RFIDタグ認識サーバ15、複合機(MFP)16、演台PC17、IDカード(RFIDカード)18、掲示板用サーバ19、プラズマディスプレイ20およびネットワーク30を含む。   Hereinafter, the best mode for carrying out the present invention will be described. FIG. 1 is a diagram showing the configuration of a system according to the present embodiment. As shown in FIG. 1, the system 1 includes a repository server 2, a context server 3, a tablet PC 4, a wireless LAN base station 5, an infrared generator 6, a table 7 with a built-in RFID antenna, a camera (including a video camera) 8, and a microphone 9. , Speaker 10, projector 11, projection screen 12, paper document 13 with RFID tag, meeting capture server 14, RFID tag recognition server 15, multifunction device (MFP) 16, podium PC 17, ID card (RFID card) 18, bulletin board server 19, including a plasma display 20 and a network 30.

図2は本実施形態による活動記録装置の構成を示す図である。図2に示すように、活動記録装置50は、コンテクストサーバ3、ミーティングキャプチャサーバ14、RFIDタグ認識サーバ15、演台PC17を含む。活動記録装置50は、現実の活動の中に存在する様々な対象への参照を電子的に記録しておき、利用者が、必要に応じてあとでアクセスすることができるようにするものである。ミーティングキャプチャサーバ14、RFIDタグ認識サーバ15、演台PC17は、活動内容検出手段である。この活動内容検出手段は、会議等の共同作業の場面において、使用した文書、参加者、会話内容などに関する情報を活動内容として検出するものである。   FIG. 2 is a diagram showing the configuration of the activity recording apparatus according to the present embodiment. As shown in FIG. 2, the activity recording apparatus 50 includes a context server 3, a meeting capture server 14, an RFID tag recognition server 15, and a podium PC 17. The activity recording device 50 electronically records references to various objects existing in the actual activity so that the user can access them later if necessary. . The meeting capture server 14, the RFID tag recognition server 15, and the podium PC 17 are activity content detection means. This activity content detection means detects information relating to used documents, participants, conversation content, etc. as activity content in a joint work such as a meeting.

リポジトリサーバ2は、各種機器上で扱われる文書の実体を保存するリポジトリである。図1では、複数のリポジトリサーバ2がネットワーク30上に置かれている。リポジトリサーバ2上の文書はURLによって特定し、取り出すことができる。コンテクストサーバ3は、図2に示すように、活動内容保存手段31、コンテクスト生成保持手段32、コンテクスト履歴検索手段33、出力時ID付与手段34、入力時ID付与手段35および文書イメージ保持手段36を含む。   The repository server 2 is a repository that stores document entities handled on various devices. In FIG. 1, a plurality of repository servers 2 are placed on the network 30. A document on the repository server 2 can be specified and retrieved by a URL. As shown in FIG. 2, the context server 3 includes an activity content storage unit 31, a context generation and holding unit 32, a context history search unit 33, an output-time ID adding unit 34, an input-time ID adding unit 35, and a document image holding unit 36. Including.

活動内容保存手段31は、活動内容検出手段であるミーティングキャプチャーサーバ14、RFID認識サーバ15および演台PC17によって検出された活動内容(共有文書、参加者、会話内容等)を、当該共同作業のおこなわれた時間と場所に対応付けて保存する。コンテクスト生成保持手段32は、同一時間帯かつ同一場所で検出されたオブジェクトに関する情報をまとめて、同一コンテクストに関する情報として生成する。活動内容保存手段31は、当該コンテクスト生成保持手段32によって生成されたコンテクストを単位として活動内容を保持する。   The activity content storage means 31 performs the joint work on the activity contents (shared documents, participants, conversation contents, etc.) detected by the meeting capture server 14, the RFID recognition server 15 and the podium PC 17, which are activity content detection means. Save it in association with the time and place. The context generation and holding means 32 collects information related to the objects detected in the same time zone and the same place, and generates the information related to the same context. The activity content storage unit 31 holds the activity content in units of the context generated by the context generation and holding unit 32.

コンテクスト履歴検索手段33は、活動内容保存手段21に保存されている活動内容(共有文書、参加者、会話内容等)を、利用者が指定する検索条件に基づいて取り出して表示する。これにより、現実の活動の中に存在する様々な対象への参照を電子的に記録しておき、利用者が、必要に応じてあとでアクセスできるようにする。また、コンテクスト履歴検索手段33は、活動内容保存手段31からコンテクストを単位として過去の活動内容を検索して表示する。これにより、同一時間帯、同一場所の活動内容をまとめて保存しておくことにより、活動履歴の検索が効率的におこなえる。   The context history search means 33 extracts and displays the activity contents (shared documents, participants, conversation contents, etc.) stored in the activity content storage means 21 based on the search conditions designated by the user. This electronically records references to various objects present in the actual activity so that the user can later access them as needed. Further, the context history search means 33 searches and displays past activity contents from the activity content storage means 31 in units of contexts. Thereby, the activity history can be efficiently searched by storing the activity contents in the same time zone and the same place together.

出力時ID付与手段34は、紙文書を出力する際に、出力される紙文書に対して一意のID情報を付与する。このとき、文書イメージ保持手段36は、当該紙文書を印刷する際に生成される文書イメージを出力文書と同じIDを付与してストレージに保管する。活動内容検出手段であるRFIDタグ認識サーバ15は、紙文書中に埋め込まれたID情報を識別して、そのIDによって特定される文書イメージ保持手段36が保持する該当IDで識別される文書イメージを取り出す。これにより、プリンタから紙文書を出力する際に一意のIDを付与するとともに、その紙文書の文書イメージを、同じIDによってネットワーク経由で取得できるようにしておく。さらに、作業空間で使用された紙文書を紙文書に付与されたIDによって識別し、当該活動で使用された紙文書として時間と場所に対応付けて記憶しておくことで、会議等の場面で使用された文書を取り出すことができる。   The output-time ID assigning unit 34 assigns unique ID information to the output paper document when outputting the paper document. At this time, the document image holding means 36 stores the document image generated when printing the paper document in the storage with the same ID as the output document. The RFID tag recognition server 15 as the activity content detection means identifies the ID information embedded in the paper document, and selects the document image identified by the corresponding ID held by the document image holding means 36 specified by the ID. Take out. Thus, a unique ID is assigned when a paper document is output from the printer, and a document image of the paper document can be acquired via the network with the same ID. Further, by identifying the paper document used in the work space by the ID given to the paper document and storing it in association with the time and place as the paper document used in the activity, it can be used in a meeting or the like. Used documents can be retrieved.

入力時ID付与手段35は、紙文書をスキャンインした際に、生成した文書イメージに対して、一意のIDを付与して文書イメージ保持手段36に格納する。活動内容検出手段であるRFIDタグ認識サーバ15は、出力時ID付与手段34によって印刷時に付与された紙文書のIDを検出することで、文書イメージ保持手段36が保持する該当IDで識別される文書イメージを取り出す。紙文書をスキャンインする際に一意のIDを付与するとともに、その紙文書の文書イメージを、同じIDによってネットワーク経由で取得できるようにしておく。さらに、当該スキャンインされて保存されている文書を、当該IDが付与された紙文書として出力し、作業空間で使用された紙文書を当該紙文書に付与されたIDによって識別し、当該活動で使用された紙文書として時間と場所に対応付けて記憶しておくことで、会議等の場面で使用された文書を取り出すことができる。これにより、書籍等の予め紙文書によって提供されている文書の複製を利用可能にする。   The input ID assigning means 35 assigns a unique ID to the generated document image and stores it in the document image holding means 36 when the paper document is scanned in. The RFID tag recognition server 15 as the activity content detection means detects the ID of the paper document assigned at the time of printing by the output ID assignment means 34, thereby identifying the document identified by the corresponding ID held by the document image holding means 36. Take out the image. When a paper document is scanned in, a unique ID is assigned, and a document image of the paper document can be acquired via the network with the same ID. Further, the scanned and stored document is output as a paper document to which the ID is assigned, and the paper document used in the work space is identified by the ID assigned to the paper document. By storing the used paper document in association with the time and place, the document used in a meeting or the like can be taken out. This makes it possible to use a copy of a document such as a book provided in advance as a paper document.

文書イメージ保持手段36は、ネットワーク上に複数分散して配置し、文書イメージ保持手段間に関係を設定し、ピア・ツー・ピア型のネットワークを構成するとともに、利用者によって指定された文書IDに関する文書イメージの検索要求があった場合、文書イメージ保持手段間で検索依頼を転送しあうことによって目的とする文書イメージを取り出すようにしてもよい。ID付き紙文書の識別による活動記録において、紙文書に付与されたIDと同じIDによって取り出される文書イメージは、ネットワーク上に分散して存在するストレージ上に格納され、指定されたIDに対してストレージ間で検索を実行することによって取り出すことができる。これにより、活動内容検出手段であるRFID認識サーバ15は、検出されたIDに該当する文書イメージを検索する際に、文書イメージが格納されるストレージシステムを意識することなく、検索をおこなうことができるとともに、異なる組織間での文書交換を可能にする。   A plurality of document image holding means 36 are arranged in a distributed manner on the network, set a relationship between the document image holding means, constitute a peer-to-peer network, and relate to a document ID designated by the user. When there is a document image search request, a target document image may be taken out by transferring a search request between the document image holding means. In an activity record based on identification of a paper document with an ID, a document image extracted by the same ID as the ID assigned to the paper document is stored in a storage distributed on the network, and is stored for the specified ID. Can be retrieved by performing a search between them. Thereby, the RFID recognition server 15 as the activity content detection means can perform a search without being aware of the storage system in which the document image is stored when searching for the document image corresponding to the detected ID. At the same time, it enables document exchange between different organizations.

タブレットPC4は、赤外線受光部、無線アンテナを内蔵し、無線LAN基地局5や有線ネットワークを介してネットワーク30に接続されている。無線LAN基地局5は、作業空間内の無線LAN基地局となる。赤外線発生装置6は、作業空間固有のIDを発信する。タブレットPC4は、赤外線発生装置6からの発信IDを、赤外線受光部を介して受信することで、作業空間を認識する。   The tablet PC 4 includes an infrared light receiving unit and a wireless antenna, and is connected to the network 30 via the wireless LAN base station 5 or a wired network. The wireless LAN base station 5 is a wireless LAN base station in the work space. The infrared ray generator 6 transmits an ID unique to the work space. The tablet PC 4 recognizes the work space by receiving the transmission ID from the infrared ray generating device 6 via the infrared ray receiving unit.

テーブル7に内蔵されたRFIDアンテナ7aは、各作業空間に配置されるRFIDタグ認識サーバ15に接続されている。利用者が携帯しているタブレットPC4、利用者のIDカード18および紙文書13には、RFIDタグが貼付されている。RFIDタグ認識サーバ15は、作業空間内に配置されたRFIDアンテナ7aを介して、タブレットPC4、RFIDタグ付き紙文書13および利用者が持つIDカード18の存在を認識し、作業空間内での利用者の活動内容を検出する。   The RFID antenna 7a built in the table 7 is connected to an RFID tag recognition server 15 arranged in each work space. RFID tags are affixed to the tablet PC 4 carried by the user, the user ID card 18 and the paper document 13. The RFID tag recognition server 15 recognizes the presence of the tablet PC 4, the RFID-tagged paper document 13, and the ID card 18 possessed by the user via the RFID antenna 7 a disposed in the work space, and uses it in the work space. The activity of a person.

また、タブレットPC4(コンテクスト情報取得手段)は、利用者が、ネットワーク経由でコンテクスト生成保持手段32に対してコンテクストの生成を依頼し、コンテクスト履歴検索手段33によって公開される当該生成されたコンテクスト情報への参照(URI)を取得して保持する。これにより、個々の利用者自身の意志によって、当該コンテクストに関する情報の取得をおこなうかどうかを決め、生成されたコンテクスト情報を利用者側で保持することができる。   In the tablet PC 4 (context information acquisition means), the user requests the context generation / holding means 32 to generate a context via the network, and the generated context information is released by the context history search means 33. The reference (URI) of is acquired and held. Accordingly, it is possible to determine whether or not to acquire information related to the context according to the will of each individual user, and the generated context information can be held on the user side.

また、タブレットPC(活動内容検出手段)4は、作業空間内において、タブレットPC4などの携帯機器上で手書き入力されたイメージ情報やテキストによるコメント、または、対話型大型ディスプレイ上に描画された手書きイメージを取得する。これにより、会議等の場面で注目した内容を想起することができる。タブレットPC4のディスプレイ上にはタッチパネルが張ってあり、ペンを用いて入力した手書きの画像イメージが、表示文書上に書き込むような感覚で取り込まれ、自動的にデータとして格納されます。   In addition, the tablet PC (activity content detection means) 4 is a handwritten image drawn on an interactive large display or image information and text comments input by hand on a portable device such as the tablet PC 4 in the work space. To get. As a result, it is possible to recall the content that was noticed in a meeting or the like. A touch panel is placed on the tablet PC4 display, and handwritten image images entered using a pen are captured as if they were written on a displayed document and automatically stored as data.

ミーティングキャプチャサーバ14は、カメラ(ビデオカメラ)8、マイク9およびスピーカ110等を制御して、作業空間内の映像および音声情報を取得する。このミーティングキャプチャサーバ14は、作業空間内において、壁面のホワイトボードに書かれた内容をカメラ8で撮影した画像、または、ビデオカメラ8によって撮影された映像、または、マイク9によって収録された音声などを取得する。このように、作業空間内において、ホワイトボードに書かれた画像、スチルカメラ、ビデオカメラによって撮影された映像、マイクによって収録された音声など作業空間に設置されたさまざまな種類の入力機器から得られる情報を、活動内容としてコンテクストに対応付けて記録保存することで、コンテクスト履歴から検索することで再利用することができる。複合機(MFP)16は、ノートPC4等からの要求に応じて紙文書13のプリント等を行う。   The meeting capture server 14 controls the camera (video camera) 8, the microphone 9, the speaker 110, and the like, and acquires video and audio information in the work space. This meeting capture server 14 is an image obtained by photographing the content written on the whiteboard on the wall surface with the camera 8, the video photographed by the video camera 8, or the sound recorded by the microphone 9 in the work space. To get. In this way, in the workspace, it can be obtained from various types of input devices installed in the workspace, such as images written on a whiteboard, still camera, video shot by a video camera, audio recorded by a microphone, etc. The information can be reused by searching from the context history by recording and saving the information in association with the context as the activity content. The multifunction peripheral (MFP) 16 prints the paper document 13 in response to a request from the notebook PC 4 or the like.

演台PC17は、プロジェクタ11に接続され、プロジェクタ11から投影スクリーン12に対して資料等を投影することができる。演台PC17には、スライドショーをおこなうサービスがインストールされており、ネットワーク経由でスライドショーサービスを起動してプロジェクタ11から投影する。また、会議室に設置された演台PC17上には、プレゼンテーションで使用された文書を検出する共有文書検出機構が動作している。つまり、演台PC17は、作業空間内で使用されている電子文書(例えば、プレゼンテーション資料)を識別し、コンテクストサーバ3で、当該活動で使用された電子文書として時間と場所に対応付けて記憶することで、会議等の場面で使用された文書を取り出すことができる。   The podium PC 17 is connected to the projector 11 and can project data and the like from the projector 11 onto the projection screen 12. A service for performing a slide show is installed on the podium PC 17, and the slide show service is activated via the network and projected from the projector 11. In addition, a shared document detection mechanism for detecting a document used in the presentation operates on the podium PC 17 installed in the conference room. That is, the podium PC 17 identifies electronic documents (for example, presentation materials) used in the work space, and stores them in the context server 3 in association with time and place as electronic documents used in the activity. Thus, the document used in a meeting or the like can be taken out.

掲示板用サーバ19は、プラズマディスプレイ20を制御する。プラズマディスプレイ20は、赤外線受信機(不図示)を備えている。掲示板用サーバ(活動内容検出手段)19は、現実の作業空間内に設置されているプラズマディスプレイ(情報提示板)上に公開されている情報のIDを取得する。利用者の移動先の作業空間に設置されているプラズマディスプレイ(例えば掲示板、案内板等の情報提示装置)20によって公開されている情報を識別し、個人の行動記録として保存してゆくことができる。プラズマディスプテイ20は、提示している情報に関するIDを発信しており、そのIDを識別し、そのときの日時や場所に対応付けて活動内容保存手段31に保存するとともに、日時や場所の記憶にもとづいて利用者が後でアクセスすることができる。   The bulletin board server 19 controls the plasma display 20. The plasma display 20 includes an infrared receiver (not shown). The bulletin board server (activity content detection means) 19 acquires the ID of information published on a plasma display (information presentation board) installed in the actual work space. Information disclosed by a plasma display (for example, an information presentation device such as a bulletin board or a guide board) 20 installed in the work space of the user's destination can be identified and stored as a personal action record. . The plasma display 20 transmits an ID related to the presented information, identifies the ID, stores it in the activity content storage means 31 in association with the date and time at that time, and stores the date and location. Based on the above, the user can access later.

また、上記で活動検出手段として機能するRFIDタグ認識サーバ15は、RFIDアンテナ7aを介してIDタグを認識するようにしていたが、RFIDタグ認識サーバ15を、顔認識、網膜スキャン、手の骨格パターン、指紋等を利用して利用者を識別する生体認証手段として機能させてもよい。これにより、作業空間内に存在する利用者を、IDカードや特別なセンシング機器を携帯することなく、生体的な特徴をセンサによって認識することで検出し、参加者の情報として時間と場所に対応付けて記録しておき、参加者へ連絡をとる場合などに利用することができる。   Further, the RFID tag recognition server 15 functioning as the activity detecting means described above recognizes the ID tag via the RFID antenna 7a. However, the RFID tag recognition server 15 is not limited to the face recognition, the retinal scan, and the hand skeleton. You may make it function as a biometrics authentication means which identifies a user using a pattern, a fingerprint, etc. This makes it possible to detect users who exist in the work space by recognizing biological features with sensors without carrying ID cards or special sensing devices, and respond to time and place as participant information You can use it when you want to contact participants.

次に、本実施形態のソフトウェアが処理するデータ構造について説明する。図3はコンテクストサーバ3のデータ構造を示す図である。コンテクストサーバ3上で動作するソフトウェアは、図3に示す構造をした「コンテクストサーバ101」データを保持する。   Next, a data structure processed by the software of this embodiment will be described. FIG. 3 shows the data structure of the context server 3. The software operating on the context server 3 holds “context server 101” data having the structure shown in FIG.

図4は仮想リポジトリのデータ構造を示す図である。リポジトリサーバ2上で動作するソフトウェアは、図4に示す構造をした「リポジトリサーバ111」データを保持する。   FIG. 4 shows the data structure of the virtual repository. The software operating on the repository server 2 holds “repository server 111” data having the structure shown in FIG.

[コンテクストサーバ上での処理]
次に、コンテクストサーバ3上での処理について説明する。図5はコンテクストサーバ3上での処理フローチャートである。図6(a)は文書の場合のオブジェクト検出メッセージ151を示す図、(b)は人の場合のオブジェクト検出メッセージ152を示す図である。図7はコンテクストサーバ3が提供する制御ユーザインタフェース201を示す図である。コンテクストサーバ3は、Webサーバを備えており、制御ユーザインタフェース201をHTTP経由で提供する(ステップS101)。ユーザは、無線LANに接続されたタブレットPC4を用いて、当該コンテクストサーバ3が提供する制御ユーザインタフェース(Javaアプレット(Java:登録商標))201を、ネットワークを介してWebブラウザ上に呼び出して表示する。制御ユーザインタフェースは、図7のような概観のユーザインタフェースとして表示される。制御ユーザインタフェース201を表示する利用者のタブレットPC4は、作業空間内に設置された赤外線発生装置6からのID情報を取得して、当該タブレットPC4が存在する作業空間を認識する。
[Processing on the context server]
Next, processing on the context server 3 will be described. FIG. 5 is a process flowchart on the context server 3. 6A shows an object detection message 151 in the case of a document, and FIG. 6B shows an object detection message 152 in the case of a person. FIG. 7 is a diagram showing a control user interface 201 provided by the context server 3. The context server 3 includes a Web server and provides the control user interface 201 via HTTP (step S101). Using the tablet PC 4 connected to the wireless LAN, the user calls and displays the control user interface (Java applet (Java: registered trademark)) 201 provided by the context server 3 on the Web browser via the network. . The control user interface is displayed as an overview user interface as shown in FIG. The user's tablet PC 4 displaying the control user interface 201 acquires ID information from the infrared ray generator 6 installed in the work space, and recognizes the work space in which the tablet PC 4 is present.

一方、制御ユーザインタフェース201上で、ユーザが「コンテクスト記録開始」ボタン202を押すと、コンテクストサーバ3内に図3に示すデータ構造をした「コンテクスト102」が生成され、当該タブレットPC4が認識している現在位置IDが「現在位置ID」に、そのときの日時が「開始日時」にそれぞれ設定される(ステップS102)。コンテクストサーバ3は、演台PC17やRFIDテーブル7に接続されたRFIDタグ認識サーバ15から送信されてくる「オブジェクト検出メッセージ151、152」を受信し、当該メッセージ中に含まれる文書や利用者に関する情報に基づき、「共有文書103」または「参加者104」の形で検出されたオブジェクトに関する情報を記録してゆく(ステップS103)。   On the other hand, when the user presses the “context recording start” button 202 on the control user interface 201, the “context 102” having the data structure shown in FIG. 3 is generated in the context server 3, and the tablet PC 4 recognizes it. The current position ID is set to “current position ID”, and the date and time at that time is set to “start date and time” (step S102). The context server 3 receives the “object detection messages 151, 152” transmitted from the podium PC 17 and the RFID tag recognition server 15 connected to the RFID table 7, and stores the information about the document and the user included in the message. Based on this, information about the object detected in the form of “shared document 103” or “participant 104” is recorded (step S103).

コンテクストサーバ3は、常にオブジェクト検出メッセージ151、152の受信待ち状態にあり、オブジェクト検出メッセージ151、152を受信すると、そのメッセージ中に含まれている情報に基づいて「共有文書103」、「参加者104」のデータを生成して登録する。利用者が、コンテクストサーバ3の制御ユーザインタフェース201上で「コンテクスト記録終了」ボタン203を選択すると、「コンテクスト102」の「終了日時」にそのときの日時が設定される(ステップS104)。   The context server 3 is always waiting to receive the object detection messages 151 and 152. When the context detection server 151 and 152 receive the object detection messages 151 and 152, the “shared document 103” and “participant” are based on the information included in the messages. 104 "data is generated and registered. When the user selects the “context recording end” button 203 on the control user interface 201 of the context server 3, the date and time at that time is set in the “end date and time” of the “context 102” (step S104).

[コンテクストサーバに格納されたコンテクスト情報の検索]
図8はコンテクストサーバ3が提供するコンテクスト検索ユーザインタフェース301である。コンテクストサーバ3は、Webサーバを備えており、コンテクスト検索ユーザインタフェース301をHTTP経由で提供する。ユーザは、無線LANに接続されたタブレットPC4を用いて、当該コンテクストサーバ3が提供するコンテクスト検索ユーザインタフェース(Javaアプレット(Java:登録商標))301をWebブラウザ上に呼び出して表示する。コンテクスト検索ユーザインタフェース301は、図14のような概観のユーザインタフェースとして表示される。
[Search context information stored in the context server]
FIG. 8 shows a context search user interface 301 provided by the context server 3. The context server 3 includes a web server and provides a context search user interface 301 via HTTP. Using the tablet PC 4 connected to the wireless LAN, the user calls and displays a context search user interface (Java applet (Java: registered trademark)) 301 provided by the context server 3 on the Web browser. The context search user interface 301 is displayed as an overview user interface as shown in FIG.

コンテクスト検索ユーザインタフェース301上では、コンテクストサーバ3に保存されている過去の「コンテクスト」を、日時、場所、参加者などの情報に基づいて検索することができる。図8では、日時、場所を指定して「検索」ボタン302を押すと、該当するコンテクストの一覧が表示され、その一覧の中から、コンテクストを選択して、ポップアップメニューの中から「コンテクスト表示303」を選択すると、Webブラウザが起動され、該当するコンテクストのページ(「コンテクスト」の「URL」が保持)が表示される。   On the context search user interface 301, past “contexts” stored in the context server 3 can be searched based on information such as date and time, place, and participants. In FIG. 8, when the date and place are specified and the “Search” button 302 is pressed, a list of relevant contexts is displayed. A context is selected from the list, and a “context display 303” is selected from the pop-up menu. When “” is selected, the Web browser is activated and a corresponding context page (which holds “URL” of “context”) is displayed.

またさらに、利用者は、コンテクスト検索ユーザインタフェース301が提供する上記コンテクスト一覧上で選択されたコンテクストに対して、ポップアップメニュー上から「電子メール304」を選択すると、当該コンテクストに関するWebページのURLを含んだメッセージを、指定された宛先に送信することを可能にする。ここで、指定された宛先は、特定のユーザである場合もあれば、メーリングリストとして指定されるグループや、オンラインディスカッションシステム、電子掲示板のような電子メールでメッセージを投稿可能なシステムの場合もある。   Furthermore, when the user selects “e-mail 304” from the pop-up menu for the context selected on the context list provided by the context search user interface 301, the URL of the Web page related to the context is included. Allows messages to be sent to a specified destination. Here, the designated destination may be a specific user, or may be a group that can be posted as a mailing list, an online discussion system, or an electronic bulletin board such as an electronic bulletin board.

[MFD上での処理]
次に、MFD16上での処理について説明する。図9はMFD16上での処理フローチャートである。MFD16上でスキャンされた文書イメージは、MFD16が備えるストレージ上に保存される(ステップS201)。そして、ハッシュ関数(RSA−1等の暗号学的ハッシュ関数)を用いて、当該文書イメージをキーとするハッシュ値を計算し(ステップS202)、その結果得られた値をネットワーク上で一意の文書IDとして対応付けて、リポジトリサーバ2の「ドキュメント112」が生成され、その「文書ID」に上記計算で求められたID、MFD16上に保存された文書のアドレスが「データ格納先」に登録される(ステップS203)。
[Processing on MFD]
Next, processing on the MFD 16 will be described. FIG. 9 is a processing flowchart on the MFD 16. The document image scanned on the MFD 16 is stored on the storage provided in the MFD 16 (step S201). Then, a hash value using the document image as a key is calculated using a hash function (a cryptographic hash function such as RSA-1) (step S202), and the obtained value is used as a unique document on the network. The “document 112” of the repository server 2 is generated in association with the ID, and the ID obtained by the above calculation and the address of the document stored on the MFD 16 are registered in the “data storage destination”. (Step S203).

印刷用紙には、小型RFIDインレットが埋め込まれており、上記スキャンされた文書イメージを印刷する際には、MFD16の排出部に設けられたRFIDライタによって当該文書イメージに与えられているIDが書き込まれる。MFD16は、当該文書イメージに対して計算されたハッシュ値を保持している。   A small RFID inlet is embedded in the printing paper, and when printing the scanned document image, an ID given to the document image is written by the RFID writer provided in the discharge unit of the MFD 16. . The MFD 16 holds a hash value calculated for the document image.

[演台PCの共有電子文書検出機構での処理]
次に、演台PC17の共有電子文書検出機構の処理について説明する。会議室に設置された演台PC17上には、プレゼンテーションで使用された文書を検出する共有文書検出機構が動作している。演台PC17上で利用者がプレゼンテーションをおこなうと、そのプレゼンテーションで使用された資料が、演台PC17内に保存されるとともに、ハッシュ関数(RSA−1等の暗号学的ハッシュ関数)を用いて、当該文書イメージをキーとするハッシュ値を計算し、その結果得られた値をネットワーク上で一意の文書IDとして対応付けて、リポジトリサーバ2の「ドキュメント112」が生成され、その「文書ID」に上記計算で求められたID、MFD16上に保存された文書のアドレスが「データ格納先」に登録される。
[Processing by shared electronic document detection mechanism of podium PC]
Next, processing of the shared electronic document detection mechanism of the podium PC 17 will be described. A shared document detection mechanism for detecting a document used in the presentation operates on the podium PC 17 installed in the conference room. When a user makes a presentation on the pedestal PC 17, the material used in the presentation is stored in the pedestal PC 17, and the document is used by using a hash function (a cryptographic hash function such as RSA-1). A hash value with an image as a key is calculated, and the obtained value is associated as a unique document ID on the network to generate “document 112” of the repository server 2, and the above calculation is performed on the “document ID”. The ID obtained in step 1 and the address of the document stored on the MFD 16 are registered in the “data storage destination”.

さらに、演台PC17上で文書が指定され、文書エディタ、またはスライドエディタ(スライドビューワを含む)が起動されると、当該指定された文書が共有電子文書検出機構によって検出され、当該検出された電子文書のアドレスが、オブジェクト検出メッセージ151、152として、コンテクストサーバ3に送信される。   Further, when a document is designated on the podium PC 17 and a document editor or a slide editor (including a slide viewer) is activated, the designated document is detected by the shared electronic document detection mechanism, and the detected electronic document is detected. Are sent to the context server 3 as object detection messages 151 and 152.

[リポジトリサーバでの文書検索処理]
次にリポジトリサーバ2での処理について説明する。図10はリポジトリ間での文書の検索フローを示す図である。図11は文書リポジトリ間での検索処理を説明するための図である。個々の文書リポジトリは、他の文書リポジトリとの間に設定される連携関係を保持している。文書リポジトリに文書IDと共に検索要求が与えられると、当該文書リポジトリ間の連携関係をたどることによって、該当する文書に関する「文書検索要求」が文書リポジトリA乃至β間で伝播してゆく。図10では、文書リポジトリ2Cは「文書検索要求」を受信すると、「文書検索要求」を他の文書リポジトリに転送する。文書検索要求メッセージを受け取った文書リポジトリは保存されている文書を検索し、該当するIDの文書が発見されると、検索要求中に含まれる報告先に該当する文書のコンテンツを送信する(発見応答)。
[Document search processing on repository server]
Next, processing in the repository server 2 will be described. FIG. 10 is a diagram showing a document search flow between repositories. FIG. 11 is a diagram for explaining search processing between document repositories. Each document repository holds a linkage relationship set with other document repositories. When a search request is given to the document repository together with the document ID, the “document search request” related to the corresponding document is propagated between the document repositories A to β by following the cooperative relationship between the document repositories. In FIG. 10, when receiving the “document search request”, the document repository 2C transfers the “document search request” to another document repository. Upon receiving the document search request message, the document repository searches the stored document, and when the document with the corresponding ID is found, the content of the document corresponding to the report destination included in the search request is transmitted (discovery response). ).

[ミーティングキャプチャサーバでの処理]
次に、ミーティングキャプチャサーバ14での処理について説明する。ミーティングキャプチャサーバ14は、現在位置を保持しており、カメラ8とマイク9から入力した映像と音声に関する情報を、活動検出メッセージとしてコンテクストサーバ3に送信する。ここでは、図7に示す制御パネル上から「ミーティングキャプチャ開始」ボタン204が押されてミーティングのキャプチャが開始すると、ミーティングキャプチャ開始の通知がコンテクストサーバ3に送信されて、「キャプチャ映像」のデータが生成され、「開始時刻」にその時の日時が設定される。
[Processing at Meeting Capture Server]
Next, processing in the meeting capture server 14 will be described. The meeting capture server 14 holds the current position, and transmits information related to video and audio input from the camera 8 and the microphone 9 to the context server 3 as an activity detection message. Here, when the “meeting capture start” button 204 is pressed from the control panel shown in FIG. 7 and the capture of the meeting starts, a notification of the start of the meeting capture is transmitted to the context server 3 and the data of “capture video” is stored. The date and time is set in the “start time”.

「コンテクストキャプチャ終了」ボタン205が押されると、「キャプチャ映像」の「終了時刻」にそのときの時刻が設定され、当該ミーティングキャプチャーサーバ14内にビデオデータとして保存された記録映像のアドレス(URL)が、オブジェクト検出メッセージとして、コンテクストサーバ3に送信される。なお、ここでミーティングキャプチャサーバ14は、Webサーバを備えており、キャプチャしたビデオ映像をネットワーク経由で配信できるようになっている。   When the “context capture end” button 205 is pressed, the current time is set in the “end time” of the “capture video”, and the address (URL) of the recorded video stored as video data in the meeting capture server 14 Is transmitted to the context server 3 as an object detection message. Here, the meeting capture server 14 includes a Web server so that the captured video image can be distributed via the network.

[RFIDテーブル上での処理]
次に、RFIDテービル7上での処理について説明する。RFIDテーブル7上で認識されたIDに関する情報をオブジェクト検出メッセージ151、152として、コンテクストサーバ3に送信する。RFIDテーブル7上で認識されるIDには、参加者が携帯するIDカード18に埋め込まれたIDと、紙文書13に埋め込まれたIDの2種類が存在する。これらIDは、RFIDタグとして一意のコード情報と書き込み可能な領域を持っており、書き込み可能な領域に書かれた識別情報(人であるか文書であるかの識別情報)に基づいて、人であるか紙文書であるかが識別される。
[Processing on RFID table]
Next, processing on the RFID table 7 will be described. Information relating to the ID recognized on the RFID table 7 is transmitted to the context server 3 as object detection messages 151 and 152. There are two types of IDs recognized on the RFID table 7, that is, an ID embedded in the ID card 18 carried by the participant and an ID embedded in the paper document 13. These IDs have unique code information and writable areas as RFID tags, and based on identification information (identification information on whether a person or a document) written in the writable area, Whether it is a paper document or not is identified.

以上本実施形態によれば、現実の活動の中に存在する様々な対象への参照を電子的に記録しておき、利用者が、必要に応じてあとでアクセスすることができるようにするものである。   As described above, according to the present embodiment, references to various objects existing in actual activities are recorded electronically so that the user can access them later as needed. It is.

なお、本発明による活動記録方法は、活動記録装置50により実現される。また、プログラムをハードディスク装置や、CD−ROM、DVDまたはフレキシブルディスクなどの可搬型記憶媒体等からインストールし、または通信回路からダウンロードし、例えばCPUがこのプログラムを実行することで、各ステップが実現される。   The activity recording method according to the present invention is realized by the activity recording device 50. Each step is realized by installing the program from a hard disk device, a portable storage medium such as a CD-ROM, DVD or flexible disk, or downloading from a communication circuit, and the CPU executes the program, for example. The

このプログラムは、共同作業の場面において使用した文書、参加者、会話内容に関する情報を活動内容として前記共同作業のおこなわれた時間と場所に対応付けて保存する活動内容保存ステップ、前記活動内容保存ステップで保存された活動内容を、指定された検索条件に基づいて取り出して表示情報を生成する活動履歴検索ステップをコンピュータに実行させる。なお、コンテクスト履歴検索手段33が活動履歴検索手段に、コンテクスト生成保持手段32がコンテクスト生成手段に、タブレットPC4がコンテクスト情報取得手段にそれぞれ対応する。   This program includes an activity content storing step for storing information relating to documents, participants, and conversation contents used in the scene of collaborative work as activity contents in association with the time and place where the collaborative work was performed, and the activity content storing step. The activity history search step for retrieving the activity content stored in step (b) and generating display information based on the designated search condition is executed by the computer. The context history search means 33 corresponds to the activity history search means, the context generation holding means 32 corresponds to the context generation means, and the tablet PC 4 corresponds to the context information acquisition means.

以上本発明の好ましい実施例について詳述したが、本発明は係る特定の実施例に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形、変更が可能である。なお、活動内容検出手段は、共同作業の場面において、使用した文書、参加者、会話内容などに関する情報を活動内容として検出するものであればよく、上述で説明したRFIDタグ認識サーバ11および演台PC13等に限定されるものではない。   Although the preferred embodiments of the present invention have been described in detail above, the present invention is not limited to the specific embodiments, and various modifications, within the scope of the gist of the present invention described in the claims, It can be changed. It should be noted that the activity content detection means may be any device that detects information on the used documents, participants, conversation content, etc. as activity content in the joint work scene, and the RFID tag recognition server 11 and the podium PC 13 described above. It is not limited to such as.

本実施形態によるシステムの構成を示す図である。It is a figure which shows the structure of the system by this embodiment. 本実施形態による活動記録装置の構成を示す図である。It is a figure which shows the structure of the activity recording device by this embodiment. コンテクストサーバのデータ構造を示す図である。It is a figure which shows the data structure of a context server. リポジトリのデータ構造を示す図である。It is a figure which shows the data structure of a repository. コンテクストサーバ上での処理フローチャートである。It is a processing flowchart on a context server. (a)は文書の場合のオブジェクト検出メッセージを示す図、(b)は人の場合のオブジェクト検出メッセージを示す図である。(A) is a figure which shows the object detection message in the case of a document, (b) is a figure which shows the object detection message in the case of a person. コンテクストサーバが提供する制御ユーザインタフェースを示す図である。It is a figure which shows the control user interface which a context server provides. コンテクストサーバが提供するコンテクスト検索ユーザインタフェースである。It is a context search user interface provided by the context server. MFD上での処理フローチャートである。It is a process flowchart on MFD. リポジトリ間での文書の検索フローを示す図である。It is a figure which shows the search flow of the document between repositories.

符号の説明Explanation of symbols

1 システム
3 コンテクストサーバ
4 タブレットPC
14 ミーティングキャプチャサーバ
15 RFIDタグ認識サーバ
17 演台PC
31 活動内容保存手段
32 コンテクスト生成保存手段
33 コンテクスト履歴検索手段
34 出力時ID付与手段
35 入力時ID付与手段
36 文書イメージ保持手段
50 活動記録装置
1 System 3 Context Server 4 Tablet PC
14 Meeting capture server 15 RFID tag recognition server 17 Debut PC
31 activity content storage means 32 context generation storage means 33 context history search means 34 output ID assignment means 35 input ID assignment means 36 document image holding means 50 activity recording device

Claims (13)

共同作業の場面において使用した文書、参加者または会話内容に関する情報を活動内容として検出する活動内容検出手段と、
前記活動内容検出手段によって検出された活動内容を、前記共同作業のおこなわれた時間と場所に対応付けて保存する活動内容保存手段と、
前記活動内容保存手段に保存されている活動内容を、利用者が指定する検索条件に基づいて取り出して表示情報を生成する活動履歴検索手段と
を備えることを特徴とする活動記録装置。
Activity content detection means for detecting information on documents, participants or conversation content used in the scene of collaborative work as activity content;
Activity content storage means for storing the activity content detected by the activity content detection means in association with the time and place where the joint work was performed;
An activity recording apparatus comprising: activity history search means for extracting the activity contents stored in the activity content storage means based on a search condition designated by a user and generating display information.
前記活動記録装置は更に、同一時間帯かつ同一場所で検出されたオブジェクトに関する情報をまとめて、同一コンテクストに関する情報として生成するコンテクスト生成手段を備え、
前記活動内容保存手段は、当該コンテクスト生成手段によって生成されたコンテクストを単位として活動内容を保持し、
前記活動履歴検索手段は、前記活動内容保存手段からコンテクストを単位として過去の活動内容を検索して表示することを特徴とする請求項1記載の活動記録装置。
The activity recording apparatus further includes context generation means for collecting information on objects detected in the same time zone and at the same place, and generating the information as information on the same context,
The activity content storage means holds the activity content in units of the context generated by the context generation means,
2. The activity recording apparatus according to claim 1, wherein the activity history search means searches for and displays past activity contents in units of contexts from the activity content storage means.
前記活動記録装置は更に、前記コンテクスト生成保持手段に対してコンテクストの生成を依頼し、前記コンテクスト履歴公開手段によって公開される当該生成されたコンテクスト情報への参照を取得して保持するコンテクスト情報取得手段を備えることを特徴とする請求項2記載の活動記録装置。 The activity recording apparatus further requests the context generation / holding means to generate a context, and acquires and holds a reference to the generated context information published by the context history disclosing means. The activity recording apparatus according to claim 2, further comprising: 前記活動内容検出手段は、ホワイトボードに書かれた内容をスチルカメラで撮影した画像、ビデオカメラによって撮影された映像、または、マイクによって収録された音声を取得することを特徴とする請求項1記載の活動記録装置。 2. The activity content detecting means acquires an image obtained by photographing a content written on a whiteboard with a still camera, an image photographed by a video camera, or an audio recorded by a microphone. Activity recording device. 前記活動内容検出手段は、所定の生体認証手段を利用して利用者を識別することを特徴とする請求項1記載の活動記録装置。 2. The activity recording apparatus according to claim 1, wherein the activity content detection means identifies a user using a predetermined biometric authentication means. 前記活動内容検出手段は、利用者が作業で使用している電子文書を識別することを特徴とする請求項1記載の活動記録装置。 2. The activity recording apparatus according to claim 1, wherein the activity content detecting means identifies an electronic document used by a user in the work. 前記活動内容検出手段は、作業空間内において、所定の情報処理装置上で手書き入力されたイメージ情報またはテキストによるコメント、および対話型ディスプレイ上に描画された手書きイメージのうちのいずれか一方を取得することを特徴とする請求項1記載の活動記録装置。 The activity content detection means acquires, in a work space, any one of image information input by handwriting on a predetermined information processing apparatus or a comment by text and a handwritten image drawn on an interactive display. The activity recording apparatus according to claim 1, wherein: 前記活動記録装置は更に、紙文書を出力する際に、出力される紙文書に対してID情報を付与する出力時ID付与手段と、
前記紙文書を印刷する際に生成される文書イメージを前記紙文書と同じIDを付与してストレージに保管する文書イメージ保持手段とを備え、
前記活動内容検出手段は、前記紙文書中に埋め込まれたID情報を識別して、該IDによって特定される文書イメージ保持手段が保持する該当IDで識別される文書イメージを取り出すことを特徴とする請求項1記載の活動記録装置。
The activity recording device further includes an output-time ID assigning unit that assigns ID information to the output paper document when outputting the paper document;
Document image holding means for storing a document image generated when printing the paper document in a storage with the same ID as the paper document,
The activity content detection means identifies ID information embedded in the paper document and takes out a document image identified by a corresponding ID held by a document image holding means specified by the ID. The activity recording device according to claim 1.
前記活動記録装置は更に、紙文書をスキャンインした際に、生成した文書イメージに対して、IDを付与して前記文書イメージ保持手段に格納する入力時ID付与手段を備え、
前記活動内容検出手段は、前記出力時ID付与手段によって印刷時に付与された紙文書のIDを検出することで、前記文書イメージ保持手段が保持する該当IDで識別される文書イメージを取り出すことを特徴とする請求項8記載の活動記録装置。
The activity recording apparatus further includes an input-time ID assigning unit that assigns an ID to the generated document image and stores it in the document image holding unit when the paper document is scanned in;
The activity content detecting means detects the ID of a paper document given at the time of printing by the output time ID assigning means, thereby extracting the document image identified by the corresponding ID held by the document image holding means. The activity recording apparatus according to claim 8.
前記文書イメージ保持手段は、ネットワーク上に複数分散して配置し、文書イメージ保持手段間に関係を設定し、ピア・ツー・ピア型のネットワークを構成するとともに、利用者によって指定された文書IDに関する文書イメージの検索要求があった場合、文書イメージ保持手段間で検索依頼を転送しあうことによって目的とする文書イメージを取り出すことを特徴とする請求項8または請求項9記載の活動記録装置。 A plurality of document image holding means are arranged in a distributed manner on the network, a relationship is set between the document image holding means, a peer-to-peer network is formed, and a document ID designated by a user is related 10. The activity recording apparatus according to claim 8, wherein when there is a document image search request, a target document image is taken out by transferring a search request between the document image holding means. 前記活動内容検出手段は、現実の作業空間内に設置されている情報提示板上に公開されている情報のIDを取得することを特徴とする請求項1記載の活動記録装置。 2. The activity recording apparatus according to claim 1, wherein the activity content detection means acquires an ID of information published on an information presentation board installed in an actual work space. 共同作業の場面において使用した文書、参加者または会話内容に関する情報を活動内容として検出する活動内容検出ステップと、
前記活動内容検出ステップによって検出された活動内容を、前記共同作業のおこなわれた時間と場所に対応付けて保存する活動内容保存ステップと、
前記活動内容保存ステップで保存された活動内容を、指定された検索条件に基づいて取り出して表示情報を生成する活動履歴検索ステップと
を含むことを特徴とする活動記録方法。
An activity content detection step for detecting information about documents, participants, or conversation content used in the scene of collaborative work as activity content;
Activity content storage step for storing the activity content detected by the activity content detection step in association with the time and place where the joint work was performed;
An activity history search method comprising: an activity history search step for generating the display information by extracting the activity content stored in the activity content storage step based on a specified search condition.
共同作業の場面において使用した文書、参加者、会話内容に関する情報を活動内容として前記共同作業のおこなわれた時間と場所に対応付けて保存する活動内容保存ステップ、
前記活動内容保存ステップで保存された活動内容を、指定された検索条件に基づいて取り出して表示情報を生成する活動履歴検索ステップをコンピュータに実行させるプログラム。
Activity content storage step for storing information relating to documents, participants, and conversation content used in the scene of collaborative work as activity content in association with the time and place where the collaborative work was performed,
A program for causing a computer to execute an activity history search step for extracting the activity content stored in the activity content storage step based on a specified search condition and generating display information.
JP2004278370A 2004-09-24 2004-09-24 Activity logging apparatus, activity logging method and program Pending JP2006092370A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004278370A JP2006092370A (en) 2004-09-24 2004-09-24 Activity logging apparatus, activity logging method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004278370A JP2006092370A (en) 2004-09-24 2004-09-24 Activity logging apparatus, activity logging method and program

Publications (1)

Publication Number Publication Date
JP2006092370A true JP2006092370A (en) 2006-04-06

Family

ID=36233259

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004278370A Pending JP2006092370A (en) 2004-09-24 2004-09-24 Activity logging apparatus, activity logging method and program

Country Status (1)

Country Link
JP (1) JP2006092370A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014035712A (en) * 2012-08-10 2014-02-24 Hitachi High-Technologies Corp Method and device for measuring business situation
US8971631B2 (en) 2012-05-11 2015-03-03 Kabushiki Kaisha Toshiba Data processing system, data processing method, and storage medium

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8971631B2 (en) 2012-05-11 2015-03-03 Kabushiki Kaisha Toshiba Data processing system, data processing method, and storage medium
JP2014035712A (en) * 2012-08-10 2014-02-24 Hitachi High-Technologies Corp Method and device for measuring business situation

Similar Documents

Publication Publication Date Title
CN100596187C (en) Electronic conference system, electronic conference support method, and electronic conference control device
JP6090413B2 (en) Automatic operation at login
US11271977B2 (en) Information processing apparatus, information processing system, information processing method, and non-transitory recording medium
KR101182478B1 (en) Methods and apparatuses for synchronizing and tracking content
JP5287303B2 (en) Conference material search device, conference material search support device, conference material search support program, conference material search program, and conference support system
JP2023554519A (en) Electronic document editing method and device, computer equipment and program
CN100409239C (en) Communication device and system for processing viewer images
WO2006090481A1 (en) Document management system
JP2007066065A (en) Information display system, information display device, information display method, program, and recording medium
JP2007213511A (en) Conference support system
US20160261828A1 (en) Method, Device, and System for Multipoint Video Communication
JP2006092368A (en) Activity recording device, activity recording method, and program
JP2000165577A (en) Meeting support device
JP2022140997A (en) Information processing device and information processing program
JP2006092370A (en) Activity logging apparatus, activity logging method and program
JP2019125268A (en) INFORMATION PROCESSING METHOD, INFORMATION PROCESSING DEVICE, AND PROGRAM
JP4686988B2 (en) Communication apparatus and communication method
JP5007642B2 (en) E-mail delivery system
JP2005141620A (en) Selection method for information processor, information processor, retrieval server and program
JP6384091B2 (en) Server apparatus, program, and communication method
EP1600873A1 (en) A data control system, a method of data control, a computer program and a computer readable storage medium
JP2008048204A (en) Information processing apparatus, information processing system, and information processing program
JP2011128722A (en) Conference system and information processing method
JP2023001677A (en) Event server, event terminal, information processing method, and program
JP7388001B2 (en) Information processing device, information processing system, information processing method and program