JP2015156190A

JP2015156190A - health management device and health management program

Info

Publication number: JP2015156190A
Application number: JP2014031625A
Authority: JP
Inventors: 正永中村; Masanaga Nakamura; 井上　英也; Hideya Inoue; 英也井上
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2014-02-21
Filing date: 2014-02-21
Publication date: 2015-08-27

Abstract

【課題】摂取した食事の正確なカロリー等を算出する装置を提供する。【解決手段】ステップＳ１３で、画像を基にユーザが食事を口にするかを判別する。具体的には、箸で食事を挟むなど、食事を口元に持って来るまでの動作を判別する。ステップＳ２０で、制御部は、摂取カロリー累計から現時点の目標カロリーを減算して残りカロリーを求め、表示部に「○」印と「残り???kcal」を表示する。ユーザは、表示された情報と共に眼鏡越しに視野内の口にしようとしている食事を見ることができ、口にしようとしている食事が目標カロリー内であることを知る。ステップＳ２２で、制御部は、表示部に「?」印と、「???kcalオーバー」、「○○○歩分」を表示する。ユーザは、口にしようとしている食事が目標カロリーをオーバーしていること、そのカロリーを換算した歩数を知ることができる。【選択図】図５An apparatus for calculating an accurate calorie of an ingested meal is provided. In step S13, it is determined whether or not the user eats a meal based on the image. Specifically, the operation until the meal is brought to the mouth, such as sandwiching the meal with chopsticks, is determined. In step S 20, the control unit subtracts the current target calorie from the total intake calorie to obtain the remaining calorie, and displays “◯” and “remaining ??? kcal” on the display unit. The user can see the meal that is about to be put into the mouth in the field of view through the glasses together with the displayed information, and knows that the meal that is about to be put into the mouth is within the target calorie. In step S 22, the control unit displays a “?” Mark, “??? kcal over”, and “xxx step” on the display unit. The user can know that the meal he / she wants to eat exceeds the target calorie and the number of steps converted from the calorie. [Selection] Figure 5

Description

本発明は、摂取した食事のカロリー等を管理する健康管理装置および健康管理プログラムに関する。 The present invention relates to a health management device and a health management program for managing calories and the like of ingested meals.

摂取する食事をカメラ付き携帯電話により撮影して摂取食事画像データを得、これを食事中の飲食店を表す飲食店情報とともに摂取カロリー計算支援装置に送信し、飲食店情報および摂取食事画像データに基づいて、複数の食事画像とカロリーとを対応付けたカロリーデータベースを参照して、摂取食事画像データに対応する対応食事画像データおよびそのカロリー情報を取得するものがある（特許文献１）。 The ingested meal is photographed with a camera-equipped mobile phone to obtain ingested meal image data, which is transmitted to the ingestion calorie calculation support device together with the restaurant information representing the restaurant being eaten, to the restaurant information and the ingested meal image data Based on a calorie database in which a plurality of meal images and calories are associated with each other, the corresponding meal image data corresponding to the ingested meal image data and the calorie information thereof are obtained (Patent Document 1).

特開２００４−１１８５６２号公報JP 2004-118562 A

しかし、特許文献１の装置では、撮影された画像で表される食事の全てを実際に摂取したとは限らないので、摂取した食事の正確なカロリー等を管理できない欠点があった。 However, the apparatus of Patent Document 1 has a drawback that it cannot manage the exact calories and the like of the ingested meal because not all of the meal represented by the photographed image is actually ingested.

請求項１に記載の健康管理装置は、食事中の画像を撮影する撮影部と、撮影部で撮影された画像を基に食事を口にするかを判別する判別部と、判別部で判別された口にする食事のカロリー若しくは糖質量を取得する取得部と、取得部で取得されたカロリー若しくは糖質量を累計して摂取カロリー若しくは摂取糖質量を求め、目標カロリー若しくは目標糖質量と比較する比較部と、比較部で目標カロリー若しくは目標糖質量を超えると判断された場合に、報知する報知部とを備える。
請求項８に記載の健康管理プログラムは、コンピュータに、食事中の画像を撮影する撮影手順、撮影手順で撮影された画像を基に食事を口にするかを判別する判別手順、判別手順で判別された口にする食事のカロリー若しくは糖質量を取得する取得手順、取得手順で取得されたカロリー若しくは糖質量を累計して摂取カロリー若しくは摂取糖質量を求め、目標カロリー若しくは目標糖質量と比較する比較手順、比較手順で目標カロリー若しくは目標糖質量を超えると判断された場合に、報知する報知手順を実行させる。 The health management device according to claim 1 is discriminated by an imaging unit that captures an image of a meal, a determination unit that determines whether to eat a meal based on an image captured by the imaging unit, and a determination unit. The acquisition unit that acquires the calorie or sugar mass of the meal to be consumed and the calorie or sugar mass acquired by the acquisition unit to obtain the intake calorie or intake sugar mass and compare with the target calorie or target sugar mass And a notifying unit that notifies when the comparison unit determines that the target calorie or target sugar mass is exceeded.
9. The health management program according to claim 8, wherein the computer uses a photographing procedure for photographing an image during a meal, a determination procedure for determining whether to eat a meal based on an image photographed in the photographing procedure, and a determination procedure. Acquisition procedure for acquiring calories or sugar mass of meals to be taken, comparison of comparing caloric intake or sugar intake with target calorie or target sugar mass by accumulating calorie or sugar mass acquired in acquisition procedure When it is determined that the target calorie or target sugar mass is exceeded in the procedure and the comparison procedure, a notification procedure for notification is executed.

本発明によれば、摂取した食事の正確なカロリー等を管理することが可能となる。 According to the present invention, it is possible to manage accurate calories and the like of ingested meals.

実施の形態における健康管理装置の外観図である。1 is an external view of a health management device in an embodiment. 健康管理装置の構成を示すブロック図である。It is a block diagram which shows the structure of a health management apparatus. 記憶部の記憶状態図である。It is a memory | storage state figure of a memory | storage part. 消費カロリーを算出するフローチャートである。It is a flowchart which calculates calorie consumption. 摂取カロリーを算出するフローチャートである。It is a flowchart which calculates intake calories. 口にする食事を示す表示部の表示状態図である。It is a display state figure of the display part which shows the meal to eat. 複数の食事を示す表示部の表示状態図である。It is a display state figure of the indicator which shows a plurality of meals. 出力された一覧表を示す図である。It is a figure which shows the output list. 一覧表を出力するフローチャートである。It is a flowchart which outputs a list.

以下、図面を参照しながら、本発明の一実施の形態を説明する。図１は健康管理装置の外観図である。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is an external view of a health management device.

健康管理装置１は眼鏡型のウェアラブル端末装置である。健康管理装置１は、撮影部１１、表示部１２、加速度計１３、回路部１４を備えている。 The health management device 1 is a glasses-type wearable terminal device. The health management device 1 includes an imaging unit 11, a display unit 12, an accelerometer 13, and a circuit unit 14.

撮影部１１は、ウェアラブル端末装置を装着したユーザの視野内の食事を動画若しくは静止画として撮影する。表示部１２は、眼鏡レンズに設けられたハーフミラー層１２ａに映像を投影することにより、情報を表示する。ユーザは、表示された情報と共に眼鏡越しに視野内の食事などを見ることができる。加速度計１３は、ウェアラブル端末装置を装着したユーザが歩いたことを検知して、その歩数を取得する。回路部１４は後述する回路を内蔵する。 The photographing unit 11 photographs a meal in the field of view of the user wearing the wearable terminal device as a moving image or a still image. The display unit 12 displays information by projecting an image on the half mirror layer 12a provided in the spectacle lens. The user can see the meal in the field of view through the glasses together with the displayed information. The accelerometer 13 detects that the user wearing the wearable terminal device has walked, and acquires the number of steps. The circuit unit 14 incorporates a circuit to be described later.

図２は、健康管理装置１の構成を示すブロック図である。図１と同一箇所には同一の符号を付してその説明を省略する。回路部１４は、制御部１５、データベース１６、通信部１７、記憶部１８を備える。 FIG. 2 is a block diagram showing the configuration of the health management device 1. The same parts as those in FIG. 1 are denoted by the same reference numerals, and the description thereof is omitted. The circuit unit 14 includes a control unit 15, a database 16, a communication unit 17, and a storage unit 18.

制御部１５は、ＣＰＵおよびその他の周辺回路等により構成され、健康管理装置１の全体の制御を行う。制御部１５は、撮影部１１内の撮像素子から取得した画像信号より画像を生成する。また、制御部１５は、表示部１２内の液晶素子に対して、ハーフミラー層１２ａに投影するための表示データを表示させる。さらに、制御部１５は、加速度計１３で検知した歩数値を取得する。 The control unit 15 includes a CPU and other peripheral circuits, and performs overall control of the health management device 1. The control unit 15 generates an image from the image signal acquired from the image sensor in the imaging unit 11. Further, the control unit 15 causes the liquid crystal element in the display unit 12 to display display data for projection onto the half mirror layer 12a. Further, the control unit 15 acquires the step value detected by the accelerometer 13.

データベース１６は、食事の画像とその食事のカロリーを対応付けて多数記憶する。制御部１５は、撮影部１１で撮影された画像とデータベース１６内の画像とを照合し、一致する画像と対応して記憶されているカロリーを読み出す。 The database 16 stores a large number of meal images and the calories of the meal in association with each other. The control unit 15 collates the image photographed by the photographing unit 11 with the image in the database 16 and reads the calories stored corresponding to the matching image.

通信部１７は、図示省略するサーバと無線通信回線を介して接続する。記憶部１８は、後述するフローチャートで示すプログラムを記憶し、このプログラムは、制御部１５のＣＰＵが実行する。また、記憶部１８には、撮影部１１で撮影された画像が一時的に記憶される他、後述する毎日の摂取カロリー累計などが記憶される。 The communication unit 17 is connected to a server (not shown) via a wireless communication line. The storage unit 18 stores a program shown in a flowchart described later, and this program is executed by the CPU of the control unit 15. The storage unit 18 temporarily stores images captured by the imaging unit 11 and stores daily cumulative calorie intake, which will be described later.

図３は、記憶部１８の摂取カロリー累計などの記憶状態を示す図である。日付１８ａ別に、摂取カロリー累計１８ｂ、目標カロリー１８ｃ、および消費カロリー累計１８ｄを記憶する。摂取カロリー累計１８ｂは、１日の摂取カロリーの累計値であり、１日内では、その日に既に摂取した摂取カロリーを示す。例えば、朝食と昼食を摂取した後であれば、朝食と昼食を合計した摂取カロリーである。目標カロリー１８ｃは、ユーザが予め記憶した１日の目標カロリーである。消費カロリー累計１８ｄは、１日の消費カロリーの累計値であり、加速度計１３で検知した歩数をカロリーに換算して求めた値である。 FIG. 3 is a diagram illustrating a storage state such as the total calorie intake in the storage unit 18. For each date 18a, the total intake calories 18b, the target calories 18c, and the total calories consumed 18d are stored. The total calorie intake 18b is the total value of the daily calorie intake, and indicates the calorie intake already ingested on that day within one day. For example, after having eaten breakfast and lunch, the total calorie intake is breakfast and lunch. The target calorie 18c is a daily target calorie stored in advance by the user. The accumulated calorie consumption 18d is a cumulative value of daily calorie consumption, and is a value obtained by converting the number of steps detected by the accelerometer 13 into calories.

以下、本発明の一実施の形態の動作を、図４、図５、図９に示すフローチャート、図６、図７に示す表示状態図を参照して説明する。 The operation of the embodiment of the present invention will be described below with reference to the flowcharts shown in FIGS. 4, 5, and 9, and the display state diagrams shown in FIGS.

図４は、消費カロリーを算出するフローチャートである。このフローチャートで示すプログラムは記憶部１８に記憶され、このプログラムは、制御部１５のＣＰＵが実行する。
ステップＳ１で、制御部１５は、加速度計１３で検知した歩数値を取得する。ステップＳ２で、制御部１５は、取得した歩数値を記憶部１８の所定エリアに累計して記憶する。ステップＳ３で、制御部１５は、所定エリアに累計して記憶された歩数値が所定値になったかを判別する。歩数値が所定値になっていなければステップＳ１に戻り、歩数値を取得する。 FIG. 4 is a flowchart for calculating calorie consumption. The program shown in this flowchart is stored in the storage unit 18, and this program is executed by the CPU of the control unit 15.
In step S 1, the control unit 15 acquires the step value detected by the accelerometer 13. In step S 2, the control unit 15 accumulates the acquired step count value in a predetermined area of the storage unit 18 and stores it. In step S3, the control unit 15 determines whether or not the step value accumulated and stored in the predetermined area has reached a predetermined value. If the step value is not the predetermined value, the process returns to step S1 to obtain the step value.

歩数値が所定値になっていればステップＳ４に進み、制御部１５は、所定値の歩数値を消費カロリーに換算する。具体的には、ユーザ毎に体重、歩行速度など必要なパラメータを予め記憶部１８に記憶しておき、ユーザの歩数値、体重、および歩行速度などに基づいて、消費カロリーを換算する。例えば、ウォーキングは１分間に１００歩（分速６５ｍ）のペースで１０分間で消費カロリーは約３３kcalである。ステップＳ５で、制御部１５は、換算された消費カロリーを、図３に示す記憶部１８のその日の消費カロリー累計１８ｄに累計して記憶する。ステップＳ６で、制御部１５は、記憶部１８の所定エリアに累計して記憶されている上記歩数値をクリアして、ステップＳ１に戻り、新たに歩数値を取得する。 If the step value is a predetermined value, the process proceeds to step S4, and the control unit 15 converts the step value of the predetermined value into calorie consumption. Specifically, necessary parameters such as weight and walking speed are stored in advance in the storage unit 18 for each user, and calories burned are converted based on the user's number of steps, weight, walking speed, and the like. For example, walking is performed at a rate of 100 steps per minute (65 m / min) for 10 minutes and the calorie consumption is about 33 kcal. In step S5, the control unit 15 accumulates the converted calorie consumption in the day's total calorie consumption 18d of the storage unit 18 shown in FIG. In step S6, the control unit 15 clears the step count value accumulated and stored in the predetermined area of the storage unit 18, returns to step S1, and newly acquires the step count value.

以上のように健康管理装置１であるウェアラブル端末装置を装着したユーザの消費カロリーはリアルタイムに消費カロリー累計１８ｄに記憶される。なお、加速度計１３は、健康管理装置１と一体に構成されるものに限らず、別体に構成して、ユーザの身体に装着するものであればよい。 As described above, the calorie consumption of the user wearing the wearable terminal device as the health management device 1 is stored in the calorie consumption total 18d in real time. Note that the accelerometer 13 is not limited to being configured integrally with the health management device 1, and may be configured as a separate body and attached to the user's body.

図５は、摂取カロリーを算出するフローチャートである。このフローチャートで示すプログラムは記憶部１８に記憶され、このプログラムは、制御部１５のＣＰＵが実行する。
ステップＳ１１で、制御部１５は、撮影部１１により、ウェアラブル端末装置を装着したユーザの視野内の食事を動画若しくは静止画として撮影する。静止画の場合は一定間隔ごとに静止画を取得する。撮影した画像は一時的に記憶部１８に記憶する。ステップＳ１２で、制御部１５は、撮影した画像を基に、配膳された食事が写っているか、すなわち視野内に食事があるかを判別する。食事が写っていなければ、ステップＳ１１に戻り、撮影を継続する。 FIG. 5 is a flowchart for calculating calorie intake. The program shown in this flowchart is stored in the storage unit 18, and this program is executed by the CPU of the control unit 15.
In step S 11, the control unit 15 causes the photographing unit 11 to photograph a meal in the field of view of the user wearing the wearable terminal device as a moving image or a still image. In the case of still images, still images are acquired at regular intervals. The captured image is temporarily stored in the storage unit 18. In step S12, the control unit 15 determines, based on the captured image, whether the arranged meal is shown, that is, whether there is a meal in the field of view. If no meal is shown, the process returns to step S11 to continue shooting.

食事が写っていれば、ステップＳ１３で、制御部１５は、画像を基にユーザが食事を口にするかを判別する。食事を口にするかの判別は、撮影した画像を基に行うが、具体的には、箸で食事を挟む、スプーンで食事をすくう、ホークで食事を刺すなど、食事を口元に持って来るまでの動作を判別する。この時点では、食事を実際に口に入れておらず、口に入れる前の動作である。 If a meal is shown, in step S13, the control unit 15 determines whether the user eats the meal based on the image. The determination of whether to eat a meal is based on the photographed image. Specifically, the meal is brought to the mouth, such as sandwiching the meal with chopsticks, scooping the meal with a spoon, and stab the meal with a hawk. The operation until is determined. At this point in time, the meal is not actually put in the mouth, and is the operation before putting it in the mouth.

ステップＳ１３で、食事を口にすると判別された場合は、ステップＳ１４に進む。ステップＳ１４で、制御部１５は、口にする食事の画像をデータベース１６内の画像と照合する。データベース１６には、食事の画像とその食事のカロリーを対応付けて多数記憶している。そして、ステップＳ１５で、制御部１５は、口にする食事の画像を基にデータベース１６と照合して、食事の種類と量を特定する。ステップＳ１６で、制御部１５は、照合した一致する画像と対応して記憶されているカロリーを食事の量に応じて読み出す。例えば、ユーザが唐揚げを箸で挟んで口元へ近づけた画像から、食事の種類が唐揚げであることがわかり、唐揚げの量に対応するカロリーを算出する。 If it is determined in step S13 that the meal is to be consumed, the process proceeds to step S14. In step S 14, the control unit 15 collates the image of the meal to be consumed with the image in the database 16. The database 16 stores a large number of meal images and calories of the meal in association with each other. In step S15, the control unit 15 collates with the database 16 based on the meal image to be used as a mouth, and specifies the type and amount of the meal. In step S 16, the control unit 15 reads the calories stored corresponding to the matched images that have been collated, according to the amount of meal. For example, it can be seen from the image that the user put the fried chicken close to the mouth and the type of meal is fried, and calories corresponding to the amount of fried chicken are calculated.

ステップＳ１７で、制御部１５は、食事のカロリーを記憶部１８の摂取カロリー累計１８ｂに累計して記憶する。ステップＳ１８で、制御部１５は、記憶部１８の目標カロリー１８ｃ、消費カロリー累計１８ｄを基に、現時点の目標カロリーを求める。具体的には、［目標カロリー１８ｃ］＋［消費カロリー累計１８ｄ］を算出して、一時的に記憶部１８の所定エリアに記憶し、これを現時点の目標カロリーとする。ステップＳ１９で、制御部１５は、記憶部１８の摂取カロリー累計１８ｂが現時点の目標カロリーを超えているかを判別する。 In step S 17, the control unit 15 accumulates the calorie of the meal in the total intake calorie 18 b of the storage unit 18 and stores it. In step S18, the control unit 15 obtains the current target calorie based on the target calorie 18c and the accumulated calorie consumption 18d stored in the storage unit 18. Specifically, [target calorie 18c] + [accumulated calorie consumption 18d] is calculated and temporarily stored in a predetermined area of the storage unit 18, and this is set as the current target calorie. In step S19, the control unit 15 determines whether or not the total calorie intake 18b stored in the storage unit 18 exceeds the current target calorie.

摂取カロリー累計１８ｂが現時点の目標カロリーを超えていなければ、ステップＳ２０に進み、制御部１５は、摂取カロリー累計１８ｂから現時点の目標カロリーを減算して残りカロリーを求め、表示部１２に「○」印と「残り×××kcal」を表示する。ユーザは、表示された情報と共に眼鏡越しに口にしようとしている食事を見ることができ、同時に、口にしようとしている食事が目標カロリー内であり、目標カロリーに対する残りカロリーを知ることができる。 If the total intake calorie 18b does not exceed the current target calorie, the process proceeds to step S20, and the control unit 15 subtracts the current target calorie from the total intake calorie 18b to obtain the remaining calorie. And “Remaining xxx kcal” are displayed. The user can see the meal that is about to be eaten through the glasses together with the displayed information, and at the same time, the meal that is about to be put into the mouth is within the target calorie, and the remaining calories with respect to the target calorie can be known.

ステップＳ１９で、摂取カロリー累計１８ｂが現時点の目標カロリーを超えていれば、ステップＳ２１に進み、制御部１５は、現時点の目標カロリーから摂取カロリー累計１８ｂを減算して余分カロリーを求め、この余分カロリーを歩数に換算する。具体的には、ユーザ毎に体重、歩行速度など必要なパラメータを予め記憶部１８に記憶しておき、余分カロリーをユーザの体重、および歩行速度などに基づいて歩数に換算する。 If the total calorie intake 18b exceeds the current target calorie in step S19, the process proceeds to step S21, and the control unit 15 subtracts the total calorie intake 18b from the current target calorie to obtain an extra calorie. Is converted into the number of steps. Specifically, necessary parameters such as weight and walking speed are stored in advance in the storage unit 18 for each user, and the extra calories are converted into the number of steps based on the user's weight and walking speed.

ステップＳ２２で、制御部１５は、表示部１２に「×」印と、「×××kcalオーバー」、「○○○歩分」を表示する。図６はその表示例である。ユーザは、表示された情報と共に眼鏡越しに口にしようとしている食事を見ることができ、口にしようとしている食事が目標カロリーをオーバーしていることを、また、そのカロリーおよびカロリーを換算した歩数を知ることができる。 In step S 22, the control unit 15 displays the “×” mark, “xxx kcal over”, and “xxx step” on the display unit 12. FIG. 6 is an example of the display. The user can see the meal he / she wants to eat over his / her glasses along with the displayed information, indicates that the meal he / she wants to eat exceeds the target calorie, and the number of steps converted to that calorie and calorie. Can know.

ステップＳ２０、ステップＳ２２の表示部１２による表示は、一定時間行われる。その後、ステップＳ２３に進み、制御部１５は、撮影部１１により、その後の画像を取り込み、口にしようとしている食事を実際に口に入れて摂取したかを判別する。具体的には、箸で食事を挟むなどして食事を口元に持って来た後、これを口の中に入れて箸で挟んだ食事が無くなったかを判別する。 The display by the display part 12 of step S20 and step S22 is performed for a fixed time. Thereafter, the process proceeds to step S23, and the control unit 15 uses the photographing unit 11 to capture a subsequent image, and determines whether the meal that is about to be taken is actually taken in the mouth. Specifically, after having brought a meal to the mouth by sandwiching a meal with chopsticks, etc., it is put in the mouth and it is determined whether or not the meal sandwiched with chopsticks is gone.

ステップＳ２３で、実際に摂取した場合は、ステップＳ１１に戻る。ステップＳ２３で、実際に摂取していない場合、すなわち、箸で食事を挟むなどして食事を口元に持って来た後、そのまま元の皿の上に戻した場合は、ステップＳ２４に進み、制御部１５は、記憶部１８の摂取カロリー累計１８ｂからステップＳ１６で算出したカロリーを減算して、摂取カロリー累計１８ｂを元へ戻す。その後、ステップＳ１１に戻る。 If actually ingested in step S23, the process returns to step S11. If it is not actually ingested in step S23, that is, if the meal is brought to the mouth by sandwiching the meal with chopsticks and then returned to the original plate as it is, the process proceeds to step S24 and the control is performed. The unit 15 subtracts the calorie calculated in step S16 from the total calorie intake 18b stored in the storage unit 18 to restore the total calorie intake 18b. Then, it returns to step S11.

ステップＳ１３で、食事を口にしないと判別された場合は、ステップＳ２５に進む。ステップＳ２５で、制御部１５は、視野内の食事の画像をデータベース１６内の画像と照合する。視野内の食事の画像には配膳された食事が多数写っているが、その食事の一つとデータベース１６内の画像と照合する。データベース１６には、食事の画像とその食事のカロリーを対応付けて多数記憶している。そして、ステップＳ２６で、制御部１５は、食事の画像を基にデータベース１６と照合して、食事の種類と量を特定する。ステップＳ２７で、制御部１５は、照合した一致する画像と対応して記憶されているカロリーを食事の量に応じて読み出し、カロリーを算出する。 If it is determined in step S13 that the meal is not consumed, the process proceeds to step S25. In step S 25, the control unit 15 collates the meal image in the field of view with the image in the database 16. The meal image in the field of view includes a large number of arranged meals, and one of the meals is collated with the image in the database 16. The database 16 stores a large number of meal images and calories of the meal in association with each other. In step S 26, the control unit 15 collates with the database 16 based on the meal image and specifies the type and amount of the meal. In step S 27, the control unit 15 reads the calories stored corresponding to the matched images that have been collated, according to the amount of meal, and calculates the calories.

ステップＳ２８で、制御部１５は、視野内に多数写っている配膳された食事の画像について全ての照合を完了したかを判別する。全ての照合が完了していない場合はステップＳ２５に戻る。全ての照合が完了している場合はステップＳ２９に進み、制御部１５は、各食事ごとに記憶部１８の摂取カロリー累計１８ｂと加算し、その合計カロリーを記憶部１８の食事ごとの所定エリアに記憶する。 In step S 28, the control unit 15 determines whether or not all collations have been completed for the arranged meal images appearing in the field of view. If all collations are not completed, the process returns to step S25. When all the collations have been completed, the process proceeds to step S29, and the control unit 15 adds the total calorie intake 18b in the storage unit 18 for each meal, and the total calories are stored in a predetermined area for each meal in the storage unit 18. Remember.

ステップＳ３０で、制御部１５は、記憶部１８の目標カロリー１８ｃ、消費カロリー累計１８ｄを基に、現時点の目標カロリーを求める。具体的には、［目標カロリー１８ｃ］＋［消費カロリー累計１８ｄ］を算出して、一時的に記憶部１８の所定エリアに記憶し、これを現時点の目標カロリーとする。 In step S30, the control unit 15 obtains the current target calorie based on the target calorie 18c and the total calorie consumption 18d stored in the storage unit 18. Specifically, [target calorie 18c] + [accumulated calorie consumption 18d] is calculated and temporarily stored in a predetermined area of the storage unit 18, and this is set as the current target calorie.

次のステップＳ３１で、制御部１５は、食事ごとの上記合計カロリーが現時点の目標カロリーを超えるかを判別する。超えていなければステップＳ３２へ進み、超えていればステップＳ３３へ進む。 In the next step S31, the control unit 15 determines whether the total calories for each meal exceed the current target calories. If not, the process proceeds to step S32. If it exceeds, the process proceeds to step S33.

ステップＳ３２で、制御部１５は、食事ごとの所定エリアに記憶した上記合計カロリーから現時点の目標カロリーを減算して残りカロリーを求める。そして、図７に示すように、表示部１２に「○」印と「残り×××kcal」を表示する。ユーザは、表示された情報と共に眼鏡越しに食事を見ることができ、その食事が目標カロリー内であることを知ることができる。 In step S32, the controller 15 subtracts the current target calorie from the total calories stored in the predetermined area for each meal to obtain the remaining calories. Then, as shown in FIG. 7, “◯” mark and “remaining xxx kcal” are displayed on the display unit 12. The user can see the meal through the glasses along with the displayed information, and can know that the meal is within the target calorie.

ステップＳ３３で、制御部１５は、食事ごとの所定エリアに記憶した上記合計カロリーから現時点の目標カロリーを減算して余分カロリーを求め、この余分カロリーを歩数に換算する。そして、ステップＳ３４で、制御部１５は、表示部１２に「×」印と、「×××kcalオーバー」、「○○○歩分」を表示する。図７はその表示例である。ユーザは、表示された情報と共に眼鏡越しに食事を見ることができ、食事が目標カロリーをオーバーすること、およびそのカロリーを換算した歩数を知ることができる。 In step S33, the control unit 15 subtracts the current target calorie from the total calorie stored in the predetermined area for each meal to obtain an extra calorie, and converts the extra calorie into the number of steps. In step S 34, the control unit 15 displays the “x” mark, “xxx kcal over”, and “xxx step” on the display unit 12. FIG. 7 shows a display example. The user can see the meal through the glasses together with the displayed information, and can know that the meal exceeds the target calorie and the number of steps converted to the calorie.

その後、ステップＳ３５に進み、制御部１５は、全ての食事について算出したかを判別し、算出していなければ、ステップＳ２９に戻り、算出していればステップＳ１１に戻る。ステップＳ１１に戻る前に、ステップＳ３２、ステップＳ３４の表示部１２による表示は、一定時間行われる。 Then, it progresses to step S35 and the control part 15 discriminate | determines whether it calculated about all the meals, If not calculating, it will return to step S29, and if it is calculating, it will return to step S11. Before returning to step S11, the display on the display unit 12 in step S32 and step S34 is performed for a certain period of time.

このように、食事を口にする前であっても、視野内に配置された各食事について、既に摂取したカロリーと比較して、摂取すればカロリーオーバーになる食事とそうではない食事を識別して表示することができる。 In this way, even before eating a meal, for each meal placed in the field of view, compared to the calorie that has already been consumed, the meal that would exceed the calorie if it is consumed is identified. Can be displayed.

次に、図３に示した記憶部１８の摂取カロリー累計１８ｂ等を図８に示す一覧表１９として表示部１２へ出力する場合の動作を説明する。図９は所定期間の一覧表１９を出力するフローチャートである。このフローチャートで示すプログラムは記憶部１８に記憶され、このプログラムは、制御部１５のＣＰＵが実行する。 Next, the operation in the case of outputting the total calorie intake 18b and the like stored in the storage unit 18 shown in FIG. 3 to the display unit 12 as the list 19 shown in FIG. FIG. 9 is a flowchart for outputting a list 19 for a predetermined period. The program shown in this flowchart is stored in the storage unit 18, and this program is executed by the CPU of the control unit 15.

ステップＳ４０で、制御部１５は、記憶部１８を参照して、日付ごとにカロリー差を算出する。すなわち、［摂取カロリー累計１８ｂ］−［目標カロリー１８ｃ］−［消費カロリー累計１８ｄ］を算出して、一日のカロリーが取り過ぎであるか（＋であるか）不足しているか（−であるか）を算出する。ステップＳ４１で、制御部１５は、所定期間の全ての日付についてカロリー差を算出したか判別し、算出していなければステップＳ４０へ戻る。全ての日付について算出した場合は、ステップＳ４２で、制御部１５は、図８に示す一覧表１９を表示部１２に出力する。すなわち、日付、摂取カロリー累計、目標カロリー、消費カロリー累計、カロリー差を出力する。所定期間は、例えば１週間、１ヶ月、１年間である。この一覧表１９を基にユーザは日々のカロリーの増減を知り、健康管理に役立たせることができる。 In step S40, the control unit 15 refers to the storage unit 18 and calculates the calorie difference for each date. That is, [total calorie intake 18b] − [target calorie 18c] − [total calorie consumption 18d] is calculated, and whether the daily calorie is excessive (+) or not (−). ) Is calculated. In step S41, the control unit 15 determines whether the calorie difference has been calculated for all dates in the predetermined period, and if not, returns to step S40. If all dates have been calculated, the control unit 15 outputs the list 19 shown in FIG. 8 to the display unit 12 in step S42. That is, the date, the total calorie intake, the target calorie, the total calorie consumption, and the calorie difference are output. The predetermined period is, for example, one week, one month, or one year. Based on this list 19, the user can know the daily calorie increase / decrease and make it useful for health management.

（変形例）
本発明は、以上説明した実施の形態を次のように変形して実施することができる。
（１）健康管理装置１はデータベース１６も含めて眼鏡型のウェアラブル端末装置として説明したが、一部の構成は図示省略したサーバに持たせてもよい。例えば、データベース１６はサーバに備えてもよく、この場合、健康管理装置１は通信部１７を介してサーバと通信を行い、データベース１６を参照する。また、食事の画像を通信部１７を介してサーバに送信し、サーバにより食事の画像とデータベース１６内の画像の照合を行ってもよい。 (Modification)
The present invention can be implemented by modifying the embodiment described above as follows.
(1) Although the health management device 1 including the database 16 has been described as a glasses-type wearable terminal device, a part of the configuration may be provided in a server not shown. For example, the database 16 may be provided in a server. In this case, the health management device 1 communicates with the server via the communication unit 17 and refers to the database 16. Alternatively, a meal image may be transmitted to the server via the communication unit 17 and the server may collate the meal image with the image in the database 16.

（２）一覧表の出力は表示部１２に出力する例で説明したが、通信部１７を介して接続されたサーバやプリンタへ出力するようにしてもよい。 (2) Although the output of the list has been described as an example of output to the display unit 12, it may be output to a server or printer connected via the communication unit 17.

（３）食事の画像を照合してカロリーを求める例で説明したが、レストランや居酒屋では料理ごとにカロリーが決まっている場合がある。このような場合は、レストランや居酒屋のメニュー画像とそのカロリー情報をデータベースに保存することにより、後の照合では照合を容易にし、より正確なカロリーを読み出すことができる。 (3) Although the example which collates the image of a meal and calculates | requires calories was demonstrated, the calorie may be decided for every dish in a restaurant or a pub. In such a case, the menu image of the restaurant or izakaya and the calorie information thereof are stored in the database, so that collation can be facilitated in later collation and more accurate calories can be read out.

（４）図６、７に示すように、表示部１２に「×」印や「○」印等を食事に対応付けて表示し、摂取すればカロリーオーバーになる食事とそうではない食事を識別して表示した。「×」印や「○」印等は各食事の横に表示したが、各食事に重畳して表示してもよい。また、「×」印や「○」印に限らず、カロリーオーバーになる食事とそうではない食事を識別できればよく、例えば、カロリーオーバーになる食事の表示部分は表示色を濃い色で塗りつぶし、その色の濃さが濃くなるほどカロリーオーバーの程度が高いことを示してもよい。 (4) As shown in FIGS. 6 and 7, a “×” mark, a “◯” mark, or the like is displayed on the display unit 12 in association with a meal, and a meal that is over-calorie if it is ingested is identified. And displayed. The “x” mark, the “◯” mark, and the like are displayed beside each meal, but may be displayed superimposed on each meal. Moreover, it is not limited to “x” mark or “○” mark, and it is only necessary to be able to distinguish between meals that are over calories and meals that are not. For example, the display portion of meals that are over calories is painted in a dark color. It may indicate that the degree of calorie over is higher as the color is darker.

（５）図６、７に示すように、表示部１２に「×」印と、「×××kcalオーバー」、「○○○歩分」を表示する例で説明したが、食事をどれだけ摂ればカロリーオーバーにならないかを表示してもよい。例えば、「この食事を１/３摂ったらＯＫです」と表示する。この場合は、制御部１５は、食事のカロリーとユーザの摂取可能なカロリーとに基づいてカロリーオーバーにならない食事の量を算出する。 (5) As shown in FIGS. 6 and 7, the example of displaying “×” mark, “xxx kcal over”, and “XXX walk” on the display unit 12 is explained. It may be displayed whether the calorie is over if consumed. For example, the message “OK to eat 1/3 of this meal” is displayed. In this case, the control unit 15 calculates the amount of meal that does not exceed the calorie based on the calorie of the meal and the calorie that can be consumed by the user.

（６）消費カロリーは、加速度計１３で検知した歩数値に基づいて算出する例で説明した。しかし、その他のトレーニング機器、フィットネス機器等と連携して消費カロリーを取得するようにしてもよい。 (6) The calorie consumption has been described as an example of calculation based on the number of steps detected by the accelerometer 13. However, calorie consumption may be acquired in cooperation with other training equipment, fitness equipment, and the like.

（７）食事とカロリーの関係を例に説明したが、食事と糖質量との関係も同様に管理することができる。例えば、健康管理装置１は、ユーザが食事中の画像を撮影する撮影部と、撮影部で撮影された画像を基に食事を口にするかを判別する判別部と、判別部で判別された口にした食事の糖質量を取得する取得部と、取得部で取得された糖質量を累計して摂取糖質量を求め、目標糖質量と比較する比較部と、比較部で目標糖質量を超えると判断された場合に、報知する報知部とを備える。
また、報知部は、目標糖質量を超える食事と、目標糖質量を超えない食事を識別して報知する。また、報知部は、所定期間の摂取糖質量を一覧出力する。
また、撮影部は、配膳された食事を撮影し、取得部は、配膳された食事の各々の糖質量を取得し、比較部は、配膳された食事の糖質量と目標糖質量を比較し、報知部は、比較の結果に応じて、各食事ごとに、目標糖質量を超える食事と、目標糖質量を超えない食事とを識別して報知する。
また、目標糖質量を超えた場合に、超えた分の糖質量を運動量に換算する運動量換算部を更に備え、報知部は、目標糖質量を超える食事を報知する場合に、運動量を合わせて表示する。
また、運動量を計測する計測部と、計測部で計測された運動量を基に目標糖質量を更新する更新部を更に備え、比較部は、更新された目標糖質量と比較する。 (7) Although the relationship between meal and calories has been described as an example, the relationship between meal and sugar mass can be managed in the same manner. For example, the health management device 1 is discriminated by an imaging unit that captures an image of a meal by the user, a determination unit that determines whether to eat a meal based on an image captured by the imaging unit, and a determination unit. The acquisition unit that obtains the sugar mass of the mouthed meal, the total sugar mass obtained by the acquisition unit to obtain the ingested sugar mass, the comparison unit that compares the target sugar mass, and the comparison unit exceeds the target sugar mass When it is judged, it is provided with the alerting | reporting part which alert | reports.
The notification unit identifies and notifies a meal that exceeds the target sugar mass and a meal that does not exceed the target sugar mass. Further, the notification unit outputs a list of ingested sugar masses for a predetermined period.
The photographing unit photographs the served meal, the obtaining unit obtains the sugar mass of each of the served meals, the comparison unit compares the sugar mass of the served meal with the target sugar mass, The notification unit identifies and notifies, for each meal, a meal that exceeds the target sugar mass and a meal that does not exceed the target sugar mass for each meal.
In addition, when the target sugar mass is exceeded, the exercise unit further includes a momentum conversion unit that converts the excess sugar mass into the exercise amount, and the notification unit displays the exercise amount together when notifying a meal that exceeds the target sugar mass. To do.
Moreover, the measuring part which measures momentum, and the update part which updates a target sugar mass based on the momentum measured by the measurement part are further provided, and a comparison part compares with the updated target sugar mass.

以上説明した実施の形態によれば、次の作用効果が得られる。
（１）健康管理装置１は、ユーザが食事中の画像を撮影する撮影部１１と、撮影部１１で撮影された画像を基に食事を口にするかを判別する判別部（制御部１５、ステップＳ１３）と、判別部で判別された口にした食事のカロリー若しくは糖質量を取得する取得部（制御部１５、ステップＳ１６）と、取得部で取得されたカロリー若しくは糖質量を累計して摂取カロリーを求め、目標カロリー若しくは目標糖質量と比較する比較部（制御部１５、ステップＳ１９）と、比較部で目標カロリー若しくは目標糖質量を超えると判断された場合に、報知する表示部１２とを備える。したがって、摂取した食事の正確なカロリー若しくは糖質量を管理することが可能となる。 According to the embodiment described above, the following operational effects can be obtained.
(1) The health management device 1 includes an imaging unit 11 that captures an image of a meal by a user, and a determination unit (a control unit 15 that determines whether to eat a meal based on the image captured by the imaging unit 11). Step S13), the acquisition unit (control unit 15, step S16) for acquiring the calorie or sugar mass of the meal determined by the determination unit, and the calorie or sugar mass acquired by the acquisition unit for ingestion A comparison unit (control unit 15, step S19) that obtains calories and compares with the target calorie or target sugar mass, and a display unit 12 that notifies when the comparison unit determines that the target calorie or target sugar mass is exceeded. Prepare. Therefore, it is possible to manage the accurate calorie or sugar mass of the ingested meal.

本発明は、上記の実施の形態に限定されるものではなく、本発明の特徴を損なわない限り、本発明の技術思想の範囲内で考えられるその他の形態についても、本発明の範囲内に含まれる。また、上述の実施の形態と複数の変形例を組み合わせた構成としてもよい。 The present invention is not limited to the above-described embodiment, and other forms conceivable within the scope of the technical idea of the present invention are also included in the scope of the present invention as long as the characteristics of the present invention are not impaired. It is. Moreover, it is good also as a structure which combined the above-mentioned embodiment and a some modification.

１健康管理装置
１１撮影部
１２表示部
１３加速度計
１４回路部
１５制御部
１６データベース
１７通信部
１８記憶部 DESCRIPTION OF SYMBOLS 1 Health care apparatus 11 Image pick-up part 12 Display part 13 Accelerometer 14 Circuit part 15 Control part 16 Database 17 Communication part 18 Storage part

Claims

A shooting section for taking images of meals;
A discriminating unit for discriminating whether to eat a meal based on an image photographed by the photographing unit;
An acquisition unit that acquires the calorie or sugar mass of a meal to be determined by the determination unit;
Comparing the calorie or sugar mass acquired by the acquisition unit to obtain the intake calorie or intake sugar mass, and comparing with the target calorie or target sugar mass;
A health management device comprising: an informing unit for informing when the comparison unit determines that the target calorie or the target sugar mass is exceeded.

The health management device according to claim 1,
The said alerting | reporting part identifies and alert | reports the meal which exceeds the said target calorie or the said target sugar mass, and the meal which does not exceed the said target calorie or the said target sugar mass, The health management apparatus characterized by the above-mentioned.

In the health care device according to any one of claims 1 and 2,
The notification unit outputs a list of the calorie intake or the sugar intake mass for a predetermined period.

In the health care device according to any one of claims 1 to 3,
The photographing unit photographs a meal served,
The acquisition unit acquires the calorie or sugar mass of each of the served meals,
The comparison unit compares the calorie of the served meal with the target calorie, or compares the sugar mass of the served meal with the target sugar mass,
The notification unit identifies and notifies, for each meal, a meal that exceeds the target calorie or the target sugar mass and a meal that does not exceed the target calorie or the target sugar mass, for each meal. A health management device characterized by that.

In the health care device according to any one of claims 1 to 4,
When it exceeds the target calorie or the target sugar mass, it further comprises a momentum conversion unit for converting the calorie or sugar mass of the excess to the momentum,
The health reporting device, wherein the alerting unit displays the exercise amount together when notifying a meal that exceeds the target calorie or the target sugar mass.

In the health care device according to any one of claims 1 to 5,
A measurement unit that measures momentum;
An update unit that updates the target calorie or the target sugar mass based on the momentum measured by the measurement unit;
The comparison unit compares the updated target calorie or target sugar mass with the health management device.

In the health care device according to any one of claims 1 to 6,
A health management device, wherein at least the photographing unit, the determination unit, and the notification unit constituting the health management device are wearable terminal devices.

On the computer,
Shooting procedures for taking images of meals,
A discrimination procedure for discriminating whether to eat a meal based on the image taken in the shooting procedure,
An acquisition procedure for acquiring the calorie or sugar mass of the meal to be made in the mouth determined in the determination procedure,
Comparing the calorie or sugar mass acquired in the acquisition procedure to determine the intake calorie or intake sugar mass, and comparing with the target calorie or target sugar mass,
A health management program for executing a notification procedure for notification when it is determined in the comparison procedure that the target calorie or the target sugar mass is exceeded.