FR2796797A1

FR2796797A1 - Dispositif et procede pour afficher une image sur un ecran selon une perspective dependant de la position d'un utilisateur

Info

Publication number: FR2796797A1
Application number: FR9909691A
Authority: FR
Inventors: Etienne Pierre Philiponet
Original assignee: Eastman Kodak Co
Current assignee: Eastman Kodak Co
Priority date: 1999-07-22
Filing date: 1999-07-22
Publication date: 2001-01-26
Anticipated expiration: 2019-07-22
Also published as: FR2796797B1; JP2001103517A; EP1071045A1

Abstract

La présente invention concerne un dispositif et un procédé pour afficher une image représentant un objet en trois dimensions, sur un écran selon une perspective dépendant de la position d'un utilisateur.Le dispositif comprend : - un écran prévu pour afficher ladite image; - un moyen pour détecter la position dudit utilisateur; - un moyen pour générer une image dudit objet selon une perspective qui dépend de la position de l'utilisateur de manière à ce que lorsque l'utilisateur se déplace devant l'écran, l'image de l'objet est modifiée,le moyen pour détecter la position de l'utilisateur comprenant : - au moins un système d'enregistrement prévu pour enregistrer l'image de l'utilisateur;- un moyen pour traiter l'information enregistrée de manière à déterminer la position de l'utilisateur par rapport à l'écran.

Description

DISPOSITIF ET PROCEDE POUR AFFICHER UNE IMAGE SUR UN ECRAN

SELON UNE PERSPECTIVE DEPENDANT DE LA POSITION D'UN

UTILISATEUR

La présente invention concerne un dispositif et un procédé pour afficher une image représentant un objet en trois dimensions, sur un écran selon une perspective dépendant de la position d'un utilisateur. Le brevet US 5, 367,614 décrit un système qui permet d'afficher une image en trois dimensions selon une perspective variable. La perspective varie en fonction du mouvement de la tête de l'utilisateur. Ce dispositif est utilisé pour représenter un objet de manière à ce que l'utilisateur le voit comme s'il regardait un objet de la nature et non un objet représenté sur un écran. Le système15 utilisé comprend un transmetteur d'ultrasons prévu pour être disposé sur la tête de l'utilisateur et pour émettre des ondes sonores, et un ou plusieurs récepteurs prévus pour être disposés sur l'écran et pour recevoir ces ondes. L'émetteur et le récepteur sont connectés à une interface20 prévue pour analyser les signaux et notamment pour calculer le temps entre le moment o l'onde sonore est émise et le moment o elle est reçue. Un tel dispositif peut facilement être influencé par l'environnement extérieur de l'utilisateur c'est-à-dire que le récepteur reçoit des ondes sonores qui proviennent d'autres sources sonores que de l'émetteur. De plus, un tel dispositif doit être porté par l'utilisateur ce qui n'est pas très pratique. Un objet de l'invention est un dispositif et un procédé prévus pour donner l'impression à un utilisateur qui regarde un objet en trois dimensions sur un écran de regarder un objet réel qui ne présente pas les inconvénients de la technique antérieure. L'invention concerne un dispositif pour afficher une image d'un objet selon une perspective dépendant de la 2 position d'un utilisateur regardant ladite image, le dispositif comprenant: a) un écran prévu pour afficher ladite image; b) un moyen pour détecter la position dudit utilisateur; c) un moyen pour générer une image dudit objet selon une perspective qui dépend de la position de l'utilisateur de manière à ce que lorsque l'utilisateur se déplace devant l'écran, l'image de l'objet est modifiée,10 ledit dispositif étant caractérisé en ce que le moyen pour détecter la position de l'utilisateur comprend: d) au moins un système d'enregistrement prévu pour enregistrer l'image de l'utilisateur; e) un moyen pour traiter l'information enregistrée de

manière à déterminer la position de l'utilisateur par rapport à l'écran.

L'invention concerne également un procédé pour afficher une image d'un objet selon une perspective dépendant de la position d'un utilisateur regardant ladite image, ledit20 procédé comprenant les étapes de: afficher l'image dudit objet sur un écran; - enregistrer au moins une image de l'utilisateur au moyen d'un système d'enregistrement; déterminer la variation de position de l'utilisateur par rapport à l'écran; - mettre en oeuvre un algorithme permettant de modifier l'image de l'objet affichée sur ledit écran en fonction de

la variation de position de l'utilisateur par rapport à l'écran.30 D'autres caractéristiques apparaîtront à la lecture de la description qui suit, faite en référence aux dessins

dans lesquels: - la Figure 1 représente une vue schématique d'un premier mode de réalisation du dispositif selon l'invention; - la Figure 2 représente une vue de dessus du premier mode de réalisation du dispositif de l'invention; - la Figure 3 représente une image de l'utilisateur enregistrée par le premier mode de réalisation du dispositif de l'invention; - la Figure 4 représente une vue en perspective du premier mode de réalisation du dispositif de l'invention; - la Figure 5 représente une vue schématique d'un second mode de réalisation du dispositif de l'invention; - la Figure 6 représente une vue de dessus du second mode de réalisation de l'invention; - les Figures 7a et 7b représentent des images de l'utilisateur enregistrées par le second mode de réalisation du dispositif de l'invention.15 Le dispositif de l'invention est prévu pour afficher une image d'un objet sur un écran selon une perspective qui dépend de la position de l'utilisateur qui regarde l'image. Si on se réfère aux figures 1 et 5, on peut voir schématiquement que le dispositif comprend un écran 20 sur lequel un objet est affiché. L'utilisateur 10 du dispositif se trouve en face de l'écran 20 de manière à regarder ledit objet. Afin de donner l'impression à l'utilisateur 10 qu'il regarde un objet réel, le dispositif de la présente invention se propose de modifier la perspective selon25 laquelle l'objet est affiché sur l'écran 20 en fonction de la position de l'utilisateur 10 par rapport à l'écran 20. A cet effet, le dispositif comprend un moyen 30 pour détecter la position de l'utilisateur 10 et en particulier la position du visage de l'utilisateur 10. Le moyen 30 pour30 détecter la position de l'utilisateur 10 comprend au moins un système d'enregistrement 31 prévu pour enregistrer en continu numériquement l'image du visage de l'utilisateur 10. Il s'agit par exemple d'une caméra numérique, par exemple une caméra KODAK DVC 323. Le dispositif comprend également un moyen 32 pour traiter l'information enregistrée par la caméra 31 de manière à déterminer la

4 position de l'utilisateur 10 par rapport à l'écran 20.

L'image de l'utilisateur 10 étant enregistrée en continu, le moyen 32 pour traiter l'information enregistrée permet de déterminer à tout instant la position de l'utilisateur5 10 par rapport à une position de référence. Lorsque la position est déterminée, une information est générée en fonction de laquelle un moyen 40 pour générer une image de l'objet va modifier l'image dudit objet. Le procédé de l'invention comprend les étapes suivantes. Après avoir initialisé le système on affiche l'image de l'objet sur l'écran 20. On enregistre, au moyen d'au moins un système d'enregistrement 31 une image de l'utilisateur 10. On détermine ensuite la variation de position de l'utilisateur 10 par rapport à l'écran 20. On15 met ensuite en oeuvre un algorithme permettant de modifier l'image de l'objet affichée sur l'écran 20 en fonction de la variation de position de l'utilisateur 10 par rapport à l'écran 20. Pour déterminer la variation de position de l'utilisateur 10 par rapport à l'écran 20 plusieurs modes20 de réalisation sont proposés. On peut tout d'abord déterminer les variations de position angulaires dans un

plan horizontal et/ou vertical. On peut également déterminer de façon indépendante ou en supplément, les variations de distance entre l'utilisateur 10 et l'écran25 20.

Selon un premier mode de réalisation représenté schématiquement à la figure 1, le dispositif comprend un seul système d'enregistrement 31. Il s'agit d'une caméra numérique disposée par exemple centrée au dessus de l'écran30 d'affichage 20. Il est évident que la caméra peut être placée à tout autre endroit qui permet d'enregistrer une image du visage de l'utilisateur 10. L'enregistrement du visage est effectué selon une seule direction. Pour déterminer les variations angulaires de l'utilisateur 1035 par rapport à l'écran 20, le moyen 32 pour traiter l'information utilisé est un moyen pour repérer un point caractéristique de l'utilisateur 10, de préférence de son visage. On choisira par exemple le nez, le centre entre les deux yeux, ou encore le barycentre des teintes chaire de son visage. A cet effet, on peut utiliser tout procédé de5 reconnaissance connu de l'homme du métier. Selon un mode particulier, on détermine la position de deux points correspondant aux yeux. En début d'utilisation, l'image du visage de l'utilisateur 10 enregistrée par la caméra 31 est affichée sur l'écran 20. L'utilisateur 10 est à cet instant10 invité à initialiser le système, par exemple en générant une ou plusieurs impulsions. On peut par exemple envisager que l'utilisateur 10 clique sur les deux points correspondant aux yeux. En même temps qu'il initialise le système, les deux points sont ainsi repérés dans un système15 de coordonnées attaché à l'image enregistrée par la caméra 31 (voir figure 3). On obtient ainsi deux couples (X1, Y1) et (X2, Y2). En calculant les coordonnées du couple [(Xl+X2)/2; (Y1+Y2)/2], on détermine les coordonnées du centre entre les deux yeux. On détermine ensuite l'axe d1 entre le point caractéristique du visage de l'utilisateur et le centre de la caméra 31. Une valeur a est alors attribuée à l'angle, mesuré dans un plan horizontal, entre cet axe d1 et l'axe optique de la caméra (voir figure 2). Avantageusement, une valeur D est attribuée à l'angle,25 mesuré dans un plan vertical, entre cet axe d1 et l'axe optique de la caméra(voir figure 4). Lorsque par exemple l'utilisateur bouge la tête dans un plan horizontal et/ou vertical, les coordonnées du couple [(X1+X2) /2; (Y1+Y2)/2] varient de sorte que l'angle a et/ou P varie(nt). Un30 algorithme est alors mis en oeuvre pour modifier l'image de l'objet à regarder sur l'écran 20 en fonction de la variation de l'angle a et/ou 3 de manière à faire tourner l'objet d'un certain angle, c'est-à-dire à représenter l'objet selon une perspective donnée. Avantageusement, pour35 simuler sensiblement la réalité, on prévoit de repérer deux points séparés d'une distance moyenne connue, par exemple 6 la distance entre les deux yeux. A partir de cette distance, on détermine la position de l'utilisateur sur l'axe d1. Connaissant également la position de la caméra 31 par rapport au centre de l'écran, on peut en déduire les5 angles de variations sensiblement réels de l'utilisateur par rapport à l'écran. Ainsi, on peut prévoir de faire

tourner l'objet de cette variation réelle d'angle de sorte que la réalité soit simulée. On peut également prévoir de faire bouger l'objet d'un angle deux fois plus important ou10 d'une autre proportion.

Selon ce mode de réalisation, on prévoit avantageusement de déterminer de plus les variations de distance entre l'utilisateur 10 et l'écran 20. A cet effet, on détermine deux points caractéristiques de l'image de15 l'utilisateur 10 et on repère la variation de la distance entre ces deux points, par exemple les deux yeux. On peut par exemple, lors de l'initialisation faite par l'utilisateur 10, attribuer une valeur arbitraire A à la distance entre l'utilisateur 10 et l'écran 20. En réalité20 cette valeur de référence est attribuée à la distance entre les deux yeux (X2-X1, Y2-Y1) selon notre exemple (voir figure 3). Ainsi, lorsque par exemple l'utilisateur 10 se rapproche ou s'éloigne de l'écran 20, la distance entre les deux points mesurée augmentera ou diminuera par rapport à25 la valeur de référence. En fonction de la variation de cette distance, on met en oeuvre un algorithme permettant de modifier l'objet affiché de sorte qu'il soit affiché en étant grossi ou réduit. Il est évident que toute distance entre deux points caractéristiques du visage peut être

utilisée pour repérer la variation de la distance entre l'écran 20 et l'utilisateur 10.

Selon ce mode de réalisation, lorsque l'utilisateur 10 effectue uniquement une rotation de la tête dans un plan parallèle à l'écran, l'objet n'est pas modifié. En effet,35 la distance (X2-X1, Y2-Y1) entre les deux yeux n'est pas 7 modifiée. De même les angles a et P ne sont pratiquement pas modifiés car l'ensemble de la tête n'est pas déplacé. Selon un second mode de réalisation représenté schématiquement à la figure 5, le dispositif comprend deux systèmes d'enregistrement 31. Il s'agit de deux caméras numériques disposées par exemple au dessus de l'écran 20 et orientées selon deux angles différents de manière à enregistrer deux images différentes de l'utilisateur 10. Avant d'enregistrer une image, l'utilisateur 10 est invité10 à initialiser le dispositif, par exemple en générant une impulsion. A cet instant, chaque système d'enregistrement 31 enregistre alors une image du visage de l'utilisateur 10

(voir figures 7a et 7b).

Afin de repérer les variations de position de l'utilisateur 10, le moyen 32 pour traiter l'information utilisé est par exemple un moyen pour repérer un point caractéristique de l'utilisateur 10, de préférence de son visage sur les deux enregistrements. On peut par exemple repérer les teintes chaire du visage et calculer le20 barycentre du visage. On obtient ainsi les coordonnées (X3; Y3) et (X4; Y4) du barycentre dans le système de coordonnées associé à chaque image (figures 7a et 7b)). On détermine alors les axes d2 et d3 entre chaque système d'enregistrement 31 et le barycentre des teintes chaire du25 visage de l'utilisateur 10 (voir figure 6). Connaissant la position de chaque système d'enregistrement 31 l'un par rapport à l'autre et par rapport à l'écran 20, on déduit la position exacte dans l'espace de l'intersection I entre les axes d2 et d3 par rapport au centre de l'écran. Lorsque30 l'utilisateur 10 bouge la tête dans un plan horizontal et/ou vertical, les coordonnées (X3; Y3) et (X4; Y4)du barycentre varient ce qui entraîne une variation de la position de l'intersection I entre les axes d2 et d3. Un algorithme est alors mis en oeuvre de manière à modifier35 l'image de l'objet afin de faire tourner l'objet d'un certain angle correspondant à la variation angulaire réelle 8 de l'utilisateur par rapport à l'écran de sorte que la réalité soit simulée ou encore d'une autre proportion. Selon ce mode de réalisation, la variation de la distance entre l'utilisateur et l'écran est directement déterminée par la variation de la position de l'intersection I entre les deux axes d1 et d2. Ainsi, lorsque l'utilisateur 10 se rapproche ou s'éloigne de l'écran 20, les coordonnées (X3; Y3) et (X4; Y4) du barycentre sont modifiées de sorte que l'intersection I10 n'est plus à la même distance de l'écran 20. En fonction de la variation de cette distance, une nouvelle image de

l'objet est générée de sorte que l'objet apparaisse grossi ou réduit pour l'utilisateur 10. Il est évident que tout point caractéristique du visage peut être utilisé dans ce15 mode de réalisation.

Là encore, lorsque l'utilisateur 10 effectue uniquement une rotation de la tête dans un plan parallèle à l'écran, l'objet n'est pas modifié. En effet, le barycentre des teintes chaire ne varie pas.20 Le dispositif qui vient d'être décrit est par exemple utilisé sur une borne interactive qui permet de donner

l'illusion à l'utilisateur de regarder des objets réels qui sont en fait des objets affichés sur un écran. Ce dispositif peut également être utilisé pour de la25 simulation, par exemple de la simulation de vol ou de toute autre activité.

Claims

REVENDICATIONS

1 - Dispositif pour afficher une image d'un objet selon une perspective dépendant de la position d'un utilisateur (10) regardant ladite image, le dispositif comprenant: a) un écran (20) prévu pour afficher ladite image; b) un moyen (30) pour détecter la position dudit utilisateur (10); c) un moyen (40) pour générer une image dudit objet selon une perspective qui dépend de la position de l'utilisateur (10) de manière à ce que lorsque l'utilisateur (10) se déplace devant l'écran (20)., l'image de l'objet est modifiée; ledit dispositif étant caractérisé en ce que le moyen (30) pour détecter la position de l'utilisateur (10) comprend: d) au moins un système d'enregistrement (31) prévu pour enregistrer l'image de l'utilisateur (10); e) un moyen (32) pour traiter l'information enregistrée de manière à déterminer la variation de position de l'utilisateur (10) par rapport à l'écran (20).

2 - Dispositif selon la revendication 1 dans lequel le système d'enregistrement (31) est une caméra

numérique.

3 - Dispositif selon la revendication 1 ou 2 qui comprend un unique système d'enregistrement (31), le moyen (32) pour traiter l'information enregistrée étant un moyen pour déterminer la position d'au moins deux

points particuliers de l'image de l'utilisateur (10).

4 - Dispositif selon la revendication 1 ou 2 qui comprend deux systèmes d'enregistrement (31) qui enregistrent l'image de l'utilisateur (10) selon des angles différents.

5 - Procédé pour afficher une image d'un objet selon une perspective dépendant de la position d'un utilisateur (10) regardant ladite image, ledit procédé comprenant les étapes de: - afficher l'image dudit objet sur un écran (20); - enregistrer au moins une image de l'utilisateur (10) au moyen d'un système d'enregistrement (31); déterminer la variation de position de l'utilisateur (10) par rapport à l'écran (20); - mettre en oeuvre un algorithme permettant de modifier l'image de l'objet affichée sur ledit écran (20) en fonction de la variation de position de

l'utilisateur (10) par rapport à l'écran (20).

6 - Procédé selon la revendication 5 dans lequel l'étape de détermination de variation de position de l'utilisateur (10) comprend: - la détermination d'un axe entre ledit écran (20) et un point caractéristique de l'image de l'utilisateur (10); - la détermination des variations angulaires dudit axe; la mise en oeuvre de l'algorithme permettant de modifier l'image de l'objet affichée sur ledit écran

(20) dépendant des variations angulaires dudit axe.

7 - Procédé selon la revendication 5 ou 6 dans lequel l'étape de détermination de variation de position de l'utilisateur (10) comprend: la détermination de deux points caractéristiques de l'image de l'utilisateur (10); - la détermination des variations de la distance entre lesdits deux points caractéristiques de l'image de l'utilisateur (10); la mise en oeuvre de l'algorithme permettant de modifier l'image de l'objet affichée sur ledit écran (20) dépendant des variations de la distance entre

lesdits deux points caractéristiques.

8 - Procédé selon la revendication 5 ou 6 dans lequel on enregistre deux images de l'utilisateur (10) au moyen de deux systèmes d'enregistrement (31), procédé dans lequel l'étape de détermination de variation de position de l'utilisateur (10) comprend: - la détermination de l'intersection des axes entre chaque système d'enregistrement (31) et un point caractéristique de l'utilisateur (10); - la détermination des variations de la position de l'intersection desdits axes; la mise en oeuvre de l'algorithme permettant de modifier l'image de l'objet affichée sur ledit écran (20) dépendant des variations de la position de

l'intersection desdits axes.