[go: up one dir, main page]

WO2010007988A1 - データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 - Google Patents

データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 Download PDF

Info

Publication number
WO2010007988A1
WO2010007988A1 PCT/JP2009/062737 JP2009062737W WO2010007988A1 WO 2010007988 A1 WO2010007988 A1 WO 2010007988A1 JP 2009062737 W JP2009062737 W JP 2009062737W WO 2010007988 A1 WO2010007988 A1 WO 2010007988A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
viewing environment
peripheral devices
illumination
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2009/062737
Other languages
English (en)
French (fr)
Inventor
琢也 岩波
靖昭 徳毛
義昭 荻澤
典男 伊藤
秀一 渡部
伸也 長谷川
隆司 吉井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to CN2009801273893A priority Critical patent/CN102090057A/zh
Priority to JP2010520869A priority patent/JP5092015B2/ja
Priority to US13/054,177 priority patent/US20110190911A1/en
Priority to BRPI0916465A priority patent/BRPI0916465A2/pt
Priority to EP09797913A priority patent/EP2315442A1/en
Publication of WO2010007988A1 publication Critical patent/WO2010007988A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4131—Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8186—Monomedia components thereof involving executable data, e.g. software specially adapted to be executed by a peripheral of the client device, e.g. by a reprogrammable remote control

Definitions

  • the present invention relates to a data transmission device, a data transmission method, a viewing environment control device, a viewing environment control system, and a viewing environment control method, and in particular, viewing of a user for realizing viewing of video / audio content with high presence.
  • the present invention relates to a data transmission device, a data transmission method, a viewing environment control device, a viewing environment control system, and a viewing environment control method for controlling peripheral devices in an environment space.
  • Patent Document 1 discloses a technique for linking an image displayed on such a display with illumination light of an illumination device.
  • the technology disclosed herein is intended to provide a high sense of presence, and in a lighting system that controls a plurality of lighting devices in conjunction with a video to be displayed, a feature amount (representative color) of video data is provided. , Average luminance), a method for generating illumination control data for a plurality of illumination devices is described. Specifically, a feature amount of video data in a predetermined screen area is detected according to an installation position of each lighting device, and lighting control data for each lighting device is generated based on the detected feature amount. Is described.
  • the illumination control data is not limited to the one obtained by calculating from the feature amount of the video data, and may be one that is distributed alone or together with the video data, or one that is distributed via the Internet, or one that is distributed by a carrier wave. It is described that it is good.
  • Patent Document 1 describes that illumination control data may be distributed from the outside via the Internet or the like.
  • the illumination control data is illumination control data corresponding only to a predetermined layout of the illumination device (installation position of the illumination device in the virtual viewing environment space), and the illumination varies widely for each user. There is a problem that appropriate illumination control cannot be performed according to the arrangement layout of the apparatus.
  • the present invention has been made in view of the above-described problems of the prior art, and data transmission that enables appropriate control of peripheral devices according to the layout of peripheral devices in an actual viewing environment space.
  • An object is to provide a device, a data transmission method, a viewing environment control device, a viewing environment control method, a viewing environment control system, and a viewing environment control method.
  • a first technical means of the present invention is a data transmission device that transmits video data and / or audio data, and identifies an arrangement pattern of peripheral devices in a virtual viewing environment space
  • the information processing apparatus includes transmission means for transmitting information and viewing environment control data for peripheral devices in the virtual viewing environment space in addition to the video data and / or audio data.
  • the arrangement pattern of peripheral devices indicated by the identification information includes an arrangement pattern in which peripheral devices are installed on a ceiling in the virtual viewing environment space. It is what.
  • the arrangement pattern of the peripheral devices indicated by the identification information is the left side around the video display device for displaying the video data in the virtual viewing environment space. Includes a layout pattern in which peripheral devices are installed.
  • the arrangement pattern of the peripheral device indicated by the identification information is the right side around the video display device for displaying the video data in the virtual viewing environment space. Includes a layout pattern in which peripheral devices are installed.
  • the arrangement pattern of the peripheral devices indicated by the identification information is the surroundings of the video display device for displaying the video data in the virtual viewing environment space. It includes a layout pattern in which peripheral devices are installed on the back.
  • the viewing environment control data includes position information indicating installation positions of peripheral devices constituting the arrangement pattern. is there.
  • the viewing environment control data includes position information indicating an installation direction of peripheral devices constituting the arrangement pattern. is there.
  • the eighth technical means according to any one of the first to seventh technical means is characterized in that the viewing environment control data includes information indicating a driving priority order for the peripheral device.
  • the viewing environment control data includes mode information indicating a description method of the viewing environment control data for the peripheral device. is there.
  • the tenth technical means is the ninth technical means, characterized in that the mode information includes information indicating that a drive control value for the peripheral device is described by an absolute value.
  • An eleventh technical means is the ninth technical means, wherein the mode information indicates that a drive control value for the peripheral device is described by a difference value from a drive control value for another designated peripheral device. It is characterized by including information.
  • a twelfth technical means is the ninth technical means, wherein the mode information indicates that a drive control value for the peripheral device is described by a ratio value with a drive control value for another designated peripheral device. It is characterized by including information.
  • the mode information includes information indicating that a drive control value for the peripheral device is the same as a drive control value for another designated peripheral device. It is a feature.
  • the fourteenth technical means includes identification information indicating an arrangement pattern of peripheral devices in the virtual viewing environment space in association with video data and / or audio data, and viewing environment control for the peripheral devices in the virtual viewing environment space
  • the fifteenth technical means according to any one of the first to fourteenth technical means is characterized in that the peripheral device in the virtual viewing environment space is a lighting device.
  • the sixteenth technical means according to any one of the first to fourteenth technical means is characterized in that the peripheral device in the virtual viewing environment space is a blower.
  • the seventeenth technical means receives the video data and / or audio data, and includes identification information indicating an arrangement pattern of peripheral devices in the virtual viewing environment space, and a viewing environment for the peripheral devices in the virtual viewing environment space.
  • the eighteenth technical means is characterized in that, in the seventeenth technical means, the viewing environment control data includes position information indicating installation positions of peripheral devices constituting the arrangement pattern.
  • the viewing environment control data includes position information indicating an installation direction of peripheral devices constituting the arrangement pattern.
  • the twentieth technical means includes the seventeenth technical means, a video / audio reproduction device for reproducing the video data and / or audio data, and peripheral devices installed around the video / audio reproduction device. It is characterized by having provided.
  • a twenty-first technical means is a data transmission method for transmitting video data and / or audio data, the identification information indicating an arrangement pattern of peripheral devices in the virtual viewing environment space, and the virtual viewing environment space Viewing environment control data for a peripheral device is added to the video data and / or audio data and transmitted.
  • the twenty-second technical means includes identification information indicating an arrangement pattern of peripheral devices in the virtual viewing environment space in association with video data and / or audio data, and viewing environment control for the peripheral devices in the virtual viewing environment space. And receiving the transmission request from the external device, and transmitting the identification information regarding the predetermined video data and / or audio data and the viewing environment control data to the external device of the transmission request source. It is a feature.
  • the twenty-third technical means includes a step of receiving video data and / or audio data, identification information indicating an arrangement pattern of peripheral devices in the virtual viewing environment space, and a viewing environment for the peripheral devices in the virtual viewing environment space Using the step of receiving control data, the step of storing device arrangement information representing the arrangement pattern of peripheral devices in the actual viewing environment space, and the received identification information and the stored device arrangement information, The method includes a step of converting the viewing environment control data into drive control data for driving and controlling peripheral devices in the actual viewing environment space.
  • identification information indicating an arrangement pattern of peripheral devices arranged in a virtual viewing environment space, and the virtual viewing environment space.
  • the data transmission device the data transmission method, the viewing environment control device, and the viewing environment control system according to the embodiment of the present invention will be described mainly using the lighting device as an example of the peripheral device arranged in the viewing environment space.
  • the device is not limited to a lighting device as long as it is a device that controls the viewing environment, and can also be applied to an air conditioner, a blower, a vibration device, a scent generator, and the like.
  • FIG. 1 is a block diagram showing a schematic configuration example of a data transmission apparatus according to an embodiment of the present invention.
  • the data transmission device 10 in this embodiment includes a data multiplexing unit 11 and a transmission unit 12.
  • the input video data is compression encoded and output to the data multiplexing unit 11.
  • various compression methods such as ISO / IEC 13818-2 (MPEG-2 Video), ISO / IEC 14496-2 (MPEG-4 Visual), ISO / IEC 14496-10 (MPEG-4 AVC), etc. Is available.
  • the input audio data is compression-coded and output to the data multiplexing unit 11.
  • Various compression schemes such as ISO / IEC 13818-7 (MPEG-2 AAC) and ISO / IEC 14496-3 (MPEG-4 Audio) can be used for audio encoding.
  • the identification information and the illumination control data are compression encoded and output to the data multiplexing unit 11. Details of the identification information and the illumination control data will be described later.
  • an XML (Extensible Markup Language) format is used.
  • the BiM (Binary format for MPEG-7) method in ISO / IEC 15938-1 (MPEG-7 Systems) can be used.
  • the data may be output in the XML format without being compressed.
  • the encoded video data, audio data, identification information, and illumination control data are multiplexed by the data multiplexer 11 and transmitted or stored via the transmitter 12.
  • MPEG-2 transport stream packet TSP
  • IP packet IP packet
  • RTP packet etc.
  • ISO / IEC 13818-1 MPEG-2 Systems
  • the viewing environment control data is described in the extension header portion following the header in which the information defined by MPEG-2 is described.
  • the video data and the audio data can be transmitted by the payload following the extension header. Or you may make it transmit identification information and illumination control data by a payload like video data or audio
  • different data streams of video data, audio data, identification information, and illumination control data may be multiplexed and transmitted.
  • the identification information indicates an arrangement pattern of peripheral devices in a virtual viewing environment space, and in the case of a lighting device, the arrangement pattern of lighting devices arranged in the listening environment space (in the case of a lighting device, lighting).
  • the arrangement location of the apparatus for example, information on what kind of lighting method is used, information on where to illuminate, information indicating an irradiation direction, an irradiation angle, and the like may be included.
  • FIG. 2 shows an example in which the number of channels of the illumination device, the location of the illumination device for each channel number, and the illumination method are defined as an example of identification information (channel type ID) related to the arrangement pattern of the illumination device. Is shown.
  • FIG. 2 when the channel type ID is set to “1”, two illumination devices Ch1 and Ch2 are provided, and Ch1 illuminates the back surface (periphery) of the video display device (display) (indirect illumination).
  • Ch2 represents an illumination arrangement pattern in which the lower part is illuminated (direct illumination) from the ceiling.
  • FIG. 3 shows an arrangement pattern of the lighting devices 32 (Ch1 and Ch2) with respect to the display 30 defined when the channel type ID is “1”, where Ch1 is a lower part of the display 30 and Ch2 is a ceiling. Is arranged.
  • FIG. 4 shows a viewing environment space corresponding to the case where the channel type ID is “1”.
  • the rear surface (periphery) of the display 30 is illuminated by Ch1, and the entire space is illuminated from the ceiling by Ch2. Which indicates that.
  • FIG. 2 when the channel type ID is set to “2”, two illumination devices Ch1 and Ch2 are provided, Ch1 illuminates the left side of the back of the display (indirect illumination), and Ch2 indicates the display.
  • An illumination arrangement pattern for illuminating the back right side (indirect illumination) is shown.
  • FIG. 5 shows an arrangement pattern for the display 30 of the lighting devices 32 (Ch1 and Ch2) defined when the channel type ID is “2”, where Ch1 is on the left side of the display 30 and Ch2 is the display. 30 on the right side.
  • FIG. 6 shows a viewing environment space corresponding to the case where the channel type ID is “2”. The left rear surface of the display 30 is illuminated by Ch1, and the right rear surface of the display 30 is illuminated by Ch2. It is shown that.
  • the identification information (channel type ID) is secured for 8 bits (256), and other illumination arrangement patterns can be defined.
  • the number of illumination channels is not limited to two, and the arrangement pattern may be defined for one or more channels.
  • the installation location of the lighting device is assumed to be arranged directly on the left and right sides of the display as in the case shown in FIG.
  • channel type ID “3”.
  • the illumination control data which will be described in detail later, is the viewing environment control data for the lighting device arranged in the virtual viewing environment space, and each of the arrangement patterns defined by the identification information. This is control data for driving and controlling the illumination device of the channel. Therefore, it can be said that the arrangement pattern of the illumination device indicated by the identification information represents the viewing environment on which the illumination control data is generated.
  • the lighting control data is provided in conjunction with the video / audio data, but is not necessarily added for each frame of the video data, but for each scene or shot of the video data having a story connection.
  • the video data may be added to the video data regularly or irregularly at an appropriate interval.
  • four types of data such as video data, audio data, identification information, and illumination control data are multiplexed and transmitted as broadcast data.
  • multiplexing is an essential requirement.
  • an appropriate transmission method may be selected as necessary.
  • the respective data may be transmitted separately without being multiplexed, and further, the video data and the audio data may be multiplexed, and the identification information and the illumination control data may be transmitted independently.
  • the identification information and the lighting control data are accumulated in an external server device accessible via the Internet or the like, and a URL (Uniform Resource Locator) for identifying the accumulated identification information and the lighting control data. ) Etc. may be multiplexed with the video data and transmitted. Further, when the identification information and the illumination control data are transmitted through a network different from that of the video data, the information relating the identification information and the illumination control data to the video data is not limited to the above-mentioned URL, but the identification information such as the content name and the illumination. Any information may be used as long as the correspondence between the control data and the video data can be specified.
  • a URL Uniform Resource Locator
  • the identification information and the specific information for associating the illumination control data with the video / audio multiplexed data when the identification information and the illumination control data are transmitted on a different network from the video / audio multiplexed data include the URL described above.
  • any specific information that can identify the correspondence between video / audio multiplexed data, identification information, and illumination control data such as CRID (Content Reference ID) and content name in the TV-Anytime standard, may be used.
  • CRID Content Reference ID
  • only the identification information and the illumination control data may be recorded on a separate recording medium and distributed.
  • video / audio data may be distributed on a large-capacity recording medium such as a Blu-ray Disc or DVD, and identification information and illumination control data may be distributed on a small semiconductor recording medium.
  • the identification information and the illumination control data are handled as separate data, but it goes without saying that they may be described in one data format including the data contents of both.
  • FIG. 7 is a block diagram showing a schematic configuration example of a viewing environment control system according to an embodiment of the present invention.
  • 20 is a data receiving device
  • 30 is a video display device (hereinafter referred to as a display)
  • 31 is an audio reproducing device
  • 32 is a lighting device.
  • the data reception device 20 includes a reception unit 21, a data separation unit 22, delay generation units 23a and 23b, an illumination dimming data generation unit 24 as a drive control data generation unit, and illumination as a unit for storing device arrangement information
  • An arrangement information storage unit 25 is provided.
  • the data reception device 20 receives broadcast data in which video data, audio data, identification information, and illumination control data are multiplexed in the reception unit 21, and the data separation unit 22 receives video data, audio data, identification from the broadcast data. Separate information and lighting control data.
  • the video data and audio data separated in the data separator 22 are transmitted to the delay generators 23a and 23b together with a TC (time code) indicating the start time of the video data and audio data, and the video data and audio data are transmitted via the delay generator 23a.
  • Data is sent to the video display device 30, and audio data is sent to the audio reproduction device 31 via the delay generator 23b.
  • the identification information and the illumination control data separated in the data separation unit 22 are sent to the illumination dimming data generation unit 24.
  • the lighting arrangement information storage unit 25 stores arrangement information of each lighting device 32 installed in the viewing environment space (real space) of the viewer, and the lighting device 32 is in accordance with a command from the lighting dimming data generation unit 24. Is sent to the illumination dimming data generation unit 24 as appropriate.
  • the illumination dimming data generation unit 24 Is sent to the illumination dimming data generation unit 24 as appropriate.
  • two illumination devices 32 are installed around the video display device 30, and the illumination device Ch1 is an on-floor installation type indirect illumination.
  • the lighting device Ch2 is a ceiling-mounted type and directly illuminates, an illumination arrangement information storage unit is provided so that each lighting device 32 can be individually controlled according to its installation position. 25, it is necessary to store information on the number of lighting devices, the relative position with respect to the video display device 30, and the lighting method.
  • the lighting arrangement information storage unit 25 stores information on the relative position and the lighting method with respect to the video display device 30 for each of the identifiers. What is necessary is just to make it the structure hold
  • illumination dimming data generation unit 24 based on the identification information and the illumination control data separated by the data separation unit 22, and the arrangement information of the illumination device 32 in the actual viewing environment space acquired from the illumination arrangement information storage unit 25, Approximate driving control data for driving and controlling the lighting device 32 installed in the viewer's actual viewing environment space (for example, the left and right lighting control data are received, but only one lighting device is in the center. If there is not, illumination dimming data (RGB data) is generated by approximating the average value of the two illumination control data to the actual illumination control data), and this is output to the illumination device 32.
  • RGB data is generated by approximating the average value of the two illumination control data to the actual illumination control data
  • Delay generation units 23a and 23b are provided for delaying the video data and the audio data separated by the data separation unit 22 and synchronizing with the illumination dimming data by a time required for the conversion.
  • an LED light source of each color of R (red), G (green), and B (blue) that can be independently controlled to emit light can be used.
  • These three primary color LED light sources emit illumination light having a desired color and brightness.
  • the illumination device 32 may be configured to be able to control the illumination color and brightness of the surrounding environment of the video display device 30, and is limited to the combination of the LED light sources that emit the predetermined colors as described above.
  • a white LED and a color filter may be used, or a combination of a white light bulb, a fluorescent tube and a color filter, a color lamp, or the like may be applied.
  • the expression is not limited to R (red), G (green), and B (blue) colors, but may be expressed using, for example, illumination color temperature (unit: K).
  • FIG. 7 shows a case where the illumination device 32 is driven by RGB data.
  • the data receiving device 20 of the viewing environment control system may be provided integrally with the video display device 30 and the audio playback device 31, or may be provided separately from each other.
  • the data receiving device 20 in the present embodiment approximates the drive control data based on the identification information and the illumination control data acquired from the outside, and thereby the illumination device 32 installed in the actual viewing environment space. Can be appropriately controlled.
  • FIG. 9 shows an example of the description content of the illumination control data.
  • a channel type ID identification information representing an arrangement pattern of one or more lighting devices in a virtual viewing environment space
  • priority information shown in FIG. 10
  • priority information shown in FIG. 11
  • Mode information shown in FIG. 11
  • reference Ch channel
  • illumination control data illumination color temperature information.
  • candela Cd
  • lumen lm
  • lux lx
  • color expression not the color temperature but an XYZ color system, an RGB color system, a YCbCr color system, or the like may be used. All of these pieces of information are useful information for producing the atmosphere and presence of the scene of the video data with illumination light.
  • the human visual field is classified into a discrimination visual field 101, an effective visual field 102, a guidance visual field 103, and an auxiliary visual field 104 according to the function of the visual function.
  • the discrimination visual field 101 is a range in which high-density information such as graphic identification can be accurately received
  • the effective visual field 102 is a range in which natural information can be received only by eye movement although the discrimination ability is lower than that of the discrimination visual field 101.
  • the guidance visual field 103 has only a recognition ability that allows the presence of a presenting stimulus and simple identification, but has an influence when determining overall external information.
  • the auxiliary visual field 104 is a range in which only the presence of a stimulus can be determined.
  • the current high-definition television is designed to display an image in a range covering the effective visual field 102 among the above. That is, information such as video and illumination is not displayed in the guiding visual field 103 and the auxiliary visual field 104. Therefore, it can be expected that the presence of the visual field 103 and the auxiliary visual field 104 is further enhanced by irradiating the illumination.
  • the back surface of the display 30 is illuminated to cover the guidance visual field and auxiliary visual field around the display 30 with illumination.
  • the back surface of the display 30 is illuminated to cover the guidance visual field and auxiliary visual field around the display 30 with illumination.
  • the back surface of the display 30 is illuminated to cover the guidance visual field and the auxiliary visual field around the display with illumination, thereby providing a sense of reality.
  • FIG. 10 is a diagram illustrating an example of priority information.
  • the priority is set to 5 levels (low, slightly low, normal, slightly high, high), and the priority is set. It is possible to irradiate only high illumination. As a result, the number of lights on the receiving side and the placement location are limited, and even when the lighting placement pattern in the virtual viewing environment space is different from the lighting placement status in the actual viewing environment space, the lighting with the highest priority is provided.
  • the illumination value it is possible to realize an illumination situation that the transmission side desires to turn on preferentially on the reception side.
  • FIG. 11 is a diagram illustrating an example of mode information.
  • mode information indicating the description method of the brightness and color of a plurality of lighting devices.
  • the description method of the illumination value of other illumination is set for the reference illumination reference RefID. Is shown.
  • the mode is “Abs”
  • absolute values relating to the brightness and color of the illumination are described for each illumination device.
  • the mode is “Rel”
  • a difference value or a ratio value regarding the brightness and color of the illumination with respect to the reference illumination RefID is described for each illumination device.
  • the mode is “Equ”, it is described as “Ecu” on the assumption that each lighting device has the same value as the reference illumination RefID.
  • the ambient illuminance (unit: lx) is increased by 100 lx from the reference illumination by using the mode “Rel”.
  • the temperature is lowered by 1000K
  • the ambient illuminance is raised by 10%, or when the color temperature is lowered by 20%
  • the amount of data representing the brightness and color of a plurality of lighting devices is reduced, which is effective.
  • the brightness and color of a plurality of lighting devices are described in the mode “Abs”, for example, when the brightness and color of the reference illumination and the surrounding illumination are equal by using the mode “Equ”, This is effective in reducing the amount of data representing the brightness and color of a plurality of lighting devices.
  • FIG. 12 is a diagram for explaining an example in which the illumination control data is described in the XML format
  • FIG. 13 is an explanatory diagram showing an XML schema corresponding to the illumination control data.
  • this illumination control data corresponds to the arrangement of the illumination device corresponding to the arrangement pattern of the channel type ID “2” in the identification information of FIG. It can be seen that the control data for the lighting device in the arrangement of the lighting device shown in FIG. 5 is described.
  • the channel IDs for identifying the illumination control data of the two illumination devices are a and b, respectively, and the Ch numbers of the illumination devices corresponding to the illumination control data are “1” and “2”. It is. That is, the position information “1” is an attribute of the illumination device Ch1 shown in FIG. 5, and the position information “2” is an attribute of the illumination device Ch2.
  • the priority is 5 for the illumination control data of the channel IDs “a” and “b”.
  • the illumination control data of the channel ID “a” has an illuminance value of 200 lx and a color temperature of 3000 K
  • the illumination control data of the channel ID “b” has an illuminance value of +50 lx with respect to the illumination control data of the channel ID “a”.
  • the color temperature is 3000 K which is the same value because there is no particular description.
  • reference channels for mode information such as Rel and Equ can be referred to by adding a channel ID for each ControlData, but the reference destination is not limited to the channel ID for each ControlData, for example, location information You may refer to
  • the data receiving device 20 receives video data and / or audio data, identification information, and illumination control data included in the broadcast data, and the illumination dimming data generation unit 24 uses the identification information, illumination control data, and illumination arrangement information. Based on the arrangement information of the actual lighting device 32 acquired from the storage unit 25, drive control data for driving and controlling the actual lighting device 32 is generated. The method will be described. First, the illumination dimming data generation unit 24 compares the virtual illumination device arrangement pattern indicated by the identification information with the arrangement information of the illumination device 32 in the actual viewing environment space acquired from the illumination arrangement information storage unit 25. If the number, arrangement location, and illumination method of the two illumination devices match, the actual illumination device is driven and controlled without correcting the illumination control data created assuming the virtual viewing environment space. Convert to data for.
  • the position and size of the illuminated location in the illumination control data can be changed to the actual illumination device arrangement.
  • Use a similar one or calculate a weighted average value of illumination control data for example, illumination brightness and illumination color temperature
  • illumination control data for example, illumination brightness and illumination color temperature
  • the broadcast data includes the arrangement pattern identification information indicated by the channel type ID “1” and the illumination control data corresponding thereto, and the actual viewing environment space of the viewer is shown in FIG.
  • the arrangement pattern of the virtual illumination device indicated by the identification information and the arrangement information of the illumination device 32 in the actual viewing environment space acquired from the illumination arrangement information storage unit 25 are compared, The number, location, and lighting method of lighting devices do not match.
  • the illumination device Ch1 in the virtual viewing environment space illuminates the periphery of the back of the display, and this illumination location is the illumination device Ch1 in the actual viewing environment space.
  • Ch2 see FIGS. 4 and 6
  • the lighting control data of the lighting device Ch1 can be applied to the lighting devices Ch1 and Ch2 in the actual viewing environment space. Become.
  • the virtual viewing environment space is an arrangement pattern indicated by the channel type ID “2”
  • the actual viewing environment space of the viewer is the arrangement of the illumination device shown in FIG. If there is, it is possible to calculate the illumination control data applied to the illumination device Ch1 in the actual viewing space from the value of the illumination control data of the illumination devices Ch1 and Ch2 of the channel type ID “2”.
  • the weighted average value of the brightness and color temperature of the illumination control data considering the priorities of the illumination measures Ch1 and Ch2 may be used as the respective illumination control data.
  • what is necessary is just to apply the calculation result of illuminating device Ch1 in an actual viewing space to the illumination control data applied to illuminating device Ch2 in an actual viewing space.
  • FIG. 14 is a diagram illustrating a configuration of a table that is referred to when an arrangement pattern of a plurality of lighting devices and a position of each lighting device are described.
  • the reference table includes a first table (T16) indicating the arrangement pattern of the lighting devices in the viewing environment space and a second table (T16a, T16b, T16c, T16d) indicating the positions of the lighting devices.
  • the data transmission device 10 transmits a value indicating the lighting arrangement pattern (ChannelTypeID), a value indicating the position of each lighting device (Position), and control data of each lighting device.
  • ChannelTypeID a value indicating the lighting arrangement pattern
  • Position a value indicating the position of each lighting device
  • control data a value indicating the position of each lighting device.
  • the illumination control data refers to control parameters such as illumination brightness, color temperature, and time information.
  • the illumination position may be defined by an external standard (hereinafter referred to as “standard A”) or a specification (hereinafter referred to as “specification B”).
  • standard A an external standard
  • specification B a specification
  • the control target illumination device is determined with reference to, for example, the first table indicating the arrangement pattern of the illumination device and the second table indicating the position as peripheral devices in the viewing environment space.
  • the viewer can set the lighting environment based on the arrangement patterns (setting of lighting devices corresponding to lighting control data, etc.) Can be performed.
  • the content creator can also design the illumination control value based on the predefined arrangement pattern, so that the burden of creating illumination control data can be reduced.
  • arrangement type 1 defines an arrangement (FIG. 15A) such that the display and the left and right illumination devices are in a straight line. Even when the left and right arrangements are the same, the second table that defines a new arrangement pattern (FIG. 15B) is defined when the arrangement 30 ° before the display surface (FIG. 15B) is specified.
  • FIG. 16 is a diagram illustrating a configuration of a table that is referred to when an arrangement pattern of a plurality of fans and a position of each fan are described.
  • the position of the blower in the viewing environment space is composed of a first table (T17) indicating the arrangement pattern and a second table (T17a, T17b, T17c, T17d) indicating the position, as in the case of the lighting device. .
  • T17 first table
  • FIG. 17 is a diagram showing an example in which an arrangement pattern and positions of illumination and blowers are described in an XML document.
  • description of specific control parameters such as time information, illumination brightness and color temperature, and wind speed of the blower is omitted.
  • the position (Position) is described in units of lighting / blower control data (Effect element units).
  • FIG. 17A is an example described in units of illumination / blower control data.
  • FIG. 17B is an example described in a plurality of illumination / blower control data units (GroupOfEffect element units).
  • FIG. 17C is an example described with the entire control data (SEM element).
  • the arrangement pattern (ChannelTypeID) and position (Position) are described as XML attributes (Attributes), but may be described as XML elements (elements). Alternatively, the ChannelTypeID may be described and referred to in another XML document.
  • the data receiving device 20 When receiving the ChannelTypeID indicating the illumination arrangement pattern and the Position indicating the position of each illumination, the data reception device 20 refers to the first table and the second table, and determines the illumination position associated with the control data. .
  • FIG. 18 is an operation flow diagram relating to the control target illumination determination in the illumination dimming data generation unit 24.
  • arrangement pattern information (ChannelTypeID) is acquired (step S191), and a second table used for determining position information is selected based on the first table (step S192).
  • position information (Position) is acquired (step S193), and an illumination position associated with the control data is determined from this and the second table (step S194).
  • control data is acquired (step S195), and the device corresponding to the position determined in step S194 is controlled (step S196).
  • FIG. 19 is a diagram for explaining an example of the light irradiation direction in the illumination device.
  • FIG. 19A is a view of the viewing space viewed from above
  • FIG. 19B is a view of the viewing space viewed from the horizontal direction (lateral).
  • the light irradiation direction is described by a first horizontal angle (horizontal angle) and a second vertical angle (vertical angle) with reference to the line connecting the display and the viewer on the floor.
  • the wind direction of the blower can be described by the horizontal angle and the vertical angle.
  • a normal line from the viewer to the display or a line connecting the viewer and the center of the display may be used as a reference.
  • the arrangement pattern and the position description method in the present embodiment are not limited to lighting and a blower, but can be similarly applied to peripheral devices such as a scent generator and a sound effect generator.
  • FIG. 20 is a diagram illustrating another configuration example of a table referred to when describing the position of each peripheral device.
  • the reference table includes a first table that defines positions (Position) such as “left”, “right”, and “front”, and a second table that defines a list of available positions and arrangement details of each available position. It consists of a table.
  • Position in the first table in FIG. 20 is an example, and the positions included in a specific wall surface of the viewing environment space may be collectively defined as “left surface”, “right surface”, and “front surface”.
  • left front, left, and left rear in the first table may be collectively defined as the left surface, or right front, right, and right rear in the first table may be collectively defined as the right surface.
  • the definition of ChannelTypeID in the second table of FIG. 20 is an example, and ChannelTypeID such as “all positions are available” and “placement details are user-defined” may be defined.
  • ChannelTypeID such as “all positions are available” and “placement details are user-defined” may be defined.
  • FIG. 15B As the arrangement on the left and right, “3: Position at 30 ° with respect to the display surface, 7: By additionally defining a “position of 30 ° with respect to the display surface” and the like, it is possible to easily expand without affecting the existing definition.
  • the table configuration is not limited to the lighting device as in the second embodiment, and is similarly applicable to peripheral devices such as a blower, a scent generating device, and a sound effect generating device.
  • Embodiment 4 In Embodiments 1, 2, and 3 of the present invention described above, the case where identification information and lighting control data are added to broadcast data as additional data and transmitted is described. However, additional data is not added to broadcast data. In this case, by transmitting and receiving the identification information corresponding to the video data and / or audio data to be viewed and the illumination control data from an external server device or the like, it is possible to realize an optimal viewing environment when reproducing the video data and / or audio data It becomes possible.
  • FIG. 21 is a block diagram illustrating a configuration example of a main part of the external server device according to the fourth embodiment of the present invention.
  • the external server device 40 in this embodiment corresponds to the data transmission device of the present invention, and receives a transmission request for identification information and lighting control data regarding specific video data and / or audio data (content) from the data reception device side.
  • a transmission unit 43 for transmitting to the original data receiving device is provided.
  • the lighting control data stored in the lighting control data storage unit 42 of the present embodiment describes the start time code of an arbitrary segment (for example, scene or shot) intended by the content creator or the like.
  • the transmission unit 43 requests the lighting control data of the video data and / or audio data (content) that has been requested to be transmitted, together with the TC (time code) indicating the start time of the video data and / or audio data (segment). The data is transmitted to the original data receiving device.
  • an ID is added to an arbitrary segment (for example, a scene or a shot) intended by a content creator or the like, and the illumination control data of video data and / or audio data (content) for which a transmission request is received, together with the segment ID
  • the transmission unit 43 may transmit the data to the requesting data receiving device.
  • FIG. 22 is a block diagram illustrating an exemplary configuration of a main part of a viewing environment control system according to Embodiment 4 of the present invention.
  • 50 is a data receiving device
  • 60 is a video display device
  • 61 is an audio reproducing device
  • 62 is a lighting device.
  • the data receiving device 50 receives and demodulates broadcast data input from the transmission path, and performs error correction, a receiving unit 51, and video data and audio output to the video display device 60 from the output data of the receiving unit 51.
  • a data separation unit 52 that separates and extracts each of the audio data output to the playback device 61 is provided.
  • the data reception device 50 sends an identification server corresponding to the video data (content) to be displayed and a transmission request for the illumination control data to the external server via the communication network based on an instruction from the illumination dimming data generation unit 56.
  • a transmission unit 57 that transmits to the device 40 and a reception unit 54 that receives the identification information and the illumination control data requested to be transmitted from the external server device 40 via a communication network are provided.
  • the illumination arrangement information storage unit 55 stores arrangement information of each illumination device 62 installed in the viewing environment space (real space) of the viewer, and the illumination device 62 is in accordance with an instruction from the illumination dimming data generation unit 56. Is sent to the illumination dimming data generation unit 24 as appropriate. Since the illumination arrangement information storage unit 55 is the same as the illumination arrangement information storage unit 25 of the first embodiment, detailed description thereof is omitted.
  • the lighting dimming data generation unit 56 is based on the identification information and lighting control data received from the receiving unit 54, and the arrangement information of the lighting device 62 acquired from the lighting arrangement information storage unit 55.
  • Lighting dimming data RGB data
  • RGB data for appropriately controlling the lighting device 62 installed in the viewing environment space is generated and output to the lighting device 32, and transmission of identification information and lighting control data is performed. Since it is the same as the illumination dimming data generation unit 24 in the first embodiment except for making a request, the description is omitted.
  • the lighting dimming data sent to the lighting device 62 needs to match the output timing with the video data and the audio data.
  • the delay generating unit 53a for delaying the video data and the audio data separated by the data separation unit 52 and synchronizing with the illumination dimming data for a time necessary for conversion to the lighting dimming data corresponding to the viewing environment of , 53b are provided.
  • the identification information and the lighting control data are not added to the broadcast data, the identification information and the lighting control data corresponding to the video data and / or the audio data (program content) are obtained from the external server device. Since the viewing environment lighting is controlled based on the identification information and the lighting control data, as in the first embodiment, an increase in the amount of data is suppressed and an arbitrary one according to the intention of the video producer is used. It is possible to control the switching of the viewing environment illumination at the timing and to realize the illumination control of the optimal viewing environment.
  • the identification information (channel type ID) and the illumination control data are always transmitted or received in pairs, so how the illumination control data is. It is possible to detect whether the lighting device is created based on the arrangement pattern of the lighting device in a virtual viewing environment space. Therefore, the lighting control is performed in accordance with the arrangement state of the lighting device in the actual viewing environment space. It is possible to convert the data into appropriate lighting dimming data.
  • the data transmission device, data transmission method, viewing environment control device, viewing environment control system, and viewing environment control method of the present invention can be realized by various embodiments without departing from the gist of the present invention described above. It is.
  • the viewing environment control device may be provided in the video display device, and it is needless to say that an external lighting device may be controlled based on various information included in the input video data. Yes.
  • the lighting device is described as an example of the peripheral device arranged in the virtual viewing environment space.
  • the present invention is not limited to the lighting device, and the air conditioner, the blower, the vibration device, the scent
  • the present invention can be applied to a peripheral device that affects the viewing environment, such as a generator.
  • a peripheral device that affects the viewing environment such as a generator.
  • an arrangement pattern including an output position / direction of an effect such as a wind or fragrance is defined by identification information. do it.
  • video data and / or audio data is not limited to content related to a television program transmitted by television broadcasting, but is a work stored in a media medium such as Blu-ray Disc or DVD. It may be the content concerning. That is, the input video data is not limited to that obtained by receiving a television broadcast, and the present invention can also be applied to the case where video data reproduced from an external reproduction device is input.
  • DESCRIPTION OF SYMBOLS 10 ... Data transmitter, 11 ... Data multiplexing part, 12 ... Transmitter, 20 ... Data receiver, 21, 51 ... Receiver, 22, 52 ... Data separator, 23a, 23b, 53a, 53b ... Delay generator, 24, 56 ... illumination dimming data generation unit, 25, 55 ... illumination arrangement information storage unit, 30, 60 ... video display device, 31, 61 ... audio reproduction device, 32, 62 ... illumination device, 40 ... external server device, 41: receiving unit, 42: lighting control data storage unit, 43: transmitting unit, 54: receiving unit, 57: transmitting unit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Ecology (AREA)
  • Emergency Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Environmental Sciences (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Business, Economics & Management (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

実際の視聴環境における周辺機器の配置レイアウトに応じて、高い臨場感が得られる適切な周辺機器制御を行うことを可能とするデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御方法、視聴環境制御システム、及び視聴環境制御方法を提供する。データ受信装置２０は、所定の映像データ及び／又は音声データと、仮想的な視聴環境空間に配置された周辺機器（照明装置）の配置パターンを示す識別情報と、この仮想的な視聴環境空間に配置された周辺機器に対応する照明制御データを受信し、照明調光データ生成部では、識別情報と照明制御データ、及び照明配置情報記憶部２５から取得した実際の視聴環境空間における照明装置３２の配置情報に基づいて、実際の照明装置３２を駆動制御するための駆動制御データを生成している。

Description

データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法
　本発明は、データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法に関し、特に、臨場感の高い映像／音声コンテンツの視聴を実現するための、ユーザの視聴環境空間における周辺機器を制御するためのデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法に関する。
　近年、映像・音声に係るエレクトロニクス技術の急速な進歩により、ディスプレイの大型化、広視野角化、高精細化やサラウンドシステムの向上が進み、臨場感のある映像や音声が楽しめるようになってきている。例えば、現在普及しつつあるホームシアターシステムにおいては、大型ディスプレイやスクリーンと多チャンネル音声・音響技術との組み合わせにより、高い臨場感を得ることができるシステムを実現している。
　また、特に最近では、単に一つの表示装置で映像を楽しむものではなく、複数のディスプレイを組み合わせて広視野な映像を視聴するシステムや、ディスプレイに表示される映像と照明装置の照明光とを連動させるシステムなどが提案されており、複数のメディアを組み合わせて、より臨場感が高められるようなシステムの開発が盛んに行われている。
　特に、ディスプレイと照明装置とを連動させて高い臨場感を実現する技術においては、大型ディスプレイを用いなくても高い臨場感が得られることから、コストや設置スペース等の制約が少なく、大きな期待が寄せられ、大変注目を浴びている。
　この技術によれば、視聴者の部屋（視聴環境空間）に設置されている複数の照明装置の照明光を、ディスプレイに表示される映像に応じた色や強さにコントロールすることにより、視聴者があたかもディスプレイに映し出されている映像空間の中に実在するかのような感覚・効果を与えることができる。このようなディスプレイに表示される画像と照明装置の照明光とを連動させる技術は、例えば、特許文献１に開示されている。
　ここに開示されている技術は、高い臨場感を提供することを目的としたもので、複数の照明装置を表示すべき映像に連動させて制御する照明システムにおいて、映像データの特徴量（代表色、平均輝度）から複数の照明装置に対する照明制御データを生成する方法が記載されている。具体的には、各照明装置の設置位置に応じて予め決められた画面領域の映像データの特徴量を検出し、この検出された特徴量に基づいて各照明装置に対する照明制御データを生成することが記載されている。
　また、照明制御データは、映像データの特徴量から演算して求めるものに限らず、単独で或いは映像データとともに、インターネット等を介して配信されるものや、搬送波により配信されるものを用いてもよいことが記載されている。
特開２００１－３４３９００号公報
　上述したとおり、特許文献１には、照明制御データがインターネット等を介して外部より配信されてもよいことが記載されている。しかしながら、この照明制御データは、予め決められた照明装置のレイアウト（仮想的な視聴環境空間における照明装置の設置位置）のみに対応した照明制御データであり、ユーザ毎に千差万別である照明装置の配置レイアウトに応じて適切な照明制御を行うことができないという問題がある。
　本発明は、上記従来技術の問題点に鑑みてなされたものであり、実際の視聴環境空間における周辺機器の配置レイアウト等に応じて、適切な周辺機器の制御を行うことを可能とするデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御方法、視聴環境制御システム、及び視聴環境制御方法を提供することを、その目的とする。
　上記課題を解決するために、本発明の第１の技術手段は、映像データ及び／又は音声データを送信するデータ送信装置であって、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを、前記映像データ及び／又は音声データに付加して送信する送信手段を備えたことを特徴としたものである。
　第２の技術手段は、第１の技術手段において、前記識別情報によって示される周辺機器の配置パターンは、前記仮想的な視聴環境空間における天井に周辺機器を設置した配置パターンを含むことを特徴としたものである。
　第３の技術手段は、第１の技術手段において、前記識別情報によって示される周辺機器の配置パターンは、前記仮想的な視聴環境空間における、前記映像データを表示するための映像表示装置の周囲左側に周辺機器を設置した配置パターンを含むことを特徴としたものである。
　第４の技術手段は、第１の技術手段において、前記識別情報によって示される周辺機器の配置パターンは、前記仮想的な視聴環境空間における、前記映像データを表示するための映像表示装置の周囲右側に周辺機器を設置した配置パターンを含むことを特徴としたものである。
　第５の技術手段は、第１の技術手段において、前記識別情報によって示される周辺機器の配置パターンは、前記仮想的な視聴環境空間における、前記映像データを表示するための映像表示装置の周囲後背部に周辺機器を設置した配置パターンを含むことを特徴としたものである。
　第６の技術手段は、第１乃至５のいずれかの技術手段において、前記視聴環境制御データは、前記配置パターンを構成する周辺機器の設置位置を示す位置情報を含むことを特徴としたものである。
　第７の技術手段は、第１乃至６のいずれかの技術手段において、前記視聴環境制御データは、前記配置パターンを構成する周辺機器の設置方向を示す位置情報を含むことを特徴としたものである。
　第８の技術手段は、第１乃至７のいずれかの技術手段において、前記視聴環境制御データは、前記周辺機器に対する駆動優先順位を示す情報を含むことを特徴としたものである。
　第９の技術手段は、第１乃至８のいずれかの技術手段において、前記視聴環境制御データは、前記周辺機器に対する視聴環境制御データの記述方法を表すモード情報を含むことを特徴としたものである。
　第１０の技術手段は、第９の技術手段において、前記モード情報は、前記周辺機器に対する駆動制御値が絶対値によって記述されていることを示す情報を含むことを特徴としたものである。
　第１１の技術手段は、第９の技術手段において、前記モード情報は、前記周辺機器に対する駆動制御値が他の指定された周辺機器に対する駆動制御値との差分値によって記述されていることを示す情報を含むことを特徴としたものである。
　第１２の技術手段は、第９の技術手段において、前記モード情報は、前記周辺機器に対する駆動制御値が他の指定された周辺機器に対する駆動制御値との比率値によって記述されていることを示す情報を含むことを特徴としたものである。
　第１３の技術手段は、第９の技術手段において、前記モード情報は、前記周辺機器に対する駆動制御値が他の指定された周辺機器に対する駆動制御値と同一であることを示す情報を含むことを特徴としたものである。
　第１４の技術手段は、映像データ及び／又は音声データに関連付けて、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを格納する格納手段と、外部装置からの送信要求を受けて、所定の映像データ及び／又は音声データに関する識別情報と視聴環境制御データとを、前記送信要求元の外部装置へ送信する送信手段とを備えたことを特徴としたものである。
　第１５の技術手段は、第１乃至１４のいずれかの技術手段において、前記仮想的な視聴環境空間における周辺機器が、照明装置であることを特徴としたものである。
　第１６の技術手段は、第１乃至１４のいずれかの技術手段において、前記仮想的な視聴環境空間における周辺機器が、送風装置であることを特徴としたものである。
　第１７の技術手段は、映像データ及び／又は音声データを受信するとともに、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを受信する受信手段と、実際の視聴環境空間における周辺機器の配置パターンを表す機器配置情報を記憶する記憶手段と、前記受信手段で受信した識別情報と前記記憶手段に記憶された機器配置情報とを用いて、前記視聴環境制御データを、前記実際の視聴環境空間における周辺機器を駆動制御するための駆動制御データに変換する駆動制御データ生成手段とを備えたことを特徴としたものである。
　第１８の技術手段は、第１７の技術手段において、前記視聴環境制御データは、前記配置パターンを構成する周辺機器の設置位置を示す位置情報を含むことを特徴としたものである。
　第１９の技術手段は、第１７または１８の技術手段において、前記視聴環境制御データは、前記配置パターンを構成する周辺機器の設置方向を示す位置情報を含むことを特徴としたものである。
　第２０の技術手段は、第１７の技術手段と、前記映像データ及び／又は音声データを再生するための映像／音声再生装置と、該映像／音声再生装置の周辺に設置された周辺機器とを備えたことを特徴としたものである。
　第２１の技術手段は、映像データ及び／又は音声データを送信するデータ送信方法であって、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを、前記映像データ及び／又は音声データに付加して送信することを特徴としたものである。
　第２２の技術手段は、映像データ及び／又は音声データに関連付けて、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを格納しており、外部装置からの送信要求を受けて、所定の映像データ及び／又は音声データに関する識別情報と視聴環境制御データとを、前記送信要求元の外部装置へ送信することを特徴としたものである。
　第２３の技術手段は、映像データ及び／又は音声データを受信するステップ、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを受信するステップ、実際の視聴環境空間における周辺機器の配置パターンを表す機器配置情報を記憶するステップ、および、前記受信した識別情報と前記記憶された機器配置情報とを用いて、前記視聴環境制御データを、前記実際の視聴環境空間における周辺機器を駆動制御するための駆動制御データに変換するステップを有することを特徴としたものである。
　本発明によれば、所定の映像及び／又は音声コンテンツに対して、仮想的な視聴環境空間に配置された周辺機器の配置パターンを示す識別情報と、この仮想的な視聴環境空間に配置された周辺機器を制御するための視聴環境制御データを送信することにより、視聴環境制御データが、どのような視聴環境空間における周辺機器の配置パターンを想定して生成されたのかを検知することが可能となり、実際の視聴環境空間に配置された周辺機器を駆動制御するための駆動制御データへの変換が可能となるため、適切な視聴環境空間の制御が可能となることから、ユーザに高い臨場感が得られる視聴環境を提供することができる。
本発明の一実施態様に係るデータ送信装置の概略構成例を示すブロック図である。 本発明の実施態様に係る識別情報の記述内容の一例を示す図である。 視聴環境空間における照明装置の配置の一例を示す図である。 視聴環境空間の一例を示す図である。 視聴環境空間における照明装置の配置の他の一例を示す図である。 視聴環境空間の他の一例を示す図である。 本発明の一実施態様に係る視聴環境制御システムの概略構成例を示すブロック図である。 視野の分類を示す図である。 照明制御データの記述内容の一例を示す図である。 優先度情報の一例を示す図である。 モード情報の一例を示す図である。 照明制御データをＸＭＬ文書で記述した一例を示す説明図である。 照明制御データに対応するＸＭＬスキーマを示す説明図である。 本発明の他の実施態様に係る複数の照明装置の配置パターンおよび各照明装置の位置を記述する際に参照するテーブルの構成を示した図である。 照明配置例を説明するための図である。 本発明の他の実施態様に係る複数の送風機の配置パターンおよび各送風機の位置を記述する際に参照するテーブルの構成を示した図である。 本発明の他の実施態様に係る照明と送風機の配置パターンおよび位置をＸＭＬ文書で記述した例を示す説明図である。 制御対象照明決定に関する動作フロー図である。 照明装置における光照射方向の一例を説明するための図である。 各周辺機器の位置を記述する際に参照するテーブルの他の構成例を示した図である。 本発明のさらに他の実施態様に係る外部サーバ装置の要部概略構成を示すブロック図である。 本発明のさらに他の実施態様に係るデータ受信装置の要部概略構成を示すブロック図である。
　以下、本発明の実施態様に係るデータ送信装置、データ送信方法、視聴環境制御装置、及び視聴環境制御システムについて、視聴環境空間に配置された周辺機器として主に照明装置を例に説明するが、視聴環境を制御する装置であれば照明装置に限られるものではなく、空調機、送風機、振動装置、香り発生装置などにも適用できるものである。
　（実施態様１）
　図１は、本発明の一実施態様に係るデータ送信装置の概略構成例を示すブロック図である。
　本実施態様におけるデータ送信装置１０は、データ多重化部１１、および送信部１２から構成される。
　入力された映像データは、圧縮符号化され、データ多重化部１１へ出力される。映像符号化には、ＩＳＯ／ＩＥＣ　１３８１８－２（ＭＰＥＧ－２　Ｖｉｄｅｏ），ＩＳＯ／ＩＥＣ　１４４９６－２（ＭＰＥＧ－４　Ｖｉｓｕａｌ），ＩＳＯ／ＩＥＣ　１４４９６－１０（ＭＰＥＧ－４　ＡＶＣ）など、さまざまな圧縮方式が利用可能である。
　同様に、入力された音声データは、圧縮符号化され、データ多重化部１１へ出力される。音声符号化には、ＩＳＯ／ＩＥＣ　１３８１８－７（ＭＰＥＧ－２　ＡＡＣ）、ＩＳＯ／ＩＥＣ　１４４９６－３（ＭＰＥＧ－４　Ａｕｄｉｏ）など、さまざまな圧縮方式が利用可能である。
　さらに、識別情報、および照明制御データは、圧縮符号化され、データ多重化部１１へ出力される。なお、識別情報、および照明制御データの詳細は後述する。識別情報、および照明制御の記述方法としては、例えば、ＸＭＬ（Ｅｘｔｅｎｓｉｂｌｅ　Ｍａｒｋｕｐ　Ｌａｎｇｕａｇｅ）形式などが用いられる。また、視聴環境制御データの圧縮方式には、ＩＳＯ／ＩＥＣ　１５９３８－１（ＭＰＥＧ－７　Ｓｙｓｔｅｍｓ）におけるＢｉＭ（Ｂｉｎａｒｙ　ｆｏｒｍａｔ　ｆｏｒ　ＭＰＥＧ－７）方式などが利用可能である。あるいは、圧縮せずにＸＭＬ形式のまま出力するようにしてもよい。
　符号化された映像データ、音声データ、および識別情報、および照明制御データは、データ多重化部１１で多重化され、送信部１２を介して、伝送または蓄積される。多重化方式としては、例えば、ＩＳＯ／ＩＥＣ　１３８１８－１（ＭＰＥＧ－２　Ｓｙｓｔｅｍｓ）におけるＭＰＥＧ－２トランスポートストリームパケット（ＴＳＰ）、ＩＰパケット、ＲＴＰパケット等を用いることができる。
　例えば、ＭＰＥＧ－２で規定されたトランスポートストリームパケット（ＴＳＰ）を用いる場合、ＭＰＥＧ－２で規定された情報が記述されたヘッダに続けて、拡張ヘッダ部分に視聴環境制御データを記述し、さらに、拡張ヘッダに続くペイロードで映像データ及び音声データを伝送することが可能である。あるいは、識別情報、および照明制御データを、映像データや音声データと同様に、ペイロードで伝送するようにしてもよい。また、映像データ、音声データ、識別情報、および照明制御データのそれぞれの異なるデータストリームを多重して伝送するようにしてもよい。
　ここで、識別情報とは、仮想的な視聴環境空間における周辺装置の配置パターンを示すもので、照明装置の場合は、聴環境空間に配置された照明装置の配置パターン（照明装置の場合は照明装置の配置場所に関する情報とともに、例えばどのような照明方法をとっているかといった情報やどこを照明するかという情報、照射方向や照射角度などを示す情報を含んでいてもよい。）を示すものであって、図２は、照明装置の配置パターンに係る識別情報（チャンネルタイプＩＤ）の一例として、照明装置のチャンネル数、チャンネル番号毎の照明装置の配置場所、及び照明方法が定義されている場合を示したものである。
　図２において、チャンネルタイプＩＤが“１”に設定された場合は、２台の照明装置Ｃｈ１とＣｈ２を備えており、Ｃｈ１が映像表示装置（ディスプレイ）の背面（周囲）を照明（間接照明）し、Ｃｈ２は天井から下方を照明（直接照明）するような照明配置パターンを表している。
　図３は、チャンネルタイプＩＤが“１”の場合に定義される、照明装置３２（Ｃｈ１とＣｈ２）のディスプレイ３０に対する配置パターンを示したものであり、Ｃｈ１はディスプレイ３０の下部に、Ｃｈ２は天井に配置されている。また、図４は、チャンネルタイプＩＤが“１”の場合に対応した視聴環境空間を示したものであり、Ｃｈ１によって、ディスプレイ３０の背面（周囲）が、またＣｈ２によって天井から空間全体が照明されることを示している。
　また、図２において、チャンネルタイプＩＤが“２”に設定された場合、２台の照明装置Ｃｈ１とＣｈ２を備えており、Ｃｈ１がディスプレイの背面左側を照明（間接照明）し、Ｃｈ２がディスプレイの背面右側を照明（間接照明）するような照明配置パターンを表している。
　図５は、チャンネルタイプＩＤが“２”の場合に定義される、照明装置３２（Ｃｈ１とＣｈ２）のディスプレイ３０に対する配置パターンを示したものであり、Ｃｈ１がディスプレイ３０の左側に、Ｃｈ２がディスプレイ３０の右側に配置されている。そして、図６は、チャンネルタイプＩＤが“２”の場合に対応した視聴環境空間を示したものであり、Ｃｈ１によって、ディスプレイ３０の左側背面が、またＣｈ２によってディスプレイ３０の右側背面が照明されることを示している。
　なお、図２に示す例では、識別情報（チャンネルタイプＩＤ）を８ｂｉｔ（２５６個）分確保しており、他の照明配置パターンを定義することができる。なお、照明のチャンネル数についても、２チャンネルに限らず１以上のチャンネルについてその配置パターンを定義してもよいことは言うまでもない。
　例えば、図示しないが、照明装置の設置場所は、図５で示す場合と同様にディスプレイの左右に各１台を配置し、視聴者側へ向かって直接照明をおこなうことが想定される場合は、例えばチャンネルタイプＩＤ“３”によって、「チャンネル数２、Ｃｈ１：左；直接、Ｃｈ２：右；直接」を定義すればよい。
　次に、照明制御データは、後で詳述するが、仮想的な視聴環境空間に配置された照明装置に対する視聴環境制御データをなすものであり、識別情報により定義された配置パターンを構成する各チャンネルの照明装置を駆動制御するための制御データである。
　したがって、識別情報で示される照明装置の配置パターンは、照明制御データが生成される前提となる視聴環境を表すものであるといえる。
　そして、照明制御データは、映像／音声データに連動して提供されるものであるが、必ずしも映像データのフレーム毎に付加される必要はなく、ストーリ上のつながりがある映像データのシーンやショット毎に付加するなど、適当な間隔をもって定期的に或いは不定期に映像データに付加されるものでもよい。
　なお、本実施態様では、映像データと、音声データと、識別情報、および照明制御データの４種類のデータを多重化した後に放送データとして送信する構成としているが、多重化することは必須の要件ではなく、必要に応じて適切な送信方法を選択すればよい。例えば、それぞれのデータを多重化せず個別に送信してもよいし、さらに、映像データと音声データは多重化し、識別情報と照明制御データとを独立して送信するなどしてもよい。
　さらに、後述するように、識別情報と照明制御データについては、インターネット等を通じてアクセス可能な外部サーバ装置に蓄積しておき、この蓄積した識別情報と照明制御データを識別するためのＵＲＬ（Ｕｎｉｆｏｒｍ　Ｒｅｓｏｕｒｃｅ　Ｌｏｃａｔｏｒ）等を映像データとともに多重化して送信するようにしてもよい。また、識別情報と照明制御データを映像データと異なるネットワークで送信する場合には、識別情報と照明制御データを映像データと関連づける情報として、先述のＵＲＬに限らず、コンテンツ名など、識別情報および照明制御データと映像データとの対応関係が特定できる情報であればよい。
　なお、識別情報、および照明制御データを映像／音声多重化データと異なるネットワークで送信する場合に、識別情報、および照明制御データと映像／音声多重化データとを関連づける特定情報としては、先述のＵＲＬに限らず、ＴＶ－Ａｎｙｔｉｍｅ規格におけるＣＲＩＤ（Ｃｏｎｔｅｎｔ　Ｒｅｆｅｒｅｎｃｅ　ＩＤ）、コンテンツ名など、映像／音声多重化データと識別情報、および照明制御データとの対応関係が特定できる特定情報であればよい。
　あるいは、識別情報、および照明制御データのみ別の記録媒体に記録して配布するようにしてもよい。例えば、映像／音声データは、Ｂｌｕ－ｒａｙ　Ｄｉｓｃ、ＤＶＤなどの大容量記録媒体で配布し、識別情報、および照明制御データは、小型半導体記録媒体等で配布する場合が挙げられる。この場合にも、複数のコンテンツを記録して配布する際には、映像／音声データと識別情報、および照明制御データとの対応関係を明らかにできる特定情報が必要となる。
　なお、本実施態様では、識別情報と照明制御データとを別データとして取り扱っているが、両者のデータ内容を含む一つのデータ形式で記述してもよいことは言うまでもない。
　図７は、本発明の一実施態様に係る視聴環境制御システムの概略構成例を示すブロック図である。図中、２０はデータ受信装置、３０は映像表示装置(以下、ディスプレイという。)、３１は音声再生装置、３２は照明装置を示す。
　データ受信装置２０は、受信部２１、データ分離部２２、ディレイ発生部２３ａ，２３ｂ、駆動制御データ生成手段としての照明調光データ生成部２４、および機器配置情報を記憶するための手段としての照明配置情報記憶部２５を備える。
　データ受信装置２０は、受信部２１において映像データ、音声データ、識別情報、および照明制御データが多重されている放送データを受信し、データ分離部２２において、放送データから映像データ、音声データ、識別情報、および照明制御データを分離する。
　データ分離部２２において分離された映像データと音声データは、その映像データと音声データの開始時刻を示すＴＣ（タイムコード）とともにディレイ発生部２３ａ，２３ｂに送信され、ディレイ発生部２３ａを介して映像データが映像表示装置３０へ送られ、ディレイ発生部２３ｂを介して音声データが音声再生装置３１へ送られる。また、データ分離部２２において分離された識別情報と照明制御データは、照明調光データ生成部２４へ送られる。
　照明配置情報記憶部２５は、視聴者の視聴環境空間(実空間)に設置されている各照明装置３２の配置情報を記憶するものであり、照明調光データ生成部２４の命令により照明装置３２の配置情報を適宜照明調光データ生成部２４へ送る。
　ここで、例えば、視聴者の視聴環境空間が、図３に示されるように、映像表示装置３０の周辺に２個の照明装置３２が設置されており、照明装置Ｃｈ１は床上設置型で間接照明を行うものであり、照明装置Ｃｈ２は天井設置型で直接照明を行うものであるような場合、各照明装置３２をその設置位置に応じて個別制御することができるように、照明配置情報記憶部２５には、照明装置の個数と、映像表示装置３０に対する相対位置及び照明方法に関する情報を蓄積しておく必要がある。
　このため、例えば、ユーザの視聴空間に配置された個々の照明装置に対応する識別子を付与し、照明配置情報記憶部２５は、前記識別子毎に映像表示装置３０に対する相対位置及び照明方法に関する情報をテーブル形式で保持する構成とすればよい。
　照明調光データ生成部２４では、データ分離部２２で分離された識別情報と照明制御データ、及び照明配置情報記憶部２５から取得した実際の視聴環境空間における照明装置３２の配置情報に基づいて、視聴者の実際の視聴環境空間に設置されている照明装置３２を駆動制御するための駆動制御データを近似（例えば、左と右の照明制御データを受信したが、中央に１つしか照明装置がない場合、２つの照明制御データの平均値を実際の照明制御データに近似するなど）して照明調光データ（ＲＧＢデータ）を生成し、これを照明装置３２に出力する。
　なお、照明装置３２へ送られる照明調光データは、映像データおよび音声データと出力タイミングを合わせる必要があるため、例えば照明調光データ生成部２４において実際の視聴環境に対応した照明調光データへの変換に必要する時間だけ、データ分離部２２で分離された映像データと音声データを遅らせ、照明調光データと同期をとるためのディレイ発生部２３ａ，２３ｂを設けている。
　照明装置３２としては、例えば独立して発光制御することが可能なＲ（赤），Ｇ（緑），Ｂ（青）各色のＬＥＤ光源が一定の周期で配列されたものを用いることができ、これら３原色のＬＥＤ光源により所望の色、輝度からなる照明光を出射する。ただし、照明装置３２は、映像表示装置３０の周囲環境の照明色及び明るさを制御することができるような構成であればよく、上記のような所定色を発光するＬＥＤ光源の組み合わせに限ることなく、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。さらに、Ｒ（赤），Ｇ（緑），Ｂ（青）各色による表現に限ることなく、例えば照明色温度（単位：Ｋ）を利用して表現してもよい。なお、図７ではＲＧＢデータによって照明装置３２を駆動する場合を示している。
　また、視聴環境制御システムのデータ受信装置２０は、映像表示装置３０や音声再生装置３１と一体的に設けられてもよいし、それぞれ別体として設けられてもよい。
　上述したように、本実施態様におけるデータ受信装置２０は、外部より取得した識別情報と照明制御データに基づいて、駆動制御データを近似することにより、実際の視聴環境空間に設置された照明装置３２を適切に制御することが可能となる。
　次に、照明装置に関する視聴環境制御データである照明制御データについて、図面とともに説明する。
　図９は照明制御データの記述内容の一例を示すものであり。仮想的な視聴環境空間における１つ以上の照明装置の配置パターンを表すチャンネルタイプＩＤ（識別情報）、複数の照明装置を発光させるための優先順位を表す優先度情報（図１０に示す）、複数の照明装置の明るさや色の記述方法を表すモード情報（図１１に示す）、複数の照明装置の明るさや色を求める際に参照するリファレンス照明を意味する参照Ｃｈ(チャンネル)、照明の明るさ情報、照明色温度情報を有している。なお、図示しないが、必要に応じて照明方法を記載することも可能である。なお、明るさの表現には、ルクス（ｌｘ）でなく、カンデラ（Ｃｄ）や、ルーメン（ｌｍ）等を用いてもよい。また、色の表現には、色温度でなく、ＸＹＺ表色系、ＲＧＢ表色系、ＹＣｂＣｒ表色系等を用いてもよい。
　これらの情報はいずれも、映像データのシーンの雰囲気や臨場感を照明光によって演出するために有用な情報である。
　ここで、畑田らによると、図８に示すように人間の視野は視機能の働きにより、弁別視野１０１、有効視野１０２、誘導視野１０３、補助視野１０４に分類される。（畑田豊彦，坂田晴夫，日下秀夫，“画面サイズによる方向感覚誘導効果‐大画面による臨場感の基礎実験‐”，テレビジョン学会誌，Ｖｏｌ．３３，Ｎｏ．５，ｐｐ．４０７－４１３（１９７９））
　弁別視野１０１は、図形識別など高密度な情報を正確に受容できる範囲であり、有効視野１０２は、弁別能力が弁別視野１０１より低下するが眼球運動のみで自然な情報受容ができる範囲である。また、誘導視野１０３は、呈示刺激の存在や簡単な識別ができる程度の認識能力しかないが、全体的な外界情報を判断する際に影響を持つ範囲である。補助視野１０４は、刺激の存在のみが判別できる範囲である。
　ところで、現在のハイビジョンテレビは、上記のうち有効視野１０２を覆う範囲に映像を表示するよう設計されている。つまり誘導視野１０３や補助視野１０４には映像や照明等の情報を表示していない。従って、誘導視野１０３や補助視野１０４にも照明を照射することで、より臨場感が高まることが期待できる。
　例えば、先述した図３で示した照明装置の配置によって実現される図４の視聴環境空間では、ディスプレイ３０の背面を照明することで、ディスプレイ３０の周囲の誘導視野や補助視野を照明によって覆い臨場感を高めるだけでなく、さらに天井から照明することで環境光を再現することが実現できる。
　さらに、先述した図５で示した照明装置の配置によって実現される図６の視聴環境空間では、ディスプレイ３０の背面を照明することで、ディスプレイ周囲の誘導視野や補助視野を照明によって覆い臨場感を高めるだけでなく、さらにディスプレイ３０の左右の照明の明るさや色を変化させることで、光の方向性を再現することが実現できる。
　図１０は、優先度情報の一例を示す図である。
　ここでは、複数の照明装置を発光させるための優先順位を表す情報の例を示しており、例えば優先度を５段階（低い、やや低い、普通、やや高い、高い）と設定し、優先度の高い照明だけを照射することを可能としている。これによって、受信側の照明数や配置場所に制限があり、仮想的な視聴環境空間における照明配置パターンと実際の視聴環境空間における照明配置状況が異なる場合であっても、優先度の最も高い照明の照明値を参照することで、送信側が優先的に点灯をさせたいと望む照明状況を受信側で実現することができる。
　図１１は、モード情報の一例を示す図である。
　ここでは、複数の照明装置の明るさや色の記述方法を表すモード情報の例を有しており、例えば基準となるリファレンス照明ＲｅｆＩＤに対して、他の照明の照明値の記述方法を設定することを示している。モードが“Ａｂｓ”の場合は、照明装置毎に照明の明るさと色に関する絶対値を記述する。モードが“Ｒｅｌ”の場合は、照明装置毎にリファレンス照明ＲｅｆＩＤに対する照明の明るさと色に関する差分値または比率値を記述する。モードが“Ｅｑｕ”の場合は、照明装置毎にリファレンス照明ＲｅｆＩＤと同値であるとして、Ｅｑｕと記述する。
　モード“Ａｂｓ”で複数の照明装置の明るさや色を記述する場合に対して、例えばモード“Ｒｅｌ”を使用することによりリファレンス照明よりも周囲の照度（単位：ｌｘ）を１００ｌｘ上げる場合や、色温度を１０００Ｋ下げる場合、周囲の照度を１０％上げる場合や、色温度を２０％下げる場合において、複数の照明装置の明るさや色を表すデータ量の削減となり有効である。さらに、モード“Ａｂｓ”で複数の照明装置の明るさや色を記述する場合に対して、例えばモード“Ｅｑｕ”を使用することによりリファレンス照明と周囲の照明の明るさや色が同値である場合において、複数の照明装置の明るさや色を表すデータ量の削減となり有効である。
　図１２は、照明制御データをＸＭＬ形式に記述した一例を説明するための図であり、図１３は、照明制御データに対応するＸＭＬスキーマ示す説明図である。
　図１２において、チャネルタイプＩＤは２と記述されていることから、この照明制御データは、図２の識別情報におけるチャンネルタイプＩＤ“２”の配置パターンに対応した照明装置の配置に対応しており、図５で示した照明装置の配置における照明装置のための制御データを記述したものであることが分かる。
　そして、２台の照明装置の照明制御データのそれぞれを識別するためのチャンネルＩＤが、それぞれａ、ｂであり、当該照明制御データに対応する照明装置のＣｈ番号は、“１”、“２”である。すなわち、位置情報“１”は図５で示した照明装置Ｃｈ１の属性であることを、位置情報“２”は照明装置Ｃｈ２の属性であることを示している。
　また、チャンネルＩＤ“ａ”、“ｂ”の照明制御データはいずれも優先度が５となっている。チャンネルＩＤ“ａ”の照明制御データは照度値２００ｌｘ、色温度３０００Ｋであり、チャンネルＩＤ“ｂ”の照明制御データはチャンネルＩＤ“ａ”の照明制御データに対して照度値が＋５０ｌｘとなる２５０ｌｘ、色温度は特に記載がないため同値である３０００Ｋとなる。
　なお、ＲｅｌやＥｑｕなどのモード情報の参照チャネルについては、ＣｏｎｔｒｏｌＤａｔａ毎にチャンネルＩＤを付加することで参照を行うことができるが、参照先はＣｏｎｔｒｏｌＤａｔａ毎のチャンネルＩＤに限定することなく、例えば位置情報を参照してもよい。
　データ受信装置２０は、放送データに含まれる映像データ及び／又は音声データ、識別情報および照明制御データを受信し、照明調光データ生成部２４では、この識別情報と照明制御データ、及び照明配置情報記憶部２５から取得した実際の照明装置３２の配置情報に基づいて、実際の照明装置３２を駆動制御するための駆動制御データを生成するが、その方法について説明する。
　まず、照明調光データ生成部２４は、識別情報で示される仮想上の照明装置の配置パターンと照明配置情報記憶部２５から取得した実際の視聴環境空間における照明装置３２の配置情報とを比較し、両者の照明装置の個数、配置場所、照明方法が一致しておれば、仮想的な視聴環境空間を想定して作成された照明制御データを補正することなく、実際の照明装置を駆動制御するためのデータに変換する。
　また、両者の照明装置の個数、配置場所、照明方法が一致しない場合は、例えば、両者の個々の照明装置の配置場所と照明方法による被照明場所（壁面、ディスプレイなど）の位置や大きさ、あるいは照明装置と被照明場所との距離や光照射方向と被照明場所との角度等を比較することにより、照明制御データのうち、被照明場所の位置や大きさが実際の照明装置の配置に近いものを利用したり、複数の仮想的な照明装置に対する照明制御データ（例えば、照明の明るさや照明色温度）の重みづけ平均値などを算出し、実際の照明装置の照明制御データとして適用することができる。その際に、照明制御データの優先度情報を考慮することも有用であり、各種変換方法を利用することができる。
　例えば、放送データに、チャンネルタイプＩＤ“１”で示される配置パターンの識別情報と、これに対応した照明制御データが含まれており、実際の視聴者の視聴環境空間が図５で示す照明装置の配置であった場合、識別情報で示される仮想上の照明装置の配置パターンと照明配置情報記憶部２５から取得した実際の視聴環境空間における照明装置３２の配置情報とを比較しても、両者の照明装置の個数、配置場所、照明方法が一致しない。
　しかし、個々の被照明場所の位置や大きさを比較すると、仮想的な視聴環境空間における照明装置Ｃｈ１はディスプレイの背面周囲を照明しており、この照明場所は実際の視聴環境空間では照明装置Ｃｈ１とＣｈ２とで行っているため、(図４、図６参照)、照明制御データのうち、照明装置Ｃｈ１の照明制御データを実際の視聴環境空間における照明装置Ｃｈ１，Ｃｈ２に適用することが可能となる。
　また、これらの関係が反対の場合、すなわち、仮想的な視聴環境空間がチャンネルタイプＩＤ“２”で示される配置パターンで、実際の視聴者の視聴環境空間が図３で示す照明装置の配置であった場合、チャンネルタイプＩＤ“２”の照明装置Ｃｈ１とＣｈ２の照明制御データの値から、実際の視聴空間における照明装置Ｃｈ１に適用する照明制御データを算出することが可能であり、この場合、照明措置Ｃｈ１とＣｈ２の各優先度を考慮した照明制御データの明るさや色温度の加重平均値をそれぞれの照明制御データとすればよい。また、実際の視聴空間における照明装置Ｃｈ２に適用する照明制御データは、実際の視聴空間における照明装置Ｃｈ１の算出結果を適用すればよい。
　（実施態様２）
　本発明の第２の実施態様について、図面を参照しながら説明する。本実施態様におけるデータ送信装置およびデータ受信装置の概略構成は、図１および図７と同様のため詳細な説明は省略する。
　まず、照明装置の例を説明する。図１４は、複数の照明装置の配置パターンおよび各照明装置の位置を記述する際に参照するテーブルの構成を示した図である。参照テーブルは、視聴環境空間における照明装置の配置パターンを示す第１のテーブル（Ｔ１６）と、各照明装置の位置を示す第２のテーブル（Ｔ１６ａ，Ｔ１６ｂ，Ｔ１６ｃ，Ｔ１６ｄ）とから構成される。
　データ送信装置１０は、照明配置パターンを示す値（ＣｈａｎｎｅｌＴｙｐｅＩＤ）と、各照明装置の位置を示す値（Ｐｏｓｉｔｉｏｎ）および各照明装置の制御データとを送信する。例えば、コンテンツ制作者が、ディスプレイの背面および天井に照明装置がある環境を想定して制御データを送信する場合、図１４におけるテーブルＴ１６ａで定義されるデータを使用する。この場合、ＣｈａｎｎｅｌＴｙｐｅＩＤ＝０とし、背面照明を制御するデータにはＰｏｓｉｔｉｏｎ＝０を、天井照明を制御するデータにはＰｏｓｉｔｉｏｎ＝１のデータを照明制御データに付加して送信する。また、コンテンツ制作者が、テーブルＴ１６ｃのような多チャンネルの照明装置がある環境を想定する場合、ＣｈａｎｎｅｌＴｙｐｅＩＤ＝２とし、右照明を制御するデータにはＰｏｓｉｔｉｏｎ＝２を、左照明を制御するデータにはＰｏｓｉｔｉｏｎ＝６のデータを照明制御データに付加して送信する。ここで、照明制御データとは、照明の明るさや色温度、時間情報などの制御パラメータを指す。
　さらに、照明位置は、外部の規格（以降「規格Ａ」という。）や仕様（以降「仕様Ｂ」という。）によって定義されてもよく、この場合は、配置パターンを示す第１のテーブルＴ１６に、規格名（規格Ａ）や仕様名（仕様Ｂ）を記載し、各照明の位置を示す第２のテーブルＴ１６ｄはそれぞれの規格で定義される位置情報を元に決められる。例えば、規格Ａで定義される照明配置に基づいた制御データを送信するためには、ＣｈａｎｎｅｌＴｙｐｅＩＤ＝３とし、Ｐｏｓｉｔｉｏｎの値は、規格Ａの定義をもとにあらかじめ決められた値を用いる。
　このように、本実施態様では、視聴環境空間における周辺機器としての、例えば照明装置の配置パターンを示す第１のテーブルと位置を示す第２のテーブルとを参照して制御対象照明装置を決定する。
　よく使われる典型的な照明配置パターンを第１および第２のテーブルとしてあらかじめ定義しておくことで、視聴者は、配置パターンに基づき照明環境設定（照明制御データに対応する照明装置のセッティング等）を行うことが可能となる。また、コンテンツ制作者側も、あらかじめ定義された配置パターンに基づいて、照明制御値を設計することができるので、照明制御データ作成の負担を軽減することができる。
　このように２つのテーブルを用いて配置を定義することで、例えば、配置タイプ１は、ディスプレイと左右の照明装置が一直線になるような配置（図１５（Ａ））を規定しているが、同じ左右への配置でも、ディスプレイ面に対して３０°手前への配置（図１５（Ｂ））を規定する場合に、新たな配置パターン（図１５（Ｂ））を定義した第２のテーブルを追加し、該配置パターンを示すフィールドを第１のテーブルへ追加するだけで、既存の定義に影響を与えることなく拡張することができる。
　なお、上記Ｐｏｓｉｔｉｏｎの付加は必須ではなく、ＣｈａｎｎｅｌＴｙｐｅＩＤによって定義されるすべての位置に対する制御データをあらかじめ定められた順にしたがって記述すると事前に決めておくことによって省略も可能である。Ｐｏｓｉｔｉｏｎを付加する場合、必要最低限の制御データのみを記述（例えば、テーブルＴ１６ｃにおいて、右照明のみの制御データ伝送する場合、Ｐｏｓｉｔｉｏｎ＝２の制御データのみを記述）すればよいので、データ量を削減することができる。
　次に、送風機の例を説明する。送風機の場合、制御データは風速（ｍ／ｓ）や回転数（ｒ／ｍ）などのパラメータとなる。図１６は、複数の送風機の配置パターンおよび各送風機の位置を記述する際に参照するテーブルの構成を示した図である。視聴環境空間における送風機の位置は、照明装置の場合と同様、配置パターンを示す第１のテーブル（Ｔ１７）と、位置を示す第２のテーブル（Ｔ１７ａ，Ｔ１７ｂ，Ｔ１７ｃ，Ｔ１７ｄ）とから構成される。このような構成とすることで、既存の定義に影響を与えることなく拡張が可能である。
　次に、照明装置と送風機が混在する場合について説明する。図１７は、照明と送風機の配置パターンおよび位置をＸＭＬ文書で記述した例を示した図である。図１７において、時間情報や、照明の明るさや色温度、送風機の風速などの具体的な制御パラメータの記載は省略している。位置（Ｐｏｓｉｔｉｏｎ）は、照明／送風機制御データ単位（Ｅｆｆｅｃｔ要素単位）で記述されている。配置パターン（ＣｈａｎｎｅｌＴｙｐｅＩＤ）に関し、図１７（Ａ）は、照明／送風機制御データ単位で記述した例である。図１７（Ｂ）は、複数の照明／送風機制御データ単位（ＧｒｏｕｐＯｆＥｆｆｅｃｔ要素単位）で記述した例である。図１７（Ｃ）は、制御データ全体（ＳＥＭ要素）で記述した例である。ここでは、配置パターン（ＣｈａｎｎｅｌＴｙｐｅＩＤ）および位置（Ｐｏｓｉｔｉｏｎ）をＸＭＬ属性（Ａｔｔｒｉｂｕｔｅ）として記述しているが、ＸＭＬ要素（ｅｌｅｍｅｎｔ）として記述してもよい。また、ＣｈａｎｎｅｌＴｙｐｅＩＤを別のＸＭＬ文書に記述し参照するようにしてもよい。
　次に、データ受信装置２０の動作について説明する。データ受信装置２０は、照明配置パターンを示すＣｈａｎｎｅｌＴｙｐｅＩＤと、各照明の位置を示すＰｏｓｉｔｉｏｎを受信すると、第１のテーブルおよび第２のテーブルを参照し、制御データが関連付けられている照明位置を決定する。
　図１８は、照明調光データ生成部２４における制御対象照明決定に関する動作フロー図である。まず、配置パターン情報（ＣｈａｎｎｅｌＴｙｐｅＩＤ）を取得し（ステップＳ１９１）、第１のテーブルに基づき、位置情報の決定に用いる第２のテーブルを選択する（ステップＳ１９２）。次に、位置情報（Ｐｏｓｉｔｉｏｎ）を取得し（ステップＳ１９３）、これと第２のテーブルから制御データが関連付けられている照明位置を決定する（ステップＳ１９４）。続いて、制御データを取得し（ステップＳ１９５）、ステップＳ１９４で決定した位置に対応する機器を制御する（ステップＳ１９６）。
　また、図１４、図１６における第２のテーブルや視聴環境制御データには、各周辺機器の位置だけでなく、方向（光照射方向、風向き）を記述するようにしてもよい。図１９は、照明装置における光照射方向の一例を説明するための図である。図１９（Ａ）は視聴空間を上から見た図であり、図１９（Ｂ）は視聴空間を水平方向（横）から見た図である。この例では、光照射方向を、床面におけるディスプレイと視聴者を結んだ線を基準に、水平方向の第１の角度（水平角）と、垂直方向の第２の角度（垂直角）によって記述する。送風機の風向きの場合も同様に水平角と垂直角によって記述できる。あるいは、視聴者からディスプレイへの法線や、視聴者とディスプレイの中心を結んだ線などを基準にしてもよい。
　本実施態様における配置パターンおよび位置の記述方法は、照明や送風機に限定されるものではなく、香り発生装置や効果音発生装置などの周辺機器にも同様に適用可能であることは言うまでもない。
　（実施態様３）
　本発明の第３の実施態様について、図面を参照しながら説明する。図２０は、各周辺機器の位置を記述する際に参照するテーブルの他の構成例を示した図である。参照テーブルは、“左”、“右”、“前”といった位置（Ｐｏｓｉｔｉｏｎ）を規定する第１のテーブルと、利用可能な位置のリストと各利用可能位置の配置詳細とを規定する第２のテーブルとから構成される。図２０の第１のテーブルにおけるＰｏｓｉｔｉｏｎの定義は一例であり、視聴環境空間の特定の壁面に含まれる位置をまとめて“左面”、“右面”、“前面”といった面を定義してもよい。例えば、第１のテーブルにおける左前と左と左後をまとめて左面と定義したり、第１のテーブルにおける右前と右と右後をまとめて右面と定義してもよい。
　配置詳細は、第２のテーブルに記載してもよいし、ＣｈａｎｎｅｌＴｙｐｅＩＤ＝５または６の場合のように、外部の定義を参照するように規格名（規格Ａ）や仕様名（仕様Ｂ）を記載してもよい。図２０の第２のテーブルにおけるＣｈａｎｎｅｌＴｙｐｅＩＤの定義は一例であり、「すべての位置が利用可能」、「配置詳細はユーザ定義」などのＣｈａｎｎｅｌＴｙｐｅＩＤを定義してもよい。
　また、左右への配置として、例えば、図１５（Ｂ）に示すような配置を追加したい場合、第２のテーブルに、ＣｈａｎｎｅｌＴｙｐｅＩＤ＝７として「３：ディスプレイ面に対して３０°の位置、７：ディスプレイ面に対して３０°の位置」等を追加定義することにより、既存の定義に影響を与えることなく容易に拡張することができる。
　上記テーブル構成とすることにより、同じ位置（例えば、第１のテーブルにおける左と右）に対する配置でも、視聴環境やコンテンツ制作者の意図に応じ、第２のテーブルにおいて種々のパターンを定義することができる。
　上記テーブル構成は、実施態様２と同様、照明装置に限定されるものではなく、送風機、香り発生装置、効果音発生装置などの周辺機器にも同様に適用可能であることは言うまでもない。
　（実施態様４）
　上記本発明の実施態様１、２および３においては、識別情報と照明制御データとが付加データとして放送データに付加されて送信される場合について説明したが、放送データに付加データが付加されていない場合、視聴する映像データ及び／又は音声データに対応する識別情報と照明制御データを外部サーバ装置等より送受信することによって、映像データ及び／又は音声データ再生時の最適な視聴環境を実現することが可能となる。
　図２１は、本発明の実施態様４に係る外部サーバ装置の要部構成例を示すブロック図である。
　本実施態様における外部サーバ装置４０は、本発明のデータ送信装置に相当し、データ受信装置側から特定の映像データ及び／又は音声データ（コンテンツ）に関する識別情報と照明制御データの送信要求を受信する受信部４１と、映像データ及び／又は音声データ（コンテンツ）毎の識別情報と照明制御データを格納している照明制御データ格納部４２と、送信要求を受けた識別情報と照明制御データを、要求元のデータ受信装置へ送信する送信部４３を備えている。
　ここで、本実施態様の照明制御データ格納部４２に格納されている照明制御データは、図示しないが、コンテンツ制作者等が意図する任意のセグメント（例えば、シーンやショット）の開始タイムコードを記述し、送信要求を受けた映像データ及び／又は音声データ（コンテンツ）の照明制御データを、映像データ及び／又は音声データ（セグメント）の開始時刻を示すＴＣ（タイムコード）とともに、送信部４３より要求元のデータ受信装置へ送信するようになっている。また、コンテンツ制作者等が意図する任意のセグメント（例えば、シーンやショット）にＩＤを付加し、送信要求を受けた映像データ及び／又は音声データ（コンテンツ）の照明制御データを、セグメントのＩＤとともに、送信部４３より要求元のデータ受信装置へ送信するようにしてもよい。
　次に、外部サーバ装置４０より送出された識別情報と照明制御データを受けて、視聴環境照明を制御するデータ受信装置（本発明の視聴環境制御装置に相当する。）を含むシステム構成について説明する。
　図２２は、本発明の実施態様４に係る視聴環境制御システムの要部構成例を示すブロック図である。図中、５０はデータ受信装置、６０は映像表示装置、６１は音声再生装置、６２は照明装置を示す。
　データ受信装置５０は、伝送路より入力された放送データを受信して復調するとともに、誤り訂正を行う受信部５１と、受信部５１の出力データから、映像表示装置６０に出力する映像データ、音声再生装置６１に出力する音声データのそれぞれを分離・抽出するデータ分離部５２とを備えている。
　また、データ受信装置５０は、照明調光データ生成部５６からの指示に基づいて、表示する映像データ（コンテンツ）に対応した識別情報と照明制御データの送信要求を、通信ネットワークを介して外部サーバ装置４０に送出する送信部５７と、送信要求した識別情報と照明制御データを、通信ネットワークを介して外部サーバ装置４０より受信する受信部５４とを備えている。
　照明配置情報記憶部５５は、視聴者の視聴環境空間(実空間)に設置されている各照明装置６２の配置情報を記憶するものであり、照明調光データ生成部５６の命令により照明装置６２の配置情報を適宜照明調光データ生成部２４へ送る。照明配置情報記憶部５５は、実施態様１の照明配置情報記憶部２５と同様のものであるので、詳細な説明は省略する。
　同様に、照明調光データ生成部５６は、受信部５４から受信した識別情報と照明制御データ、及び照明配置情報記憶部５５から取得した照明装置６２の配置情報に基づいて、視聴者の実際の視聴環境空間に設置されている照明装置６２を適切に制御するための照明調光データ（ＲＧＢデータ）を生成し、これを照明装置３２に出力するものであり、識別情報と照明制御データの送信要求を行う以外は、実施態様１における照明調光データ生成部２４と同じものであるので説明を省略する。
　なお、前述の実施態様１で説明したように、照明装置６２へ送られる照明調光データは、映像データおよび音声データと出力タイミングを合わせる必要があるため、例えば照明調光データ生成部５６において実際の視聴環境に対応した照明調光データへ変換するのに必要な時間だけ、データ分離部５２で分離された映像データと音声データを遅らせ、照明調光データと同期をとるためのディレイ発生部５３ａ，５３ｂを設けている。
　これによって、放送データに識別情報と照明制御データが付加されていない場合であっても、映像データ及び／又は音声データ（番組コンテンツ）に対応する識別情報と照明制御データを外部サーバ装置より入手し、この識別情報と照明制御データに基づいて、視聴環境照明を制御する構成としているので、上述した実施態様１と同様、データ量の増加を抑制しつつ、映像制作者の意図に応じた任意のタイミングで視聴環境照明の切替制御を行うとともに、最適な視聴環境の照明制御を実現することが可能となる。
　上述したように、上記実施態様１、２、３および４においては、識別情報（チャンネルタイプＩＤ）と照明制御データを常にペアで送信、あるいは受信するようにしているため、照明制御データがどのような仮想的な視聴環境空間における照明装置の配置パターンを前提に作成されたものであるかを検知することができ、従って、実際の視聴環境空間における照明装置の配置状況に合わせて、前記照明制御データを適切な照明調光データに変換することが可能である。
　本発明のデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法は、上述した本発明の主旨を逸脱しない範囲で、様々な実施態様により実現することが可能である。例えば、視聴環境制御装置は映像表示装置内に設けられてもよく、入力映像データに含まれる種々の情報に基づいて、外部の照明機器を制御することができるような構成としてもよいことは言うまでもない。
　また、上記実施態様では、仮想的な視聴環境空間に配置された周辺機器として照明装置を例に説明したが、本発明は照明装置に限られるものではなく、空調機、送風機、振動装置、香り発生装置など、視聴環境に影響を与える周辺機器に対して適用できるものであることは言うまでもない。これら視聴環境に影響を与える周辺機器に対して本発明を適用する場合は、例えば風や香りがどちらへ向かって吹いているかといった演出効果の出力位置／方向を含む配置パターンを、識別情報によって定義すればよい。
　なお、本発明において、映像データ及び／又は音声データ（コンテンツ）は、テレビジョン放送によって伝送されるテレビジョン番組に係るコンテンツに限らず、Ｂｌｕ－ｒａｙ　ＤｉｓｃやＤＶＤなどのメディア媒体に格納された作品に係るコンテンツであってもよい。すなわち、入力映像データはテレビジョン放送を受信して得られるものに限らず、外部再生装置より再生された映像データを入力する場合にも、本発明を適用することが可能である。
１０…データ送信装置、１１…データ多重部、１２…送信部、２０…データ受信装置、２１，５１…受信部、２２，５２…データ分離部、２３ａ，２３ｂ，５３ａ，５３ｂ…ディレイ発生部、２４，５６…照明調光データ生成部、２５，５５…照明配置情報記憶部、３０，６０…映像表示装置、３１，６１…音声再生装置、３２，６２…照明装置、４０…外部サーバ装置、４１…受信部、４２…照明制御データ格納部、４３…送信部、５４…受信部、５７…送信部。

Claims (23)

  1. 　映像データ及び／又は音声データを送信するデータ送信装置であって、
    　仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを、前記映像データ及び／又は音声データに付加して送信する送信手段を備えたことを特徴とするデータ送信装置。
  2. 　前記識別情報によって示される周辺機器の配置パターンは、前記仮想的な視聴環境空間における天井に周辺機器を設置した配置パターンを含むことを特徴とする請求項１に記載のデータ送信装置。
  3. 　前記識別情報によって示される周辺機器の配置パターンは、前記仮想的な視聴環境空間における、前記映像データを表示するための映像表示装置の周囲左側に周辺機器を設置した配置パターンを含むことを特徴とする請求項１に記載のデータ送信装置。
  4. 　前記識別情報によって示される周辺機器の配置パターンは、前記仮想的な視聴環境空間における、前記映像データを表示するための映像表示装置の周囲右側に周辺機器を設置した配置パターンを含むことを特徴とする請求項１に記載のデータ送信装置。
  5. 　前記識別情報によって示される周辺機器の配置パターンは、前記仮想的な視聴環境空間における、前記映像データを表示するための映像表示装置の周囲後背部に周辺機器を設置した配置パターンを含むことを特徴とする請求項１に記載のデータ送信装置。
  6. 　前記視聴環境制御データは、前記配置パターンを構成する周辺機器の設置位置を示す位置情報を含むことを特徴とする請求項１乃至５のいずれか１項に記載のデータ送信装置。
  7. 　前記視聴環境制御データは、前記配置パターンを構成する周辺機器の設置方向を示す位置情報を含むことを特徴とする請求項１乃至６のいずれか１項に記載のデータ送信装置。
  8. 　前記視聴環境制御データは、前記周辺機器に対する駆動優先順位を示す情報を含むことを特徴とする請求項１乃至７のいずれか１項に記載のデータ送信装置。
  9. 　前記視聴環境制御データは、前記周辺機器に対する視聴環境制御データの記述方法を表すモード情報を含むことを特徴とする請求項１乃至８のいずれか１項に記載のデータ送信装置。
  10. 　前記モード情報は、前記周辺機器に対する駆動制御値が絶対値によって記述されていることを示す情報を含むことを特徴とする請求項９に記載のデータ送信装置。
  11. 　前記モード情報は、前記周辺機器に対する駆動制御値が他の指定された周辺機器に対する駆動制御値との差分値によって記述されていることを示す情報を含むことを特徴とする請求項９に記載のデータ送信装置。
  12. 　前記モード情報は、前記周辺機器に対する駆動制御値が他の指定された周辺機器に対する駆動制御値との比率値によって記述されていることを示す情報を含むことを特徴とする請求項９に記載のデータ送信装置。
  13. 　前記モード情報は、前記周辺機器に対する駆動制御値が他の指定された周辺機器に対する駆動制御値と同一であることを示す情報を含むことを特徴とする前記請求項９に記載のデータ送信装置。
  14. 　映像データ及び／又は音声データに関連付けて、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを格納する格納手段と、
    　外部装置からの送信要求を受けて、所定の映像データ及び／又は音声データに関する識別情報と視聴環境制御データとを、前記送信要求元の外部装置へ送信する送信手段とを備えたことを特徴とするデータ送信装置。
  15. 　前記仮想的な視聴環境空間における周辺機器が、照明装置であることを特徴とする請求項１から１４のいずれか１項に記載のデータ送信装置。
  16. 　前記仮想的な視聴環境空間における周辺機器が、送風装置であることを特徴とする請求項１から１４のいずれか１項に記載のデータ送信装置。
  17. 　映像データ及び／又は音声データを受信するとともに、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを受信する受信手段と、
    　実際の視聴環境空間における周辺機器の配置パターンを表す機器配置情報を記憶する記憶手段と、
    　前記受信手段で受信した識別情報と前記記憶手段に記憶された機器配置情報とを用いて、前記視聴環境制御データを、前記実際の視聴環境空間における周辺機器を駆動制御するための駆動制御データに変換する駆動制御データ生成手段とを備えたことを特徴とする視聴環境制御装置。
  18. 　前記視聴環境制御データは、前記配置パターンを構成する周辺機器の設置位置を示す位置情報を含むことを特徴とする請求項１７に記載の視聴環境制御装置。
  19. 　前記視聴環境制御データは、前記配置パターンを構成する周辺機器の設置方向を示す位置情報を含むことを特徴とする請求項１７または１８に記載のデータ送信装置。
  20. 　前記請求項１７に記載の視聴環境制御装置と、前記映像データ及び／又は音声データを再生するための映像／音声再生装置と、該映像／音声再生装置の周辺に設置された周辺機器とを備えたことを特徴とする視聴環境制御システム。
  21. 　映像データ及び／又は音声データを送信するデータ送信方法であって、
    　仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを、前記映像データ及び／又は音声データに付加して送信することを特徴とするデータ送信方法。
  22. 　映像データ及び／又は音声データに関連付けて、仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを格納しており、
    　外部装置からの送信要求を受けて、所定の映像データ及び／又は音声データに関する識別情報と視聴環境制御データとを、前記送信要求元の外部装置へ送信することを特徴とするデータ送信方法。
  23. 　映像データ及び／又は音声データを受信するステップ、
    　仮想的な視聴環境空間における周辺機器の配置パターンを示す識別情報と、前記仮想的な視聴環境空間における周辺機器に対する視聴環境制御データとを受信するステップ、
    　実際の視聴環境空間における周辺機器の配置パターンを表す機器配置情報を記憶するステップ、
    　および、前記受信した識別情報と前記記憶された機器配置情報とを用いて、前記視聴環境制御データを、前記実際の視聴環境空間における周辺機器を駆動制御するための駆動制御データに変換するステップを有することを特徴とする視聴環境制御方法。
PCT/JP2009/062737 2008-07-15 2009-07-14 データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 Ceased WO2010007988A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN2009801273893A CN102090057A (zh) 2008-07-15 2009-07-14 数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法
JP2010520869A JP5092015B2 (ja) 2008-07-15 2009-07-14 データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法
US13/054,177 US20110190911A1 (en) 2008-07-15 2009-07-14 Data transmitting apparatus, data transmitting method, audio-visual environment controlling apparatus, audio-visual environment controlling system, and audio-visual environment controlling method
BRPI0916465A BRPI0916465A2 (pt) 2008-07-15 2009-07-14 aparelho para transmissão de dados, método para transmissão de dados, aparelho para controle de ambiente audiovisual, sistema de controle de ambiente audiovisual e método de controle ambiente audiovisual
EP09797913A EP2315442A1 (en) 2008-07-15 2009-07-14 Data transmission device, method for transmitting data, audio-visual environment control device, audio-visual environment control system, and method for controlling audio-visual environment

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2008-183815 2008-07-15
JP2008183815 2008-07-15
JP2009-015373 2009-01-27
JP2009015373 2009-01-27

Publications (1)

Publication Number Publication Date
WO2010007988A1 true WO2010007988A1 (ja) 2010-01-21

Family

ID=41550390

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/062737 Ceased WO2010007988A1 (ja) 2008-07-15 2009-07-14 データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法

Country Status (7)

Country Link
US (1) US20110190911A1 (ja)
EP (1) EP2315442A1 (ja)
JP (1) JP5092015B2 (ja)
KR (1) KR20110030656A (ja)
CN (1) CN102090057A (ja)
BR (1) BRPI0916465A2 (ja)
WO (1) WO2010007988A1 (ja)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018147606A (ja) * 2017-03-01 2018-09-20 任天堂株式会社 照明装置、照明器具及び電子機器
JP2020529054A (ja) * 2017-01-23 2020-10-01 ザ ラボ イン ザ バッグ スクリーンおよび少なくとも２つの多感覚ケースを備えた没入型デバイス
JP2021525991A (ja) * 2018-06-07 2021-09-27 シグニファイ ホールディング ビー ヴィＳｉｇｎｉｆｙ Ｈｏｌｄｉｎｇ Ｂ．Ｖ． 遅延の変動に応じた１つ以上のライト効果の選択
JP2022003392A (ja) * 2014-05-09 2022-01-11 ビュー， インコーポレイテッド 色合い付与可能窓のための制御方法
JP2022134638A (ja) * 2021-03-03 2022-09-15 ヤマハ株式会社 画像表示システム、表示制御方法、発光制御方法、及びプログラム
JP2023529073A (ja) * 2020-05-25 2023-07-07 シグニファイ ホールディング ビー ヴィ 距離メトリックに基づくエンターテイメント照明のための画像分析領域の決定
US11899331B2 (en) 2013-02-21 2024-02-13 View, Inc. Control method for tintable windows
US11940705B2 (en) 2013-02-21 2024-03-26 View, Inc. Control method for tintable windows
US11950340B2 (en) 2012-03-13 2024-04-02 View, Inc. Adjusting interior lighting based on dynamic glass tinting
US11960190B2 (en) 2013-02-21 2024-04-16 View, Inc. Control methods and systems using external 3D modeling and schedule-based computing
US11966142B2 (en) 2013-02-21 2024-04-23 View, Inc. Control methods and systems using outside temperature as a driver for changing window tint states
US12298644B2 (en) 2011-03-16 2025-05-13 View Operating Corporation Controlling transitions in optically switchable devices
US12429742B2 (en) 2012-03-13 2025-09-30 View Operating Corporation Methods of controlling multi-zone tintable windows

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011073877A1 (en) * 2009-12-17 2011-06-23 Koninklijke Philips Electronics N.V. Ambience cinema lighting system
US20130147395A1 (en) * 2011-12-07 2013-06-13 Comcast Cable Communications, Llc Dynamic Ambient Lighting
KR101305249B1 (ko) * 2012-07-12 2013-09-06 씨제이씨지브이 주식회사 다면 상영 시스템
US8928811B2 (en) * 2012-10-17 2015-01-06 Sony Corporation Methods and systems for generating ambient light effects based on video content
US8928812B2 (en) 2012-10-17 2015-01-06 Sony Corporation Ambient light effects based on video via home automation
US20140104497A1 (en) * 2012-10-17 2014-04-17 Adam Li Video files including ambient light effects
WO2014111826A2 (en) * 2013-01-17 2014-07-24 Koninklijke Philips N.V. A controllable stimulus system and a method of controlling an audible stimulus and a visual stimulus
TWM459428U (zh) * 2013-03-04 2013-08-11 Gunitech Corp 環境控制裝置及影／音播放裝置
US9380443B2 (en) 2013-03-12 2016-06-28 Comcast Cable Communications, Llc Immersive positioning and paring
US20150312648A1 (en) * 2014-04-23 2015-10-29 Verizon Patent And Licensing Inc. Mobile device controlled dynamic room environment using a cast device
US10595095B2 (en) * 2014-11-19 2020-03-17 Lg Electronics Inc. Method and apparatus for transceiving broadcast signal for viewing environment adjustment
EP3062519A1 (en) * 2015-02-27 2016-08-31 Novabase Digital TV Technologies GmbH Ambient surround information system for a media presentation
CN104869342A (zh) * 2015-06-09 2015-08-26 柳州桂通科技股份有限公司 一种多媒体多信息同步重现的方法及其应用
DE102015115050B4 (de) * 2015-09-08 2017-07-27 Jörg Köhler Verfahren zur Beleuchtungsgestaltung
CN106422374B (zh) * 2016-11-22 2018-03-13 深圳市环球数码科技有限公司 一种用于数字影院的动态视觉效果增强系统及控制方法
IT201700099120A1 (it) * 2017-09-05 2019-03-05 Salvatore Lamanna Sistema di illuminazione per schermo di qualsiasi tipo
US10932344B2 (en) 2018-10-09 2021-02-23 Rovi Guides, Inc. Systems and methods for emulating an environment created by the outputs of a plurality of devices
US11750745B2 (en) 2020-11-18 2023-09-05 Kelly Properties, Llc Processing and distribution of audio signals in a multi-party conferencing environment
JP7786120B2 (ja) * 2021-10-12 2025-12-16 ヤマハ株式会社 映像信号処理方法及び映像信号処理装置
US12295081B2 (en) 2022-01-06 2025-05-06 Comcast Cable Communications, Llc Video display environmental lighting

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001078117A (ja) * 1999-09-06 2001-03-23 Matsushita Electric Ind Co Ltd ディジタル放送用受信装置
JP2001343900A (ja) * 2000-05-31 2001-12-14 Matsushita Electric Ind Co Ltd 照明システムおよび照明制御データ作成方法
JP2007006461A (ja) * 2005-05-23 2007-01-11 Sharp Corp 映像呈示システム
JP2008005297A (ja) * 2006-06-23 2008-01-10 Fujifilm Corp 画像撮影再生システム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5883621A (en) * 1996-06-21 1999-03-16 Sony Corporation Device control with topology map in a digital network
US6548967B1 (en) * 1997-08-26 2003-04-15 Color Kinetics, Inc. Universal lighting network methods and systems
US6976267B1 (en) * 1999-04-09 2005-12-13 Sony Corporation Method and apparatus for controlling connections between devices
US7540012B1 (en) * 1999-06-08 2009-05-26 International Business Machines Corporation Video on demand configuring, controlling and maintaining
US20050275626A1 (en) * 2000-06-21 2005-12-15 Color Kinetics Incorporated Entertainment lighting system
AU2002236807A1 (en) * 2001-01-18 2002-07-30 Madstone Films A method and system providing a digital cinema distribution network having backchannel feedback
DE602005021685D1 (de) * 2004-11-30 2010-07-15 Koninkl Philips Electronics Nv Anzeigesystem
JP2007006281A (ja) * 2005-06-24 2007-01-11 Sony Corp オーディオ・ディスプレイ装置
EP2018062A4 (en) * 2006-04-21 2010-08-04 Sharp Kk DATA TRANSMISSION METHOD AND DEVICE, AND AUDIOVISUAL ENVIRONMENT MANAGEMENT DEVICE, SYSTEM AND METHOD
US20110316426A1 (en) * 2006-12-28 2011-12-29 Sharp Kabushiki Kaisha Audio-visual environment control device, audio-visual environment control system and audio-visual environment control method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001078117A (ja) * 1999-09-06 2001-03-23 Matsushita Electric Ind Co Ltd ディジタル放送用受信装置
JP2001343900A (ja) * 2000-05-31 2001-12-14 Matsushita Electric Ind Co Ltd 照明システムおよび照明制御データ作成方法
JP2007006461A (ja) * 2005-05-23 2007-01-11 Sharp Corp 映像呈示システム
JP2008005297A (ja) * 2006-06-23 2008-01-10 Fujifilm Corp 画像撮影再生システム

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12298644B2 (en) 2011-03-16 2025-05-13 View Operating Corporation Controlling transitions in optically switchable devices
US12429742B2 (en) 2012-03-13 2025-09-30 View Operating Corporation Methods of controlling multi-zone tintable windows
US11950340B2 (en) 2012-03-13 2024-04-02 View, Inc. Adjusting interior lighting based on dynamic glass tinting
US11966142B2 (en) 2013-02-21 2024-04-23 View, Inc. Control methods and systems using outside temperature as a driver for changing window tint states
US12455485B2 (en) 2013-02-21 2025-10-28 View Operating Corporation Control method for tintable windows
US12210261B2 (en) 2013-02-21 2025-01-28 View, Inc. Control method for tintable windows
US11960190B2 (en) 2013-02-21 2024-04-16 View, Inc. Control methods and systems using external 3D modeling and schedule-based computing
US11899331B2 (en) 2013-02-21 2024-02-13 View, Inc. Control method for tintable windows
US11940705B2 (en) 2013-02-21 2024-03-26 View, Inc. Control method for tintable windows
JP2022003392A (ja) * 2014-05-09 2022-01-11 ビュー， インコーポレイテッド 色合い付与可能窓のための制御方法
JP2023011920A (ja) * 2014-05-09 2023-01-24 ビュー， インコーポレイテッド 色合い付与可能窓のための制御方法
JP7072753B2 (ja) 2017-01-23 2022-05-23 ザ ラボ イン ザ バッグ スクリーンおよび少なくとも２つの多感覚ケースを備えた没入型デバイス
JP2020529054A (ja) * 2017-01-23 2020-10-01 ザ ラボ イン ザ バッグ スクリーンおよび少なくとも２つの多感覚ケースを備えた没入型デバイス
JP7009068B2 (ja) 2017-03-01 2022-01-25 任天堂株式会社 照明装置、照明器具及び電子機器
JP2018147606A (ja) * 2017-03-01 2018-09-20 任天堂株式会社 照明装置、照明器具及び電子機器
JP7273856B2 (ja) 2018-06-07 2023-05-15 シグニファイ ホールディング ビー ヴィ 遅延の変動に応じた１つ以上のライト効果の選択
JP2021525991A (ja) * 2018-06-07 2021-09-27 シグニファイ ホールディング ビー ヴィＳｉｇｎｉｆｙ Ｈｏｌｄｉｎｇ Ｂ．Ｖ． 遅延の変動に応じた１つ以上のライト効果の選択
JP2023529073A (ja) * 2020-05-25 2023-07-07 シグニファイ ホールディング ビー ヴィ 距離メトリックに基づくエンターテイメント照明のための画像分析領域の決定
JP2022134638A (ja) * 2021-03-03 2022-09-15 ヤマハ株式会社 画像表示システム、表示制御方法、発光制御方法、及びプログラム

Also Published As

Publication number Publication date
US20110190911A1 (en) 2011-08-04
BRPI0916465A2 (pt) 2018-02-06
CN102090057A (zh) 2011-06-08
JP5092015B2 (ja) 2012-12-05
JPWO2010007988A1 (ja) 2012-01-05
KR20110030656A (ko) 2011-03-23
EP2315442A1 (en) 2011-04-27

Similar Documents

Publication Publication Date Title
JP5092015B2 (ja) データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法
JP5442643B2 (ja) データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御方法および視聴環境制御システム
JP7496890B2 (ja) 遠隔地演出システム及び遠隔地演出方法
KR101667416B1 (ko) 실감 효과 표현 방법 및 그 장치 및 실감 기기 성능 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체
US20110188832A1 (en) Method and device for realising sensory effects
JP4948548B2 (ja) 送信装置、視聴環境制御装置、及び視聴環境制御システム
JP6566271B2 (ja) 伝送方法及び再生装置
KR101078641B1 (ko) 감각 재생 장치에 관계된 메타데이터를 이용한 멀티미디어 응용 시스템 및 방법
WO2010007987A1 (ja) データ送信装置、データ受信装置、データ送信方法、データ受信方法および視聴環境制御方法
US20100268745A1 (en) Method and apparatus for representing sensory effects using sensory device capability metadata
US20110125790A1 (en) Method and apparatus for representing sensory effects and computer readable recording medium storing sensory effect metadata
CN110419225B (zh) 用于多媒体回放中的环境信号的分布式同步控制系统
US20100274817A1 (en) Method and apparatus for representing sensory effects using user's sensory effect preference metadata
JP2011259354A (ja) 視聴環境制御システム、送信装置、受信装置
US11184581B2 (en) Method and apparatus for creating, distributing and dynamically reproducing room illumination effects
JP5074864B2 (ja) データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法
JP2009060541A (ja) データ送信装置、データ送信方法、視聴環境制御装置、及び視聴環境制御方法
JP2019149838A (ja) 再生方法及び再生装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980127389.3

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09797913

Country of ref document: EP

Kind code of ref document: A1

DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
WWE Wipo information: entry into national phase

Ref document number: 2010520869

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 393/CHENP/2011

Country of ref document: IN

ENP Entry into the national phase

Ref document number: 20117002439

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2009797913

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 13054177

Country of ref document: US

ENP Entry into the national phase

Ref document number: PI0916465

Country of ref document: BR

Kind code of ref document: A2

Effective date: 20110114