[go: up one dir, main page]

RU2018101207A - Способ и устройство для определения карты глубины для изображения - Google Patents

Способ и устройство для определения карты глубины для изображения Download PDF

Info

Publication number
RU2018101207A
RU2018101207A RU2018101207A RU2018101207A RU2018101207A RU 2018101207 A RU2018101207 A RU 2018101207A RU 2018101207 A RU2018101207 A RU 2018101207A RU 2018101207 A RU2018101207 A RU 2018101207A RU 2018101207 A RU2018101207 A RU 2018101207A
Authority
RU
Russia
Prior art keywords
depth
model
contour
value
pixels
Prior art date
Application number
RU2018101207A
Other languages
English (en)
Other versions
RU2018101207A3 (ru
RU2721175C2 (ru
Inventor
Кристиан ВАРЕКАМП
Патрик Люк Элс ВАНДЕВАЛЛЕ
Original Assignee
Конинклейке Филипс Н.В.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Конинклейке Филипс Н.В. filed Critical Конинклейке Филипс Н.В.
Publication of RU2018101207A publication Critical patent/RU2018101207A/ru
Publication of RU2018101207A3 publication Critical patent/RU2018101207A3/ru
Application granted granted Critical
Publication of RU2721175C2 publication Critical patent/RU2721175C2/ru

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/70—Denoising; Smoothing
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration using local operators
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20024—Filtering details
    • G06T2207/20028—Bilateral filtering
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20192—Edge enhancement; Edge preservation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/003—Aspects relating to the "2D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Image Analysis (AREA)
  • Image Generation (AREA)

Claims (27)

1. Устройство для генерирования карты глубины, содержащее:
генератор (401) изображения для обеспечения изображения и связанной карты глубины, содержащей вводимые значения глубины;
детектор (405) контура для обнаружения, по меньшей мере, первого контура в изображении, при этом первый контур содержит первый набор пикселей;
процессор (407) модели для генерирования модели глубины контура для первого контура посредством согласования модели глубины с вводимыми значениями глубины только для первого набора пикселей;
определитель (409) значения глубины для определения значения глубины модели глубины, по меньшей мере, для первого пикселя первого набора пикселей из модели глубины контура; и
модификатор (411) для генерирования модифицированной карты глубины из связанной карты глубины посредством модификации значений глубины связанной карты глубины; при этом
модификатор (411) выполнен с возможностью генерирования первого модифицированного значения глубины для первого пикселя в модифицированной карте глубины в ответ на значение глубины модели глубины.
2. Устройство по п. 1, в котором модификатор (411) выполнен с возможностью задания первому модифицированному значению глубины значения глубины модели глубины.
3. Устройство по п. 1, в котором модификатор (411) выполнен с возможностью генерирования первого модифицированного значения глубины в качестве комбинации значения глубины модели глубины и вводимого значения глубины для первого пикселя.
4. Устройство по п. 3, в котором детектор (405) контура выполнен с возможностью генерирования значения обнаружения мягкого решения, при этом комбинация является взвешенной комбинация, а модификатор выполнен с возможностью определения весового коэффициента, по меньшей мере, либо значения глубины модели глубины, либо вводимого значения глубины для первого пикселя в ответ на значение обнаружения мягкого решения.
5. Устройство по п. 4, в котором детектор (405) контура выполнен с возможностью генерирования значения обнаружения мягкого решения в ответ на геометрическое свойство первого контура.
6. Устройство по п. 1, в котором модель глубины контура является постоянной моделью значения глубины.
7. Устройство по п. 6, в котором процессор (407) модели выполнен с возможностью генерирования модели глубины контура в качестве либо предельного вводимого значения глубины, либо среднего вводимого значения глубины, либо медианного вводимого значения глубины для первого набора пикселей.
8. Устройство по п.1, в котором модель глубины контура является линейной моделью значения глубины.
9. Устройство по п.1, в котором детектор (405) контура выполнен с возможностью определения первого контура при наличии ограничения геометрического требования для первого набора пикселей.
10. Устройство по п. 9, в котором геометрическое требование содержит требование для первого набора пикселей для формирования геометрической формы, не превышающей максимальную кривизну.
11. Устройство по п. 1, дополнительно содержащее билатеральный фильтр (501) для фильтрации связанной карты глубины на основе изображения до модификации посредством модификатора.
12. Устройство по п. 1, в котором детектор (405) контура выполнен с возможностью обнаружения первого контура в ответ на требование контура, содержащее как ограничение изменения визуального свойства, так и геометрическое ограничение.
13. Устройство по п. 1, в котором генератор (401) изображения выполнен с возможностью генерирования связанной карты глубины в ответ на оценку диспарантности на основе изображения и второго изображения, соответствующего другому ракурсному направлению.
14. Способ генерирования карты глубины, содержащий этапы, на которых:
обеспечивают изображение и связанную карту глубины, содержащую вводимые значения глубины;
обнаруживают, по меньшей мере, первый контур в изображении, при этом первый контур содержит первый набор пикселей;
генерируют модель глубины контура для первого контура посредством согласования модели глубины с вводимыми значениями глубины только для первого набора пикселей;
определяют значения глубины модели глубины, по меньшей мере, для первого пикселя первого набора пикселей из модели глубины контура; и
генерируют модифицированную карту глубины из связанной карты глубины посредством модификации значений глубины связанной карты глубины; при этом
этап генерирования модифицированной карты глубины содержит этап, на котором генерируют первое модифицированное значение глубины для первого пикселя в модифицированной карте глубины в ответ на значение глубины модели глубины.
15. Компьютерный программный продукт, содержащий компьютерный программный код, адаптированный для выполнения всех этапов п. 14, когда упомянутая программа запускается на компьютере.
RU2018101207A 2015-06-16 2016-06-15 Способ и устройство для определения карты глубины для изображения RU2721175C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP15172402 2015-06-16
EP15172402.8 2015-06-16
PCT/EP2016/063711 WO2016202837A1 (en) 2015-06-16 2016-06-15 Method and apparatus for determining a depth map for an image

Publications (3)

Publication Number Publication Date
RU2018101207A true RU2018101207A (ru) 2019-07-16
RU2018101207A3 RU2018101207A3 (ru) 2019-12-09
RU2721175C2 RU2721175C2 (ru) 2020-05-18

Family

ID=53476695

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2018101207A RU2721175C2 (ru) 2015-06-16 2016-06-15 Способ и устройство для определения карты глубины для изображения

Country Status (9)

Country Link
US (1) US10298905B2 (ru)
EP (1) EP3311361B1 (ru)
JP (1) JP6717855B2 (ru)
KR (1) KR20180019671A (ru)
CN (1) CN107750370B (ru)
BR (1) BR112017026903A2 (ru)
CA (1) CA2988360A1 (ru)
RU (1) RU2721175C2 (ru)
WO (1) WO2016202837A1 (ru)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10623723B2 (en) * 2016-09-29 2020-04-14 Intel Corporation Hybrid stereo rendering for depth extension in dynamic light field displays
US11176409B2 (en) * 2016-12-20 2021-11-16 Sony Depthsensing Solutions Sa/Nv Distance-independent keypoint detection
EP3358844A1 (en) * 2017-02-07 2018-08-08 Koninklijke Philips N.V. Method and apparatus for processing an image property map
US10445861B2 (en) * 2017-02-14 2019-10-15 Qualcomm Incorporated Refinement of structured light depth maps using RGB color data
EP3396949A1 (en) * 2017-04-26 2018-10-31 Koninklijke Philips N.V. Apparatus and method for processing a depth map
US11386527B2 (en) 2018-01-30 2022-07-12 Sony Corporation Image processor and imaging processing method
GB2570528B (en) * 2018-06-25 2020-06-10 Imagination Tech Ltd Bilateral filter with data model
EP3629585A1 (en) * 2018-09-25 2020-04-01 Koninklijke Philips N.V. Image synthesis
EP3644604A1 (en) * 2018-10-23 2020-04-29 Koninklijke Philips N.V. Image generating apparatus and method therefor
EP3696773A1 (en) * 2019-02-15 2020-08-19 Koninklijke Philips N.V. Apparatus and method for generating a light intensity image
US12254644B2 (en) * 2021-03-31 2025-03-18 Leica Camera Ag Imaging system and method
CN113838114B (zh) * 2021-09-22 2023-08-29 中南大学 一种基于边缘散焦追踪的高炉料面深度估计方法及系统
KR102801032B1 (ko) * 2021-10-07 2025-04-30 주식회사 로킷헬스케어 시계열적 처리를 응용한 3차원 물체의 경계선 설정 방법 및 장치
CN114155262A (zh) * 2021-11-29 2022-03-08 合肥安达创展科技股份有限公司 一种基于opencv相关算法的体感深度图获取系统
CN113963318B (zh) * 2021-12-22 2022-03-25 北京的卢深视科技有限公司 人流量统计方法、装置、电子设备和存储介质
US12058302B2 (en) 2022-04-06 2024-08-06 Samsung Electronics Co., Ltd. Encoding depth information for images

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7764827B2 (en) 2003-08-05 2010-07-27 Koninklijke Philips Electronics N.V. Multi-view image generation
US7672507B2 (en) * 2004-01-30 2010-03-02 Hewlett-Packard Development Company, L.P. Image processing methods and systems
EP1728208A1 (en) * 2004-03-12 2006-12-06 Koninklijke Philips Electronics N.V. Creating a depth map
PL3035682T3 (pl) 2005-04-29 2019-09-30 Koninklijke Philips N.V. Urządzenie do wyświetlania stereoskopowego
JP5236214B2 (ja) * 2007-06-11 2013-07-17 任天堂株式会社 画像処理プログラム
JP5083052B2 (ja) * 2008-06-06 2012-11-28 ソニー株式会社 立体視画像生成装置、立体視画像生成方法およびプログラム
GB2467932A (en) * 2009-02-19 2010-08-25 Sony Corp Image processing device and method
CN101631256B (zh) * 2009-08-13 2011-02-09 浙江大学 用于三维电视系统中2d视频到3d视频的转换方法
CN101630408A (zh) * 2009-08-14 2010-01-20 清华大学 一种深度图的处理方法及装置
CN102306393B (zh) * 2011-08-02 2013-07-17 清华大学 一种基于轮廓匹配的深度扩散方法及装置
RU2014118585A (ru) * 2011-10-10 2015-11-20 Конинклейке Филипс Н.В. Обработка карты глубины
KR101894090B1 (ko) * 2011-12-01 2018-09-03 엘지디스플레이 주식회사 멀티뷰 영상 생성방법과 이를 이용한 입체영상 표시장치
JP6016061B2 (ja) * 2012-04-20 2016-10-26 Ｎｌｔテクノロジー株式会社 画像生成装置、画像表示装置及び画像生成方法並びに画像生成プログラム
JP2013235537A (ja) * 2012-05-11 2013-11-21 Nikon Corp 画像作成装置、画像作成プログラム、及び記録媒体
EP2875636A1 (en) * 2012-07-20 2015-05-27 Koninklijke Philips N.V. Metadata for depth filtering
TW201432622A (zh) * 2012-11-07 2014-08-16 Koninkl Philips Nv 產生一關於一影像之深度圖
US8897548B2 (en) * 2013-04-02 2014-11-25 National Chung Cheng University Low-complexity method of converting image/video into 3D from 2D
CN104660900B (zh) * 2013-10-30 2018-03-02 株式会社摩如富 图像处理装置及图像处理方法
US9363499B2 (en) * 2013-11-15 2016-06-07 Htc Corporation Method, electronic device and medium for adjusting depth values

Also Published As

Publication number Publication date
US20180295340A1 (en) 2018-10-11
JP6717855B2 (ja) 2020-07-08
CA2988360A1 (en) 2016-12-22
KR20180019671A (ko) 2018-02-26
RU2018101207A3 (ru) 2019-12-09
CN107750370A (zh) 2018-03-02
CN107750370B (zh) 2022-04-12
EP3311361A1 (en) 2018-04-25
BR112017026903A2 (pt) 2019-05-07
WO2016202837A1 (en) 2016-12-22
JP2018524896A (ja) 2018-08-30
US10298905B2 (en) 2019-05-21
EP3311361B1 (en) 2021-08-11
RU2721175C2 (ru) 2020-05-18

Similar Documents

Publication Publication Date Title
RU2018101207A (ru) Способ и устройство для определения карты глубины для изображения
JP2018524896A5 (ru)
RU2016103409A (ru) Определение расстояния или положения
RU2018105095A (ru) Способ и устройство для определения карты глубины для изображения
JP2015062121A5 (ru)
JP2017129567A5 (ru)
WO2016106383A3 (en) First-person camera based visual context aware system
CN108140291A (zh) 烟雾检测装置、方法以及图像处理设备
JP2016129664A5 (ru)
JP2012053756A5 (ru)
SE1851277A1 (en) Equipment recommendation system and method
RU2017143919A (ru) Устройство и способ для измерения параметров движения мяча
JP2014116912A5 (ru)
JP2011134012A5 (ru)
JP2014115109A5 (ru)
JP2012239085A5 (ru)
CN106524909B (zh) 三维图像采集方法及装置
JP2017208616A5 (ru)
JP2014229115A5 (ru)
RU2017122156A (ru) Транспортное средство и способ для него
JP2015106290A5 (ru)
Jain et al. Comparison of edge detectors
JP2021136555A5 (ru)
JP2018036898A5 (ja) 画像処理装置及び画像処理方法及びプログラム
JP2015068748A (ja) 動的隆起測定装置、動的隆起測定方法および動的隆起測定プログラム

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20200616