[go: up one dir, main page]

CN112073801B - 一种图像处理方法、电子设备及连接器 - Google Patents

一种图像处理方法、电子设备及连接器 Download PDF

Info

Publication number
CN112073801B
CN112073801B CN201910789911.XA CN201910789911A CN112073801B CN 112073801 B CN112073801 B CN 112073801B CN 201910789911 A CN201910789911 A CN 201910789911A CN 112073801 B CN112073801 B CN 112073801B
Authority
CN
China
Prior art keywords
image
local image
local
electronic device
coordinate information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910789911.XA
Other languages
English (en)
Other versions
CN112073801A (zh
Inventor
汪正峰
刘江
刘伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hongjing Microelectronics Technology Co.,Ltd.
Original Assignee
Hefei Macrosilicon Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Macrosilicon Technology Co ltd filed Critical Hefei Macrosilicon Technology Co ltd
Priority to CN201910789911.XA priority Critical patent/CN112073801B/zh
Publication of CN112073801A publication Critical patent/CN112073801A/zh
Application granted granted Critical
Publication of CN112073801B publication Critical patent/CN112073801B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明提供一种图像处理方法、电子设备及连接器,图像处理方法应用于第一电子设备,包括:抓取第一电子设备的显示界面,得到第一图像;获取第一图像中与第二图像不重合的局部图像以及局部图像的坐标信息,第二图像为第一图像的上一帧图像;通过USB接口将局部图像和坐标信息发送至连接器,以用于连接器根据坐标信息,将局部图像与第三图像进行图像合成,得到合成图像,并将合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将视频输出信号发送至视频接口,第三图像与第二图像显示的内容相同。本发明能减少USB接口所需传输的数据量,进而能使电子设备利用USB接口进行有线投屏时,投屏画面不容易出现卡顿现象。

Description

一种图像处理方法、电子设备及连接器
技术领域
本发明涉及通信技术领域,尤其涉及一种图像处理方法、电子设备及连接器。
背景技术
近年来,投屏技术逐渐进入人们的视野,所谓投屏是将一台电子设备上的屏幕内容推送到另一台电子设备的屏幕上进行展示,例如,将手机的屏幕内容推送到电视机的屏幕上进行展示。有线投屏是实现投屏的方式之一,有线投屏时,需将两台电子设备的接口进行连接以实现数据的传输。
日常生活中,为了获得更加的视觉体验,用户常常会将手机或平板等电子设备的屏幕内容投放到电视机或视频会议终端等电子设备上进行播放,由于手机或平板等电子设备的接口通常为通用串行总线(Universal Serial Bus,简称USB)接口,USB接口的带宽较小,而高清视频传输实际需要的带宽远大于USB接口的带宽,即USB接口的带宽难以满足高清视频数据传输所需的带宽,从而导致电子设备在利用USB接口进行有线投屏时,投屏画面容易出现卡顿现象。
发明内容
本发明实施例提供一种图像处理方法、电子设备及连接器,以解决电子设备在利用USB接口进行有线投屏时,投屏画面容易出现卡顿现象的问题。
为解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供了一种图像处理方法,应用于第一电子设备,所述第一电子设备包括USB接口,所述方法包括:
抓取所述第一电子设备的显示界面,得到第一图像;
获取所述第一图像中与第二图像不重合的局部图像以及所述局部图像的坐标信息,所述第二图像为所述第一图像的上一帧图像;
通过所述USB接口将所述局部图像和所述坐标信息发送至连接器,以用于所述连接器根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,并将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口,所述第三图像与所述第二图像显示的内容相同。
可选的,所述通过所述USB接口将所述局部图像和所述坐标信息发送至连接器,包括:
在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照目标压缩处理信息对所述局部图像进行压缩处理,得到压缩处理后的局部图像;
通过所述USB接口将所述压缩处理后的局部图像、所述目标压缩处理信息和所述坐标信息发送至连接器。
可选的,所述目标压缩处理信息包括格式压缩信息;
所述按照目标压缩处理信息对所述局部图像进行压缩处理,得到压缩处理后的局部图像,包括:
按照所述格式压缩信息,对所述局部图像进行格式压缩处理,得到格式压缩后的局部图像;
所述通过所述USB接口将所述压缩处理后的局部图像、所述目标压缩处理信息和所述坐标信息发送至连接器,包括:
通过所述USB接口将所述格式压缩后的局部图像、所述格式压缩信息和所述坐标信息发送至连接器。
可选的,所述目标压缩处理信息包括像素压缩比例,所述像素压缩比例根据所述显示界面的更新频率确定;
所述按照目标压缩处理信息对所述局部图像进行压缩处理,得到压缩处理后的局部图像,包括:
按照所述像素压缩比例,对所述局部图像进行像素压缩处理,得到像素压缩后的局部图像;
所述通过所述USB接口将所述压缩处理后的局部图像、所述目标压缩处理信息和所述坐标信息发送至连接器,包括:
通过所述USB接口将所述像素压缩后的局部图像、所述像素压缩比例和所述坐标信息发送至连接器。
第二方面,本发明实施例还提供一种图像处理方法,应用于连接器,所述方法包括:
接收第一电子设备通过所述第一电子设备的USB接口发送的局部图像和所述局部图像的坐标信息,所述局部图像为:所述第一电子设备通过抓取所述第一电子设备的显示界面得到的第一图像中与第二图像不重合的局部图像,所述第二图像为所述第一图像的上一帧图像;
根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,所述第三图像与所述第二图像显示的内容相同;
将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口。
可选的,所述接收第一电子设备通过所述第一电子设备的USB接口发送的局部图像和所述局部图像的坐标信息,包括:
接收第一电子设备通过所述第一电子设备的USB接口发送的压缩处理后的局部图像、目标压缩处理信息和所述局部图像的坐标信息,所述压缩处理后的局部图像为:所述第一电子设备在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照所述目标压缩处理信息对所述局部图像进行压缩处理后得到的图像;
所述根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,包括:
根据所述目标压缩处理信息,对所述压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像;
根据所述坐标信息,将所述还原处理后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,所述压缩处理后的局部图像为格式压缩后的局部图像,所述目标压缩处理信息包括格式压缩信息;
所述根据所述目标压缩处理信息,对所述压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像,包括:
按照所述格式压缩信息,对所述格式压缩后的局部图像进行格式还原处理,得到格式还原后的局部图像;
所述根据所述坐标信息,将所述还原处理后的局部图像与第三图像进行图像合成,得到合成图像,包括:
根据所述坐标信息,将所述格式还原后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,所述压缩处理后的局部图像为像素压缩后的局部图像,所述目标压缩处理信息包括像素压缩比例;
所述根据所述目标压缩处理信息,对所述压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像,包括:
按照所述像素压缩比例,对所述像素压缩后的局部图像进行像素还原处理,得到像素还原后的局部图像;
所述根据所述坐标信息,将所述还原处理后的局部图像与第三图像进行图像合成,得到合成图像,包括:
根据所述坐标信息,将所述像素还原后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,所述将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口,包括:
在所述视频接口属于预设接口集合的情况下,将所述合成图像的色域转换成与所述视频接口匹配的目标色域,得到色域转换后的合成图像;
将所述色域转换后的合成图像转换成与所述视频接口匹配的视频输出信号,并将所述视频输出信号传输至所述视频接口。
第三方面,本发明实施例还提供一种电子设备,所述电子设备为第一电子设备,所述第一电子设备包括USB接口,所述第一电子设备包括:
抓取模块,用于抓取所述第一电子设备的显示界面,得到第一图像;
获取模块,用于获取所述第一图像中与第二图像不重合的局部图像以及所述局部图像的坐标信息,所述第二图像为所述第一图像的上一帧图像;
发送模块,用于通过所述USB接口将所述局部图像和所述坐标信息发送至连接器,以用于所述连接器根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,并将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口,所述第三图像与所述第二图像显示的内容相同。
可选的,所述发送模块包括:
压缩处理单元,用于在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照目标压缩处理信息对所述局部图像进行压缩处理,得到压缩处理后的局部图像;
发送单元,用于通过所述USB接口将所述压缩处理后的局部图像、所述目标压缩处理信息和所述坐标信息发送至连接器。
可选的,所述目标压缩处理信息包括格式压缩信息;
所述压缩处理单元用于:
在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照所述格式压缩信息,对所述局部图像进行格式压缩处理,得到格式压缩后的局部图像;
所述发送单元用于:
通过所述USB接口将所述格式压缩后的局部图像、所述格式压缩信息和所述坐标信息发送至连接器。
可选的,所述目标压缩处理信息包括像素压缩比例,所述像素压缩比例根据所述显示界面的更新频率确定;
所述压缩处理单元用于:
在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照所述像素压缩比例,对所述局部图像进行像素压缩处理,得到像素压缩后的局部图像;
所述发送单元用于:
通过所述USB接口将所述像素压缩后的局部图像、所述像素压缩比例和所述坐标信息发送至连接器。
第四方面,本发明实施例还提供一种连接器,所述连接器包括:
接收模块,用于接收第一电子设备通过所述第一电子设备的USB接口发送的局部图像和所述局部图像的坐标信息,所述局部图像为:所述第一电子设备通过抓取所述第一电子设备的显示界面得到的第一图像中与第二图像不重合的局部图像,所述第二图像为所述第一图像的上一帧图像;
合成模块,用于根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,所述第三图像与所述第二图像显示的内容相同;
发送模块,用于将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口。
可选的,所述接收模块用于:
接收第一电子设备通过所述第一电子设备的USB接口发送的压缩处理后的局部图像、目标压缩处理信息和所述局部图像的坐标信息,所述压缩处理后的局部图像为:所述第一电子设备在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照所述目标压缩处理信息对所述局部图像进行压缩处理后得到的图像;
所述合成模块包括:
还原单元,用于根据所述目标压缩处理信息,对所述压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像;
合成单元,用于根据所述坐标信息,将所述还原处理后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,所述压缩处理后的局部图像为格式压缩后的局部图像,所述目标压缩处理信息包括格式压缩信息;
所述还原单元用于:
按照所述格式压缩信息,对所述格式压缩后的局部图像进行格式还原处理,得到格式还原后的局部图像;
所述合成单元用于:
根据所述坐标信息,将所述格式还原后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,所述压缩处理后的局部图像为像素压缩后的局部图像,所述目标压缩处理信息包括像素压缩比例;
所述还原单元用于:
按照所述像素压缩比例,对所述像素压缩后的局部图像进行像素还原处理,得到像素还原后的局部图像;
所述合成单元用于:
根据所述坐标信息,将所述像素还原后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,所述发送模块包括:
色域转换单元,用于在所述视频接口属于预设接口集合的情况下,将所述合成图像的色域转换成与所述视频接口匹配的目标色域,得到色域转换后的合成图像;
发送单元,用于将所述色域转换后的合成图像转换成与所述视频接口匹配的视频输出信号,并将所述视频输出信号传输至所述视频接口。
第五方面,本发明实施例还提供一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现第一方面或第二方面提供的图像处理方法的步骤。
第六方面,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现第一方面或第二方面提供的图像处理方法的步骤。
在本发明实施例中,由于第一电子设备只需将第一图像中与第二图像不重合的局部图像以及该局部图像的坐标信息发送至连接器,连接器就可以通过将该局部图像与第三图像进行图像合成,得到与第一图像的显示内容相同的合成图像,继而将该合成图像发送至第二电子设备进行播放,也就是说,不需要发送整帧图像,而只需将该帧图像中与上一帧图像相比存在变化的部分发送至连接器即可,从而能够大大减少第一电子设备的USB接口所需传输的数据量,进而能够使得电子设备利用USB接口进行有线投屏时,投屏画面不容易出现卡顿现象,同时也能够保证投屏画面具备较佳的清晰度。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例可应用的一种图像处理系统的结构图;
图2是本发明一实施例提供的图像处理方法的流程图;
图3是本发明一实施例提供的图像处理方法的举例图之一;
图4是本发明一实施例提供的图像处理方法的举例图之二;
图5是本发明一实施例提供的图像处理方法的举例图之三;
图6是本发明另一实施例提供的图像处理方法的流程图;
图7是本发明一实施例提供的电子设备的结构图;
图8是本发明一实施例提供的电子设备中的发送模块的结构图;
图9是本发明一实施例提供的连接器的结构图;
图10是本发明一实施例提供的连接器中的合成模块的结构图;
图11是本发明一实施例提供的连接器中的发送模块的结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,图1为本发明实施例可应用的一种图像处理系统的结构图,如图1所示,包括第一电子设备11、连接器12和第二电子设备13。
其中,第一电子设备11可以是配备有USB接口的手机、平板电脑(Tablet PersonalComputer)、膝上型电脑(Laptop Computer)、个人数字助理(personal digitalassistant,简称PDA)、移动上网装置(Mobile Internet Device,简称MID)或可穿戴式设备(Wearable Device)等;此处,USB接口可以是USB 2.0、USB3.0或USB Type-C等各类型的USB接口。
第二电子设备13可以是配备有视频接口的电视机、笔记本电脑、台式电脑或视频会议终端等;此处,视频接口可以是高清多媒体接口(High Definition MultimediaInterface,简称HDMI)、视频图形阵列(Video Graphics Array,简称VGA)接口、复合视频广播信号(Composite Video Broadcast Signal,简称CVBS)接口、S端子(Separate Video,简称S-VIDEO)接口或色差分量接口(简称YPBYR)等各种类型的视频接口。
连接器12可以是用于接收第一电子设备11通过USB接口发送的图像,并对该图像进行相应处理,将处理后的图像发送至第二电子设备13的视频接口的设备。具体的,连接器12可以具有输入端和输出端,连接器12的输入端可以是与第一电子设备11的USB接口连接,连接器12的输出端可以是与第二电子设备13连接。
参见图2,图2是本发明一实施例提供的图像处理方法的流程图,该图像处理方法应用于第一电子设备,第一电子设备包括USB接口,如图2所示,该图像处理方法包括以下步骤:
步骤201、抓取第一电子设备的显示界面,得到第一图像;
其中,步骤201可以理解为:在第一电子设备播放多媒体文件的过程中,实时抓取第一电子设备的显示屏的显示界面,得到多媒体文件的当前显示画面。此处需要说明的是,上述抓取第一电子设备的显示界面是抓取第一电子设备的整个显示界面,而不是部分显示界面。
步骤202、获取第一图像中与第二图像不重合的局部图像以及局部图像的坐标信息,第二图像为第一图像的上一帧图像;
其中,上述不重合可以理解为不相同或不一致,也就是说,上述第一图像中与第二图像不重合的局部图像可以理解为:第一图像中与第二图像存在区别的图像部分或图像区块。上述局部图像的坐标信息可以用于指示该局部图像在第一图像中所处的位置。
上述第二图像为第一图像的上一帧图像可以理解为,第一电子设备实时不断地在抓取显示屏的显示界面,第二图像是第一图像的上一帧抓取图像,也就是说,第二图像的抓取时刻早于第一图像的抓取时刻,且第二图像的抓取时刻与第一图像的抓取时刻相邻,例如,假设显示界面的更新时间间隔为0.001秒,抓取显示界面的时间间隔也为0.001秒,且在第0.002秒时抓取显示界面获得的图像为第一图像,则上述第二图像指的是在第0.001秒时抓取显示界面获得的那帧图像。
步骤203、通过USB接口将局部图像和坐标信息发送至连接器,以用于连接器根据坐标信息,将局部图像与第三图像进行图像合成,得到合成图像,并将合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将视频输出信号发送至视频接口,第三图像与第二图像显示的内容相同。
其中,上述连接器至少可以通过以下两种途径获取上述第三图像:1)连接器接收第一电子设备通过其USB接口发送的第二图像,也就是说,第一电子设备在抓取到第二图像后,直接通过其USB接口将该第二图像发送给了连接器;2)连接器接收第一电子设备通过其USB接口发送的第二图像中与第二图像的上一帧图像不重合的局部图像以及该局部图像的坐标信息,并将该局部图像与第四图像进行图像合成,得到上述第三图像,此处,第四图像与第二图像的上一帧图像显示的内容相同,也就是说,上述第三图像也可以是通过图像合成获得。
上述视频输出信号的表现形式可以根据上述视频接口的类型确定,例如,当上述视频接口为HDMI时,上述视频输出信号可以是HDMI视频输出信号;当上述视频接口为VGA接口时,上述视频输出信号可以是VGA视频输出信号;当上述视频接口为CVBS接口时,上述视频输出信号可以是CVBS视频输出信号;当上述视频接口为S-VIDEO接口时,上述视频输出信号可以是S-VIDEO视频输出信号;当上述视频接口为YPBPR时,上述视频输出信号可以是YPBPR视频输出信号。
为便于理解本发明实施例,请参见图3和图4,例如,假设图3所示的31为上述第二图像,其像素为1920*1080,图4所示的41为上述第一图像,其像素为1920*1080,第一图像41与第二图像31相比,存在变化的图像区块包括图4所示的411和412,图像区块411的像素为400*300,图像区块412的像素是500*400,则上述局部图像指的就是图像区块411以及图像区块412,那么,第一电子设备只需获取并发送图像区块411和图像区块412以及这两个图像区块的坐标信息至第一连接器即可,这样,实际所需的带宽占整帧图像的百分比=((400*300+500*400)/1920*1080)*100%=15.43%,也就是说,传输图像区块411和图像区块412时所需带宽仅为传输完整的第一图像时所需带宽的15.43%,可见,本发明实施例能够大大减少USB接口所需传输的数据量。
在本发明实施例中,由于第一电子设备只需将第一图像中与第二图像不重合的局部图像以及该局部图像的坐标信息发送至连接器,连接器就可以通过将该局部图像与第三图像进行图像合成,得到与第一图像的显示内容相同的合成图像,继而将该合成图像发送至第二电子设备进行播放,也就是说,不需要发送整帧图像,而只需将该帧图像中与上一帧图像相比存在变化的部分发送至连接器即可,从而能够大大减少第一电子设备的USB接口所需传输的数据量,进而能够使得电子设备利用USB接口进行有线投屏时,投屏画面不容易出现卡顿现象,同时也能够保证投屏画面具备较佳的清晰度。
可选的,通过USB接口将局部图像和坐标信息发送至连接器,包括:
在显示界面的更新频率超过预设频率,且局部图像在第一图像中的占比超过预设占比的情况下,按照目标压缩处理信息对局部图像进行压缩处理,得到压缩处理后的局部图像;
通过USB接口将压缩处理后的局部图像、目标压缩处理信息和坐标信息发送至连接器。
其中,上述显示界面的更新频率可以指第一电子设备的显示屏所播放的显示画面的切换频率。上述局部图像在第一图像中的占比可以指局部图像在第一图像中的尺寸占比,也就是说,可以用局部图像的尺寸除以第一图像的尺寸得到局部图像在第一图像中的占比。
上述目标压缩处理信息可以由系统预设,也可以根据用户操作进行预设,对比,本发明实施例不作限定。上述压缩处理可以是格式压缩处理,也可以是像素压缩处理,还可以是其他类型的压缩处理。
由于在显示界面的更新频率超过预设频率,且局部图像在第一图像中的占比超过预设占比的情况下,会按照目标压缩处理信息对局部图像进行压缩处理,以进一步减小需要发送的局部图像的大小,也就是说,当显示界面的切换速度较快,且单帧图像中的图像变化区域较大时,会对获取的局部图像进行压缩处理后再发送,从而既能够保证静态画面的清晰度,又能够保证动态画面的流畅度。
可选的,目标压缩处理信息包括格式压缩信息;
按照目标压缩处理信息对局部图像进行压缩处理,得到压缩处理后的局部图像,包括:
按照格式压缩信息,对局部图像进行格式压缩处理,得到格式压缩后的局部图像;
通过USB接口将压缩处理后的局部图像、目标压缩处理信息和坐标信息发送至连接器,包括:
通过USB接口将格式压缩后的局部图像、格式压缩信息和坐标信息发送至连接器。
其中,上述格式压缩信息可以用于指示将局部图像的格式由第一格式(即局部图像的当前格式)转换成第二格式,其中,第二格式的位宽小于第一格式的位宽,例如,若第一格式为RGB888,则第二格式可以是RGB565或RGB555等。相应的,上述格式压缩处理可以是将局部图像的格式由第一格式(即局部图像的当前格式)转换成第二格式。
由于格式压缩处理的实现过程更加简单,因而通过格式压缩处理来减小发送局部图像时所需传输的数据量,能够简化操作过程,提高工作效率。
可选的,目标压缩处理信息包括像素压缩比例,像素压缩比例根据显示界面的更新频率确定;
按照目标压缩处理信息对局部图像进行压缩处理,得到压缩处理后的局部图像,包括:
按照像素压缩比例,对局部图像进行像素压缩处理,得到像素压缩后的局部图像;
通过USB接口将压缩处理后的局部图像、目标压缩处理信息和坐标信息发送至连接器,包括:
通过USB接口将像素压缩后的局部图像、像素压缩比例和坐标信息发送至连接器。
其中,上述显示界面的更新频率可以指第一电子设备的显示屏所播放的显示画面的切换频率。上述像素压缩比例根据显示界面的更新频率确定可以理解为:在像素压缩比例与显示界面的更新频率之间存在预设的对应关系,第一电子设备可以根据当前显示界面的更新频率以及前述的对应关系,确定与当前显示界面的更新频率对应的像素压缩比例,并将其作为上述目标压缩处理信息中的像素压缩比例。
为了便于理解,此处举例说明:
例如,假设图5所示的51表示第一图像,图5所示的511表示第一图像51中与第二图像不重合的局部图像,且该局部图像511的像素为1600*800,而像素压缩比例与显示界面的更新频率之间存在如表1所示的对应关系,则当显示界面的更新频率为10HZ时,经像素压缩处理后的局部图像的像素为1280*500;当显示界面的更新频率为15HZ时,经像素压缩处理后的局部图像的像素为890*480;当显示界面的更新频率为20HZ时,经像素压缩处理后的局部图像的像素为800*400。
表1
显示界面的更新频率(Hz) 像素压缩比例
10 2
15 3
20 4
可选的,在一实施例中,为了更加有效地减小发送局部图像时所需传输的数据量,可以在获取局部图像之后,先对局部图像进行格式压缩处理,得到格式压缩后的局部图像,再对格式压缩后的局部图像进行像素压缩处理,得到格式压缩+像素压缩后的局部图像,最后再将该格式压缩+像素压缩后的局部图像及其坐标信息发送至连接器。
需要说明的是,上述步骤的描述顺序仅是为了叙述本发明实施例提供的而技术方案,并非是严格的执行顺序,具体情况可根据实际需求进行调整。
还需要说明的是,本发明实施例中介绍的多种可选的实施方式,彼此可以相互结合实现,也可以单独实现,对此本发明实施例不作限定。
参见图6,图6是本发明一实施例提供的图像处理方法的流程图,该图像处理方法应用于连接器,如图6所示,该图像处理方法包括以下步骤:
步骤601、接收第一电子设备通过第一电子设备的USB接口发送的局部图像和局部图像的坐标信息,局部图像为:第一电子设备通过抓取第一电子设备的显示界面得到的第一图像中与第二图像不重合的局部图像,第二图像为第一图像的上一帧图像;
其中,关于上述通过抓取第一电子设备的显示界面得到的第一图像、上述第一图像中与第二图像不重合的局部图像、上述第二图像为第一图像的上一帧图像以及上述局部图像的坐标信息等的解释均可以前述实施例中相应部分的说明,此处不再赘述。
步骤602、根据坐标信息,将局部图像与第三图像进行图像合成,得到合成图像,第三图像与第二图像显示的内容相同;
其中,关于上述第三图像的获取途径可以参照前述实施例中相应部分的说明,此处不再赘述。
上述根据坐标信息,将局部图像与第三图像进行图像合成,可以理解为:根据坐标信息,确定局部图像在第三图像上所处的目标位置,然后将局部图像安放到第三图像的目标位置处,并将第三图像中被局部图像覆盖掉的图像部分去除,也就是说,将第三图像中与局部图像对应的图像区块替换成局部图像,以得到与第一图像的显示内容相同的整帧图像。
步骤603、将合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将视频输出信号发送至视频接口。
其中,关于上述视频输出信号的说明可以参照前述实施例中相应部分的解释,此处不再赘述。
在本发明实施例中,由于连接器只需接收第一电子设备通过其USB接口发送的局部图像和局部图像的坐标信息,就可以通过将该局部图像与第三图像进行图像合成,得到与第一图像的显示内容相同的合成图像,继而将该合成图像发送至第二电子设备进行播放,从而能够大大减少第一电子设备的USB接口所需传输的数据量,进而能够使得电子设备利用USB接口进行有线投屏时,投屏画面不容易出现卡顿现象,同时也能够保证投屏画面具备较佳的清晰度。
可选的,接收第一电子设备通过第一电子设备的USB接口发送的局部图像和局部图像的坐标信息,包括:
接收第一电子设备通过第一电子设备的USB接口发送的压缩处理后的局部图像、目标压缩处理信息和局部图像的坐标信息,压缩处理后的局部图像为:第一电子设备在显示界面的更新频率超过预设频率,且局部图像在第一图像中的占比超过预设占比的情况下,按照目标压缩处理信息对局部图像进行压缩处理后得到的图像;
根据坐标信息,将局部图像与第三图像进行图像合成,得到合成图像,包括:
根据目标压缩处理信息,对压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像;
根据坐标信息,将还原处理后的局部图像与第三图像进行图像合成,得到合成图像。
其中,关于上述显示界面的更新频率、上述局部图像在第一图像中的占比、上述目标压缩处理信息以及上述压缩处理等的解释均可以参照前述实施例中相应部分的解释,此处不再赘述。
上述还原处理可以根据上述压缩处理确定,例如,当上述压缩处理为格式压缩处理时,上述还原处理可以是格式还原处理;当上述压缩处理为像素压缩处理时,上述还原处理可以是像素还原处理。
上述根据坐标信息,将还原处理后的局部图像与第三图像进行图像合成可以理解为:根据坐标信息,确定还原处理后的局部图像在第三图像上所处的目标位置,然后将还原处理后的局部图像安放到第三图像的目标位置处,并将第三图像中被还原处理后的局部图像覆盖掉的图像部分去除,也就是说,将第三图像中与还原处理后的局部图像对应的图像区块替换成还原处理后的局部图像,以得到与第一图像的显示内容相同的整帧图像。
由于根据目标压缩处理信息,对压缩处理后的局部图像进行了还原处理,且是使用还原处理后的局部图像与第三图像进行图像合成,从而能够在进一步减少第一电子设备的USB接口所需传输的数据量的同时,尽可能地保证合成图像的清晰度,从而保证投屏画面的显示清晰度。
可选的,压缩处理后的局部图像为格式压缩后的局部图像,目标压缩处理信息包括格式压缩信息;
根据目标压缩处理信息,对压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像,包括:
按照格式压缩信息,对格式压缩后的局部图像进行格式还原处理,得到格式还原后的局部图像;
根据坐标信息,将还原处理后的局部图像与第三图像进行图像合成,得到合成图像,包括:
根据坐标信息,将格式还原后的局部图像与第三图像进行图像合成,得到合成图像。
其中,上述格式压缩信息可以用于指示将局部图像的格式由第一格式转换成第二格式,其中,第二格式的位宽小于第一格式的位宽,例如,若第一格式为RGB888,则第二格式可以是RGB565或RGB555等。相应的,上述格式还原处理可以是将局部图像的格式由第二格式(即格式压缩后的局部图像的当前格式)还原成第一格式。
由于根据格式压缩信息,对格式压缩后的局部图像进行了格式还原处理,且是使用格式还原后的局部图像与第三图像进行图像合成,从而能够在进一步减少第一电子设备的USB接口所需传输的数据量的同时,尽可能地保证合成图像的清晰度,从而保证投屏画面的显示清晰度。
可选的,压缩处理后的局部图像为像素压缩后的局部图像,目标压缩处理信息包括像素压缩比例;
根据目标压缩处理信息,对压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像,包括:
按照像素压缩比例,对像素压缩后的局部图像进行像素还原处理,得到像素还原后的局部图像;
根据坐标信息,将还原处理后的局部图像与第三图像进行图像合成,得到合成图像,包括:
根据坐标信息,将像素还原后的局部图像与第三图像进行图像合成,得到合成图像。
其中,为了便于理解上述按照像素压缩比例,对像素压缩后的局部图像进行像素还原处理,此处举例说明:
例如,假设上述像素压缩后的局部图像的像素为1280*500,且上述像素压缩比例为2,则像素还原后的局部图像的像素可以为1600*800;
例如,假设上述像素压缩后的局部图像的像素为890*480,且上述像素压缩比例为3,则像素还原后的局部图像的像素可以为1600*800。
由于根据像素压缩比例,对像素压缩后的局部图像进行了格式还原处理,且是使用像素还原后的局部图像与第三图像进行图像合成,从而能够在进一步减少第一电子设备的USB接口所需传输的数据量的同时,尽可能地保证合成图像的清晰度,从而保证投屏画面的显示清晰度。
可选的,将合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将视频输出信号发送至视频接口,包括:
在视频接口属于预设接口集合的情况下,将合成图像的色域转换成与视频接口匹配的目标色域,得到色域转换后的合成图像;
将色域转换后的合成图像转换成与视频接口匹配的视频输出信号,并将视频输出信号传输至视频接口。
其中,上述预设接口集合可以包括一个或多个接口,例如,预设接口集合可以包括以下接口中的至少之一:CVBS接口、S-VIDEO接口、YPBPR。
上述色域可以指RGB色域、YUV色域或其他类型的色域。上述目标色域可以根据视频接口的类型确定,例如,当视频接口为CVBS接口或S-VIDEO接口时,上述目标色域可以是YUV色域。
由于在视频接口属于预设接口集合的情况下,将合成图像的色域转换成与视频接口匹配的目标色域,从而能够使得最终在第二电子设备上显示的合成图像的显示效果更佳。
需要说明的是,上述步骤的描述顺序仅是为了叙述本发明实施例提供的而技术方案,并非是严格的执行顺序,具体情况可根据实际需求进行调整。
还需要说明的是,本发明实施例中介绍的多种可选的实施方式,彼此可以相互结合实现,也可以单独实现,对此本发明实施例不作限定。
参见图7,图7是本发明一实施例提供的电子设备的结构图,如图7所示,电子设备700为第一电子设备,第一电子设备包括USB接口,第一电子设备包括:
抓取模块701,用于抓取第一电子设备的显示界面,得到第一图像;
获取模块702,用于获取第一图像中与第二图像不重合的局部图像以及局部图像的坐标信息,第二图像为第一图像的上一帧图像;
发送模块703,用于通过USB接口将局部图像和坐标信息发送至连接器,以用于连接器根据坐标信息,将局部图像与第三图像进行图像合成,得到合成图像,并将合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将视频输出信号发送至视频接口,第三图像与第二图像显示的内容相同。
可选的,如图8所示,发送模块703包括:
压缩处理单元7031,用于在显示界面的更新频率超过预设频率,且局部图像在第一图像中的占比超过预设占比的情况下,按照目标压缩处理信息对局部图像进行压缩处理,得到压缩处理后的局部图像;
发送单元7032,用于通过USB接口将压缩处理后的局部图像、目标压缩处理信息和坐标信息发送至连接器。
可选的,目标压缩处理信息包括格式压缩信息;
压缩处理单元7031用于:
在显示界面的更新频率超过预设频率,且局部图像在第一图像中的占比超过预设占比的情况下,按照格式压缩信息,对局部图像进行格式压缩处理,得到格式压缩后的局部图像;
发送单元7032用于:
通过USB接口将格式压缩后的局部图像、格式压缩信息和坐标信息发送至连接器。
可选的,目标压缩处理信息包括像素压缩比例,像素压缩比例根据显示界面的更新频率确定;
压缩处理单元7031用于:
在显示界面的更新频率超过预设频率,且局部图像在第一图像中的占比超过预设占比的情况下,按照像素压缩比例,对局部图像进行像素压缩处理,得到像素压缩后的局部图像;
发送单元7032用于:
通过USB接口将像素压缩后的局部图像、像素压缩比例和坐标信息发送至连接器。
电子设备700能够实现图2对应的方法实施例中第一电子设备实现的各个过程,为避免重复,这里不再赘述。
本发明实施例的电子设备700,由于只需将第一图像中与第二图像不重合的局部图像以及该局部图像的坐标信息发送至连接器,连接器就可以通过将该局部图像与第三图像进行图像合成,得到与第一图像的显示内容相同的合成图像,继而将该合成图像发送至第二电子设备进行播放,也就是说,不需要发送整帧图像,而只需将该帧图像中与上一帧图像相比存在变化的部分发送至连接器即可,从而能够USB接口所需传输的数据量,进而能够使得电子设备利用USB接口进行有线投屏时,投屏画面不容易出现卡顿现象,同时也能够保证投屏画面具备较佳的清晰度。
参见图9,图9是本发明一实施例提供的连接器的结构图,如图9所示,连接器900包括:
接收模块901,用于接收第一电子设备通过第一电子设备的USB接口发送的局部图像和局部图像的坐标信息,局部图像为:第一电子设备通过抓取第一电子设备的显示界面得到的第一图像中与第二图像不重合的局部图像,第二图像为第一图像的上一帧图像;
合成模块902,用于根据坐标信息,将局部图像与第三图像进行图像合成,得到合成图像,第三图像与第二图像显示的内容相同;
发送模块903,用于将合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将视频输出信号发送至视频接口。
可选的,接收模块901用于:
接收第一电子设备通过第一电子设备的USB接口发送的压缩处理后的局部图像、目标压缩处理信息和局部图像的坐标信息,压缩处理后的局部图像为:第一电子设备在显示界面的更新频率超过预设频率,且局部图像在第一图像中的占比超过预设占比的情况下,按照目标压缩处理信息对局部图像进行压缩处理后得到的图像;
如图10所示,合成模块902包括:
还原单元9021,用于根据目标压缩处理信息,对压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像;
合成单元9022,用于根据坐标信息,将还原处理后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,压缩处理后的局部图像为格式压缩后的局部图像,目标压缩处理信息包括格式压缩信息;
还原单元9021用于:
按照格式压缩信息,对格式压缩后的局部图像进行格式还原处理,得到格式还原后的局部图像;
合成单元9022用于:
根据坐标信息,将格式还原后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,压缩处理后的局部图像为像素压缩后的局部图像,目标压缩处理信息包括像素压缩比例;
还原单元9021用于:
按照像素压缩比例,对像素压缩后的局部图像进行像素还原处理,得到像素还原后的局部图像;
合成单元9022用于:
根据坐标信息,将像素还原后的局部图像与第三图像进行图像合成,得到合成图像。
可选的,如图11所示,发送模块903包括:
色域转换单元9031,用于在视频接口属于预设接口集合的情况下,将合成图像的色域转换成与视频接口匹配的目标色域,得到色域转换后的合成图像;
发送单元9032,用于将色域转换后的合成图像转换成与视频接口匹配的视频输出信号,并将视频输出信号传输至视频接口。
连接器900能够实现图6对应的方法实施例中连接器实现的各个过程,为避免重复,这里不再赘述。
本发明实施例的连接器900,由于只需接收第一电子设备通过其USB接口发送的局部图像和局部图像的坐标信息,就可以通过将该局部图像与第三图像进行图像合成,得到与第一图像的显示内容相同的合成图像,继而将该合成图像发送至第二电子设备进行播放,从而能够大大减少第一电子设备的USB接口所需传输的数据量,进而能够使得电子设备利用USB接口进行有线投屏时,投屏画面不容易出现卡顿现象,同时也能够保证投屏画面具备较佳的清晰度。
本发明实施例还提供一种电子设备,包括处理器,存储器,存储在存储器上并可在所述处理器上运行的计算机程序,该计算机程序被处理器执行时实现上述图2对应的图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种连接器,包括处理器,存储器,存储在存储器上并可在所述处理器上运行的计算机程序,该计算机程序被处理器执行时实现上述图6对应的图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述图2或图6对应的图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random AccessMemory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (9)

1.一种图像处理方法,应用于第一电子设备,所述第一电子设备包括USB接口,其特征在于,所述方法包括:
抓取所述第一电子设备的显示界面,得到第一图像;
获取所述第一图像中与第二图像不重合的局部图像以及所述局部图像的坐标信息,所述第二图像为所述第一图像的上一帧图像;
通过所述USB接口将所述局部图像和所述坐标信息发送至连接器,以用于所述连接器根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,并将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口,所述第三图像与所述第二图像显示的内容相同;
其中,所述通过所述USB接口将所述局部图像和所述坐标信息发送至连接器,包括:
在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照目标压缩处理信息对所述局部图像进行压缩处理,得到压缩处理后的局部图像;
通过所述USB接口将所述压缩处理后的局部图像、所述目标压缩处理信息和所述坐标信息发送至连接器。
2.根据权利要求1所述的方法,其特征在于,所述目标压缩处理信息包括格式压缩信息;
所述按照目标压缩处理信息对所述局部图像进行压缩处理,得到压缩处理后的局部图像,包括:
按照所述格式压缩信息,对所述局部图像进行格式压缩处理,得到格式压缩后的局部图像;
所述通过所述USB接口将所述压缩处理后的局部图像、所述目标压缩处理信息和所述坐标信息发送至连接器,包括:
通过所述USB接口将所述格式压缩后的局部图像、所述格式压缩信息和所述坐标信息发送至连接器。
3.根据权利要求1所述的方法,其特征在于,所述目标压缩处理信息包括像素压缩比例,所述像素压缩比例根据所述显示界面的更新频率确定;
所述按照目标压缩处理信息对所述局部图像进行压缩处理,得到压缩处理后的局部图像,包括:
按照所述像素压缩比例,对所述局部图像进行像素压缩处理,得到像素压缩后的局部图像;
所述通过所述USB接口将所述压缩处理后的局部图像、所述目标压缩处理信息和所述坐标信息发送至连接器,包括:
通过所述USB接口将所述像素压缩后的局部图像、所述像素压缩比例和所述坐标信息发送至连接器。
4.一种图像处理方法,应用于连接器,其特征在于,所述方法包括:
接收第一电子设备通过所述第一电子设备的USB接口发送的局部图像和所述局部图像的坐标信息,所述局部图像为:所述第一电子设备通过抓取所述第一电子设备的显示界面得到的第一图像中与第二图像不重合的局部图像,所述第二图像为所述第一图像的上一帧图像;
根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,所述第三图像与所述第二图像显示的内容相同;
将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口;
其中,所述接收第一电子设备通过所述第一电子设备的USB接口发送的局部图像和所述局部图像的坐标信息,包括:
接收第一电子设备通过所述第一电子设备的USB接口发送的压缩处理后的局部图像、目标压缩处理信息和所述局部图像的坐标信息,所述压缩处理后的局部图像为:所述第一电子设备在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照所述目标压缩处理信息对所述局部图像进行压缩处理后得到的图像;
所述根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,包括:
根据所述目标压缩处理信息,对所述压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像;
根据所述坐标信息,将所述还原处理后的局部图像与第三图像进行图像合成,得到合成图像。
5.根据权利要求4所述的方法,其特征在于,所述压缩处理后的局部图像为格式压缩后的局部图像,所述目标压缩处理信息包括格式压缩信息;
所述根据所述目标压缩处理信息,对所述压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像,包括:
按照所述格式压缩信息,对所述格式压缩后的局部图像进行格式还原处理,得到格式还原后的局部图像;
所述根据所述坐标信息,将所述还原处理后的局部图像与第三图像进行图像合成,得到合成图像,包括:
根据所述坐标信息,将所述格式还原后的局部图像与第三图像进行图像合成,得到合成图像。
6.根据权利要求4所述的方法,其特征在于,所述压缩处理后的局部图像为像素压缩后的局部图像,所述目标压缩处理信息包括像素压缩比例;
所述根据所述目标压缩处理信息,对所述压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像,包括:
按照所述像素压缩比例,对所述像素压缩后的局部图像进行像素还原处理,得到像素还原后的局部图像;
所述根据所述坐标信息,将所述还原处理后的局部图像与第三图像进行图像合成,得到合成图像,包括:
根据所述坐标信息,将所述像素还原后的局部图像与第三图像进行图像合成,得到合成图像。
7.根据权利要求4至6任一项所述的方法,其特征在于,所述将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口,包括:
在所述视频接口属于预设接口集合的情况下,将所述合成图像的色域转换成与所述视频接口匹配的目标色域,得到色域转换后的合成图像;
将所述色域转换后的合成图像转换成与所述视频接口匹配的视频输出信号,并将所述视频输出信号传输至所述视频接口。
8.一种电子设备,所述电子设备为第一电子设备,所述第一电子设备包括USB接口,其特征在于,所述第一电子设备包括:
抓取模块,用于抓取所述第一电子设备的显示界面,得到第一图像;
获取模块,用于获取所述第一图像中与第二图像不重合的局部图像以及所述局部图像的坐标信息,所述第二图像为所述第一图像的上一帧图像;
发送模块,用于通过所述USB接口将所述局部图像和所述坐标信息发送至连接器,以用于所述连接器根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,并将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口,所述第三图像与所述第二图像显示的内容相同;
其中,所述发送模块包括:
压缩处理单元,用于在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照目标压缩处理信息对所述局部图像进行压缩处理,得到压缩处理后的局部图像;
发送单元,用于通过所述USB接口将所述压缩处理后的局部图像、所述目标压缩处理信息和所述坐标信息发送至连接器。
9.一种连接器,其特征在于,所述连接器包括:
接收模块,用于接收第一电子设备通过所述第一电子设备的USB接口发送的局部图像和所述局部图像的坐标信息,所述局部图像为:所述第一电子设备通过抓取所述第一电子设备的显示界面得到的第一图像中与第二图像不重合的局部图像,所述第二图像为所述第一图像的上一帧图像;
合成模块,用于根据所述坐标信息,将所述局部图像与第三图像进行图像合成,得到合成图像,所述第三图像与所述第二图像显示的内容相同;
发送模块,用于将所述合成图像转换成与第二电子设备的视频接口匹配的视频输出信号,并将所述视频输出信号发送至所述视频接口;
其中,所述接收模块用于:
接收第一电子设备通过所述第一电子设备的USB接口发送的压缩处理后的局部图像、目标压缩处理信息和所述局部图像的坐标信息,所述压缩处理后的局部图像为:所述第一电子设备在所述显示界面的更新频率超过预设频率,且所述局部图像在所述第一图像中的占比超过预设占比的情况下,按照所述目标压缩处理信息对所述局部图像进行压缩处理后得到的图像;
所述合成模块包括:
还原单元,用于根据所述目标压缩处理信息,对所述压缩处理后的局部图像进行还原处理,得到还原处理后的局部图像;
合成单元,用于根据所述坐标信息,将所述还原处理后的局部图像与第三图像进行图像合成,得到合成图像。
CN201910789911.XA 2019-08-26 2019-08-26 一种图像处理方法、电子设备及连接器 Active CN112073801B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910789911.XA CN112073801B (zh) 2019-08-26 2019-08-26 一种图像处理方法、电子设备及连接器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910789911.XA CN112073801B (zh) 2019-08-26 2019-08-26 一种图像处理方法、电子设备及连接器

Publications (2)

Publication Number Publication Date
CN112073801A CN112073801A (zh) 2020-12-11
CN112073801B true CN112073801B (zh) 2021-06-18

Family

ID=73658563

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910789911.XA Active CN112073801B (zh) 2019-08-26 2019-08-26 一种图像处理方法、电子设备及连接器

Country Status (1)

Country Link
CN (1) CN112073801B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534211A (zh) * 2016-12-29 2017-03-22 四川九洲电器集团有限责任公司 一种数据传输方法及电子设备
CN109542546A (zh) * 2018-10-08 2019-03-29 广州市保伦电子有限公司 一种应用进程窗口及界面的投屏方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3299929B1 (en) * 2011-12-09 2019-10-09 Intel Corporation Adaptive graphics subsystem power and performance management

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534211A (zh) * 2016-12-29 2017-03-22 四川九洲电器集团有限责任公司 一种数据传输方法及电子设备
CN109542546A (zh) * 2018-10-08 2019-03-29 广州市保伦电子有限公司 一种应用进程窗口及界面的投屏方法及装置

Also Published As

Publication number Publication date
CN112073801A (zh) 2020-12-11

Similar Documents

Publication Publication Date Title
US10454986B2 (en) Video synchronous playback method, apparatus, and system
CN105791895B (zh) 基于时间戳记的音频与视频处理方法及其系统
US10511803B2 (en) Video signal transmission method and device
CN105892976B (zh) 实现多屏互动的方法及装置
US20230300475A1 (en) Image processing method and apparatus, and electronic device
CN105282601A (zh) 一种同屏共享的方法、装置及系统
US20090153434A1 (en) Display assistant system
CN105681720A (zh) 视频播放的处理方法及装置
EP1722329A1 (en) Method and system for resizing an image in a wireless terminal
CN102857726A (zh) 基于同步显示的远程控制方法、终端、对端及系统
US12483707B2 (en) Method, apparatus, and device for processing video data and computer storage medium
CN106412617B (zh) 远程调试控制方法及装置
KR20080018396A (ko) 이동통신 단말기의 디스플레이 정보를 외부 디스플레이장치에서 디스플레이하기 위한 모바일 애플리케이션 및pc 애플리케이션을 기록한 컴퓨터 판독 가능 기록매체
CN112073801B (zh) 一种图像处理方法、电子设备及连接器
WO2008044881A1 (en) Image board and display method using dual codec
CN107318021B (zh) 一种远程显示的数据处理方法及系统
US7656433B2 (en) Web camera
US20140056524A1 (en) Image processing device, image processing method, and program
JPH05119955A (ja) 端末間画面操作方式
CN119629491B (zh) 图像优化方法、装置、设备与存储介质
CN100463521C (zh) 提高网际网络中影音资料成像效果及传输速率的方法
EP4373068A1 (en) A/v reception apparatus and wireless display system
CN119653029A (zh) 视频流的传输方法、回显方法以及相关组件
CN101534427A (zh) 屏幕实时迁移方法
CN114170122A (zh) 图像合成方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 230088 north, 9th floor, B1 building, animation base, 800 Wangjiang West Road, high tech Zone, Hefei City, Anhui Province

Patentee after: Hongjing Microelectronics Technology Co.,Ltd.

Address before: 230088 north, 9th floor, B1 building, animation base, 800 Wangjiang West Road, high tech Zone, Hefei City, Anhui Province

Patentee before: HEFEI MACROSILICON TECHNOLOGY CO.,LTD.

CP01 Change in the name or title of a patent holder
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20201211

Assignee: Anhui Xingtai Financial Leasing Co.,Ltd.

Assignor: Hongjing Microelectronics Technology Co.,Ltd.

Contract record no.: X2022980005647

Denomination of invention: An image processing method, electronic equipment and connector

Granted publication date: 20210618

License type: Exclusive License

Record date: 20220517

EE01 Entry into force of recordation of patent licensing contract
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: An image processing method, electronic equipment and connector

Effective date of registration: 20220519

Granted publication date: 20210618

Pledgee: Anhui Xingtai Financial Leasing Co.,Ltd.

Pledgor: Hongjing Microelectronics Technology Co.,Ltd.

Registration number: Y2022980005868

PE01 Entry into force of the registration of the contract for pledge of patent right
PC01 Cancellation of the registration of the contract for pledge of patent right

Date of cancellation: 20230727

Granted publication date: 20210618

Pledgee: Anhui Xingtai Financial Leasing Co.,Ltd.

Pledgor: Hongjing Microelectronics Technology Co.,Ltd.

Registration number: Y2022980005868

PC01 Cancellation of the registration of the contract for pledge of patent right
EC01 Cancellation of recordation of patent licensing contract

Assignee: Anhui Xingtai Financial Leasing Co.,Ltd.

Assignor: Hongjing Microelectronics Technology Co.,Ltd.

Contract record no.: X2022980005647

Date of cancellation: 20230810

EC01 Cancellation of recordation of patent licensing contract