[go: up one dir, main page]

CN106162235B - 用于切换视频流的方法和装置 - Google Patents

用于切换视频流的方法和装置 Download PDF

Info

Publication number
CN106162235B
CN106162235B CN201610679649.XA CN201610679649A CN106162235B CN 106162235 B CN106162235 B CN 106162235B CN 201610679649 A CN201610679649 A CN 201610679649A CN 106162235 B CN106162235 B CN 106162235B
Authority
CN
China
Prior art keywords
frame
frame number
video
picture group
video flowing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610679649.XA
Other languages
English (en)
Other versions
CN106162235A (zh
Inventor
李永兴
沈慧锋
戈君
黄靖博
李旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201610679649.XA priority Critical patent/CN106162235B/zh
Publication of CN106162235A publication Critical patent/CN106162235A/zh
Priority to US15/429,306 priority patent/US9961398B2/en
Application granted granted Critical
Publication of CN106162235B publication Critical patent/CN106162235B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4383—Accessing a communication channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Computer Security & Cryptography (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请公开了用于切换视频流的方法和装置。所述方法的一具体实施方式包括：响应于接收到终端发送的视频的播放请求信息，获取视频的视频流，其中，视频流包括：第一画面组帧数的视频流和第二画面组帧数的视频流，第一画面组帧数小于第二画面组帧数；向终端发送第一画面组帧数的视频流，查找第一画面组帧数的视频流中的关键帧，并提取关键帧的解码时间戳；在第二画面组帧数的视频流中，查找是否存在与解码时间戳相同的帧；响应于查找到存在与解码时间戳相同的帧，则进一步检测帧是否为关键帧；响应于检测出帧为关键帧，则向终端发送第二画面组帧数的视频流。该实施方式既保证了视频播放的低延迟，又提升了视频的画面质量。

Description

用于切换视频流的方法和装置
技术领域
本申请涉及计算机技术领域，具体涉及视频播放技术领域，尤其涉及用于切换视频流的方法和装置。
背景技术
流媒体是指采用流式传输技术在网络上连续实时播放的媒体格式，如音频、视频或多媒体文件。流媒体技术是把连续的影像和声音信息经过压缩处理后放在网站服务器上，由视频服务器向用户计算机顺序或实时地传送各个压缩包，让用户一边下载一边观看、收听，而不需要等待整个压缩文件下载到自己的计算机上才可以观看的网络传输技术。
然而，在现有的流媒体服务器中，为了提升播放器端的加载速度，通常是在服务器中设置一个画面组的缓存，当播放器端发送视频播放请求后，服务器会向播放器端发送缓存中的画面组，使得播放器端可以立即开始播放，然而，由于一些因素的影响，画面组的存在可能会造成视频播放的延迟，如果设置的画面组的帧数较大，则造成视频播放的延迟也较大，如果设置的画面组的帧数较小，虽然造成视频播放的延迟较小，但是视频的质量也会降低。
发明内容
本申请的目的在于提出一种改进的用于切换视频流的方法和装置，来解决以上背景技术部分提到的技术问题。
第一方面，本申请提供了一种用于切换视频流的方法，所述方法包括：响应于接收到终端发送的视频的播放请求信息，获取所述视频的视频流，其中，所述视频流包括：包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，画面组帧数为视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，所述第二关键帧为与所述第一关键帧相邻的后一关键帧，所述第一画面组帧数小于所述第二画面组帧数；向所述终端发送所述包括第一画面组帧数的视频流，查找所述包括第一画面组帧数的视频流中的关键帧，并提取所述关键帧的解码时间戳；在所述包括第二画面组帧数的视频流中，查找是否存在与所述解码时间戳相同的帧；响应于查找到存在与所述解码时间戳相同的帧，则进一步检测所述帧是否为关键帧；响应于检测出所述帧为关键帧，则向所述终端发送所述包括第二画面组帧数的视频流。
在一些实施例中，所述获取所述视频的视频流，包括：从所述包括第一画面组帧数的视频流的缓存中获取所述视频的包括第一画面组帧数的视频流，并存储到第一发送队列中；从所述包括第二画面组帧数的视频流的缓存中获取所述视频的包括第二画面组帧数的视频流，并存储到第二发送队列中。
在一些实施例中，所述第二画面组帧数与所述第一画面组帧数的比值为正整数。
在一些实施例中，所述包括第一画面组帧数的视频流与所述包括第二画面组帧数的视频流具有相同的序列参数组。
在一些实施例中，所述查找所述包括第一画面组帧数的视频流中的关键帧，包括：获取所述包括第一画面组帧数的视频流中的帧的标识；利用所述标识，查找所述包括第一画面组帧数的视频流中的关键帧。
第二方面，本申请提供了一种用于切换视频流的装置，所述装置包括：获取单元，配置用于响应于接收到终端发送的视频的播放请求信息，获取所述视频的视频流，其中，所述视频流包括：包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，画面组帧数为视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，所述第二关键帧为与所述第一关键帧相邻的后一关键帧，所述第一画面组帧数小于所述第二画面组帧数；提取单元，配置用于向所述终端发送所述包括第一画面组帧数的视频流，查找所述包括第一画面组帧数的视频流中的关键帧，并提取所述关键帧的解码时间戳；查找单元，配置用于在所述包括第二画面组帧数的视频流中，查找是否存在与所述解码时间戳相同的帧；检测单元，配置用于响应于查找到存在与所述解码时间戳相同的帧，则进一步检测所述帧是否为关键帧；发送单元，配置用于响应于检测出所述帧为关键帧，则向所述终端发送所述包括第二画面组帧数的视频流。
在一些实施例中，所述获取单元包括：第一获取模块，配置用于从所述包括第一画面组帧数的视频流的缓存中获取所述视频的包括第一画面组帧数的视频流，并存储到第一发送队列中；第二获取模块，配置用于从所述包括第二画面组帧数的视频流的缓存中获取所述视频的包括第二画面组帧数的视频流，并存储到第二发送队列中。
在一些实施例中，所述第二画面组帧数与所述第一画面组帧数的比值为正整数。
在一些实施例中，所述包括第一画面组帧数的视频流与所述包括第二画面组帧数的视频流具有相同的序列参数组。
在一些实施例中，所述提取单元包括：获取模块，配置用于获取所述包括第一画面组帧数的视频流中的帧的标识；查找模块，配置用于利用所述标识，查找所述包括第一画面组帧数的视频流中的关键帧。
本申请提供的用于切换视频流的方法和装置，通过为视频准备两条视频流，分别为包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，且第一画面组帧数小于第二画面组帧数，首先向终端发送包括第一画面组帧数的视频流，查找包括第一画面组帧数的视频流的关键帧，并提取关键帧的解码时间戳，而后在包括第二画面组帧数的视频流中查找是否存在与上述解码时间戳相同的关键帧，若存在，则向终端发送包括第二画面组帧数的视频流，由于从画面组帧数小的视频流切换到画面组帧数大的视频流，从而，既保证了视频播放的低延迟，又提升了视频的画面质量。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：
图1是本申请可以应用于其中的示例性系统架构图；
图2是根据本申请的用于切换视频流的方法的一个实施例的流程图；
图3是根据本申请的用于切换视频流的方法的又一个实施例的流程图；
图4是根据本申请的用于切换视频流的装置的一个实施例的结构示意图；
图5是适于用来实现本申请实施例的服务器的计算机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。
需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1示出了可以应用本申请的用于切换视频流的方法或用于切换视频流的装置的实施例的示例性系统架构100。
如图1所示，系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用，例如视频播放器、网络直播类应用、视频搜索类应用和社交平台软件等。
终端设备101、102、103可以是具有显示屏并且支持视频播放的各种电子设备，包括但不限于智能手机、平板电脑、电子书阅读器、MP4(Moving Picture Experts GroupAudio Layer IV，动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机和台式计算机等等。
服务器105可以是提供各种服务的服务器，例如对终端设备101、102、103上发送的视频的播放请求信息提供支持的后台视频服务器。后台视频服务器可以对接收到的视频的播放请求信息等数据进行分析等处理，并将处理结果(例如视频流数据)反馈给终端设备。
需要说明的是，本申请实施例所提供的用于切换视频流的方法一般由服务器105执行，相应地，用于切换视频流的装置一般设置于服务器105中。
应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。
继续参考图2，示出了根据本申请的用于切换视频流的方法的一个实施例的流程200。所述的用于切换视频流的方法，包括以下步骤：
步骤201，响应于接收到终端发送的视频的播放请求信息，获取视频的视频流。
在本实施例中，响应于接收到用户通过有线连接方式或者无线连接方式利用终端发送的视频的播放请求信息，用于切换视频流的方法运行于其上的电子设备(例如图1所示的服务器)可以获取用户请求播放的视频的视频流，其中，上述视频流是指视频数据的传输，例如，它能够被作为一个稳定的和连续的流通过网络处理，因为流动，客户端浏览器或插件能够在整个文件被传输完成前显示多媒体数据。上述视频流可以包括：包括第一画面组(Group of Pictures,GOP)帧数的视频流和包括第二画面组帧数的视频流，一个画面组就是一组连续的画面，画面组帧数可以是视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，上述第二关键帧为与上述第一关键帧相邻的后一关键帧，其中，上述关键帧也可以被称为I帧(I frame)，又可以被称为内部画面(Intra Picture)，I帧通常是每个GOP的第一个帧，经过适度地压缩，作为随机访问的参考点，也可以被当成图像。上述第一画面组帧数需小于上述第二画面组帧数。
作为示例，当上述包括第一画面组帧数的视频流为IBBPIBBPIBBP时，其中，I为I帧，B为B帧，P为P帧，上述B帧是双向内插帧，上述P帧是前向预测帧，上述I帧是一个完整的画面，P帧和B帧记录的是相对于I帧的变化，则上述第一画面组帧数为从第一个I帧到第二个I帧的前一帧P帧的帧的个数，即上述第一画面组帧数为4；第二画面组帧数需大于上述第一画面组帧数，则上述第二画面组帧数可以为大于4的任一画面组帧数，例如，当上述第二画面组帧数为5时，包括第二画面组帧数的视频流可以为IBBBPIBBBP。
在本实施例的一些可选的实现方式中，当上述电子设备接收到终端设备发送的视频的播放请求信息时，上述电子设备可以从上述包括第一画面组帧数的视频流的缓存中获取上述视频的包括第一画面组帧数的视频流并将其存储到第一发送队列中，并从上述包括第二画面组帧数的视频流的缓存中获取上述视频的包括第二画面组帧数的视频流并将其存储到第二发送队列中。在上述电子设备从视频流的缓存中获取视频流之前，上述电子设备可以接收视频的帧，当接收到视频的帧时，会将上述帧存储到缓存中，如果上述帧是I帧时，则会清空上述缓存中的帧并将I帧存储到缓存中，所以画面组缓存中有且只有一个I帧，且I帧为第一帧。
在本实施例的一些可选的实现方式中，上述第二画面组帧数与上述第一画面组帧数的比值可以为正整数，例如，若第一画面组帧数为30帧时，则上述第二画面组帧数可以为60帧、90帧等等。
在本实施例的一些可选的实现方式中，上述包括第一画面组帧数的视频流可以与上述包括第二画面组帧数的视频流具有相同的序列参数组(Sequence Parameter Sets，SPS)，序列参数组也可以被称为序列参数集，其中，上述序列参数组用来描述视频序列中不经常改变的信息。在H.264解码中，首先过滤码流获得参数组，参数组是一种通过改进视频流的结构从而增强错误恢复能力的方法，比如，当一些关键信息(如序列的头信息)比特的丢失会造成解码的严重负面效应，而H.264把这些关键信息分离出来，凭借参数组的设计，确保在易出错的环境中能正确的传输。
步骤202，向终端发送包括第一画面组帧数的视频流，查找包括第一画面组帧数的视频流中的关键帧，并提取关键帧的解码时间戳。
在本实施例中，在步骤201中获取到包括第一画面组帧数的视频流和包括第二画面组帧数的视频流之后，上述电子设备可以向上述终端设备发送上述包括第一画面组帧数的视频流，在视频流的发送过程中，上述电子设备可以查找包括第一画面组帧数的视频流中的关键帧，当查找到关键帧之后，上述电子设备可以提取上述关键帧的解码时间戳(Decoding Time Stamp，DTS)，解码时间戳也可以被称为解码时间标签。在数字电视系统码流分析中，对数字电视基本码流(Packetized Elementary Streams，PES)进行分析时，打包的基本码流是非定长的，一般是一个存取单元的长度，一个存取单元为一个视频帧，也可以是一个音频帧，为实现解码的同步，每段之前还要插入相应的时间标记，即解码时间戳。
步骤203，在包括第二画面组帧数的视频流中，查找是否存在与解码时间戳相同的帧。
在本实施例中，上述电子设备可以在上述包括第二画面组帧数的视频流中查找是否存在与步骤202中提取出的包括第一画面组帧数的视频流中的关键帧的解码时间戳相同的帧。上述电子设备可以首先提取包括第二画面组帧数的视频流中的各个帧的解码时间戳；然后，与包括第一画面组帧数的视频流中的关键帧的解码时间戳进行对比，检查是否相同。
步骤204，响应于查找到存在与解码时间戳相同的帧，则进一步检测帧是否为关键帧。
在本实施例中，当查找到包括第二画面组帧数的视频流中存在与上述解码时间戳相同的帧时，上述电子设备可以进一步检测上述帧是否为关键帧。
步骤205，响应于检测出帧为关键帧，则向终端发送包括第二画面组帧数的视频流。
在本实施例中，当检测出上述帧为关键帧时，上述电子设备可以向终端发送包括第二画面组帧数的视频流，并停止发送包括第一画面组帧数的视频流，即将发送的视频流从包括第一画面组帧数的视频流切换成包括第二画面组帧数的视频流。
进一步参考图3，其示出了用于切换视频流的方法的又一个实施例的流程300。该用于切换视频流的方法的流程300，包括以下步骤：
步骤301，响应于接收到终端发送的视频的播放请求信息，获取视频的视频流。
在本实施例中，响应于接收到用户通过有线连接方式或者无线连接方式利用终端发送的视频的播放请求信息，用于切换视频流的方法运行于其上的电子设备(例如图1所示的服务器)可以获取用户请求播放的视频的视频流，其中，上述视频流是指视频数据的传输，例如，它能够被作为一个稳定的和连续的流通过网络处理，因为流动，客户端浏览器或插件能够在整个文件被传输完成前显示多媒体数据。上述视频流可以包括：包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，一个画面组就是一组连续的画面，画面组帧数可以是视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，上述第二关键帧为与上述第一关键帧相邻的后一关键帧，其中，上述关键帧也可以被称为I帧，又可以被称为内部画面，I帧通常是每个GOP的第一个帧，经过适度地压缩，做为随机访问的参考点，也可以被当成图像。上述第一画面组帧数需小于上述第二画面组帧数。
步骤302，向终端发送包括第一画面组帧数的视频流，获取包括第一画面组帧数的视频流中的帧的标识。
在本实施例中，在步骤301中获取到包括第一画面组帧数的视频流和包括第二画面组帧数的视频流之后，上述电子设备可以向上述终端设备发送上述包括第一画面组帧数的视频流，在视频流的发送过程中，每发送一帧的画面，上述电子设备可以获取上述帧的标识。在发送视频流之前，可以在视频流的每一帧的头部标明这一帧的类型，例如，在H.264中，帧的类型会标注在slice_header中，上述电子设备通过检查这个标志位，就可以获取帧的标识。
步骤303，利用标识，查找包括第一画面组帧数的视频流中的关键帧，并提取关键帧的解码时间戳。
在本实施例中，上述包括第一画面组帧数的视频流中包括I帧(关键帧)、B帧和P帧，且I帧、B帧和P帧分别对应着不同的标识，上述电子设备可以利用步骤302中获取的帧的标识，查找包括第一画面组帧数的视频流中的关键帧，之后，提取上述关键帧的解码时间戳。
步骤304，在包括第二画面组帧数的视频流中，查找是否存在与解码时间戳相同的帧。
在本实施例中，上述电子设备可以在上述包括第二画面组帧数的视频流中查找是否存在与步骤303提取出的包括第一画面组帧数的视频流中的关键帧的解码时间戳相同的帧。上述电子设备可以首先提取包括第二画面组帧数的视频流中的各个帧的解码时间戳；然后，与包括第一画面组帧数的视频流中的关键帧的解码时间戳进行对比，检查是否相同。
步骤305，响应于查找到存在与解码时间戳相同的帧，则进一步检测帧是否为关键帧。
在本实施例中，当查找到包括第二画面组帧数的视频流中存在与上述解码时间戳相同的帧时，上述电子设备可以进一步检测上述帧是否为关键帧。
步骤306，响应于检测出帧为关键帧，则向终端发送包括第二画面组帧数的视频流。
在本实施例中，当检测出上述帧为关键帧时，上述电子设备可以向终端发送包括第二画面组帧数的视频流，并停止发送包括第一画面组帧数的视频流，即将发送的视频流从包括第一画面组帧数的视频流切换成包括第二画面组帧数的视频流。
从图3中可以看出，与图2对应的实施例相比，本实施例中的用于切换视频流的方法的流程300突出了查找包括第一画面组帧数的视频流中的关键帧的步骤。由此，本实施例描述的方案可以准确的查找出视频流中的关键帧，从而可以更快速的提升视频的画面质量。
进一步参考图4，作为对上述各图所示方法的实现，本申请提供了一种用于切换视频流的装置的一个实施例，该装置实施例与图2所示的方法实施例相对应，该装置具体可以应用于各种电子设备中。
如图4所示，本实施例所述的用于切换视频流的装置400包括：获取单元401、提取单元402、查找单元403、检测单元404和发送单元405。其中，获取单元401配置用于响应于接收到终端发送的视频的播放请求信息，获取所述视频的视频流，其中，所述视频流包括：包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，画面组帧数为视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，所述第二关键帧为与所述第一关键帧相邻的后一关键帧，所述第一画面组帧数小于所述第二画面组帧数；提取单元402配置用于向所述终端发送所述包括第一画面组帧数的视频流，查找所述包括第一画面组帧数的视频流中的关键帧，并提取所述关键帧的解码时间戳；查找单元403配置用于在所述包括第二画面组帧数的视频流中，查找是否存在与所述解码时间戳相同的帧；检测单元404配置用于响应于查找到存在与所述解码时间戳相同的帧，则进一步检测所述帧是否为关键帧；发送单元405配置用于响应于检测出所述帧为关键帧，则向所述终端发送所述包括第二画面组帧数的视频流。
在本实施例中，响应于接收到用户通过有线连接方式或者无线连接方式利用终端发送的视频的播放请求信息，用于切换视频流的装置400的获取单元401可以获取用户请求播放的视频的视频流，其中，上述视频流是指视频数据的传输。上述视频流可以包括：包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，一个画面组就是一组连续的画面，画面组帧数可以是视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，上述第二关键帧为与上述第一关键帧相邻的后一关键帧，其中，上述关键帧也可以被称为I帧，又可以被称为内部画面，I帧通常是每个GOP的第一个帧，经过适度地压缩，作为随机访问的参考点，也可以被当成图像。上述第一画面组帧数需小于上述第二画面组帧数。
在本实施例中，在上述获取单元401中获取到包括第一画面组帧数的视频流和包括第二画面组帧数的视频流之后，上述提取单元402可以向上述终端设备发送上述包括第一画面组帧数的视频流，在视频流的发送过程中，上述提取单元402可以查找包括第一画面组帧数的视频流中的关键帧，当查找到关键帧之后，上述提取单元402可以提取上述关键帧的解码时间戳。在数字电视系统码流分析中，对数字电视基本码流进行分析时，打包的基本码流是非定长的，一般是一个存取单元的长度，一个存取单元为一个视频帧，也可以是一个音频帧，为实现解码的同步，每段之前还要插入相应的时间标记，即解码时间戳。
在本实施例中，上述查找单元403可以在上述包括第二画面组帧数的视频流中查找是否存在与上述提取单元402中提取出的包括第一画面组帧数的视频流中的关键帧的解码时间戳相同的帧。上述查找单元403可以首先提取包括第二画面组帧数的视频流中的各个帧的解码时间戳；然后，与包括第一画面组帧数的视频流中的关键帧的解码时间戳进行对比，检查是否相同。
在本实施例中，当查找到包括第二画面组帧数的视频流中存在与上述解码时间戳相同的帧时，上述检测单元404可以进一步检测上述帧是否为关键帧。
在本实施例中，当检测出上述帧为关键帧时，上述发送单元405可以向终端发送包括第二画面组帧数的视频流，并停止发送包括第一画面组帧数的视频流，即将发送的视频流从包括第一画面组帧数的视频流切换成包括第二画面组帧数的视频流。
在本实施例的一些可选的实现方式中，获取单元401可以包括第一获取模块4011和第二获取模块4012。当上述电子设备接收到终端设备发送的视频的播放请求信息时，上述第一获取模块4011可以从上述包括第一画面组帧数的视频流的缓存中获取上述视频的包括第一画面组帧数的视频流并将其存储到第一发送队列中，上述第二获取模块4012从上述包括第二画面组帧数的视频流的缓存中获取上述视频的包括第二画面组帧数的视频流并将其存储到第二发送队列中。在上述获取单元401从视频流的缓存中获取视频流之前，上述获取单元401可以接收视频的帧，当接收到视频的帧时，会将上述帧存储到缓存中，如果上述帧是I帧时，则会清空上述缓存中的帧并将I帧存储到缓存中，所以画面组缓存中有且只有一个I帧，且I帧为第一帧。
在本实施例的一些可选的实现方式中，上述第二画面组帧数与上述第一画面组帧数的比值可以为正整数，例如，若第一画面组帧数为30帧时，则上述第二画面组帧数可以为60帧、90帧等等。
在本实施例的一些可选的实现方式中，上述包括第一画面组帧数的视频流可以与上述包括第二画面组帧数的视频流具有相同的序列参数组，其中，上述序列参数组用来描述视频序列中不经常改变的信息。在H.264解码中，首先过滤码流获得参数组，参数组是一种通过改进视频流的结构从而增强错误恢复能力的方法，比如，当一些关键信息(如序列的头信息)比特的丢失会造成解码的严重负面效应，而H.264把这些关键信息分离出来，凭借参数组的设计，确保在易出错的环境中能正确的传输。
在本实施例的一些可选的实现方式中，上述提取单元402可以包括获取模块4021和查找模块4022。在视频流的发送过程中，每发送一帧的画面，上述获取模块4021可以获取上述帧的标识。在发送视频流之前，可以在视频流的每一帧的头部标明这一帧的类型。之后，上述查找模块4022可以利用上述获取模块4021中获取的帧的标识，查找包括第一画面组帧数的视频流中的关键帧。
下面参考图5，其示出了适于用来实现本申请实施例的服务器的计算机系统500的结构示意图。
如图5所示，计算机系统500包括中央处理单元(CPU)501，其可以根据存储在只读存储器(ROM)502中的程序或者从存储部分508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM503中，还存储有系统500操作所需的各种程序和数据。CPU501、ROM502以及RAM503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
以下部件连接至I/O接口505：包括键盘、鼠标等的输入部分506；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分507；包括硬盘等的存储部分508；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至I/O接口505。可拆卸介质511，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器510上，以便于从其上读出的计算机程序根据需要被安装入存储部分508。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括有形地包含在机器可读介质上的计算机程序，上述计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分509从网络上被下载和安装，和/或从可拆卸介质511被安装。
附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，例如，可以描述为：一种处理器包括获取单元、提取单元、查找单元、检测单元和发送单元。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。例如，获取单元还可以被描述为“获取视频的视频流的单元”。
作为另一方面，本申请还提供了一种非易失性计算机存储介质，该非易失性计算机存储介质可以是上述实施例中上述装置中所包含的非易失性计算机存储介质；也可以是单独存在，未装配入终端中的非易失性计算机存储介质。上述非易失性计算机存储介质存储有一个或者多个程序，当上述一个或者多个程序被一个设备执行时，使得上述设备：响应于接收到终端发送的视频的播放请求信息，获取所述视频的视频流，其中，所述视频流包括：包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，画面组帧数为视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，所述第二关键帧为与所述第一关键帧相邻的后一关键帧，所述第一画面组帧数小于所述第二画面组帧数；向所述终端发送所述包括第一画面组帧数的视频流，查找所述包括第一画面组帧数的视频流中的关键帧，并提取所述关键帧的解码时间戳；在所述包括第二画面组帧数的视频流中，查找是否存在与所述解码时间戳相同的帧；响应于查找到存在与所述解码时间戳相同的帧，则进一步检测所述帧是否为关键帧；响应于检测出所述帧为关键帧，则向所述终端发送所述包括第二画面组帧数的视频流。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离所述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种用于切换视频流的方法，其特征在于，所述方法包括：
响应于接收到终端发送的视频的播放请求信息，获取所述视频的视频流，其中，所述视频流包括：包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，画面组帧数为视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，所述第二关键帧为与所述第一关键帧相邻的后一关键帧，所述第一画面组帧数小于所述第二画面组帧数；
向所述终端发送所述包括第一画面组帧数的视频流，查找所述包括第一画面组帧数的视频流中的关键帧，并提取所述关键帧的解码时间戳；
在所述包括第二画面组帧数的视频流中，查找是否存在与所述解码时间戳相同的帧；
响应于查找到存在与所述解码时间戳相同的帧，则进一步检测所述帧是否为关键帧；
响应于检测出所述帧为关键帧，则向所述终端发送所述包括第二画面组帧数的视频流。
2.根据权利要求1所述的方法，其特征在于，所述获取所述视频的视频流，包括：
从所述包括第一画面组帧数的视频流的缓存中获取所述视频的包括第一画面组帧数的视频流，并存储到第一发送队列中；
从所述包括第二画面组帧数的视频流的缓存中获取所述视频的包括第二画面组帧数的视频流，并存储到第二发送队列中。
3.根据权利要求1所述的方法，其特征在于，所述第二画面组帧数与所述第一画面组帧数的比值为正整数。
4.根据权利要求3所述的方法，其特征在于，所述包括第一画面组帧数的视频流与所述包括第二画面组帧数的视频流具有相同的序列参数组。
5.根据权利要求1所述的方法，其特征在于，所述查找所述包括第一画面组帧数的视频流中的关键帧，包括：
获取所述包括第一画面组帧数的视频流中的帧的标识；
利用所述标识，查找所述包括第一画面组帧数的视频流中的关键帧。
6.一种用于切换视频流的装置，其特征在于，所述装置包括：
获取单元，配置用于响应于接收到终端发送的视频的播放请求信息，获取所述视频的视频流，其中，所述视频流包括：包括第一画面组帧数的视频流和包括第二画面组帧数的视频流，画面组帧数为视频流中从第一关键帧到第二关键帧的前一帧的帧的个数，所述第二关键帧为与所述第一关键帧相邻的后一关键帧，所述第一画面组帧数小于所述第二画面组帧数；
提取单元，配置用于向所述终端发送所述包括第一画面组帧数的视频流，查找所述包括第一画面组帧数的视频流中的关键帧，并提取所述关键帧的解码时间戳；
查找单元，配置用于在所述包括第二画面组帧数的视频流中，查找是否存在与所述解码时间戳相同的帧；
检测单元，配置用于响应于查找到存在与所述解码时间戳相同的帧，则进一步检测所述帧是否为关键帧；
发送单元，配置用于响应于检测出所述帧为关键帧，则向所述终端发送所述包括第二画面组帧数的视频流。
7.根据权利要求6所述的装置，其特征在于，所述获取单元包括：
第一获取模块，配置用于从所述包括第一画面组帧数的视频流的缓存中获取所述视频的包括第一画面组帧数的视频流，并存储到第一发送队列中；
第二获取模块，配置用于从所述包括第二画面组帧数的视频流的缓存中获取所述视频的包括第二画面组帧数的视频流，并存储到第二发送队列中。
8.根据权利要求6所述的装置，其特征在于，所述第二画面组帧数与所述第一画面组帧数的比值为正整数。
9.根据权利要求8所述的装置，其特征在于，所述包括第一画面组帧数的视频流与所述包括第二画面组帧数的视频流具有相同的序列参数组。
10.根据权利要求6所述的装置，其特征在于，所述提取单元包括：
获取模块，配置用于获取所述包括第一画面组帧数的视频流中的帧的标识；
查找模块，配置用于利用所述标识，查找所述包括第一画面组帧数的视频流中的关键帧。
CN201610679649.XA 2016-08-17 2016-08-17 用于切换视频流的方法和装置 Active CN106162235B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610679649.XA CN106162235B (zh) 2016-08-17 2016-08-17 用于切换视频流的方法和装置
US15/429,306 US9961398B2 (en) 2016-08-17 2017-02-10 Method and device for switching video streams

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610679649.XA CN106162235B (zh) 2016-08-17 2016-08-17 用于切换视频流的方法和装置

Publications (2)

Publication Number Publication Date
CN106162235A CN106162235A (zh) 2016-11-23
CN106162235B true CN106162235B (zh) 2018-06-01

Family

ID=57330681

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610679649.XA Active CN106162235B (zh) 2016-08-17 2016-08-17 用于切换视频流的方法和装置

Country Status (2)

Country Link
US (1) US9961398B2 (zh)
CN (1) CN106162235B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106791994B (zh) * 2016-12-30 2020-11-24 北京奇艺世纪科技有限公司 一种低延时快速开播方法及装置
CN106937141A (zh) * 2017-03-24 2017-07-07 北京奇艺世纪科技有限公司 一种码流切换方法及装置
CN108307248B (zh) * 2018-02-01 2019-10-29 腾讯科技（深圳）有限公司 视频播放方法、装置、计算设备及存储介质
CN108833940A (zh) * 2018-06-29 2018-11-16 北京百度网讯科技有限公司 视频类型确定方法、装置及设备
CN109165574B (zh) * 2018-08-03 2022-09-16 百度在线网络技术（北京）有限公司 视频检测方法和装置
CN110858925B (zh) 2018-08-22 2021-10-15 华为技术有限公司 一种实现视频流切换的方法、设备、系统和存储介质
CN110891182B (zh) * 2018-09-11 2022-04-12 华为技术有限公司 一种实现视频流切换的方法、装置和系统
CN111372117B (zh) * 2018-12-25 2023-06-23 浙江大华技术股份有限公司 一种视频播放方法、装置、电子设备及存储介质
CN109640159A (zh) * 2018-12-27 2019-04-16 迅雷计算机（深圳）有限公司 基于播放器的缓存速度确定方法、装置、系统及存储介质
WO2020133465A1 (en) * 2018-12-29 2020-07-02 Zhejiang Dahua Technology Co., Ltd. Systems and methods for multi-video stream transmission
CN109510980B (zh) * 2019-01-10 2020-07-03 湖南快乐阳光互动娱乐传媒有限公司 一种直播延时测量方法及系统
CN111836059B (zh) * 2019-04-23 2022-03-29 华为技术有限公司 一种媒体流发送方法、装置和设备
CN112019852A (zh) * 2019-05-29 2020-12-01 杭州海康威视数字技术股份有限公司 一种目标类型帧识别方法、装置及电子设备
CN110446072B (zh) * 2019-08-14 2021-11-23 咪咕视讯科技有限公司 视频流切换方法、电子设备和存储介质
CN113542657B (zh) * 2020-04-15 2023-07-28 成都鼎桥通信技术有限公司 画面黑屏后的恢复方法和装置
CN114071224B (zh) * 2020-07-31 2023-08-25 腾讯科技（深圳）有限公司 视频数据处理方法、装置、计算机设备及存储介质
CN113242446B (zh) * 2021-04-30 2023-02-28 北京字节跳动网络技术有限公司 视频帧的缓存方法、转发方法、通信服务器及程序产品
CN114449344B (zh) * 2022-02-03 2024-02-09 百果园技术(新加坡)有限公司 视频流传输方法、装置、电子设备及存储介质
CN117440174A (zh) * 2022-07-13 2024-01-23 抖音视界有限公司 一种视频处理方法、装置、电子设备和存储介质
CN115379236B (zh) * 2022-08-26 2024-04-09 重庆紫光华山智安科技有限公司 视频处理方法、装置、介质及设备
CN118784928A (zh) * 2023-04-03 2024-10-15 抖音视界有限公司 视频处理方法、装置、电子设备和存储介质
CN116361254B (zh) * 2023-06-02 2023-09-12 禾多科技（北京）有限公司 图像存储方法、装置、电子设备和计算机可读介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291599A (zh) * 2011-05-07 2011-12-21 董友球 网络视频播放方法及网络视频播放装置
CN102883217A (zh) * 2012-09-26 2013-01-16 华为技术有限公司 控制视频播放的方法及装置
CN105191316A (zh) * 2013-03-15 2015-12-23 罗伯特·博世有限公司 用于切换经压缩的视频流的切换装置、具有切换装置的会议系统以及用于切换经压缩的视频流的过程

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020191116A1 (en) * 2001-04-24 2002-12-19 Damien Kessler System and data format for providing seamless stream switching in a digital video recorder
CN102187667B (zh) * 2008-08-26 2014-07-23 Csir公司 从第一编码视频流切换到第二编码视频流的方法
US8660178B2 (en) * 2010-07-01 2014-02-25 Broadcom Corporation Method and system for multi-layer rate control for a multi-codec system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291599A (zh) * 2011-05-07 2011-12-21 董友球 网络视频播放方法及网络视频播放装置
CN102883217A (zh) * 2012-09-26 2013-01-16 华为技术有限公司 控制视频播放的方法及装置
CN105191316A (zh) * 2013-03-15 2015-12-23 罗伯特·博世有限公司 用于切换经压缩的视频流的切换装置、具有切换装置的会议系统以及用于切换经压缩的视频流的过程

Also Published As

Publication number Publication date
US9961398B2 (en) 2018-05-01
CN106162235A (zh) 2016-11-23
US20180054649A1 (en) 2018-02-22

Similar Documents

Publication Publication Date Title
CN106162235B (zh) 用于切换视频流的方法和装置
US10698952B2 (en) Using digital fingerprints to associate data with a work
RU2487484C2 (ru) Потоковый медиа-сервер, клиентский терминал, способ и система для загрузки потоковых мультимедийных данных
CN105100961B (zh) 视频缩略图生成方法及生成装置
CN110996160B (zh) 视频处理方法、装置、电子设备及计算机可读取存储介质
WO2017063399A1 (zh) 一种视频播放方法和装置
CN105979404A (zh) 一种流媒体的处理方法及装置
CN107634930B (zh) 一种媒体数据的获取方法和装置
WO2022170836A1 (zh) 多媒体文件中轨道数据的处理方法、装置、介质及设备
CN112423140A (zh) 视频播放方法、装置、电子设备和存储介质
CN105027572A (zh) 用于通过丢弃视频帧来降低在网络上传送视频所需的比特率的方法
CN109587517B (zh) 一种多媒体文件的播放方法及装置、服务器及存储介质
CN115460184A (zh) 用于传递无清单流媒体内容的方法、系统和介质
CN111356023B (zh) 播放方式确定方法及装置
CN113779304A (zh) 一种检测侵权视频的方法及装置
CN104469538B (zh) 面向画面画质较小损失的rtp视频流数据包重组方法
CN108702542A (zh) 用于串流服务的客户端操作方法
CN111447490A (zh) 流媒体文件处理方法及装置
CN116320536B (zh) 视频处理方法、装置、计算机设备及计算机可读存储介质
WO2021093500A1 (zh) 视频数据的处理方法、装置、电子设备及计算机可读介质
CN112866745B (zh) 流媒体视频数据处理方法、装置、计算机设备和存储介质
CN102611915A (zh) 视频启动的方法、装置及系统
CN111800649A (zh) 存储视频的方法和装置以及生成视频的方法和装置
US10484725B2 (en) Information processing apparatus and information processing method for reproducing media based on edit file
CN115581124B (zh) 处理媒体流中事件的方法、装置、存储介质及计算机设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant