TW201444371A - 智慧導播方法及其系統 - Google Patents

Abstract

一種智慧導播方法及其系統，係有關一種智慧導播方法，包括：取得複數個視訊訊號；分析視訊訊號的內容；根據分析結果分配視訊訊號於一畫面訊號中的佈局；以及輸出畫面訊號。

Description

智慧導播方法及其系統

本發明係關於一種導播系統，特別是一種智慧導播方法及其系統。

隨著網際網路的普遍以及多媒體運用的進步，越來越多教學單位應用網際網路來實現遠距教學。使得學習者可跨域地區的障礙，同時也降低教師與學生之間協調共同時間的困擾。因此，學生可透過網路連線的方式，向遠端伺服器以串流或下載的方式瀏覽教學錄影內容。

然而，一般遠距教學僅能一味的接收錄製內容，遠端的使用者無法調整其內容(例如縮放畫面)。特別是，一些錄製內容可能有其畫面佈局。例如，以子母畫面呈現教學投影片(母視窗)以及教師與白板畫面(子視窗)。當遠端學生欲觀看白板內容時，卻無法使子視窗放大或使子母視窗交換顯示的內容。因此，學生只能被動地等待錄製內容的佈局改變。

鑒於以上的問題，本發明在於提供一種智慧導播方法及其系統，藉以解決先前技術所存在制式畫面佈局無法視情形自動調整影像呈現方式的問題。

本發明之一實施例提供一種智慧導播方法，包括：取得複數個視訊訊號；分析視訊訊號的內容；根據分析結果分配視訊訊號於一畫面訊號中的佈局；以及輸出畫面訊號。

本發明之另一實施例提供一種智慧導播系統，包括：複數視訊接收端、處理單元、影像混合單元以及影像輸出端。複數視訊接收端可取得複數個視訊訊號。處理單元電性連接視訊接收端，以分析視訊訊號的內容。影像混合單元電性連接處理單元，根據分析結果分配視訊訊號於一畫面訊號中的畫面佈局。影像輸出端電性連接影像混合單元，以輸出畫面訊號。

根據本發明之智慧導播方法及其系統，可視使用情境調整轉播畫面或錄影畫面，以使得觀看者能更專心地觀看重要的內容。

100‧‧‧智慧導播系統

110‧‧‧視訊接收端

120‧‧‧音源接收端

130‧‧‧處理單元

140‧‧‧影像混合單元

150‧‧‧影像混合單元

160‧‧‧影像輸出端

170‧‧‧聲音輸出端

180‧‧‧儲存單元

200、210、220‧‧‧視訊設備

300‧‧‧音源設備

400‧‧‧顯示設備

500‧‧‧播音設備

600‧‧‧輸出畫面

610a~610f‧‧‧視窗

S100‧‧‧取得複數個視訊訊號之步驟

S200‧‧‧取得一音源訊號之步驟

S300‧‧‧分析該些視訊訊號的內容之步驟

S300’‧‧‧分析音源訊號與視訊訊號的內容之步驟

S310‧‧‧偵測該些視訊訊號的畫面的一目標物之步驟

S330‧‧‧偵測該些視訊訊號的畫面的一背景場景之步驟

S350‧‧‧根據該目標物或該背景場景的變化，評分該些視訊訊號之步驟

S500‧‧‧根據分析結果分配該些視訊訊號號於一畫面訊號中的佈局之步驟

S510‧‧‧根據分析結果自該些視訊訊號中選擇至少其中之一之步驟

S530‧‧‧決定所選擇的該至少一視訊訊號於該畫面訊號的一輸出畫面中的位置及尺寸之步驟

S532‧‧‧產生複數個視窗之步驟

S534‧‧‧將所選擇的該視訊訊號顯示於該些視窗中的最大者之步驟

S700‧‧‧輸出該畫面訊號之步驟

第1圖係為根據本發明一實施例之智慧導播方法之流程圖；第2圖係為根據本發明一實施例之智慧導播系統之方塊圖；第3圖係為根據本發明一實施例之智慧導播方法之另一流程圖；第4圖係為根據本發明一實施例之智慧導播方法之再一流程圖； 第5圖係為根據本發明一實施例之智慧導播系統的輸出畫面之示意圖；第6圖係為根據本發明另一實施例之智慧導播系統的輸出畫面之示意圖；以及第7圖係為根據本發明一實施例之智慧導播方法之又一流程圖。

以下說明是本領域中有經驗的技術人員向本領域中的其他技術人員有效地傳達其工作實質的手段。因此，眾所週知的方法、過程、構造和電路並沒有被詳細描述，以避免說明內容過於晦澀難懂。

應當理解，以下述及“一實施例”時，表示結合該實施例描述的技術特徵、構造或特性均可被包括在本發明的至少一個實施方式中。說明書中多處出現的片語“在一實施例中”可能涉及多個不同的實施例，單獨的實施例或其他實施例之間並不相互排斥。

應當理解，當以下提及一個元件在另一個元件“上”或“連接到”另一個元件時，可以是直接在另外的元件之上或與其連接，也可以有中間元件存在。相反地，當提及元件“直接”在另一個元件“上”或“直接連接到”另一個元件時，則沒有中間元件存在。

空間關係術語，例如“下面的”、“上面的”等等，在此是用於描述圖式所示的元件或特徵與其他元件或特徵的簡要關係說明。應當理解，這些空間關係術語的 語意除了在圖式中繪示的方位之外，還包括於外在使用或配合的裝置的不同方位。例如，當圖式中的裝置被翻轉，被描述為與其他元件或特徵的關係為“下面的”的元件，將變成與其他元件或特徵的關係形成“上面的”。因此，示範性的術語“下面的”可包括“在…之上”和“在…之下”的方位。圖式所繪示的裝置可以是其他取向(如旋轉90度或位於其他方向)，並且可配合所使用的空間關係描述解釋其相對方位。

這裡所用的術語僅僅是為了說明特殊實施例，而非用以限制本發明。例如，全文中相同的元件符號表示相同的元件。在此，所使用的術語“和/或”包括所列出的項目的一個或多個的任意和全部組合。應當理解，單數形式“一”和“該”也可以包括複數形式，除非在上下文中有明確的指示。還應當理解，當在說明中使用術語“包括”和/或“包括”說明某個特徵、步驟、元件或/和組件的存在時，不排除一個或多個其他特徵、步驟、元件、組件或/和其組合的存在或加入。

在本文中出現的“訊號連接”係指利用有線通訊(如高清晰度多媒體介面(High Definition Multimedia Interface，HDMI)、複合端子(Composite video connector)或有線網路等)和/或無線通訊(如藍牙或無線網路等)方式使二裝置或元件之間彼此連接，而可相互傳遞訊號(或訊息)。應當理解，“電性連接”係指利用電耦合和/或電傳導方式使二裝置或元件之間彼此傳遞電訊號。

應當理解，圖式所繪示的裝置係為示意性質，其形狀並非用以限制裝置的實際形狀，以非用於限制本發明的實施例的範圍。

除非另有規定，於此所使用的術語(包括技術術語和科學術語)具有與本發明所屬技術領域中通常知識者所理解的相同意思。還應當理解，術語(例如字典定應的術語)應當被解釋為具有與本發明上下文相關技術的意思一致的解釋，並不做理想或特例的解釋，除非在此清楚地限定。

第1圖係為根據本發明一實施例之智慧導播方法之流程圖。第2圖係為根據本發明一實施例之智慧導播系統100(以下簡稱為系統100)之方塊圖。

合併參閱第1圖及第2圖，系統100包括複數視訊接收端110、處理單元130、影像混合單元140以及影像輸出端160。影像輸出端160供訊號連接於顯示設備600。

視訊接收端110可訊號連接於視訊設備200，以分別取得複數視訊訊號(步驟S100)。於此，第2圖以二視訊接收端110分別連接二視訊設備200為例，但本發明之實施例非限於此。處理單元130電性連接視訊接收端110，以分析視訊訊號的內容(步驟S300)。影像混合單元140電性連接處理單元130，以根據分析結果分配視訊訊號於一畫面訊號中的畫面佈局(步驟S500)。影像輸出端160電性連接影像混合單元140，以輸出畫面訊號至顯示設備 400(步驟S700)。藉此，可根據視訊訊號的內容，從中挑選適宜的視訊訊號和/或將適宜的視訊訊號顯示於畫面中的特定範圍。

於此，視訊接收端110及影像輸出端160可為支援高清晰度多媒體介面(High Definition Multimedia Interface，HDMI)、通用串列匯流排(Universal Serial Bus，USB)、複合端子(Composite video connector)、S端子(S-Video)、視訊圖形陣列(Video Graphics Array，VGA)、數位視訊介面(Digital Video Interface，DVI)、Thunderbolt、DisplayPort和/或Firewire等適用於視訊傳輸的介面。

在一實施例中，視訊設備200可為視訊攝影機、實物投影機、網路攝影機(IP cam)、相機、多媒體播放器(如藍光播放器)、電子白板、手寫板、平板電腦、手機和/或電腦等可輸出視訊訊號的裝置。顯示設備600可為電視、螢幕、投影機和/或影像矩陣切換器等可顯示或處理視訊訊號的裝置。

第3圖係為根據本發明一實施例之智慧導播方法之另一流程圖。

如第3圖所示，前述之步驟S500可包括步驟S510以及步驟S530。於前述步驟S300之後，可執行步驟S510，根據分析結果自視訊訊號中選擇至少其中之一；並於步驟S530中，決定所選擇的視訊訊號於畫面訊號的一輸出畫面中的位置及尺寸(即於畫面所佔比例)。

第4圖係為根據本發明一實施例之智慧導播方 法之再一流程圖。

如第4圖所示，前述步驟S530可包括步驟S532以及步驟S534。於前述步驟S510之後，可執行步驟S532，產生複數個視窗；並於步驟S534中，將所選擇的視訊訊號顯示於視窗中的最大者。於此，以第5圖及第6圖所示的輸出畫面600進行說明。

第5圖係為根據本發明一實施例之智慧導播系統100之輸出畫面600之示意圖。

如第5圖所示，顯示設備400的輸出畫面600可顯示至少一視窗，在此係示例一子母畫面(Picture In Picture，PIP)佈局，包括重疊的一母視窗610a及子視窗610b。首先，分析所有視訊訊號後，選擇其中二個較重要的視訊訊號。也就是說，此二較重要的視訊訊號具有對於觀看者最想觀看的內容。接著，影像混合單元140將二較重要的視訊訊號中最重要者(如視訊設備210所輸出的視訊訊號)嵌入在母視窗610a中，另一者(如視訊設備220所輸出的視訊訊號)嵌入在子視窗610b中，而形成輸出至顯示設備400的畫面訊號。

再請參閱第6圖，係為根據本發明另一實施例之智慧導播系統100之輸出畫面600之示意圖。第6圖示例另一種畫面佈局，即多重畫面(Picture By Picture，PBP)佈局，但本發明的實施例的畫面佈局非以上述為限，例如亦可為畫外畫(Picture Out of Picture，POP)佈局等。如第6圖所示，輸出畫面600包括複數視窗610a-610f(總稱 610)，其中視窗610a為所有視窗中的最大者。經分析而得知之最重要的視訊訊號即可設置於視窗610a中。但本發明之實施例非以視窗大小對應訊號的重要性為限，例如可以視窗位置對應訊號的重要性(如可將最重要的視訊訊號置放於畫面中央)。於此，雖第6圖顯示具有六個分割視窗610的輸出畫面600，但其視窗數量非為本發明的實施例的限制，也就是說本發明的實施例的分割視窗610可為二個或更多的數量。

復參閱第2圖，在一實施例中，系統100更可包括音源接收端120以及聲音輸出端170。音源接收端120供訊號連接於音源設備300。聲音輸出端170供訊號連接於播音設備500。

於此，音源接收端120以及聲音輸出端170可為支援TRS端子、HDMI、複合端子、藍牙、紅外線等適用於音源傳輸的有線傳輸介面或無線傳輸介面。

在一實施例中，音源設備300可為麥克風、視訊攝影機、相機、多媒體播放器(如MP3)、平板電腦、手機和/或音響等可輸出音源訊號的裝置。播音設備500可為耳機、喇叭、音響和/或混音器等發聲或處理聲音的裝置。

合併參閱第2圖及第7圖，第7圖係為根據本發明一實施例之智慧導播方法之又一流程圖。音源接收端120可接收來自音源設備300的一音源訊號(步驟S200)。音源接收端120電性連接處理單元130，使處理單元130經由音源接收端120取得音源訊號。處理單元130並分析 音源訊號與視訊訊號的內容而產生分析結果(步驟S300’)。於此，步驟S200可在步驟S100及步驟S300’之間；步驟S300’可在步驟S500之前。

如第2圖所示，系統100更可包括聲音混合單元150。聲音混合單元150電性連接於處理單元130與聲音輸出端之間。聲音混合單元150可混合複數音源訊號，而將經混合的音源訊號輸出至聲音輸出端170。於此，待進行混合的音源訊號可擷取自來自視訊設備200的視訊訊號；或者，可為來自音源設備300的音源訊號。

在一實施例中，影像混合單元140可包含影像編碼器；聲音混合單元150可包含語音編碼器。

在一實施例中，處理單元130、影像混合單元140與聲音混合單元150可分別或整合由數位訊號處理器(Digital Signal Processor，DSP)、中央處理器、嵌入式控制器、現場可程式化閘陣列(Field Programmable Gate Array，FPGA)和/或多工處理器等運算元件實現。

如第2圖所示，系統100更可包括儲存單元180。儲存單元180可儲存一事件導播對照表。事件導播對照表可包含不同事件(情境)的畫面佈局關係。舉例而言，在教學錄影的應用例中，前述視訊設備210可為拍攝教師的攝影機，前述視訊設備220可為拍攝白板的攝影機，又可有另一視訊設備230係為輸出教學投影片的電腦。前述音源設備300可為教師的麥克風。當教師正在抄寫白板時，視訊設備210與視訊設備220可能同時拍攝教師與白板而 呈現近乎相同的畫面，因此觀看者可不需同時觀看此二視訊訊號的畫面，僅需保留其中之一即可。因此，事件導播對照表內可儲存此事件對應的畫面佈局關係，即僅選擇視訊設備210與視訊設備220中的其中之一的視訊訊號和/或視訊設備230的視訊訊號。

如前述的教學錄影應用例中，教師可能在授課過程中走動或伴隨肢體動作，以提升學生的注意力或幫助學生理解授課內容。因此，當偵測到視訊設備210的拍攝畫面中的背景場景大量移動(即超出預設的變動量門檻和/或變動時間門檻)時，可將視訊設備210的視訊訊號設置在如第5圖所示的母視窗610a中。或者，當偵測到視訊設備210的拍攝畫面中的教師肢體擺動(即超出預設的變動量門檻和/或變動時間門檻)時，可將視訊設備210的視訊訊號設置在如第6圖所示的較大的視窗610a中。因此，事件導播對照表內可儲存此事件對應的畫面佈局關係。

在如前述的教學錄影應用例中，教師可能專心在書寫板書而未說話。因此，當偵測到音源設備300未收到教師的說話聲音，且教學投影片未切換頁面時，可將該時點之前進行的畫面(如方才講述的投影片頁面、方才講述的白板內容)設置於前述主要的視窗610a，並將教師的畫面(即視訊設備210的視訊訊號)設至於其他教次要(如較小的)視窗610。因此，事件導播對照表內可儲存此事件對應的畫面佈局關係。

從前述的應用例說明應可理解，如第7圖所示， 前述步驟S300還可包含步驟S310、步驟S330以及步驟350。也就是說，處理單元130可偵測視訊訊號的畫面中的目標物與背景場景中的至少一者(步驟S310和/或步驟S330)，並據以評分以判斷一事件是否發生(步驟S350)。或者，處理單元130可綜合評估視訊訊號與音源訊號，以識別一事件的發生。接著，處理單元130可查找該事件於事件導播對照表中對應的畫面佈局。影像混合單元140可根據此畫面佈局產生供經由影像輸出端160輸出的畫面訊號。

於此，背景場景為通常性變化和/或靜止的景物。目標物可為相對於背景場景的前景物(如人員)。

在一實施例中，儲存單元180可為硬碟、磁碟陣列、記憶卡、非揮發式記憶體(如快閃記憶體)和/或光碟等儲存媒體。

在一實施例中，儲存單元180除了儲存前述事件導播對照表之外，還可用來儲存前述接收的視訊訊號和/或音源訊號。在另一實施例中，儲存單元180可儲存經混合的視訊訊號和/或音源訊號，即把經前述智慧導播處理的影像錄製下來。

在一實施例中，智慧導播系統100還可包括通訊單元，電性連接至影像混合單元140和/或聲音混合單元150，以網路傳輸方式將經混合的視訊訊號及音源訊號傳至一用戶設備。於此，用戶設備可為個人電腦、筆記型電腦、手機和/或平板電腦等具通訊及媒體播放能力的終端裝 置。

在一實施例中，畫面佈局的改變不限於同一種佈局中的視窗內容變動，亦可為不同佈局(如子母畫面、多重畫面等)間的切換。

在一實施例中，智慧導播方法還可包括：持續分析視訊訊號；以及根據分析結果調整視訊訊號於畫面訊號中(即輸出畫面600)的佈局等步驟。也就是說，執行本發明之實施例的智慧導播方法時，係持續地進行前述的步驟(如步驟S100至步驟S700)，以隨著不同事件的發生調整輸出畫面600的佈局。

綜上所述，根據本發明之智慧導播方法及其系統，可視使用情境調整網路轉播畫面、現場播放畫面或錄影回放畫面，以使得觀看者能更專心地觀看重要的內容。

雖然本發明以前述之實施例揭露如上，然其並非用以限定本發明，任何熟習相像技藝者，在不脫離本發明之精神和範圍內，當可作些許之更動與潤飾，因此本發明之專利保護範圍須視本說明書所附之申請專利範圍所界定者為準。

S100‧‧‧取得複數個視訊訊號之步驟

S300‧‧‧分析該些視訊訊號的內容之步驟

S500‧‧‧根據分析結果分配該些視訊訊號號於一畫面訊號中的佈局之步驟

S700‧‧‧輸出該畫面訊號之步驟

Claims (10)

1. 一種智慧導播方法，包括：取得複數個視訊訊號；分析該些視訊訊號的內容；根據分析結果分配該些視訊訊號於一畫面訊號中的佈局；以及輸出該畫面訊號。
2. 如請求項1所述之智慧導播方法，其中該根據分析結果分配該些視訊訊號於一畫面訊號中的佈局包括：根據分析結果自該些視訊訊號中選擇至少其中之一；以及決定所選擇的該至少一視訊訊號於該畫面訊號的一輸出畫面中的位置及尺寸。
3. 如請求項2所述之智慧導播方法，其中該決定所選擇的該至少一視訊訊號於該畫面訊號的該輸出畫面中的位置及尺寸包括：產生複數個視窗；以及將所選擇的該視訊訊號顯示於該些視窗中的最大者。
4. 如請求項1所述之智慧導播方法，更包括：取得一音源訊號；以及分析該一音源訊號及該些視訊訊號的內容。
5. 如請求項1所述之智慧導播方法，其中該分析該些視訊訊號的內容包括： 偵測該些視訊訊號的畫面的一目標物；偵測該些視訊訊號的畫面的一背景場景；以及根據該目標物或該背景場景的變化，評分該些視訊訊號。
6. 如請求項1所述之智慧導播方法，更包括：持續分析該些視訊訊號；以及根據分析結果調整該些視訊訊號於一畫面訊號中的佈局。
7. 一種智慧導播系統，包括：複數視訊接收端，以取得複數個視訊訊號；一處理單元，電性連接該些視訊接收端，以分析該些視訊訊號的內容；一影像混合單元，電性連接該處理單元，根據分析結果分配該些視訊訊號於一畫面訊號中的一畫面佈局；以及一影像輸出端，電性連接該影像混合單元，以輸出該畫面訊號。
8. 如請求項7所述之智慧導播系統，更包括：一音源接收端，電性連接該處理單元，該處理單元經由該音源接收端取得一音源訊號，並分析該音源訊號與該視訊訊號的內容而產生該分析結果。
9. 如請求項7所述之智慧導播系統，其中該處理單元係偵測該些視訊訊號的畫面的一目標物與一背景場景中的至少一者，並據以偵測一事件。
10. 如請求項9所述之智慧導播系統，更包括：一儲存單元，儲存一事件導播對照表，該處理單元查找該事件於該事件導播對照表中對應的該畫面佈局。