TWI554094B - Multi - view audio - visual intelligent switching system and method - Google Patents

Description

多視角影音智慧切換系統及方法

本發明係關於一種應用於多視角影音智慧切換系統及方法，特別係指在具備多視角的影音內容中，透過一可自動判斷何種視角最具觀看價值的判斷機制，為用戶選擇最佳視角的影音來觀看，以減少使用者在眾多多視角影音內容中，不知該選哪台做為收視影音內容中並錯過了最精華視角鏡頭的問題，並增加用戶的最佳收視體驗。

過往有關針對多視角的切換，仍著墨在多視角預覽技術以及各多視角使用統計之相關應用為主(例如：提供即時多視角影像預覽、多視角圖片預覽、降低預覽資訊的資料傳輸量以及在哪個視角安插廣告)，並在相關的收視端提供一多路多視角頻道，以及各多視角頻道的即時圖片預覽，讓用戶依圖像選擇多視角，及利用頭端所收集到的資訊，決定在那個多視角安插特定影片資訊。

本案發明人鑑於上述習用方式所衍生的各項缺點，乃亟思加以改良創新，並經多年苦心孤詣潛心研究後，終於成功研發完成本多視角影音智慧切換系統及方法。

本發明的目的即在於提供多視角影音智慧化的切換影音內容的系統及方法，其中多視角智慧切換系統，包含：一多視角觀看行為紀錄分析蒐集伺服器；一社群行為資訊資料庫；一用戶社群行為資訊；一用戶多視角觀看行為資訊；一選台權重資訊；一選台權重資訊資料庫；一多視角觀看行為紀錄資訊伺服器；一視角最佳化資訊；一最佳化視角錄製儲存伺服器。

其中，一多視角觀看行為紀錄分析蒐集伺服器，係提供使用者在觀賞多視角影音時，用戶多視角觀看行為紀錄模組會自動記錄該使用者的觀看行為，並將該觀看行為之資訊傳回至該多視角觀看行為紀錄分析蒐集伺服器；一社群行為資訊資料庫，係具有影音討論次數、正面評價、負面評價之資訊，並由該多視角觀看行為紀錄分析蒐集伺服器連線取用；一用戶社群行為資訊，係包含用戶之社群行為資訊；一用戶多視角觀看行為資訊，係提供該多視角觀看行為紀錄分析蒐集伺服器之觀看行為影音資訊；一選台權重資訊，係包含複數種評分項目，並計算權重之資訊；一選台權重資料庫，係包含多視角影音，經由計算後之權重分數資訊，由多視角觀看行為紀錄資訊伺服器連線取用；該多視角觀看行為紀錄資訊伺服器，係當用戶選擇自動切換時，用戶多視角自動切換功能模組會透過該多視角觀看行為紀錄資訊伺服器，取得儲存在儲存裝置之權重資料，決定各視角影音的排序後， 由最高排序開始選擇；一視角最佳化資訊，係包含多視角影音內容，在平台端所分析統計所產生該多視角影音內容之權重分數最高的各片段資訊，由此資訊即可組合出該影音內容視角最佳化的離線影片；一最佳化視角錄製儲存伺服器，係由該平台端所蒐集到的該視角最佳化資訊以及多視角影音內容權重分數最高的各片段資訊。

本發明的另一目的即在於提供多視角影音智慧化的切換影音內容的系統及方法，其中多視角智慧切換方法，包括：從頭端取得多視角節目影音串流列表，使用者在觀賞多視角影音時，記錄使用者的觀看行為；從頭端取得多視角切換之資訊，取得使用者的觀看行為以及社群行為資訊；從裝置端取得多視角切換之系統狀態參考資訊，對使用者的觀看行為以及社群行為資訊，進行統計與分析，針對各視角影音產生不同的權重；從裝置端取得多視角切換之用戶設定資訊，當觀看多視角影音時，用戶可選擇視角切換模式，並依據所選擇之模式，進行相應之處理；進行多視角自動切換決策，取得裝置的狀態與效能；當評估裝置的效能及狀態，符合條件者，則執行多視角切換相關機制，切換到該視角之影音播放，反之，若不符合選擇視角之影音，則留在原視角，播放預設視角之影音；完成多視角切換相關機制。

本發明所提供一種多視角影音智慧切換系統及方法，與其他習用技術相互比較時，更具備下列優點：

1.用戶多視角觀看行為紀錄模組：用來紀錄用戶觀看多視角的觀看行為及使用狀態，本模組每隔一段時間記錄用戶目前所觀看的視角影音資訊、社交聊天資訊，並將紀錄下來的資訊送回頭端進行分析統計使用。

2.用戶多視角自動切換功能模組：由頭端取得提供多視角切換之準則以及裝置端目前的效能以及狀態，根據切換之準則以及裝置的效能與狀態，選擇最適合之視角的影音來播放，並自動切換到該視角的影音播放。

3.用戶多視角觀看行為紀錄分析模組：接收用戶多視角觀看行為紀錄模組傳來的資訊並統計所有用戶裝置熱門的多視角影音，如最多人收看、最久停留時間、最多人討論等統計資訊，經由分析後轉換成權重資訊供終端裝置讀取，並輸入到用戶多視角自動切換功能模組來選擇最適當的視角之影音來播放。

101‧‧‧多視角觀看行為紀錄分析蒐集伺服器

102‧‧‧社群行為資訊資料庫

103‧‧‧用戶社群行為資訊

104‧‧‧用戶多視角觀看行為資訊

105‧‧‧選台權重資訊

106‧‧‧選台權重資料庫+

107‧‧‧多視角觀看行為記錄資訊伺服器

108‧‧‧視角最佳化資訊

109‧‧‧最佳化視角錄製儲存伺服器

110‧‧‧平台端

201‧‧‧觀看行為記錄單元

202‧‧‧觀看行為記錄分析單元

203‧‧‧自動切換功能單元

301‧‧‧用戶裝置端

302‧‧‧記錄用戶多視角觀看行為

303‧‧‧回報頭端多視角觀看行為

S401~S408‧‧‧設備管理之處理流程

S501~S505‧‧‧告警事件管理之處理流程

601‧‧‧觀看行為紀錄分析蒐集伺服器

602‧‧‧用戶多視角觀看行為紀錄分析模組

603‧‧‧儲存裝置

604‧‧‧多視角觀看行為記錄資訊伺服器

605‧‧‧觀看行為記錄單元

606‧‧‧用戶多視角自動切換功能模組

607‧‧‧社群行為資訊

請參閱有關本發明之詳細說明及其附圖，將可進一步瞭解本發明之技術內容及其目的功效；有關附圖為：圖1為本發明多視角影音智慧切換系統及方法之系統架構示意圖；圖2為本發明多視角影音智慧切換系統及方法之設備管理規則之整合方法示意圖；圖3為本發明多視角影音智慧切換系統及方法之告警事件管理規則之整合方法示意圖；圖4為本發明多視角影音智慧切換系統及方法之子系統 異常監測方法於設備管理之處理流程圖；圖5為本發明多視角影音智慧切換系統及方法之子系統異常監測方法於告警事件管理之處理流程圖；圖6為本發明多視角影音智慧切換系統及方法之多視角影音時之流程架構圖。

為了使本發明的目的、技術方案及優點更加清楚明白，下面結合附圖及實施例，對本發明進行進一步詳細說明。應當理解，此處所描述的具體實施例僅用以解釋本發明，但並不用於限定本發明。

以下，結合附圖對本發明進一步說明：請參閱圖1所示，係為一平台端110包含選台權重資訊105，其包含各種影響因子，例如同時間觀看人數、同一時段觀看成長人數、觀看時間長短，加上社群行為資訊資料庫102所收集資訊如用戶社群行為資訊103及用戶多視角觀看行為資訊104及討論次數、正面評價、負面評價…等因素於多視角觀看行為紀錄分析蒐集伺服器101進行計算，其中計算方式可依各種項目的重要性而改變其重要係數，重要係數值在此定義為F，F介於(0~1)之間，例如同時間觀看人數可設定為F ₁ 值為0.5，觀看時間長短可設為值F ₂ 為0.3…等。各種項目排名分數因多視角影音排名而異，各種項目排名分數定義為S，S介於(0~1)之間，如該影音同時間觀看人數排名分數為S ₁ ，同一時段觀看成長人數排名分數為S ₂ …等，即可得到該多視角影音在各種項目與其它多視角影音的排名成績。再考量到該項目的重要係數F，則選台權重資訊可定義為FS=F ₁ S ₁ +F ₂ S ₂ +F ₃ S ₃ +…+F _n S _n ，選台權重資訊可被儲存至選 台權重資料庫106提供裝置端存取，若選台權重資訊若尚無足夠資訊產生權重，將給予預設權重。

其上述所提及之影音，包含即時的多視角頻道或是非即時的影音資訊如多視角的影片…等各種影音內容，只要符合可提供多視角的內容皆可做為本案所揭露之內容進行自動切換。另外當多視角觀看行為紀錄伺服器107可自動紀錄下平台端110內所蒐集到多視角影音內容權重分數最高的各片段資訊，並紀錄為視角最佳化資訊108，多視角觀看行為紀錄資訊伺服器107，係當用戶選擇自動切換時，用戶多視角自動切換功能模組會透過該多視角觀看行為紀錄資訊伺服器，取得儲存在儲存裝置之權重資料，決定各視角影音的排序後，由最高排序開始選擇，藉由此資訊即可利用一最佳化視角錄製儲存伺服器109進行自動化的依據視角最佳化的資訊，將各最佳化片段所組成的最佳化視角的影片錄製下來做成離線影音內容並供後續應用。

請參閱圖2所示，係為多視角自動切換功能模組，包含：觀看行為紀錄單元201，係位於用戶端的裝置上，以紀錄用戶觀看多視角的觀看行為及使用狀態；自動切換功能單元202，係亦位於用戶端的裝置上，並執行多視角自動切換機制；以及觀看行為紀錄分析單元203，係位於起始端，並即時接收該裝置傳來的資訊，並統計所有該用戶裝置熱門的多視角影音。

其根據系統上從各裝置所蒐集的資訊及裝置端用戶所設定的主觀條件搭配上環境條件，如CPU、網路等狀態 的客觀條件，並即時蒐集並計算各種條件並評分各多視角影音，以達到智慧化切換多視角影音的效果。

請同時參閱圖2及圖3，其中，觀看行為紀錄單元201，該單元運行於用戶端的裝置上，用來紀錄用戶觀看多視角的觀看行為及使用狀態，每隔一段時間，用戶端裝置301記錄用戶目前觀看多視角影音資訊、社交聊天等資訊，並記錄用戶多視角觀看行為302，將紀錄下來的資訊送回頭端進行分析統計使用，用戶端程式可自動統計關於哪一個視角影音最常被用戶觀看，或是最常被用戶拿來討論，再回報頭端多視角觀看行為303，收集統計資訊利用網路回傳回到頭端儲存並進行後續的統計分析使用。

請同時參閱圖2及圖4，其自動切換功能單元202，其單元於用戶端的裝置上，用來執行多視角自動切換之方法，其流程如下：S401從頭端取得提供多視角節目影音串流列表，得知可支援的多視角的播放串流；S402再從頭端取得多視角切換之參考資訊，即可取得多視角權重的參考資訊；S403再從裝置端取得多視角切換之系統狀態參考資訊，如系統狀態如CPU繁忙程度及各多視角串流之網路連線狀態；S404再從裝置端取得多視角切換之用戶設定資訊，讀取用戶於裝置端程式上所設定的多視角切換的喜好設定；S405進行多視角自動切換決策，再於裝置端程式上透過各多視角的評分判斷機制來決定切換到哪個多視角影音進行播放； S406若現行播放的多視角影音分數較高，則機制將會留在原視角影音繼續播放；S407若因有重大比賽花絮鏡頭出現受到用戶觀看及社群討論，則分數將會衝高，而在多視角自動切換決策時將會自動或是詢問用戶是否切換過去評分較高的多視角影音，如果用戶願意切換則執行切換多視角影音機制；S408完成多視角切換相關機制後，系統將重新此流程並在一定時間內收集統計資訊後重新執行此流程並完成自動切換多視角影音的機制。

請參閱圖2、圖5，其中觀看行為紀錄分析單元203，是為運行於S501頭端伺服器，用來即時接收裝置端傳來的資訊並統計所有用戶裝置熱門的多視角影音如最多人收看、最久停留時間、最多人討論等統計資訊並儲存起來供裝置端來讀取，S502接收各裝置端各用戶多視角觀看行為，收集用戶在各時段觀看某一多視角影音，對該多視角影音進行社交按讚或討論等動作等資訊，S503再統計分析用戶多視角觀看行為，針對用戶的觀看資訊進行統計分析，計算出哪個多視角影音最多人觀看或是最多聊天、按讚等社群動作，S504並取得其它自定資訊，取得各多視角的重要性(如廠商是否安插廣告、影音精采度、政策需要等事宜)，並S505產生即時多視角切換參考資訊並進行儲存，以供裝置端來進行存取。

請參閱圖6所示，在觀賞多視角影音時之流程為：當使用者在觀賞多視角影音時，觀看行為紀錄單元605會自動記錄使用者的觀看行為，如觀看哪個視角，觀看時間長度等並將這些資訊傳回觀看行為紀錄分析蒐集伺服器601。觀看行為紀錄分析蒐集伺服器601將所蒐集到的資訊傳送到用戶 多視角觀看行為紀錄分析模組602。社群行為資訊607則是儲存各個視角的影音在社群中的資訊，如討論次數，正面評價，負面評價等資訊。用戶多視角觀看行為紀錄分析模組602取得使用者的觀看行為以及社群行為資訊607後，例如當使用者選擇手動切換視角時，使用者花了70%時間觀賞第一視角之影音，20%時間觀賞第二視角之影音，10%時間觀賞第三視角，此資訊的權重設定為0.5。在社群網站中，有60%推薦第一視角之影音，10%推薦第二視角之影音，30%推薦第三視角之影音，此資訊的權重設定為0.3。將這些資訊輸入到產生各個視角影音的選台權重資訊。可以得到第一視角影音的權重為0.7*0.5+0.6*0.3=0.53，第二視角影音的權重為0.2*0.5+0.6*0.3=0.28，第三視角影音的權重為0.1*0.5+0.3*0.3=0.14，並將這些權重儲存到儲存裝置603。若某個視角之影音尚無足夠的資訊可以產生權重，則給予預設的權重。如下表1所示。

當觀看多視角影音時，用戶可以選擇自動切換或者手動切換。當選擇手動切換時，用戶多視角自動切換功能 模組606不作用，而此時用戶多視角觀看行為紀錄模組605會開始記錄使用者的觀看行為並傳回多視角觀看行為紀錄蒐集伺服器601。當用戶選擇自動切換時，用戶多視角自動切換功能模組606會透過多視角觀看行為紀錄資訊伺服器604取得儲存在儲存裝置603之權重資料，決定各視角影音的排序後，由最高排序開始選擇(在上述之範例，第一順序為第一視角之影音(權重為0.53)，第二順序為第二視角之影音(權重為0.28)，第三順序為第三視角之影音(權重為0.14))。當選擇到某個視角的影音後，用戶多視角自動切換功能模組606，會再取得裝置的狀態與效能，如CPU使用率、用戶是否設定排除某個視角影音等。在評估目前裝置的效能(如目前選擇之影音擁有較佳畫質，需要較高之CPU處理能力，檢視目前CPU的使用率評估是否有能力播放目前選擇之影音)以及裝置的狀態(如是否有設定某些視角不予播放後，如果符合本次選擇視角之影音，則切換到該視角之影音播放)，否則，則切換到次一順序視角之影音後，重新做裝置效能與狀態的評估，直到找到符合之視角之影音為止，然後播放此視角之影音。若皆找不到時，則播放預設視角之影音。

上列詳細說明乃針對本發明之一可行實施例進行具體說明，惟該實施例並非用以限制本發明之專利範圍，凡未脫離本發明技藝精神所為之等效實施或變更，均應包含於本案之專利範圍中。

綜上所述，本案不僅於技術思想上確屬創新，並具備習用之傳統方法所不及之上述多項功效，已充分符合新穎性及進步性之法定發明專利要件，爰依法提出申請，懇請貴局核准本件發明專利申請案，以勵發明，至感德便。

101‧‧‧多視角觀看行為紀錄分析蒐集伺服器

102‧‧‧社群行為資訊資料庫

103‧‧‧用戶社群行為資訊

104‧‧‧用戶多視角觀看行為資訊

105‧‧‧選台權重資訊

106‧‧‧選台權重資料庫+

107‧‧‧多視角觀看行為記錄資訊伺服器

108‧‧‧視角最佳化資訊

109‧‧‧最佳化視角錄製儲存伺服器

110‧‧‧平台端

Claims (8)

1. 一種多視角影音智慧切換系統，係包括：一平台端，係包含：一多視角觀看行為紀錄分析蒐集伺服器101，係提供使用者在觀賞多視角影音時，用戶多視角觀看行為紀錄模組201會自動記錄該使用者的觀看行為，並將該觀看行為之資訊傳回至該多視角觀看行為紀錄分析蒐集伺服器；一社群行為資訊資料庫102，係具有影音討論次數、正面評價、負面評價之資訊，並由該多視角觀看行為紀錄分析蒐集伺服器101連線取用；一用戶社群行為資訊103，係包含用戶之社群行為資訊；一用戶多視角觀看行為資訊104，係提供該多視角觀看行為紀錄分析蒐集伺服器之觀看行為影音資訊；一選台權重資訊105，係包含複數種評分項目，並計算權重之資訊；一選台權重資料庫106，係包含多視角影音，經由計算後之權重分數資訊，由多視角觀看行為紀錄資訊伺服器107連線取用；該多視角觀看行為紀錄資訊伺服器107，係當用戶選擇自動切換時，用戶多視角自動切換功能模組會透過該多視角觀看行為紀錄資訊伺服器，取得儲存在儲存裝置之權重資料，決定各視角影音的排序後，由最高排序開始選擇； 該視角最佳化資訊108，係包含多視角影音內容，在平台端所分析統計所產生該多視角影音內容之權重分數最高的各片段資訊，由此資訊即可組合出該影音內容視角最佳化的離線影片；一最佳化視角錄製儲存伺服器109，係由該平台端所蒐集到的該視角最佳化資訊以及多視角影音內容權重分數最高的各片段資訊。
2. 如申請專利範圍第1項所述之多視角影音智慧切換系統，其中該觀看行為，係為觀看視角、或觀看時間長度。
3. 如申請專利範圍第1項所述之多視角影音智慧切換系統，其中該社群行為資訊，係指影音片斷討論次數、影音正面評價、及影音負面評價。
4. 如申請專利範圍第1項所述之多視角影音智慧切換系統，其中該觀看行為影音資訊，係指觀看時間、觀看人數成長之速率。
5. 如申請專利範圍第1項所述之多視角影音智慧切換系統，其中該計算權重之資訊，係依各該項目的而改變其重要係數。
6. 如申請專利範圍第1項所述之多視角影音智慧切換系統，其中該多視角自動切換功能模組，係包含：觀看行為紀錄單元，係位於用戶端的裝置上，以紀錄用戶觀看多視角的觀看行為及使用狀態；自動切換功能單元，係亦位於用戶端的裝置上，並執行多視角自動切換機制；以及觀看行為紀錄分析單元，係位於起始端，並即時接收該裝置傳來的資訊，並統計所有該用戶裝置熱門的多視角 影音。
7. 如申請專利範圍第6項所述之多視角影音智慧切換系統，其中該多視角影音，係指最多人收看、最久停留時間、最多人討論之影音資訊。
8. 一種多視角影音智慧切換方法，其中一多視角自動切換方法，流程包括：A.從頭端取得多視角節目影音串流列表，使用者在觀賞多視角影音時，記錄使用者的觀看行為；B.從頭端取得多視角切換之資訊，取得使用者的觀看行為以及社群行為資訊；C.從裝置端取得多視角切換之系統狀態參考資訊，對使用者的觀看行為以及社群行為資訊，進行統計與分析，針對各視角影音產生不同的權重；D.從裝置端取得多視角切換之用戶設定資訊，當觀看多視角影音時，用戶可選擇視角切換模式，並依據所選擇之模式，進行相應之處理；E.進行多視角自動切換決策，取得裝置的狀態與效能；F.當評估裝置的效能及狀態，符合條件者，則執行多視角切換相關機制，切換到該視角之影音播放，反之，若不符合選擇視角之影音，則留在原視角，播放預設視角之影音；G.完成多視角切換相關機制。