CN118200475A - 一种基于arm架构的低功耗低延时会议融合终端 - Google Patents

Abstract

本发明涉及远程通信技术领域，具体涉及一种基于ARM架构的低功耗低延时会议融合终端，包括ARM处理器，ARM处理器中包括以下模块：综合数据处理模块：用于对会议中的音视频数据进行初步的压缩与编解码；音视频融合模块：进行优化处理以减少传输所需的带宽；智能网络适配模块：根据当前的网络状况动态调整传输策略；能效管理调度模块：通过动态调整ARM处理器的工作频率和电压；安全加密处理模块对所有传出的音视频数据进行加密。本发明，通过安全加密处理模块增强数据传输的安全性，利用能效管理调度模块优化系统能效和续航，以及通过智能网络适配模块提升网络适应性和传输效率，综合提升了远程会议终端的安全性、能效和通信效率。

Description

一种基于ARM架构的低功耗低延时会议融合终端

技术领域

本发明涉及远程通信技术领域，尤其涉及一种基于ARM架构的低功耗低延时会议融合终端。

背景技术

在数字化和全球化的今天，远程会议系统成为商务、教育和政府组织进行交流和协作的关键工具，随着网络技术的发展和高清视频内容的普及，对远程会议系统的性能要求也随之提高，特别是在低功耗、低延时传输和数据安全性方面的需求越发突出，然而，现有的会议系统往往面临着高能耗、数据传输延迟以及安全性问题，这些问题严重影响了用户体验和系统的可靠性。

尽管现有技术在某种程度上解决了远程会议中的一些问题，但依然存在几个显著的技术挑战，首先，高效的数据处理和传输在保证低功耗的同时实现低延时，是一大难题，传统的解决方案往往难以在降低能耗和减少传输延时之间找到平衡点，特别是在处理高清视频数据时，其次，随着网络环境的不断变化，如何动态调整传输策略以适应不同的网络条件，同时保持传输效率和质量，也是一项技术挑战，最后，数据安全性问题日益重要，如何在保证数据传输效率的同时，确保会议内容的安全性，防止数据泄露和未授权访问，是现有技术亟需解决的问题。

本发明旨在解决上述技术难题，通过利用基于ARM架构的低功耗低延时会议融合终端，实现高效的数据处理和传输，动态适应网络变化并优化传输策略，同时确保数据传输的安全性，提供一种全面优化的远程会议解决方案。

发明内容

基于上述目的，本发明提供了一种基于ARM架构的低功耗低延时会议融合终端。

一种基于ARM架构的低功耗低延时会议融合终端，包括ARM处理器，其特征在于，该ARM处理器基于ARM架构设计，所述ARM处理器中包括以下模块：

综合数据处理模块：集成于ARM处理器中，用于对会议中的音视频数据进行初步的压缩与编解码，该综合数据处理模块具体采用ARM架构的SIMD扩展指令集，对数据进行并行处理，以降低了音视频数据的处理延时和功耗；

音视频融合模块：接收综合数据处理模块输出的数据，并进行优化处理以减少传输所需的带宽；

智能网络适配模块：用于接收音视频融合模块的输出数据，并根据当前的网络状况动态调整传输策略；

能效管理调度模块：用于监控ARM处理器的能耗，并通过动态调整ARM处理器的工作频率和电压，以及控制各模块的工作状态，实现整个ARM处理器的能效最优化；

安全加密处理模块：基于ARM TrustZone技术，对所有传出的音视频数据进行加密，保障会议内容的安全性。

进一步的，所述综合数据处理模块包括数据预处理单元、并行编解码单元和压缩优化单元；其中，

数据预处理单元：用于对输入的音视频数据进行格式化处理，包括采样率调整、分辨率转换和色彩空间转换，以确保数据符合编解码和压缩的标准格式要求；

并行编解码单元：采用ARM架构的SIMD扩展指令集对音视频数据进行并行编解码处理，具体通过将数据分解为多个子数据块，并利用SIMD指令同时对多个子数据块进行处理；

压缩优化单元：用于对编解码后的数据进行压缩，以减少存储和传输所需的带宽，该压缩优化单元根据预设的压缩算法，对数据进行动态压缩率调整，同时基于编解码的复杂性和目标压缩率之间的平衡，并通过与并行编解码单元的协同工作，以减少数据处理和传输的总体功耗。

进一步的，所述并行编解码单元中将数据分解为多个子数据块，并利用SIMD指令同时对多个子数据块进行处理的步骤包括：

首先数据分解：将输入的音视频数据D分解为n个子数据块{D₁,D₂,…,D_n}，其中，n为并行处理的子数据块数量，以适应SIMD指令集处理的向量宽度；

然后并行加载：通过SIMD指令集的加载指令，同时将n个子数据块从内存加载到处理器的向量寄存器中，准备进行并行处理；

接着执行多路处理：应用特定的编解码算法F，利用SIMD指令同时对所有加载的子数据块进行编解码处理，若将编解码过程表示为一个函数f，则并行处理的执行的公式表示为：f(x₁),f(x₂),…,f(x_N)，其中每个f(x_i)代表对第i个子数据块的处理；

最后并行存储：处理完成后，通过SIMD指令集的存储指令，将处理后的子数据块并行地从向量寄存器存回内存中。

进一步的，所述压缩优化单元中对数据进行动态压缩率调整的具体包括：

步骤1：实时监测当前网络条件和处理器的数据处理能力，并根据监测结果自动选择最合适的压缩率，基于HEVC压缩算法，具体设B为当前能用的网络带宽，L为处理器的当前负载率，C_opt为选择的最优压缩率，具体计算公式为：

C_opt＝f(B，L)，其中，f是一个函数，用于根据当前网络带宽B和处理器负载L计算最优压缩率C_opt；

步骤2：应用预设的优化算法来平衡压缩后的数据质量与传输延时，该优化算法利用效用函数，该优化算法的具体公式为：

U(Q，D)＝α×Q-β×D，其中，Q代表压缩后的视频质量，D代表预期的传输延时，α和β是权衡系数，用于调整视频质量与延时的相对重要性；

步骤3：对压缩优化单元与并行编解码单元协同工作，具体通过精确控制数据的处理流程和压缩策略，以最小化处理过程中的能耗，该协同工作通过调整并行处理单元中的活动核心数量和每核心的处理速度，以及压缩率的选择，来适应当前的硬件能力和网络状态，能耗最小化的目标的公式为：

E_min＝min_n,s,c(n×f(s，c))，其中，E_min代表最小化的总能耗，n代表活跃处理核心的数量，s代表每个核心的处理速度，c代表压缩率，f(s，c)是一个函数，表示在给定处理速度和压缩率下，单个处理核心的能耗。

进一步的，所述音视频融合模块包括音视频同步处理单元、动态HEVC编解码参数调整单元以及带宽优化处理单元；其中，

音视频同步处理单元：采用预设的音视频同步算法，该音视频同步算法利用音视频数据的时间戳进行同步，确保数据在传输和展示时的同步性，同步过程中，根据时间戳差值调整播放速度或暂时缓冲，以实现严格的同步；

动态HEVC编解码参数调整单元：用于根据实时网络状况动态调整HEVC编解码参数，包括量化参数、帧内预测和帧间预测设置，以适应当前网络条件并保持传输效率，调整过程基于预先确定的关系式：P＝g(B，L)，其中P表示编解码参数集，B为当前能用的网络带宽，L为处理器的当前负载率，函数g根据当前的网络带宽和负载率计算出一组最优编解码参数，以保证在当前网络状况下实现最佳的视频质量与压缩效率平衡；

带宽优化处理单元：采用优化算法动态选择编解码配置和调整数据包大小，以减少传输所需的带宽，同时保证视频质量，优化过程为：C_opt＝h(C，Q，S)，其中，C_opt代表优化后的编解码配置，C代表当前编解码配置，QP代表量化参数，S代表数据包大小，函数h根据当前编解码配置、量化参数和数据包大小确定一个最优配置，以最小化所需带宽。

进一步的，所述智能网络适配模块包括网络状态监测单元和传输策略动态调整单元；其中，

网络状态监测单元：用于实时监测当前网络的状况，包括带宽、延迟和丢包率。

传输策略动态调整单元：根据网络状态监测单元提供的实时网络状况信息，动态调整音视频数据的传输策略，包括数据包的大小、编码率和发送频率，以适应当前网络条件，该传输策略动态调整单元具体采用预设的预测模型来预测网络状况的未来变化，并根据预测结果预先调整传输参数。

进一步的，所述传输策略动态调整单元采用预设的预测模型来预测网络状况的未来变化，并根据预测结果预先调整传输参数具体包括：

预测模型的定义：传输策略动态调整单元采用一个预设的预测模型来预测网络状况的未来变化，该模型的函数表示为：F(t)＝a·t^b+c，其中，F(t)代表预测的网络状况参数；t代表时间；a、b和c是模型参数，通过历史网络数据分析得出；

根据预测结果预先调整传输参数：基于预测模型F(t)的输出，传输策略动态调整单元采取措施预先调整传输参数，适应预测的网络状况，调整的传输参数函数表示：G(B_pred,D_pred)＝{P_size,R_freq}，其中，B_pred和D_pred分别是预测的带宽和延时，P_size代表调整后的数据包大小，R_freq代表调整后的数据发送频率。

进一步的，所述能效管理调度模块包括能耗监控单元、频率和电压动态调整单元以及模块工作状态控制单元；其中，

能耗监控单元：利用ARM架构内预设的能耗监控工具和传感器，包括内核性能计数器、系统电源管理接口传感器以及能耗监测芯片，通过能耗监控工具和传感器共同工作，提供对ARM处理器的实时能耗监测，内核性能计数器能够监测处理器的工作负载情况，而SPMI传感器和能耗监测芯片则直接测量电流和电压，从而计算出实际能耗；

频率和电压动态调整单元：采用动态电压和频率调整技术，根据能耗监控单元提供的实时工作负载数据和能耗信息，通过算法：V_opt＝f(W,E_target)，动态选择最优的处理器工作频率和电压设置，其中，V_opt代表最优电压设置，W代表当前的工作负载，E_target代表能耗目标，函数f基于处理器的性能-能耗特性曲线，智能地计算出满足能耗目标下的最优电压和频率配置，以优化处理器的能效比；

模块工作状态控制单元：用于根据实时能耗监测数据和性能要求，调整各模块的工作状态，具体调整包括启动节能模式、调整到低功耗待机状态或修改运行频率。

进一步的，所述模块工作状态控制单元中调整各模块的工作状态具体包括：

首先，根据能耗监控单元提供的实时数据，连同当前的性能要求，通过分析函数：F(E，P)＝S确定各模块的目标状态S，其中，E代表实时能耗数据，P代表性能要求，S为模块的目标工作状态，包括正常模式、节能模式、低功耗待机状态；

然后，根据分析结果，设定规则以决定模块应处于的工作状态，具体规则如下：

当E>E_max且P低于性能阈值时，则启动节能模式，减少功耗；

当E处于中等水平且P满足最低性能要求，但不需要高性能输出，则调整到低功耗待机状态；

当P需要高性能且E<E_opt，则增加运行频率，以满足性能需求。

进一步的，所述安全加密处理模块包括加密引擎单元、密钥管理单元以及数据封装单元；其中，

加密引擎单元：置于ARM TrustZone安全环境中，用于对所有传出的音视频数据进行加密，具体利用ARM TrustZone技术提供的安全执行环境，确保加密过程与非安全环境完全隔离，防止未授权访问和数据泄露；

密钥管理单元：在TrustZone安全环境中，用于生成、存储和管理加密密钥，该密钥管理单元具体使用预设的加密标准，通过安全随机数生成器产生加密密钥，并安全地存储在TrustZone的安全存储区域中，以供加密引擎单元使用；

数据封装单元：在加密音视频数据后，用于将加密数据封装成预定传输的格式，该数据封装单元用于确保加密数据的完整性和认证信息一同封装。

本发明的有益效果：

本发明，通过集成的安全加密处理模块，基于ARM TrustZone技术对所有传出的音视频数据进行高级加密，确保会议内容的安全性，加密引擎单元在安全执行环境中操作，与密钥管理单元紧密协作，生成、存储和管理加密密钥，从而保护数据免受未授权访问和泄露，显著提升了数据传输过程中的安全性和隐私保护。

本发明，通过能效管理调度模块的精心设计，本发明实现了对ARM处理器及其各模块的实时能耗监控、动态频率和电压调整以及工作状态的智能控制，特别是，动态电压和频率调整(DVFS)技术的应用，允许系统根据当前的工作负载和能耗目标智能选择最优的频率和电压设置，从而优化了处理器的能效比，延长了设备的使用时间，使得会议融合终端更加适合长时间的远程会议应用。

本发明，通过智能网络适配模块的引入，能够根据实时网络状况动态调整传输策略，如调整数据包大小和编解码参数，以适应当前的网络条件并保持传输效率，该模块利用预测模型预测网络状况的未来变化，提前调整传输参数，减少传输延时，并通过预设的预测模型来优化传输策略，确保在不稳定的网络环境下也能实现低延时和高效率的数据传输。

附图说明

为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例的ARM处理器架构示意图；

图2为本发明实施例的数据进行动态压缩率调整流程示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，对本发明进一步详细说明。

需要说明的是，除非另外定义，本发明使用的技术术语或者科学术语应当为本发明所属领域内具有一般技能的人士所理解的通常意义。本发明中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。

如图1-2所示，一种基于ARM架构的低功耗低延时会议融合终端，包括ARM处理器，其特征在于，该ARM处理器基于ARM架构设计，用于确保会议数据安全传输的同时，实现音视频数据的高效处理和低延时传输，同时最大化地减少了整个系统的能耗，ARM处理器中包括以下模块：

综合数据处理模块：集成于ARM处理器中，用于对会议中的音视频数据进行初步的压缩与编解码，该综合数据处理模块具体采用ARM架构的SIMD扩展指令集，对数据进行并行处理，以降低了音视频数据的处理延时和功耗；

音视频融合模块：接收综合数据处理模块输出的数据，并进行优化处理以减少传输所需的带宽，该音视频融合模块通过预设的音视频同步算法，运用确保数据在传输和展示时的同步性，同时采用动态调整编解码策略，根据网络条件自动优化数据压缩率，以达到低延时传输的目的；

智能网络适配模块：用于接收音视频融合模块的输出数据，并根据当前的网络状况动态调整传输策略；

能效管理调度模块：用于监控ARM处理器的能耗，并通过动态调整ARM处理器的工作频率和电压，以及控制各模块的工作状态，实现整个ARM处理器的能效最优化；

安全加密处理模块：基于ARM TrustZone技术，对所有传出的音视频数据进行加密，保障会议内容的安全性。

综合数据处理模块包括数据预处理单元、并行编解码单元和压缩优化单元；其中，

数据预处理单元：用于对输入的音视频数据进行格式化处理，包括采样率调整、分辨率转换和色彩空间转换，以确保数据符合编解码和压缩的标准格式要求，该单元通过精确调整数据格式，为后续的并行处理和压缩优化打下基础；

并行编解码单元：采用ARM架构的SIMD扩展指令集对音视频数据进行并行编解码处理，具体通过将数据分解为多个子数据块，并利用SIMD指令同时对多个子数据块进行处理，以提高了编解码的效率，从而减少了处理延时和功耗，具体来说，利用SIMD指令实现了数据的并行加载、执行多路处理和并行存储，能降低对单个数据点的处理时间，同时增加了处理过程中的能效比；

压缩优化单元：用于对编解码后的数据进行压缩，以减少存储和传输所需的带宽，该压缩优化单元根据预设的压缩算法，如H.264或HEVC，对数据进行动态压缩率调整，同时基于编解码的复杂性和目标压缩率之间的平衡，以确保压缩后的数据保持高质量的同时，实现低延时传输，并通过与并行编解码单元的协同工作，压缩优化单元进一步以减少数据处理和传输的总体功耗；

通过上述单元的紧密配合，充分利用了ARM架构的高效运算能力和低功耗特性，实现了音视频数据的高效处理，显著降低了处理延时和系统能耗，确保了会议融合终端在处理高清音视频数据时的性能和能效。

并行编解码单元中将数据分解为多个子数据块，并利用SIMD指令同时对多个子数据块进行处理的步骤包括：

首先数据分解：将输入的音视频数据D分解为n个子数据块{D₁,D₂,…,D_n}，其中，n为并行处理的子数据块数量，以适应SIMD指令集处理的向量宽度；

然后并行加载：通过SIMD指令集的加载指令，同时将n个子数据块从内存加载到处理器的向量寄存器中，准备进行并行处理；

接着执行多路处理：应用特定的编解码算法F，利用SIMD指令同时对所有加载的子数据块进行编解码处理，若将编解码过程表示为一个函数f，则并行处理的执行的公式表示为：f(x₁),f(x₂),…,f(x_N)，其中每个f(x_i)代表对第i个子数据块的处理；

最后并行存储：处理完成后，通过SIMD指令集的存储指令，将处理后的子数据块并行地从向量寄存器存回内存中，这一步骤完成了音视频数据编解码过程的最终阶段，确保了处理后的数据能够被有效且迅速地存储，为后续的传输或显示做好准备；通过上述步骤，该并行编解码单元能够显著提高编解码的效率，减少处理延时和功耗，优化了基于ARM架构的低功耗低延时会议融合终端在处理音视频数据时的性能。

压缩优化单元中对数据进行动态压缩率调整的具体包括：

步骤1：实时监测当前网络条件和处理器的数据处理能力，并根据监测结果自动选择最合适的压缩率，基于HEVC压缩算法，具体设B为当前能用的网络带宽，L为处理器的当前负载率，C_opt为选择的最优压缩率，具体计算公式为：

C_opt＝f(B，L)，其中，f是一个函数，用于根据当前网络带宽B和处理器负载L计算最优压缩率C_opt；

步骤2：应用预设的优化算法来平衡压缩后的数据质量与传输延时，该优化算法利用效用函数(UtilityFunction)，该优化算法的具体公式为：

U(Q，D)＝α×Q-β×D，其中，Q代表压缩后的视频质量，D代表预期的传输延时，α和β是权衡系数，用于调整视频质量与延时的相对重要性；

步骤3：对压缩优化单元与并行编解码单元协同工作，具体通过精确控制数据的处理流程和压缩策略，以最小化处理过程中的能耗，该协同工作通过调整并行处理单元中的活动核心数量和每核心的处理速度，以及压缩率的选择，来适应当前的硬件能力和网络状态，能耗最小化的目标的公式为：

E_min＝min_n,s,c(n×f(s，c))，其中，E_min代表最小化的总能耗，n代表活跃处理核心的数量，s代表每个核心的处理速度，c代表压缩率，f(s，c)是一个函数，表示在给定处理速度和压缩率下，单个处理核心的能耗；

通过上述步骤，不仅实现了高效的数据压缩与优化，而且通过与并行编解码单元的协同工作，有效地降低了数据处理和传输过程中的总体能耗，从而优化了基于ARM架构的低功耗低延时会议融合终端的性能。

音视频融合模块包括音视频同步处理单元、动态HEVC编解码参数调整单元以及带宽优化处理单元；其中，

音视频同步处理单元：采用预设的音视频同步算法，该音视频同步算法利用音视频数据的时间戳进行同步，确保数据在传输和展示时的同步性，同步过程中，根据时间戳差值调整播放速度或暂时缓冲，以实现严格的同步；

动态HEVC编解码参数调整单元：用于根据实时网络状况动态调整HEVC编解码参数，包括量化参数、帧内预测和帧间预测设置，以适应当前网络条件并保持传输效率，调整过程基于预先确定的关系式：P＝g(B，L)，其中P表示编解码参数集，B为当前能用的网络带宽，L为处理器的当前负载率，函数g根据当前的网络带宽和负载率计算出一组最优编解码参数，以保证在当前网络状况下实现最佳的视频质量与压缩效率平衡；

带宽优化处理单元：采用优化算法动态选择编解码配置和调整数据包大小，以减少传输所需的带宽，同时保证视频质量，优化过程为：C_opt＝h(C，Q，S)，其中，C_opt代表优化后的编解码配置，C代表当前编解码配置，QP代表量化参数，S代表数据包大小，函数h根据当前编解码配置、量化参数和数据包大小确定一个最优配置，以最小化所需带宽，同时尽可能保持或提升视频质量；

上述单元通过精确的调度和协同工作，实现数据传输效率的最大化和延时的最小化，通过综合应用时间戳同步、动态压缩率调整及带宽优化技术，音视频融合模块不仅确保了高质量的音视频传输，而且显著减少了因网络波动导致的传输延时和带宽需求。

智能网络适配模块包括网络状态监测单元和传输策略动态调整单元；其中，

网络状态监测单元：用于实时监测当前网络的状况，包括带宽、延迟和丢包率，该网络状态监测单元具体是利用ARM架构的特性，结合低功耗网络协议栈进行网络状态的监测，ARM架构的处理器具有高效的能量管理功能，能够在维持网络连接和数据传输的同时，优化能耗，利用这一特性，网络状态监测单元通过以下步骤实现高效且低功耗的网络状态监测：

低功耗监听：在不活跃的数据传输期间，网络状态监测单元配置ARM处理器进入低功耗模式，同时依然保持网络接口的活跃状态，以实时捕捉网络状态的变化，这种模式利用了ARM架构支持的节能睡眠状态，减少了在网络监测过程中的能耗；

快速唤醒与采样：一旦检测到网络状态的变化，如带宽波动或延迟增加，网络状态监测单元即刻唤醒ARM处理器，进行快速的网络状态采样，这一过程利用了ARM处理器的快速唤醒特性，确保了对网络状况变化的实时响应，同时最小化了处理器唤醒时间，降低能耗；

高效数据处理：在网络状态数据采集后，利用ARM架构的处理能力对数据进行快速分析，包括计算平均带宽、测量网络延迟和识别丢包率等关键网络性能指标，ARM架构的高效计算能力保证了即使在大量数据采集的情况下，也能快速完成数据的处理，而其低功耗特性确保了整个过程的能效；

优化的协议栈使用：网络状态监测单元通过优化的网络协议栈，特别是针对ARM架构优化的协议栈，实现了对网络状态的高效监测，这种优化包括协议栈在处理网络请求和响应时的能耗管理，以及减少数据传输过程中的冗余操作，进一步提高监测的能效；

通过上述方法，网络状态监测单元不仅能够实现对网络状态的实时和高效监测，而且充分利用了ARM架构的低功耗特性，优化了整个监测过程的能耗，为智能网络适配模块提供了精确且节能的网络状况信息，支持后续的传输策略动态调整。

传输策略动态调整单元：根据网络状态监测单元提供的实时网络状况信息，动态调整音视频数据的传输策略，包括数据包的大小、编码率和发送频率，以适应当前网络条件，该传输策略动态调整单元具体采用预设的预测模型来预测网络状况的未来变化，并根据预测结果预先调整传输参数，以减少传输延时并提升数据传输的稳定性和效率。

传输策略动态调整单元采用预设的预测模型来预测网络状况的未来变化，并根据预测结果预先调整传输参数具体包括：

预测模型的定义：传输策略动态调整单元采用一个预设的预测模型来预测网络状况的未来变化，该模型的函数表示为：F(t)＝a·t^b+c，其中，F(t)代表预测的网络状况参数，例如预测的带宽或延时；t代表时间，表示从当前时刻起的未来时间间隔；a、b和c是模型参数，通过历史网络数据分析得出，用于描述网络状况随时间变化的趋势，在模型F(t)中，a代表网络状况变化的初始速率，b代表网络状况变化的加速度，而c代表在t＝0时刻的网络状况基线值，通过调整a、b和c是模型参数，能够根据过去的网络性能数据预测未来一段时间内的网络状态，如带宽减少或延时增加的趋势；

根据预测结果预先调整传输参数：基于预测模型F(t)的输出，传输策略动态调整单元采取措施预先调整传输参数，以适应预测的网络状况，调整的传输参数函数表示：G(B_pred,D_pred)＝{P_size,R_freq}，其中，B_pred和D_pred分别是预测的带宽和延时，P_size代表调整后的数据包大小，R_freq代表调整后的数据发送频率；通过上述方式，该ARM处理器能够在网络状况变差之前自动减小数据包的大小和增加发送频率，或在网络状况改善时采取相反措施，以保持传输的高效率和低延时。

能效管理调度模块包括能耗监控单元、频率和电压动态调整单元以及模块工作状态控制单元；其中，

能耗监控单元：利用ARM架构内预设的能耗监控工具和传感器，包括内核性能计数器、系统电源管理接口传感器以及能耗监测芯片，通过能耗监控工具和传感器共同工作，提供对ARM处理器的实时能耗监测，内核性能计数器能够监测处理器的工作负载情况，包括CPU使用率和指令周期数，而SPMI传感器和能耗监测芯片则直接测量电流和电压，从而计算出实际能耗，这样的监测机制确保了能耗数据的精确收集；

频率和电压动态调整单元：采用动态电压和频率调整技术，根据能耗监控单元提供的实时工作负载数据和能耗信息，通过算法：V_opt＝f(W,E_target)，动态选择最优的处理器工作频率和电压设置，其中，V_opt代表最优电压设置，W代表当前的工作负载，E_target代表能耗目标，函数f基于处理器的性能-能耗特性曲线，智能地计算出满足能耗目标下的最优电压和频率配置，以优化处理器的能效比；

模块工作状态控制单元：用于根据实时能耗监测数据和性能要求，调整各模块的工作状态，具体调整包括启动节能模式、调整到低功耗待机状态或修改运行频率。

模块工作状态控制单元中调整各模块的工作状态具体包括：

首先，根据能耗监控单元提供的实时数据，连同当前的性能要求，通过分析函数：F(E，P)＝S确定各模块的目标状态S，其中，E代表实时能耗数据，P代表性能要求，S为模块的目标工作状态，包括正常模式、节能模式、低功耗待机状态；

然后，根据分析结果，设定规则以决定模块应处于的工作状态，具体规则如下：

当E>E_max且P低于性能阈值时，则启动节能模式，减少功耗；

当E处于中等水平且P满足最低性能要求，但不需要高性能输出，则调整到低功耗待机状态；

当P需要高性能且E<E_opt，则增加运行频率，以满足性能需求，同时保持能效；

通过上述步骤，模块工作状态控制单元能够根据实时能耗监测数据和性能要求，智能地调整各模块的工作状态，实现整个系统的能效最优化，这种动态调整策略确保了会议融合终端在不同工作负载和网络条件下的性能和能效平衡，优化了用户体验和设备续航能力。

安全加密处理模块包括加密引擎单元、密钥管理单元以及数据封装单元；其中，

加密引擎单元：置于ARM TrustZone安全环境中，用于对所有传出的音视频数据进行加密，具体利用ARM TrustZone技术提供的安全执行环境，确保加密过程与非安全环境完全隔离，防止未授权访问和数据泄露；

密钥管理单元：在TrustZone安全环境中，用于生成、存储和管理加密密钥，该密钥管理单元具体使用预设的加密标准或其他安全算法，通过安全随机数生成器产生加密密钥，并安全地存储在TrustZone的安全存储区域中，以供加密引擎单元使用；

数据封装单元：在加密音视频数据后，用于将加密数据封装成预定传输的格式，该数据封装单元用于确保加密数据的完整性和认证信息(如数字签名)一同封装，便于接收方验证数据的完整性和来源的可靠性；具体的加密过程可以概括为使用密钥管理单元生成的密钥，通过加密引擎单元执行加密算法C＝E_k(M)对音视频数据M进行加密，其中C表示加密后的数据，E_k表示使用密钥k的加密函数，通过这种方式，安全加密处理模块保障了会议内容的安全性，防止了数据在传输过程中的泄露和未授权访问；

通过上述单元的设计和实施，安全加密处理模块利用ARM TrustZone技术，有效保护了音视频数据的安全性，确保了会议融合终端传输的内容安全，避免了数据泄露和篡改的风险。

本发明旨在涵盖落入所附权利要求的宽泛范围之内的所有这样的替换、修改和变型。因此，凡在本发明的精神和原则之内，所做的任何省略、修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于ARM架构的低功耗低延时会议融合终端，包括ARM处理器，其特征在于，该ARM处理器基于ARM架构设计，所述ARM处理器中包括以下模块：

综合数据处理模块：集成于ARM处理器中，用于对会议中的音视频数据进行初步的压缩与编解码，该综合数据处理模块具体采用ARM架构的SIMD扩展指令集，对数据进行并行处理，以降低了音视频数据的处理延时和功耗；

音视频融合模块：接收综合数据处理模块输出的数据，并进行优化处理以减少传输所需的带宽；

智能网络适配模块：用于接收音视频融合模块的输出数据，并根据当前的网络状况动态调整传输策略；

能效管理调度模块：用于监控ARM处理器的能耗，并通过动态调整ARM处理器的工作频率和电压，以及控制各模块的工作状态，实现整个ARM处理器的能效最优化；

安全加密处理模块：基于ARM TrustZone技术，对所有传出的音视频数据进行加密，保障会议内容的安全性。

2.根据权利要求1所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述综合数据处理模块包括数据预处理单元、并行编解码单元和压缩优化单元；其中，

数据预处理单元：用于对输入的音视频数据进行格式化处理，包括采样率调整、分辨率转换和色彩空间转换，以确保数据符合编解码和压缩的标准格式要求；

并行编解码单元：采用ARM架构的SIMD扩展指令集对音视频数据进行并行编解码处理，具体通过将数据分解为多个子数据块，并利用SIMD指令同时对多个子数据块进行处理；

压缩优化单元：用于对编解码后的数据进行压缩，以减少存储和传输所需的带宽，该压缩优化单元根据预设的压缩算法，对数据进行动态压缩率调整，同时基于编解码的复杂性和目标压缩率之间的平衡，并通过与并行编解码单元的协同工作，以减少数据处理和传输的总体功耗。

3.根据权利要求2所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述并行编解码单元中将数据分解为多个子数据块，并利用SIMD指令同时对多个子数据块进行处理的步骤包括：

首先数据分解：将输入的音视频数据D分解为n个子数据块{D₁,D₂,…,D_n}，其中，n为并行处理的子数据块数量，以适应SIMD指令集处理的向量宽度；

然后并行加载：通过SIMD指令集的加载指令，同时将n个子数据块从内存加载到处理器的向量寄存器中，准备进行并行处理；

接着执行多路处理：应用特定的编解码算法F，利用SIMD指令同时对所有加载的子数据块进行编解码处理，若将编解码过程表示为一个函数f，则并行处理的执行的公式表示为：f(x₁),f(x₂),…,f(x_N)，其中每个f(x_i)代表对第i个子数据块的处理；

最后并行存储：处理完成后，通过SIMD指令集的存储指令，将处理后的子数据块并行地从向量寄存器存回内存中。

4.根据权利要求3所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述压缩优化单元中对数据进行动态压缩率调整的具体包括：

步骤1：实时监测当前网络条件和处理器的数据处理能力，并根据监测结果自动选择最合适的压缩率，基于HEVC压缩算法，具体设B为当前能用的网络带宽，L为处理器的当前负载率，C_opt为选择的最优压缩率，具体计算公式为：

C_opt＝f(B，L)，其中，f是一个函数，用于根据当前网络带宽B和处理器负载L计算最优压缩率C_opt；

步骤2：应用预设的优化算法来平衡压缩后的数据质量与传输延时，该优化算法利用效用函数，该优化算法的具体公式为：

U(Q，D)＝α×Q-β×D，其中，Q代表压缩后的视频质量，D代表预期的传输延时，α和β是权衡系数，用于调整视频质量与延时的相对重要性；

步骤3：对压缩优化单元与并行编解码单元协同工作，具体通过精确控制数据的处理流程和压缩策略，以最小化处理过程中的能耗，该协同工作通过调整并行处理单元中的活动核心数量和每核心的处理速度，以及压缩率的选择，来适应当前的硬件能力和网络状态，能耗最小化的目标的公式为：

E_min＝min_n,s,c(n×f(s，c))，其中，E_min代表最小化的总能耗，n代表活跃处理核心的数量，s代表每个核心的处理速度，c代表压缩率，f(s，c)是一个函数，表示在给定处理速度和压缩率下，单个处理核心的能耗。

5.根据权利要求4所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述音视频融合模块包括音视频同步处理单元、动态HEVC编解码参数调整单元以及带宽优化处理单元；其中，

音视频同步处理单元：采用预设的音视频同步算法，该音视频同步算法利用音视频数据的时间戳进行同步，确保数据在传输和展示时的同步性，同步过程中，根据时间戳差值调整播放速度或暂时缓冲，以实现严格的同步；

动态HEVC编解码参数调整单元：用于根据实时网络状况动态调整HEVC编解码参数，包括量化参数、帧内预测和帧间预测设置，以适应当前网络条件并保持传输效率，调整过程基于预先确定的关系式：P＝g(B，L)，其中P表示编解码参数集，B为当前能用的网络带宽，L为处理器的当前负载率，函数g根据当前的网络带宽和负载率计算出一组最优编解码参数，以保证在当前网络状况下实现最佳的视频质量与压缩效率平衡；

带宽优化处理单元：采用优化算法动态选择编解码配置和调整数据包大小，以减少传输所需的带宽，同时保证视频质量，优化过程为：C_opt＝h(C，Q，S)，其中，C_opt代表优化后的编解码配置，C代表当前编解码配置，QP代表量化参数，S代表数据包大小，函数h根据当前编解码配置、量化参数和数据包大小确定一个最优配置，以最小化所需带宽。

6.根据权利要求5所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述智能网络适配模块包括网络状态监测单元和传输策略动态调整单元；其中，

网络状态监测单元：用于实时监测当前网络的状况，包括带宽、延迟和丢包率。

传输策略动态调整单元：根据网络状态监测单元提供的实时网络状况信息，动态调整音视频数据的传输策略，包括数据包的大小、编码率和发送频率，以适应当前网络条件，该传输策略动态调整单元具体采用预设的预测模型来预测网络状况的未来变化，并根据预测结果预先调整传输参数。

7.根据权利要求6所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述传输策略动态调整单元采用预设的预测模型来预测网络状况的未来变化，并根据预测结果预先调整传输参数具体包括：

预测模型的定义：传输策略动态调整单元采用一个预设的预测模型来预测网络状况的未来变化，该模型的函数表示为：F(t)＝a·t^b+c，其中，F(t)代表预测的网络状况参数；t代表时间；a、b和c是模型参数，通过历史网络数据分析得出；

根据预测结果预先调整传输参数：基于预测模型F(t)的输出，传输策略动态调整单元采取措施预先调整传输参数，以适应预测的网络状况，调整的传输参数函数表示：G(B_pred,D_pred)＝{P_size,R_freq}，其中，B_pred和D_pred分别是预测的带宽和延时，P_size代表调整后的数据包大小，R_freq代表调整后的数据发送频率。

8.根据权利要求7所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述能效管理调度模块包括能耗监控单元、频率和电压动态调整单元以及模块工作状态控制单元；其中，

能耗监控单元：利用ARM架构内预设的能耗监控工具和传感器，包括内核性能计数器、系统电源管理接口传感器以及能耗监测芯片，通过能耗监控工具和传感器共同工作，提供对ARM处理器的实时能耗监测，内核性能计数器能够监测处理器的工作负载情况，而SPMI传感器和能耗监测芯片则直接测量电流和电压，从而计算出实际能耗；

频率和电压动态调整单元：采用动态电压和频率调整技术，根据能耗监控单元提供的实时工作负载数据和能耗信息，通过算法：V_opt＝f(W,E_target)，动态选择最优的处理器工作频率和电压设置，其中，V_opt代表最优电压设置，W代表当前的工作负载，E_target代表能耗目标，函数f基于处理器的性能-能耗特性曲线，智能地计算出满足能耗目标下的最优电压和频率配置，以优化处理器的能效比；

模块工作状态控制单元：用于根据实时能耗监测数据和性能要求，调整各模块的工作状态，具体调整包括启动节能模式、调整到低功耗待机状态或修改运行频率。

9.根据权利要求8所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述模块工作状态控制单元中调整各模块的工作状态具体包括：

首先，根据能耗监控单元提供的实时数据，连同当前的性能要求，通过分析函数：F(E，P)＝S确定各模块的目标状态S，其中，E代表实时能耗数据，P代表性能要求，S为模块的目标工作状态，包括正常模式、节能模式、低功耗待机状态；

然后，根据分析结果，设定规则以决定模块应处于的工作状态，具体规则如下：

当E>E_max且P低于性能阈值时，则启动节能模式，减少功耗；

当E处于中等水平且P满足最低性能要求，但不需要高性能输出，则调整到低功耗待机状态；

当P需要高性能且E<E_opt，则增加运行频率，以满足性能需求。

10.根据权利要求9所述的一种基于ARM架构的低功耗低延时会议融合终端，其特征在于，所述安全加密处理模块包括加密引擎单元、密钥管理单元以及数据封装单元；其中，

加密引擎单元：置于ARM TrustZone安全环境中，用于对所有传出的音视频数据进行加密，具体利用ARM TrustZone技术提供的安全执行环境，确保加密过程与非安全环境完全隔离，防止未授权访问和数据泄露；

密钥管理单元：在TrustZone安全环境中，用于生成、存储和管理加密密钥，该密钥管理单元具体使用预设的加密标准，通过安全随机数生成器产生加密密钥，并安全地存储在TrustZone的安全存储区域中，以供加密引擎单元使用；

数据封装单元：在加密音视频数据后，用于将加密数据封装成预定传输的格式，该数据封装单元用于确保加密数据的完整性和认证信息一同封装。