实现存储网关高可用分布式QOS的方法与流程 专利技术说明

电子通信装置的制造及其应用技术实现存储网关高可用分布式qos的方法技术领域1.本发明涉及计算机网络与分布式存储技术，特别是涉及实现存储网关高可用分布式qos的方法。背景技术：2.存储网关存储网关一般指基于存储底层并实现存储协议的存储协议网关，如s3对象网关、nfs存储网关、cifs存储网关等，在一个存储集群中可通常支持多个存储网关节点以保证负载的均衡性。3.高可用集群高可用集群是指以减少服务中断时间为目的服务器集群技术，高可用集群通常由多个节点组成，即使在少数节点掉线或数据损坏的情况下，仍可提供服务。为了实现高可用存储集群，常见的算法有paxos、raft等。4.paxos算法是在多个节点间达成数据一致的一种算法，通常由提议者(proposer)，决策者(acceptor)，和最终决策学习者(learner)组成，并通过3阶段的动作来达成数据的一致性。5.高可用集群cephmon就是基于paxos算法简化而实现的，高可用集群cephmon可在少数节点掉线或数据损坏的情况下，仍继续提供业务服务。6.qosqos（qualityofservice）是指服务质量，在同个存储集群中，存储的资源(如带宽，每秒传输的请求个数tps等)都是共享的，当多个用户访问时，如果个别用户的请求压力特别大，可能会耗尽存储系统的资源，导致其他用户的请求不能及时执行，极大的影响了其他用户的体验，引入qos后，可对个别请求压力大的用户做带宽或tps限制，预留出部分系统资源给其他用户使用，提高其他用户的使用体验。7.当存储集群中存在多个存储网关时，用户请求可从任意的网关发起，故需要qos限制能在多个网关之间协调的执行，这就需要分布式qos的实现。8.cn202010669317.x公开了一种共享宽带限速方法，用于用户前置设备中，所述用户前置设备为分布式设备中的任意一个，所述分布式设备为共享同一个限速带宽且具有不同网络出口的至少两个用户前置设备，所述方法包括：根据初始带宽速率将令牌添加至所述用户前置设备的令牌桶中；每隔预设时间间隔将统计信息报告上报至中心控制器，所述统计信息报告为反映所述令牌桶中令牌的盈余情况或者缺少情况的报告，所述统计信息报告用于指示所述中心控制器通过中央令牌桶对所述用户前置设备的令牌进行再分配，所述中央令牌桶用于维护限速带宽对应的最大盈余值和存储所述限速带宽对应的全网令牌，所述最大盈余值表示所述中央令牌桶在所述限速带宽的限制下能提供的最大令牌数；所述方法还包括：当令牌盈余量为正数时，根据统计信息报告周期和令牌添加速率将所述令牌桶进行重置，所述令牌盈余量为所述用户前置设备的所述令牌桶中盈余或者缺少的令牌数量，所述令牌添加速率为向所述令牌桶里添加令牌的速度，所述统计信息报告周期为所述中心控制器预先配置的时长；当所述令牌盈余量为负数时，接收所述中心控制器的反馈信息，所述反馈信息用于指示奖励的额外令牌；将所述额外令牌分配给指定限速参与设备，所述指定限速参与设备为与所述用户前置设备相连的多个限速参与设备中的至少一个。其缺点有：（1）控制中心不支持高可用，存在单点问题。（2）初始带宽速率由限速带宽和用户前置设备的数量共同决定，当前置设备掉线后，流控将不再准确。（3）当各个前置设备都需要不断和控制中心通信，通信代价比较大。9.cn202010949707.2公开了一种分布式存储中实现服务质量的方法，包括：接收读写操作；检测对象存储网关在本地缓存的令牌个数是否满足所述读写操作所需的令牌个数；在所述本地缓存的令牌个数小于所述读写操作所需的令牌个数的情况下，分别从多个对象存储守护进程获取令牌，更新所述本地缓存的令牌个数；在所述本地缓存的令牌个数大于或者等于所述读写操作所需的令牌个数的情况下，执行所述读写操作。其缺点有：（1）当本地缓存的令牌个数不足时，需从多个对象存储守护进程获取令牌，通信成本比较高。（2）当总令牌充足，但本地缓存的令牌不足时才触发实时更新令牌也会导致该场景下的请求延迟会明显增加。（3）当有存储节点掉线后，qos限制将不再准确。10.需要说明的是，在上述背景技术部分公开的信息仅用于对本技术的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。技术实现要素：11.本发明的主要目的在于克服上述背景技术的缺陷，提供一种实现存储网关高可用分布式qos的方法，使得存储网关系统能实现更良好的qos控制。12.为实现上述目的，本发明采用以下技术方案：一种实现存储网关高可用分布式qos的方法，包括如下步骤：高可用集群记录令牌控制中心的信息，并定期收集、维护各存储网关的状态；基于各存储网关的状态和令牌控制中心的信息，选出一个存储网关负责运行令牌控制中心，令牌控制中心按配置生成令牌；每个存储网关收到用户的请求后，从其本地令牌桶中获取令牌，若令牌不足则等待；每个存储网关间隔性地检测其本地令牌数量，当本地令牌数量小于设定阈值时向令牌控制中心申请令牌；令牌控制中心根据各存储网关近期的需求为各个存储网关按比例分配令牌。13.进一步地：各存储网关通过心跳进行相互监控，当任意存储网关发现其他存储网关不在线时，向高可用集群报告状态，高可用集群重新发布网关状态，基于最新网关状态重新选择运行令牌控制中心的存储网关。14.所述高可用集群重新发布网关状态包括：将所有存储网关的状态信息同步到各存储网关中。15.所述基于最新网关状态重新选择运行令牌控制中心的存储网关包括：用分布式令牌桶的id和所有存储网关的id做hash计算，得到一系列hash值，比较该系列hash值，获取最大hash值所用的存储网关作为运行令牌控制中心的存储网关。16.所述方法还包括：当任意存储网关在近期没有申请令牌时，令牌控制中心删除相应存储网关的令牌申请记录。17.所述方法还包括：当任意存储网关从令牌控制中心申请令牌失败超过一定的次数后，则将按当前时段内能申请到的最大令牌数为相应存储网关的本地令牌桶添加令牌。18.所述各存储网关近期的需求包括每个存储网关近期申请的令牌总数。19.任意存储网关向令牌控制中心申请的令牌数数量等于设定阈值减去本地令牌桶的本地令牌数量。20.当用户的请求发送到存储网关后，先进入请求队列，并且在获取对应数量的令牌后，出队列继续执行该请求。21.一种计算机可读存储介质，存储有计算机程序，所述计算机程序由处理器运行时，执行所述的实现存储网关高可用分布式qos的方法。22.本发明具有如下有益效果：相对于现有的qos方法，本发明提供一种实现存储网关高可用分布式qos的方法，其分布式qos不但能支持高可用，而且能自适应存储节点数的变化，保证qos可持续性和准确性。23.本发明的主要优点体现在：通过一种分布式的qos限制，保证qos限制能在分布式的多个节点的存储网关上全局生效。24.通过高可用集群对存储网关的状态维护和节点分配，有效地保证令牌控制中心主令牌桶的高可用。25.存储网关收到请求后优先从本地令牌中获取令牌，本地令牌桶根据本地令牌数量间隔性地向令牌控制中心申请令牌，能极大减少qos限制对系统负载（包括cpu、网络等负载）和性能带来的影响，并保证qos限制误差。26.进一步地，通过申请令牌的记录及记录超时的机制，并结合按比例申请，能使得各个本地令牌桶都能公平的获取令牌，并且在节点掉线、节点增加、节点空闲时，也能自动调整申请的令牌数，具有良好的可扩展性和公平性。附图说明27.图1为本发明实施例中实现令牌控制中心的高可用的示意图。28.图2为本发明实施例中令牌的使用和申请过程的示意图。29.图3为本发明实施例中为令牌控制中心主令牌桶分配存储网关的示意图。具体实施方式30.以下对本发明的实施方式做详细说明。应该强调的是，下述说明仅仅是示例性的，而不是为了限制本发明的范围及其应用。31.需要说明的是，当元件被称为“固定于”或“设置于”另一个元件，它可以直接在另一个元件上或者间接在该另一个元件上。当一个元件被称为是“连接于”另一个元件，它可以是直接连接到另一个元件或间接连接至该另一个元件上。另外，连接既可以是用于固定作用也可以是用于耦合或连通作用。32.需要理解的是，术语“长度”、“宽度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明实施例和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。33.此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多该特征。在本发明实施例的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。34.存储系统被多方使用时，如果有一方的负载比较大，将会影响其他使用方的体验，通过qos可以限制相关使用方的最大负载，以改进其他使用方的体验。当存储网关分布到多个机器时，使用方的负载会被分配到多个节点上，如果只是在本地做qos限制，那qos的限制偏差会比较大，限制效果不好。本发明通过一种分布式的qos限制，保证qos限制能在多个节点的存储网关上全局生效。35.参阅图1和图2，本发明实施例提供一种实现存储网关高可用分布式qos的方法，包括如下步骤：高可用集群记录令牌控制中心的信息，并定期收集、维护各存储网关的状态；基于各存储网关的状态和令牌控制中心的信息，选出一个存储网关负责运行令牌控制中心，令牌控制中心按配置生成令牌；每个存储网关收到用户的请求后，从其本地令牌桶中获取令牌，若令牌不足则等待；每个存储网关间隔性地检测其本地令牌数量，当本地令牌数量小于设定阈值时，则向令牌控制中心汇报其令牌需求，申请令牌；令牌控制中心根据各存储网关近期的需求为各个存储网关按比例分配令牌。36.参阅图1，在优选的实施例中，各存储网关通过心跳进行相互监控，当任意存储网关发现其他存储网关不在线时，向高可用集群报告状态，高可用集群重新发布网关状态，基于最新网关状态重新选择运行令牌控制中心的存储网关。37.在优选的实施例中，所述高可用集群重新发布网关状态包括：将所有存储网关的状态信息同步到各存储网关中。38.参阅图3，在优选的实施例中，所述基于最新网关状态重新选择运行令牌控制中心的存储网关包括：用分布式令牌桶的id和所有存储网关的id做hash计算，得到一系列hash值，比较该系列hash值，获取最大hash值所用的存储网关作为运行令牌控制中心的存储网关。39.在优选的实施例中，所述方法还包括：当任意存储网关在近期没有申请令牌时，令牌控制中心删除相应存储网关的令牌申请记录。40.在优选的实施例中，所述方法还包括：当任意存储网关从令牌控制中心申请令牌失败超过一定的次数后，则将按当前时段内能申请到的最大令牌数为相应存储网关的本地令牌桶添加令牌。41.在优选的实施例中，所述各存储网关近期的需求包括每个存储网关近期申请的令牌总数。42.在优选的实施例中，任意存储网关向令牌控制中心申请的令牌数数量等于设定阈值减去本地令牌桶的本地令牌数量。43.参阅图2，在优选的实施例中，当用户的请求发送到存储网关后，先进入请求队列，并且在获取对应数量的令牌后，出队列继续执行该请求。44.本发明提供的实现存储网关高可用分布式qos的方法，其分布式qos不但能支持高可用，而且能自适应存储节点数的变化，保证qos限制能在分布式的多个节点的存储网关上全局生效，相比现有的qos方法有效提升qos可持续性和准确性。45.通过高可用集群对存储网关的状态维护和节点分配，有效地保证令牌控制中心主令牌桶的高可用。46.存储网关收到请求后优先从本地令牌中获取令牌，本地令牌桶根据本地令牌数量间隔性地向令牌控制中心申请令牌，能极大减少qos限制对系统负载（包括cpu、网络等负载）和性能带来的影响，并保证qos限制误差。47.此外，通过申请令牌的记录及记录超时的机制，并结合按比例申请，能使得各个本地令牌桶都能公平的获取令牌，并且在节点掉线、节点增加、节点空闲时，也能自动调整申请的令牌数，具有良好的可扩展性和公平性。48.本发明实施例还提供一种计算机可读存储介质，存储有计算机程序，所述计算机程序由处理器运行时，执行所述的实现存储网关高可用分布式qos的方法。49.以下进一步描述本发明具体实施例。50.如图1和图2所示，本发明实施例提供一种实现存储网关高可用分布式qos的方法，该方法中使用一个令牌控制中心（也可称为主令牌桶）和若干个本地令牌桶（也可称为子令牌桶）。高可用集群记录令牌控制中心的信息，并定期收集、维护各存储网关的状态；基于存储网关状态和令牌控制中心信息，选出一个存储网关负责运行令牌控制中心；令牌控制中心按配置不断地生成令牌。当用户的请求发送到存储网关后，每个存储网关执行请求前需从本地令牌桶中获取令牌，如令牌不足则等待。每个存储网关都可在请求到来时运行本地令牌桶，并间隔性检测本地令牌数量，当本地令牌数量小于阈值时则向令牌控制中心汇报令牌需求并申请令牌，而后唤醒等待的请求。令牌控制中心可按配置的速率不断地生成令牌。令牌控制中心记录各个存储网关最近一段时间内（如1秒内）的需求，如存储网关申请的令牌总数，并根据需求为各个存储网关按比例分配已生成的令牌。当有特定存储网关在近期没有申请令牌时，令牌控制中心将删除该存储网关的令牌申请记录。51.在一些实施例中，各存储网关作为网关节点，通过心跳进行相互监控，在心跳超时的时候，向高可用集群报告状态，高可用集群重新发布网关状态，基于最新网关状态重新选择令牌控制中心所属运行的存储网关。52.在一些实施例中，存储网关启动或关闭时都会报告自己的状态到高可用集群。存储网关之间进行心跳检测，当任意存储网关发现其他存储网关不在线时，也将其他存储网关报告给高可用集群。高可用集群会维护存储网关的状态，并将所有存储网关的状态信息同步到各个存储网关中。53.在一些实施例中，当任意存储网关从令牌控制中心申请令牌失败超过一定的次数后，则将按这段时间内能申请到的最大令牌数为本地令牌桶添加令牌。54.在一些实施例中，任意存储网关向令牌控制中心申请的令牌数数量等于阈值减去本地令牌桶当前的本地令牌数量。55.如图2所示，系统包括一个令牌控制中心和若干个本地令牌桶。在一个实施例中，当用户的请求发送到存储网关后，请求会进入请求队列，并且在获取对应数量的令牌后，出队列继续执行。56.在一个实施例中，存储网关定期检测本地令牌数量，当本地令牌数量小于阈值时则向令牌控制中心汇报申请令牌。令牌控制中心记录各个存储网关近期申请令牌数量，并按比例为各个存储网关分配令牌。57.本发明实施例实现分布式qos的方法包括实现令牌控制中心的高可用以及令牌的使用和申请。58.令牌控制中心的高可用参阅图1，令牌控制中心高可用的实现方法具体包括：1，初始化qos时，将控制中心的信息写入到高可用集群中。59.2，存储网关在初始化时将自己注册到高可用集群中，高可用集群将维护存储网关的状态，并存储到网关状态列表中。60.3，存储网关根据网关状态列表建立心跳信息，当心跳超时后会将存储网关掉线的信息通知到高可用集群，并更新网关状态列表。61.4，根据网关状态列表和控制中心的id，计算出控制令牌控制中心运行的存储网关，并通知该网关，该网关将初始化并运行令牌控制中心。62.5，当运行令牌控制中心的存储网关掉线后，高可用集群会检测到其状态，并为令牌控制中心分配新的存储网关以运行令牌控制中心。63.令牌的使用和申请参阅图2，令牌的使用和申请具体包括：1，本地令牌桶初始化后有一定数量的预留令牌。存储网关的请求被执行前，需先获取并消耗本地令牌桶中的令牌，才能执行请求。64.2，当本地令牌桶的令牌数量为零时，则存储网关获取不到令牌，请求只能在请求队列中等待令牌。65.3，当本地令牌桶的令牌数量小于阈值后，则发送令牌申请请求到控制中心。申请的令牌数量是阈值减去本地令牌数量。66.4，当本地令牌的数量大或等于阈值，则不会触发令牌申请。67.5，控制中心会记录近期各个网关申请的令牌总数，并按比例为各个网关分配令牌。68.6，当一个存储网关超过一定时间没有申请令牌时，令牌控制中心会删除该网关的申请记录。69.示例以下将结合高可用集群cephmon和ceph对象网关对本发明具体实施例进行示例性的说明，并示例性地说明对于每秒请求个数（tps）的qos限制。70.令牌控制中心的高可用1，当设置tpsqos限制时，将在cephmon集群中写入令牌控制中心的信息，包括令牌的id，限制的速率，最大的令牌总数等信息，cephmon集群维护令牌控制中心信息。71.2，当ceph对象网关启动时，则将对象网关注册到cephmon集群中，cephmon集群维护对象网关的状态列表。72.3，mon集群将对象网关的状态列表同步到各个对象网关中，对象网关之间建立心跳监控。73.4，mon集群根据对象网关的状态列表和令牌控制中心信息为控制中心选出一个对象网关，并通知所有对象网关，被选中的对象网关运行控制中心，其他对象网关记住控制中心所在的对象网关。74.5，当对象网关（或cephmon）检测到其他心跳存在丢失，并判断该对象网关掉线时，将通知cephmon，cephmon更新对象网关的状态列表。75.6，当掉线的节点是令牌控制中心所在的对象网关时，则会为令牌控制中心选出一个新的对象网关来运行令牌控制中心，并通知到所有对象网关；被选中的对象网关初始化并运行令牌控制中心，其他对象网关更新控制中心所在的对象网关记录。76.优选实施例中，采用抽签算法为主令牌桶分配运行的存储网关。用分布式令牌桶的id和所有存储网关（如图3所示的存储网关1-3，其数量仅仅是示例性的）的id做hash计算，得到一系列hash值，比较该系列hash值，获取最大hash值所用的存储网关作为该分布式令牌桶主令牌桶运行的存储网关。client掉线（或上线，重启等）是相对常见的，采用该抽签算法可减少主令牌桶迁移的数量。77.令牌的申请和使用1，当对象网关收到请求时，判断本地令牌是否有足够的令牌，有则获取令牌并执行请求，否则进入请求队列等待令牌的申请。78.2，对象网关定时查询本地令牌数量是否小于阈值，如本地令牌数量小于阈值，则发送令牌申请请求到令牌控制中心所在的对象网关。如本地令牌数量大于等于阈值，则不发起令牌申请。79.3，令牌控制中心会根据限速配置不断地生成令牌，令牌控制中心接到令牌申请请求后，更新该对象网关的令牌申请记录，并按比例为其分配令牌。80.4，对象网关获取到申请的令牌后，将会唤醒请求队列中的请求，每唤醒一个请求将消耗对应数量的令牌，直到请求队列清空或令牌用完为止。81.5，当任一对象网关有段时间没申请令牌则控制中心会删除该对象网关的申请记录。82.相比于现有的qos方法，本发明实施例提供的实现存储网关高可用分布式qos的方法，其分布式qos不但能支持高可用，而且能自适应存储节点数的变化，保证qos限制能在分布式的多个节点的存储网关上全局生效，保证qos可持续性和准确性。通过高可用集群对存储网关的状态维护和节点分配，有效地保证令牌控制中心主令牌桶的高可用。存储网关收到请求后优先从本地令牌中获取令牌，本地令牌桶根据本地令牌数量间隔性地向令牌控制中心申请令牌，能极大减少qos限制对系统负载（包括cpu、网络等负载）和性能带来的影响，并保证qos限制误差。通过申请令牌的记录及记录超时的机制，并结合按比例申请，能使得各个本地令牌桶都能公平的获取令牌，并且在节点掉线、节点增加、节点空闲时，也能自动调整申请的令牌数，具有良好的可扩展性和公平性。83.本发明实施例还提供一种存储介质，用于存储计算机程序，该计算机程序被执行时至少执行如上所述的方法。84.本发明实施例还提供一种控制装置，包括处理器和用于存储计算机程序的存储介质；其中，处理器用于执行所述计算机程序时至少执行如上所述的方法。85.本发明实施例还提供一种处理器，所述处理器执行计算机程序，至少执行如上所述的方法。86.所述存储介质可以由任何类型的易失性或非易失性存储设备、或者它们的组合来实现。其中，非易失性存储器可以是只读存储器(rom，readonlymemory)、可编程只读存储器(prom，programmableread-onlymemory)、可擦除可编程只读存储器(eprom，erasableprogrammableread-onlymemory)、电可擦除可编程只读存储器(eeprom，electricallyerasableprogrammableread-onlymemory)、磁性随机存取存储器(fram，ferromagneticrandomaccessmemory)、快闪存储器(flashmemory)、磁表面存储器、光盘、或只读光盘(cd-rom，compactdiscread-onlymemory)；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(ram，randomaccessmemory)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的ram可用，例如静态随机存取存储器(sram，staticrandomaccessmemory)、同步静态随机存取存储器(ssram，synchronousstaticrandomaccessmemory)、动态随机存取存储器(dram，dynamicrandomaccessmemory)、同步动态随机存取存储器(sdram，synchronousdynamicrandomaccessmemory)、双倍数据速率同步动态随机存取存储器(ddrsdram，doubledataratesynchronousdynamicrandomaccessmemory)、增强型同步动态随机存取存储器(esdram，enhancedsynchronousdynamicrandomaccessmemory)、同步连接动态随机存取存储器(sldram，synclinkdynamicrandomaccessmemory)、直接内存总线随机存取存储器(drram，directrambusrandomaccessmemory)。本发明实施例描述的存储介质旨在包括但不限于这些和任意其它适合类型的存储器。87.在本发明所提供的几个实施例中，应该理解到，所揭露的系统和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。88.上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。89.另外，在本发明各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。90.本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。91.或者，本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。92.本发明所提供的几个方法实施例中所揭露的方法，在不冲突的情况下可以任意组合，得到新的方法实施例。93.本发明所提供的几个产品实施例中所揭露的特征，在不冲突的情况下可以任意组合，得到新的产品实施例。94.本发明所提供的几个方法或设备实施例中所揭露的特征，在不冲突的情况下可以任意组合，得到新的方法实施例或设备实施例。95.以上内容是结合具体的优选实施方式对本发明所做的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的技术人员来说，在不脱离本发明构思的前提下，还可以做出若干等同替代或明显变型，而且性能或用途相同，都应当视为属于本发明的保护范围。









图片声明：本站部分配图来自人工智能系统AI生成,觅知网授权图片,PxHere摄影无版权图库。本站只作为美观性配图使用,无任何非法侵犯第三方意图,一切解释权归图片著作权方,本站不承担任何责任。如有恶意碰瓷者,必当奉陪到底严惩不贷!




内容声明：本文中引用的各种信息及资料（包括但不限于文字、数据、图表及超链接等）均来源于该信息及资料的相关主体（包括但不限于公司、媒体、协会等机构）的官方网站或公开发表的信息。部分内容参考包括:(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供参考使用,不准确地方联系删除处理！本站为非盈利性质站点,发布内容不收取任何费用也不接任何广告!




免责声明：我们致力于保护作者版权，注重分享，被刊用文章因无法核实真实出处，未能及时与作者取得联系，或有版权异议的，请联系管理员，我们会立即处理，本文部分文字与图片资源来自于网络，部分文章是来自自研大数据AI进行生成,内容摘自(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供学习参考,不准确地方联系删除处理!的,若有来源标注错误或侵犯了您的合法权益，请立即通知我们，情况属实，我们会第一时间予以删除，并同时向您表示歉意,谢谢!