一种节点扩容方法、系统、终端及存储介质与流程

    专利2022-07-08  72


    本发明属于集群存储技术领域,具体涉及一种节点扩容方法、系统、终端及存储介质。



    背景技术:

    存储集群在使用过程中由于业务扩展可能会导致资源不足,此时就需要使用节点扩容功能在不影响业务的增加集群容量。当前节点扩容主流做法是将扩入的节点磁盘做成osd,放入集群某个固定的crushmap结构下,而不是直接扩入存储池中。用户在完成节点扩容操作后还需要使用存储池扩容功能将新扩入的资源再次扩容入存储池中,从而达到扩容的目的。此种方式的弊端是由于一般情况下节点扩容操作会扩入ssd磁盘和hdd磁盘各若干个,两种磁盘一般不会放入同一种存储池中混用,导致完成节点扩容操作后还需要再执行两次以上的存储池扩容操作才能真正把节点资源用起来,操作十分繁琐。



    技术实现要素:

    针对现有技术的上述不足,本发明提供一种节点扩容方法、系统、终端及存储介质,以解决上述技术问题。

    第一方面,本发明提供一种节点扩容方法,包括:

    根据用户输入的待扩容节点ip地址来获取待扩容节点信息;

    根据所述待扩容节点信息和集群配置信息生成分盘方案;

    根据所述分盘方案选择磁盘自动分配集群资源;

    将选择的磁盘做成对象存储,并放入所述待扩容节点中完成扩容。

    进一步的,所述待扩容节点信息包括磁盘数量及大小、硬盘数量及大小。

    进一步的,所述方法还包括:

    执行元数据分离盘的选盘操作,设置元数据分离盘均用作元数据盘使用,并设置用户选择将资源分配至元数据池中或者不分配;

    执行非元数据分离盘的选盘操作,设置用户选择将资源分配至数据池中或者不分配,若选择分配入数据池中,则设置选择待扩容的存储池;

    执行分级盘的选盘操作,若对象存储仅存在一个分级池,设置用户选择是否将资源分配至分级池中。

    进一步的,在所述自动分配集群资源时,设置手动分配接口。

    第二方面,本发明提供一种节点扩容系统,包括:

    信息获取单元,配置用于根据用户输入的待扩容节点ip地址来获取待扩容节点信息;

    方案生成单元,配置用于根据所述待扩容节点信息和集群配置信息生成分盘方案;

    资源分配单元,配置用于根据所述分盘方案选择磁盘自动分配集群资源;

    扩容执行单元,配置用于将选择的磁盘做成对象存储,并放入所述待扩容节点中完成扩容。

    第三方面,提供一种终端,包括:

    处理器、存储器,其中,

    该存储器用于存储计算机程序,

    该处理器用于从存储器中调用并运行该计算机程序,使得终端执行上述的终端的方法。

    第四方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述各方面所述的方法。

    本发明的有益效果在于,

    本发明提供的一种节点扩容方法、系统、终端及存储介质,本发明采用由用户添加节点之后集群自动获取原有节点配置,根据原有配置自动设置新增节点,省去了由用户自己手动配置磁盘分区、指定元数据分离盘、配置对象存储等一系列复杂操作。同时支持在扩容时选择存储池,可以将待扩容节点资源直接扩入存储池中,省去了存储池扩容的操作,使扩容的操作更加便捷可靠。

    此外,本发明设计原理可靠,结构简单,具有非常广泛的应用前景。

    附图说明

    为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

    图1是本发明一个实施例的方法的示意性流程图。

    图2是本发明一个实施例的方法的输入待扩容ip地址页面图。

    图3是本发明一个实施例的方法的ssd分区设置页面图。

    图4是本发明一个实施例的方法的元数据分离盘选盘页面。

    图5是本发明一个实施例的方法的非元数据分离盘选盘页面。

    图6是本发明一个实施例的方法的分机盘选盘页面。

    图7为本发明实施例提供的一种终端的结构示意图。

    具体实施方式

    为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。

    下面对本发明中出现的关键术语进行解释。

    图1是本发明一个实施例的方法的示意性流程图。其中,图1执行主体可以为一种节点扩容系统。

    具体的,所述一种节点扩容方法包括:

    步骤1.如图2所示,扩容界面输入待扩容节点ip地址,管理软件会根据该ip地址查找节点并获取节点的资源信息,包括ssd盘数量及大小、hdd盘数量及大小;

    步骤2.根据步骤1获取的节点信息以及集群当前的配置信息计算分盘方案;

    步骤3.如图2所示,ssd分盘,根据步骤2生成的分盘方案,自动分配当前的ssd资源,使ssd资源能够充分被利用,达到优化性能的目的;同时为运维人员提供修改接口,解决特殊场景下自动分配可能出现的不合理分配的问题;

    步骤4.如图4所示,元数据分离盘选盘,由于当前业务要求,元数据分离盘均用作元数据盘使用,该步骤中用户可以选择将资源分配至元数据池中或者不分配;

    步骤5.如图5所示,非元数据分离盘选盘,在该步骤中用户需要选择将资源分配至数据池中或者不分配,如果选择分配入数据池中,则需要选择待扩容的存储池;

    6.如图6所示,分级盘选盘,当前对象存储仅存在一个分级池,用户只需要选择是否将资源分配至分级池中;

    7.执行扩容,将上述步骤中选择的磁盘做成osd,然后根据分配方案和用户选择情况将osd放入指定crushmap结构下,完成节点扩容和存储池扩容。

    如图2示,该系统200包括:

    信息获取单元,配置用于根据用户输入的待扩容节点ip地址来获取待扩容节点信息;

    方案生成单元,配置用于根据所述待扩容节点信息和集群配置信息生成分盘方案;

    资源分配单元,配置用于根据所述分盘方案选择磁盘自动分配集群资源;

    扩容执行单元,配置用于将选择的磁盘做成对象存储,并放入所述待扩容节点中完成扩容。

    图3为本发明实施例提供的一种终端系统300的结构示意图,该终端系统300可以用于执行本发明实施例提供的一种节点扩容方法。

    其中,该终端系统300可以包括:处理器310、存储器320及通信单元330。这些组件通过一条或多条总线进行通信,本领域技术人员可以理解,图中示出的服务器的结构并不构成对本发明的限定,它既可以是总线形结构,也可以是星型结构,还可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。

    其中,该存储器320可以用于存储处理器310的执行指令,存储器320可以由任何类型的易失性或非易失性存储终端或者它们的组合实现,如静态随机存取存储器(sram),电可擦除可编程只读存储器(eeprom),可擦除可编程只读存储器(eprom),可编程只读存储器(prom),只读存储器(rom),磁存储器,快闪存储器,磁盘或光盘。当存储器320中的执行指令由处理器310执行时,使得终端300能够执行以下上述方法实施例中的部分或全部步骤。

    处理器310为存储终端的控制中心,利用各种接口和线路连接整个电子终端的各个部分,通过运行或执行存储在存储器320内的软件程序和/或模块,以及调用存储在存储器内的数据,以执行电子终端的各种功能和/或处理数据。所述处理器可以由集成电路(integratedcircuit,简称ic)组成,例如可以由单颗封装的ic所组成,也可以由连接多颗相同功能或不同功能的封装ic而组成。举例来说,处理器310可以仅包括中央处理器(centralprocessingunit,简称cpu)。在本发明实施方式中,cpu可以是单运算核心,也可以包括多运算核心。

    通信单元330,用于建立通信信道,从而使所述存储终端可以与其它终端进行通信。接收其他终端发送的用户数据或者向其他终端发送用户数据。

    本发明还提供一种计算机存储介质,其中,该计算机存储介质可存储有程序,该程序执行时可包括本发明提供的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文:read-onlymemory,简称:rom)或随机存储记忆体(英文:randomaccessmemory,简称:ram)等。

    因此,本发明根据集群已有节点的配置,通过算法计算出分盘策略,并且支持在节点扩容中选择存储池,直接将资源扩容入存储池中,大幅节省运维人员执行扩容所需要的时间,提高了管理软件的易用性。本实施例所能达到的技术效果可以参见上文中的描述,此处不再赘述。

    本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中如u盘、移动硬盘、只读存储器(rom,read-onlymemory)、随机存取存储器(ram,randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质,包括若干指令用以使得一台计算机终端(可以是个人计算机,服务器,或者第二终端、网络终端等)执行本发明各个实施例所述方法的全部或部分步骤。

    本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于终端实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。

    在本发明所提供的几个实施例中,应该理解到,所揭露的系统、系统和方法,可以通过其它的方式实现。例如,以上所描述的系统实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,系统或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。

    所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

    另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。

    尽管通过参考附图并结合优选实施例的方式对本发明进行了详细描述,但本发明并不限于此。在不脱离本发明的精神和实质的前提下,本领域普通技术人员可以对本发明的实施例进行各种等效的修改或替换,而这些修改或替换都应在本发明的涵盖范围内/任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。


    技术特征:

    1.一种节点扩容方法,其特征在于,包括:

    根据用户输入的待扩容节点ip地址来获取待扩容节点信息;

    根据所述待扩容节点信息和集群配置信息生成分盘方案;

    根据所述分盘方案选择磁盘自动分配集群资源;

    将选择的磁盘做成对象存储,并放入所述待扩容节点中完成扩容。

    2.根据权利要求1所述的一种节点扩容方法,其特征在于,所述待扩容节点信息包括磁盘数量及大小、硬盘数量及大小。

    3.根据权利要求1所述的一种节点扩容方法,其特征在于,所述方法还包括:

    执行元数据分离盘的选盘操作,设置元数据分离盘均用作元数据盘使用,并设置用户选择将资源分配至元数据池中或者不分配;

    执行非元数据分离盘的选盘操作,设置用户选择将资源分配至数据池中或者不分配,若选择分配入数据池中,则设置选择待扩容的存储池;

    执行分级盘的选盘操作,若对象存储仅存在一个分级池,设置用户选择是否将资源分配至分级池中。

    4.根据权利要求1所述的一种节点扩容方法,其特征在于,在所述自动分配集群资源时,设置手动分配接口。

    5.一种节点扩容系统,其特征在于,包括:

    信息获取单元,配置用于根据用户输入的待扩容节点ip地址来获取待扩容节点信息;

    方案生成单元,配置用于根据所述待扩容节点信息和集群配置信息生成分盘方案;

    资源分配单元,配置用于根据所述分盘方案选择磁盘自动分配集群资源;

    扩容执行单元,配置用于将选择的磁盘做成对象存储,并放入所述待扩容节点中完成扩容。

    6.一种终端,其特征在于,包括:

    处理器;

    用于存储处理器的执行指令的存储器;

    其中,所述处理器被配置为执行权利要求1-4任一项所述的方法。

    7.一种存储有计算机程序的计算机可读存储介质,其特征在于,该程序被处理器执行时实现如权利要求1-4中任一项所述的方法。

    技术总结
    本发明提供一种节点扩容方法、系统、终端及存储介质,包括:根据用户输入的待扩容节点IP地址来获取待扩容节点信息;根据所述待扩容节点信息和集群配置信息生成分盘方案;根据所述分盘方案选择磁盘自动分配集群资源;将选择的磁盘做成对象存储,并放入所述待扩容节点中完成扩容。本发明采用由用户添加节点之后集群自动获取原有节点配置,根据原有配置自动设置新增节点,省去了由用户自己手动配置磁盘分区、指定元数据分离盘、配置对象存储等一系列复杂操作。

    技术研发人员:孙凤超
    受保护的技术使用者:苏州浪潮智能科技有限公司
    技术研发日:2020.10.23
    技术公布日:2021.03.12

    转载请注明原文地址:https://wp.8miu.com/read-22977.html

    最新回复(0)