一种基于分布式文件系统的配置异步预分配实现方法

阅读: 评论:0

著录项
  • CN201811444653.3
  • 20181129
  • CN109284274A
  • 20190129
  • 郑州云海信息技术有限公司
  • 苏志恒
  • G06/F16182
  • G06/F16182 G06/F16178 H04/L2908

  • 河南省郑州市郑东新区心怡路278号16层1601室
  • 河南(41)
摘要
本发明公开了一种基于分布式文件系统的配置异步预分配实现方法,包括以下步骤:利用权限管理消息进行配额预申请;具体如下:写数据完成后更新权限时,若配额预申请值剩余量小于预设值的1/2时,本次预申请值附加到权限消息中;发送异步消息到元数据端后持续写入数据;客户端收到回复后,解析出预申请的配额值PRE_VALUE,并更新到客户端配额预申请值剩余量字段中;数据写入成功后,从预申请值中扣除本次新增值。本发明公开的基于分布式文件系统的配置异步预分配实现方法,减少了客户端与元数据的交互,提高元数据吞吐量,提升带有配额的写性能。
权利要求

1.一种基于分布式文件系统的配置异步预分配实现方法,其特征在于,包括以下步骤:利用权限管理消息进行配额预申请;具体如下:

写数据完成后更新权限时,若配额预申请值剩余量小于预设值的1/2时,本次预申请值附加到权限消息中;

发送异步消息到元数据端后持续写入数据;

客户端收到回复后,解析出预申请的配额值PRE_VALUE,并更新到客户端配额预申请值剩余量字段中;

数据写入成功后,从预申请值中扣除本次新增值。

2.根据权利要求1所述的基于分布式文件系统的配置异步预分配实现方法,其特征在于,还包括以下步骤:

数据写入成功达到预设时间后,没有数据增加时,把剩余的预申请值归还给元数据端。

3.根据权利要求2所述的基于分布式文件系统的配置异步预分配实现方法,其特征在于,还包括以下步骤:

若有数据持续写入,则重复步骤:利用权限管理消息进行配额预申请,直至配额值为0。

4.根据权利要求1所述的基于分布式文件系统的配置异步预分配实现方法,其特征在于,采用在元数据进行配额的细粒度划分和管理。

5.根据权利要求4所述的基于分布式文件系统的配置异步预分配实现方法,其特征在于,采用在元数据进行配额的细粒度划分和管理,具体方式为:

接收到到客户端权限更新请求后,授权客户端所需权限;

检查用户配额剩余值与本次申请值,有剩余直接分配,否则把剩余值分配给客户端;若配额剩余值为0,则直接把错误码赋值给申请值;

把分配值附加到权限消息中回复给客户端;

当收到客户端归还配额预申请值时,把归还值加到配额剩余值中,回复客户端。

说明书
技术领域

本发明涉及存储技术领域,尤其涉及一种基于分布式文件系统的配置异步预分配实现方法。

用户场景中设置完目录配额后,在新增数据的过程中,已实现了配额同步预申请功能加快写性能,但当客户端配额预申请值剩余量较少时,需要发送消息到元数据端申请配额预申请值,由于是同步消息,需要等待元数据端处理完成并成功返回后客户端才能进行新增数据操作,影响了写性能,目前还没有一种方案解决因等待配额申请对写性能的影响。因此,需要一种提前申请配额预申请值的异步处理方式,是配额预申请值维持在一定量,大大减少因同步申请,放大对写性能的影响。

基于上述问题,因此,对于本领域技术人员而言,如何减少客户端因等待配额申请而阻塞写操作的问题,是亟需解决的技术问题。

基于背景技术存在的技术问题,本发明提出了一种基于分布式文件系统的配置异步预分配实现方法,通过在一次写操作完成后进行权限更新时,若配额预申请剩余值小于一定量后,在权限更新消息中附带定量的配额预申请值,达到提前申请配额预申请值,减少因同步申请导致写阻塞的问题,弱化因配额预申请处理影响写性能,增加系统吞吐量,提升在开启配额功能下的写性能。

本发明提出的一种基于分布式文件系统的配置异步预分配实现方法,包括以下步骤:利用权限管理消息进行配额预申请;具体如下:

写数据完成后更新权限时,若配额预申请值剩余量小于预设值的1/2时,本次预申请值附加到权限消息中;

发送异步消息到元数据端后持续写入数据;

客户端收到回复后,解析出预申请的配额值PRE_VALUE,并更新到客户端配额预申请值剩余量字段中;

数据写入成功后,从预申请值中扣除本次新增值。

优选地,还包括以下步骤:

数据写入成功达到预设时间后,没有数据增加时,把剩余的预申请值归还给元数据端。

优选地,还包括以下步骤:

若有数据持续写入,则重复步骤:利用权限管理消息进行配额预申请,直至配额值为0。

优选地,采用在元数据进行配额的细粒度划分和管理。

优选地,采用在元数据进行配额的细粒度划分和管理,具体方式为:

接收到到客户端权限更新请求后,授权客户端所需权限;

检查用户配额剩余值与本次申请值,有剩余直接分配,否则把剩余值分配给客户端;若配额剩余值为0,则直接把错误码赋值给申请值;

把分配值附加到权限消息中回复给客户端;

当收到客户端归还配额预申请值时,把归还值加到配额剩余值中,回复客户端。

本发明中提供的一种基于分布式文件系统的配置异步预分配实现方法,利用分布式系统的权限管理功能实现基于目录的配额异步预申请功能,在一次写操作完成后进行权限更新时,若配额预申请剩余值小于一定量后,在权限释放消息中附带定量的配额预申请值,达到提前申请配额预申请值,减少因同步申请导致写阻塞的问题,弱化因配额预申请处理影响写性能,增加系统吞吐量,提升在开启配额功能下的写性能;元数据在更新权限的同时进行配额值分配,不仅减少了客户端与元数据的交互,提高元数据吞吐量,而且使客户端只需等待少量的配额预申请处理,提升带有配额的写性能。

图1为本发明提出的一种基于分布式文件系统的配置异步预分配实现方法的流程图。

如图1所示,图1为本发明提出的一种基于分布式文件系统的配置异步预分配实现方法的流程图。

下面结合附图和实施例对本发明进行详细的描述。

一种基于分布式文件系统的配置异步预分配实现方法,包括以下步骤:

S1:写数据完成后更新权限时,若配额预申请值剩余量小于预设值的1/2时,本次预申请值附加到权限消息中;

S2:发送异步消息到元数据端后持续写入数据;

S3:客户端收到回复后,解析出预申请的配额值PRE_VALUE,并更新到客户端配额预申请值剩余量字段中;

S4:数据写入成功后,从预申请值中扣除本次新增值;

S5:数据写入成功达到预设时间后,没有数据增加时,把剩余的预申请值归还给元数据端;

S6:若有数据持续写入,则重复步骤S1至S5,直至配额值为0。

进一步优化的技术方案中,采用在元数据进行配额的细粒度划分和管理。

其中,采用在元数据进行配额的细粒度划分和管理,具体方式为:

S21:接收到到客户端权限更新请求后,授权客户端所需权限;

S22:检查用户配额剩余值与本次申请值,有剩余直接分配,否则把剩余值分配给客户端;若配额剩余值为0,则直接把错误码赋值给申请值;

S23:把分配值附加到权限消息中回复给客户端;

S24:当收到客户端归还配额预申请值时,把归还值加到配额剩余值中,回复客户端。

以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,根据本发明的技术方案及其发明构思加以等同替换或改变,都应涵盖在本发明的保护范围之内。

本文发布于:2023-04-13 13:39:26,感谢您对本站的认可!

本文链接:https://patent.en369.cn/patent/3/86045.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2022 Comsenz Inc.Powered by © 369专利查询检索平台 豫ICP备2021025688号-20 网站地图