数据归档清理服务使用指南,帮你告别存储烦恼

栏目:云苍穹知识作者:金蝶来源:金蝶云社区发布:2024-09-23浏览:1

数据归档清理服务使用指南,帮你告别存储烦恼

你是否在为记录型数据快速增长造成存储空间膨胀而烦恼?


你是否因手工清理过期数据而消耗大量时间?


小编给大家安利一个非常好用的清理过期数据的解决方案:数据归档清除服务。随我往下详细了解数据归档清除服务的使用方法吧~


适用版本

金蝶云·苍穹V5.0.025及以上


功能简介

随着系统使用时间的累积,部分单据累积的数据量巨大,对应的表存储过大,导致系统性能下降。对于记录型场景的数据,在业务已经处理完成后,可通过苍穹提供的数据归档清除功能把过期/失效的数据从当前库表中删除。


功能详情

配置开关


通过配置MC参数archive.enable=true,发布后重启苍穹集群开启归档引擎,开启后即可使用数据归档清除服务。


注:苍穹中归档引擎默认是关闭的。


使用指南


数据归档清除服务功能菜单入口为:

V5.0版本:【系统服务云】→【配置工具】→【数据归档】;

V6.0版本:【系统服务云】→【分布式管理】→【数据归档】。

归档清除配置通过以下三个菜单进行配置:

  • 可归档单据范围:新增需要归档清除的单据;

  • 单据清除规则:配置数据清除的抽取条件规则;

  • 清除调度计划:定义清除规则执行的时间计划。


上传图片



接下来详细介绍每个菜单的配置方法。


一、可归档单据范围


该菜单用于新增需要归档清除的单据(单据清除规则中需要操作的单据,需要提前在这里添加)。

1) 允许被归档转储:数据迁移到另一个库表中;

2) 允许被归档清除:将数据从当前库表中删除。


上传图片


二、单据清除规则


该菜单用于配置归档清除单据的数据抽取条件规则。


上传图片


1) 除单据:需要归档清除的单据。

2) 条件类型:

单据:单据的存储类型为数据库时,通过单据头的部分属性进行抽取条件设置;单据的存储类型为Elasticsearch时,通过Elasticsearch索引字段进行抽取条件设置。



自定义:以上条件设置不满足时,用户自定义,配置类路径关联,参考自定义条件注册插件。


三、清除调度计划


该菜单用于配置清除规则的执行计划。


1) 执行计划主要关注开始时间、失效时间重复时间单位:


2)每个执行计划可执行一条或多条清除规则,可按执行频率时间规划每个调度需要执行的清除规则。


为了监控归档任务状态,数据归档清除服务还提供了【调度任务】和【任务日志】两个菜单:


【调度任务】:用于查看调度计划生成的数据清除任务,后台迁移服务执行清除任务,完成数据的归档清除。


任务日志】:记录每次数据清除操作日志,可用于查询过程中出现的异常信息。


划重点


苍穹数据归档清除服务可自动把过期/失效的数据从当前库表中删除,释放存储空间,提升系统性能。使用方法如下:

首先,梳理环境中的记录型单据,然后制定合理的清除规则与执行计划,达到定期清除过期数据的效果,将人工清理过期数据的过程自动化,从而解决记录型单据数据累积带来的存储性能问题,保证了系统的稳定可靠。



#往期推荐#

# 大表冷热数据分离 之 数据归档

实践案例 | 异构系统间千万级水平分表数据高效同步

苍穹大表治理 之 水平分表

实践案例 | 水平分表,保障在线大数据存储性能的好帮手


更多精彩内容,“码”上了解!↓

上传图片


数据归档清理服务使用指南,帮你告别存储烦恼

你是否在为记录型数据快速增长造成存储空间膨胀而烦恼?你是否因手工清理过期数据而消耗大量时间?小编给大家安利一个非常好用的清理过期数...
点击下载文档
确认删除?
回到顶部
客服QQ
  • 客服QQ点击这里给我发消息