随着商家业务的快速发展,每天不断增长的数据导致ISV数据存储成本越来越高,应用系统处理效率越来越慢,ISV往往需要投入额外的成本来管理商家数据的完整性。而聚石塔在云计算基础上提供了低成本、高存储的历史数据库,将业务数据库中的历史数据迁移到历史库,降低商家对数据的总体拥有成本。
历史数据库服务(History Database Sevice,简称:HDS)是聚石塔基于低成本打造的分布式历史数据存储服务,历史数据库提供数据备份、数据扩容、数据迁移等功能,采用TOKUDB存储引擎支持多种数据压缩算法,有效节省ISV对数据的存储成本。
某服务商把CRM应用SAAS化部署在聚石塔ECS集群上,将店铺绩效、客服绩效、店铺工作量、客服工作量等历史数据迁移到历史数据库(HDS),减少RDS业务库的历史数据存储,提升应用系统查询效率.
根据该服务商应用业务场景将RDS实例中业务库的历史数据迁移到HDS实例,即业务DB与HDS历史数据DB做一一对应迁移系统架构保持不变。
RDS与HDS之间的数据迁移通过迁移脚本定时在每周末业务低峰期进行;
项目 |
改造任务 |
任务详情 |
人员投入 |
工作周期 |
HDS |
历史数据初始导入 |
数据迁移涉及21张表 |
4人 |
25天 |
历史库近期数据删除 |
||||
历史数据增量导入 |
||||
RDS业务库数据删除 |
||||
历史库数据归档 |
||||
应用查询改造 |
涉及67个业务功能查询 |
|||
联调测试 |
改造查询及数据迁移测试 |
1人 |
10天 |
历史数据库(HDS)采用TOKUDB存储引擎加SATA盘提供低成本、高存储的历史数据库,数据压缩率是RDS的3倍,并且数据存储成本相比同等容量的RDS价格降低了83%.
云产品 |
容量 |
价格 |
数据压缩率 |
航母型RDS |
1000G |
59470元/年 |
1:1 |
大型HDS |
1000G |
10600元/年 |
1:3 |
改造前RDS业务库店铺总绩效实时查询耗时414ms,将商家9个月后的历史数据迁移到历史数据库(HDS),业务库查询性能提升31%;
历史数据迁移前后查询效率对比
产品咨询:牧绅