JavaShuo
栏目
标签
基于Azure Blob冷存储的数据压缩备份总结
时间 2020-12-22
原文
原文链接
基于上一篇的压缩算法对比分析报告,选择了LZ4算法的普通模式,其测试压缩率为28%,20G压缩时间为256s,估计1T的冷备时间为3.5h。 接下来,将23T的HBase历史数据进行了压缩冷备,压缩后大小为3.5T,冷备耗时311h。实际压缩率为15%,平均1T的冷备时间为13h,这与测试结论有出入,压缩率与文件内容相关,时间可能与存储账号、运行环境有关,具体原因待查。 以下是冷备总结报告。
>>阅读原文<<
相关文章
1.
将数据库备份到AZURE blob storage
2.
C# Azure 存储-Blob
3.
如果不压缩和备份etcd的数据会怎样?k8s数据存储
4.
Azure Blob存储简介
5.
使用Azure Blob存储
6.
hive压缩及存储总结
7.
azure跨域问题(访问azure存储帐户数据,blob)
8.
数据表的冷备份
9.
大数据的压缩与存储
10.
Mysql的冷备热备(数据备份)
更多相关文章...
•
MySQL数据库备份(INTO OUTFILE)
-
MySQL教程
•
TiDB数据库的存储原理(非常详细)
-
NoSQL教程
•
Flink 数据传输及反压详解
•
☆基于Java Instrument的Agent实现
相关标签/搜索
数据压缩
Andorid数据存储
数据库备份
压缩
储备
储存
存储
备份
blob
数据结构总结1
Redis教程
MyBatis教程
NoSQL教程
存储
数据传输
数据库
0
分享到微博
分享到微信
分享到QQ
每日一句
每一个你不满意的现在,都有一个你没有努力的曾经。
最新文章
1.
正确理解商业智能 BI 的价值所在
2.
解决梯度消失梯度爆炸强力推荐的一个算法-----LSTM(长短时记忆神经网络)
3.
解决梯度消失梯度爆炸强力推荐的一个算法-----GRU(门控循环神经⽹络)
4.
HDU4565
5.
算概率投硬币
6.
密码算法特性
7.
DICOMRT-DiTools:clouddicom源码解析(1)
8.
HDU-6128
9.
计算机网络知识点详解(持续更新...)
10.
hods2896(AC自动机)
本站公众号
欢迎关注本站公众号,获取更多信息
相关文章
1.
将数据库备份到AZURE blob storage
2.
C# Azure 存储-Blob
3.
如果不压缩和备份etcd的数据会怎样?k8s数据存储
4.
Azure Blob存储简介
5.
使用Azure Blob存储
6.
hive压缩及存储总结
7.
azure跨域问题(访问azure存储帐户数据,blob)
8.
数据表的冷备份
9.
大数据的压缩与存储
10.
Mysql的冷备热备(数据备份)
>>更多相关文章<<