【每日一记11】第1天:分布式存储笔记
  

新手925836 2507

{{ttag.title}}
分布式存储的数据类型有以下三类:
非结构化的数据:主要是数据之间的关联系不大,像文本图片之类的数据
结构化的数据:数据之间关联系很大,关系型数据库这种,可以用表进行表示的
半结构化的数据:介于上述两种数据类型之间,数据之间的关系简单,典型的代码是html文件
常见的存储引擎包括以下几种:
Btree存储引擎:B树的持久化实现,支持随机增删改,读取,以及顺序扫描。->分布式数据库
LSM存储引擎:支持随机增删改,读取,以及顺序扫描,它通过批量转存技术将随机写入数据批量顺序写入到磁盘上->广泛用于互联网后台存储系统
B树存储引擎
代表数据库:MongoDB、mysql(基本上关系型数据库)等

还有一种算是B树存储引擎:COLA树(CacheObliviousBTree)
代表数据库:tokudb

为了如何让B树更有效的执行,他们提出了一个缓存忘却CacheOblivious算法,该算法在不需要明确知道存储器层次中数据传输规模的情况下,也可以高效的工作。

说个大家熟悉的名称TokuMX : 目前非常流行的NoSQL数据库MongoDB的底层替换成与TokuDB同样的存储引擎[ ToKuMx],达到了非常好的效 果

LSM树(Log-Structured Merge Tree)存储引擎
日志结构的合并树(LSM-tree)是一种基于硬盘的数据结构,与B-tree相比,能显著地减少硬盘磁盘臂的开销,并能在较长的时间提供对文件的高速插入(删除)。然而LSM-tree在某些情况下,特别是在查询需要快速响应时性能不佳。通常LSM-tree适用于索引插入比检索更频繁的应用系统。Bigtable在提供Tablet服务时,使用GFS来存储日志和SSTable,而GFS的设计初衷就是希望通过添加新数据的方式而不是通过重写旧数据的方式来修改文件。


打赏鼓励作者,期待更多好文!

打赏
1人已打赏

sangfor_闪电回_小六 发表于 2020-10-28 10:45
  
感谢楼主分享,沉淀技术,积累经验!坚持每日一记,赚额外成长收益!累计分享满2天可获得500s豆激励,累计满10天可获得2000s豆激励...
更多累计奖励等你领取哦!继续加油~

写技术笔记,天天领收益!
【每日一记】第12期正在进行中>>
https://bbs.sangfor.com.cn/forum ... read&tid=125761
新手589624 发表于 2020-10-21 08:34
  
了解一下
gqce 发表于 2020-9-25 17:24
  
感谢分享
发表新帖
热门标签
全部标签>
设备维护
有一说一
新版本体验
山东区技术晨报
纪元平台
功能体验
每日一问
虚拟机
安装部署配置
解决方案
排障笔记本
测试报告
标准化排查
授权
技术盲盒
2024年技术争霸赛
问题分析处理
GIF动图学习
原创分享
资源访问
齐鲁TV
云化安全能力
日志审计
每日一记
sangfor周刊
地址转换
「智能机器人」
场景专题
2025年技术争霸赛
信服课堂视频
专家问答
技术圆桌
升级
玩转零信任
升级&主动服务
VMware替换
畅聊IT
上网策略
运维工具
用户认证
信服故事
平台使用
排障那些事
西北区每日一问
高手请过招
高频问题集锦
全能先锋系列
安全效果
产品连连看
安全攻防
华北区交付直播
每周精选
专家说
产品知识周周练
技术笔记
SDP百科
北京区每日一练
故障笔记
社区新周刊
行业实践
流量管理
产品动态
技术顾问
答题自测
在线直播
MVP
VPN 对接
项目案例
存储
产品预警公告
技术争霸赛
追光者计划
2023技术争霸赛专题
技术晨报
关键解决方案
声音值千金
网络基础知识
功能咨询
卧龙计划
华北区拉练
【 社区to talk】
工具体验官
终端接入
迁移
秒懂零信任
POC测试案例
专家分享
S豆商城资讯
天逸直播
SANGFOR资讯
以战代练
文档捉虫
产品解析
产品体验官
热门活动

本版达人

feeling

本周分享达人

新手29676...

本周提问达人