行路中.

replay的iolog解读 有2种可供回放的格式 blkparse的bin文件, 支持的比较多 纯文本的iolog格式, 常用v2和v3 正常使用bin文件的方式如下 采集 12blktrace /dev/sdb1 blkparse sdb1 -d dd.bin >/dev/null replay io 1234fio --direct=1 --read_iolog="... 阅读全文…

背景 目前也算是在分布式存储领域折腾了有一些时间了, 虽然还是比较入门的程度. 偶然又看到在讨论分布式存储与 集中式存储 应用场景的文档, 回想起来, 做个草草的初步思考. 性能评估要注意延时 最早的时候, 我给领导汇报测试数据时, 总是拿着跑bench时只管把depth往上加的最终数据汇报, 只要能看到IOPS上涨, 就继续加. 当时理解为理解为集群的性能是以depth跑满, 比如把集群的... 阅读全文…

以下讨论都是基于存储系统上的, 主要描述的为对块存储进行快照. 根据目前理解, 应用一致性可以粗分为 基于时间点的快照 没有明确的一致性等级支持 支持崩溃一致性的快照(Crash-consistent backup) 应用一致性快照. (Application-consistent backup) (包含内存中pending IO) 包含内存(pending IO)的快照 (存在大... 阅读全文…

背景 主要是针对rbd->openstack相关, 所以cephfs/rgw/dashboard等其他的特性相关的几乎都跳过了. 仅整理了rbd及以下模块, 从luminous以后到pacific为止的. 性能相关 Pacific 16.2.0 RADOS Pacific introduces :ref:bluestore-rocksdb-sharding, which reduce... 阅读全文…

TODO: 找到对应的PR, 从而将口语化难以理解的内容转换为正确的描述. BlueStore V2 - an Evolutionary Step Forward - Adam Kupczyk, IBM & Mark Nelson, Clyso GmbH - YouTube 规划 filestore 在 Pacific 和 Quincy 中被弃用，在 Reef 中被完全移除 blu... 阅读全文…

Ceph Performance Tuning: From Bluestore to RBD - Mark Nelson, Clyso GmbH - YouTube Mark Nelson: Performance / CBT模块成员 推荐性能优化时使用工具 当前性能测试, 60个osd, 450W 随机4K读, 平均75K每个osd. 硬件性能如何很关键, 测试过程中升级驱动解决了nvm... 阅读全文…

背景及初步定位 背景是通过perf捕获ceph-osd的cpu消耗, 发现在下述环节极高. 123--10.64%--PG::_prepare_write_info --10.02%--interval_set<snapid_t, std::map<snapid_t, snapid_t, std::less<snapid_t>, std::allocator<s... 阅读全文…

本地适配最新版hexo 配合action操作 修改action 12git push origin --tags 或者直接找相对路径 Workflow syntax for GitHub Actions - GitHub Docs 处理成功之后, 相对还是比较简单的? 当前版本包 123456789101112131415161718192021"hexo": "... 阅读全文…

问题背景 写本文的背景, 主要来源于项目开发过程中的一些问题, 属于是十分影响进度的那类. 联调期间发现一些与约定接口文档不同问题, 导致存在的重新联调. 变更比例相对较大. 业务的开发/调试需要等待平台上游功能开发完. 如OS组和集群组的平台功能完毕后, 依赖这俩部分提供的基础系统与数据库的业务组件方能开工. 这部分过程中, 其他组其实无法投入这部分的开发. 但是联调又基本就是同一... 阅读全文…

理解 markdown是有对应的标准的. 似乎这篇可以参考? 下面todo中提到的一些list的识别场景, 其实这篇spec有做一定的边界澄清? CommonMark Spec 中文版CommonMark Spec 单元测试 TODO:针对vscode渲染后的页面, 如何进行单元测试感知? html的识别? TODO:针对vscode提供的API, 如何验证其渲染效果? Issue 搜索, ... 阅读全文…