行路中.

背景 在使用12.2.1版本时, 发现经常会出现需要10+秒才能返回ceph -s的现象, 偶尔又1s内就返回了. 排查 首先, time ceph -s --debug_monc 40 --debug_ms 40看下详细日志有没有记录在哪呢? 看了下, 应该是在跟mon通信过程, 但是好像不知道发生了什么. 咨询了一下大神给了个关键词, objecter, 打开debug后看到一部分内容了... 阅读全文…

背景 这个问题其实之前遇到的还挺多的, 简单来说, 就是某个A服务启动B服务, 但是B服务又必须等待另一个服务启动完毕(比如A服务), 产生了一定的死锁. 而在ps的进程表中看到的就是systemd-tty-ask-password-agent这样一个agent进程卡住. 一般查一下当前卡住的service和他依赖的after,before的几个服务, 就知道了, 一般就是循环死锁了. 具体... 阅读全文…

向量时钟 vector clock 可能有人会有疑问：向量时钟到底有什么用呢？举一个常见的工程应用：数据冲突检测。分布式系统中数据一般存在多个副本，多个副本可能被同时更新，这会引起副本间数据不一致，此时冲突检测就非常重要。基于向量时钟我们可以获得任意两个事件的顺序关系，结果要么是有因果关系（先后顺序），要么是没有因果关系（同时发生）。通过向量时钟，我们能够识别到如果两个数据更新操作是同时发... 阅读全文…

背景 在看到这篇论文之前, 我所知道的只是linux上自带的时间戳和ntp协议, 以及内核里有一个每次开机启动时开始记录的monotonic clock可以用来保障时间一定是连续的. 但是对于分布式设备之间怎么判断互相的时间先后性, 这块是未知的. 比如针对leader节点发送一次自己的认证失效时间, 假如自己的物理时间戳比那个时间还早, 但真实世界的时间戳已经超期了, 到底是按失效还是有... 阅读全文…

DistCache: Provable Load Balancing for LargeScale Storage Systems with Distributed Caching[^1] Small Cache解决的Ball into bins 问题 Balls into bins 问题讲的是如果有 M 个小球随机等概率地扔进 N 个垃圾桶, 那么装球最多的那个垃圾桶大概率会有多少个球?... 阅读全文…

论文 可扩展弱一致性感染型进程组成员协议 进程组的成员关系协议 可伸缩性 弱一致性 感染性 用于分布式系统中进程的健康检测或者说错误检测 SWIM是通过Gossip实现的Membership保持协议，也就是维护分布式系统节点的状态 成员资格协议 成员资格协议的可伸缩型和执行效率主要由以下几个方面确定： 完备性：是不是每个失效的进程最终都能够检测到？ 失效节点的检测速度：一个节点失... 阅读全文…

arch安装实验 1pacman -Syy ceph 安装完发生了一个奇怪的问题, ceph -v执行报缺rados库, python3-rados装到了python3.9的site-package里, 但是我设备里pacman目前只装了python3.8, 这个的包里没有看到这个库 执行了pacman -Syy python升级到3.9, 可以用了, 升级过程中python3.9的库里少了... 阅读全文…

理解 大家最受影响的就是一半时间开发, 一半时间运维的这个问题. 利用一个成熟的配置文件, 快速部署起自己需要的环境, 而不是一步步通过页面控制点击, 这是一个很省力的事情. 将运维中与部署相关的事情通过一些成熟的模板化的配置文件来提供, 最好不过了. ansible比较大的几个优点 由于是开源框架, 基于ansible的针对其他开源软件的配套代价较多 比如集成钉钉等 配置文件化管理部... 阅读全文…

支持 类似typora的所见即所得插件支持 即时渲染 有一些unote之类的web editor嵌入到vscode中打开, 这样的话也算是实现了一个所见即所得的编辑器, 不过不是基于Vscode的倒是了. 不过这种情况下有些vscode配置的快捷键应该还是可以用的. 目前基于markless自己维护了一个markless_sean10. 暂时用起来还是不错的. 同义词模糊搜索功能(fuz... 阅读全文…

todo(未理解的问题) 既然作为一个规范文档, 那么引导的example肯定得提供吧? 提供了之后, 那为什么不能多几个example? 直接做成支持测试框架的呢? 虽然现在测试框架的确支持导入openAPI的文档, 但是这些测试框架中需要用的参数数据是另外填写的, 为什么openAPI不集成在里面呢? 一个初步的结论: OpenAPI只做规范特定领域的事情, 单元测试及更进一步的测试... 阅读全文…