请教下 btrfs 搭配 bcache 的问题

79 天前
 kyonn

搜索了下, 发现必须把原有机械硬盘和 ssd 重新格式化为 bcache 格式的 data 和 cache 才行, 再在 bcache 格式的块设备上建立 btrfs 文件系统.

如果直接在机械硬盘上建立 btrfs 文件系统, 利用 btrfs add/replace 工具, 支持新增/替换硬盘, 加上 bcache 后有几个问题:

  1. 如果要新增, 替换硬盘, 是不是只要把 btrfs add/replace 的命令对象从 /dev/sda 这种机械硬盘块设备换成 /dev/bcache0 就可以了.

  2. 如果 bcache 使用读缓存模式, 在某天 ssd 坏了后, 是不是取消 echo f0e01318-f4fd-4fab-abbb-d76d870503ec > /sys/block/bcache0/bcache/attach 这个绑定缓存的命令, 就能让 bcache 下的 btrfs 机械硬盘继续工作(换句话说, bcache data 是否支持无缓存工作)?

  3. 更换 ssd 后, 是不是重新绑定又能再次启用读缓存? 是否需要修复什么旧数据?

  4. 如果部分机械硬盘用 bcache 建立 data, 部分还是直接裸盘, 这种混合的 btrfs raid 有没有什么风险?

  5. bcache 读缓存模式加速机械硬盘收益如何, 有没有别的坑会导致数据损坏或丢失, 提高了修复难度, 反而得不偿失?

bcache 参考链接: https://wiki.archlinux.org/title/Bcache

1250 次点击
所在节点    程序员
5 条回复
zcl0621
79 天前
hmm ，三年前弄的 pve 集群，说实话有点忘了，说的不对请见谅

1,2,3 没法回答，忘干净了

4. 我印象中我们做了实验，没有什么收益，吞吐量反而降低了，最后方案用的一块 pciessd 做的 bcache ；如果把 ssd 做写缓存的话，可能会存在 ssd<->hdd 数据不一致的问题

5. 有收益，但不大，我记得是能保证 4k 的读取来着，具体测试结果我忘干净了，后面新加机器还是走的这套方案
xlingshi64
79 天前
1. 是
新发行版用 btrfs replace 命令可以替换磁盘，老发行版用 btrfs add 、delete

2. 是，bcache 支持无缓存模式，也即是单纯建立 hdd 的 bcache 设备，而没有 cache 设备。

3. 读缓存，不需要修复，detach 后重新 attach ，会重新建立缓存。
kyonn
78 天前
@zcl0621

问 4 主要是因为有部分老数据的机械硬盘不想动它, 如果要绑定 bcache 又要重新格式化倒腾数据, 只想把新增的硬盘加入 bcache. 目前只打算用读缓存.
吞吐量下降是怎么个说法呢? 哪种方案对比哪种方案吞吐量下降了? 如果能详细点说明就更好了, 感谢.
kyonn
78 天前
@xlingshi64 好的, 非常感谢, 这 3 个问题确认了的话, 用 bcache 感觉就没太大风险.
zcl0621
75 天前
@kyonn #3 记不得了。。 所以我们搞了三种磁盘，纯 ssd ssd+hdd 纯 hdd ， 具体 ssd+hdd 是哪种比较低我忘干净了。。。时间有点久了

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://ex.noerr.eu.org/t/1123022

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX