打算玩高级一点的All in One了，基于PVE Ceph故障自动迁移

t9913085

不得不说，PVE真的是神器呀


这总不会被说成 All in Boom了吧


三台i7 6820eq准备好了

shuhost

小规模玩ceph纯属找事儿，给客户找麻烦，给自己找麻烦，不是我打击你

如果ceph / pve融合模式，对性能影响很大，ceph ram缓存对性能加持很重要，cpu绑定也很重要，满足ceph后再拿资源给pve vm就是给自己找麻烦，一旦性能不足支撑ceph，单节点的缓慢会造成全局ceph挂逼，如果数据同步异常你会修复、恢复数据吗

纯ceph节点？起码4个node起吧，4*4tb samsung ssd吧，考虑一下性能你要上个带电容的pci nvme ssd吧？傲腾或者inte p系列企业级打底吧，每个ssd你的4% wal/db nvme ssd吧？3副本肯的吧。算算成本看，你得到了约4T多的容量，划得来？可能觉得客户会满意，其实不然，性能相比4*4tb samsung ssd raid10差了大半截。

ceph运行过程中pg出现的各种问题、版本升级、版本bug，处理应付的来吗？规模大些的时候你会再做个池来备份吗？如过一个池3000个vps，你不做备份万一坏了呢？没有足够的osd、性能，ceph的坏盘换盘后数据同步需要很多资源、时间，期间整个池io和屎一样，客户接受吗？

客户对数据安全在意，他就应该自己备份，你想肩负他数据安全的重大责任，你赚到阿里云的利润了吗？raid10兼顾了数据安全、性能，又简单，raid10现在还在用不是没有原因的。没个20w+又有客户买账、技术过硬，搞ceph纯粹拿客户数据当玩具，也要自己搞疯

dole

shuhost 发表于 2023-4-16 23:57
小规模玩ceph纯属找事儿，给客户找麻烦，给自己找麻烦，不是我打击你

如果ceph / pve融合模式，对性能影响 ...

6666

shuhost

winday 发表于 2023-4-17 00:05
不过我发现用ceph的云服务器商家性能都很好，特别跑数据库网站，响应特别快 ...

CEPH是网络存储，再快响应也不会比本地存储快。

同样的硬件前提下，本地存储阵列肯定是更快的。如果CEPH的情况下你感觉到快，那就是人家用的CEPH花了大成本，可能是NVME U.2做OSD，或者打底Samsung EVO做OSD配合NVME做WAL/DB，加上很好的交换机、节点。

总而言之，要想CEPH速度快，就要花很多很多的钱堆出来，不然速度就不行。其次技术差的话，数据随时可能全部丢失、随时可能出现异常挂起很久、在几千VPS的情况下每次故障的影响都是很大的。

CEPH对服务商、客户来说都可以带来很多新鲜的功能、优势，以及规模达到一定程度后比RAID10成本划算，但能不能达到那个量级呢？达到后技术是否能跟上呢？都是很需要考验的服务商的

shuhost

巴勒蒙干 发表于 2023-4-17 00:20
用zfs不得得了吗
zfs是这方面最先进的了

是的，对于小规模的服务商来说，相对于ceph多节点，zfs单节点作为网络存储是会更好的选择

snoywing

ceph 坏盘，扩容，之前的数据会被重新平衡到各个盘上，极其耗费时间，一般都几周为单位，并且一开始的磁盘设置的pg数不同还会导致低磁盘的数据写满后认为整个集群写满了，再调整pg数也非常麻烦耗时间同上。而且ceph需要内存，1t需要占用至少5g内存，你确定你这不是挖坑埋自己？

t9913085

shuhost 发表于 2023-4-16 23:57
小规模玩ceph纯属找事儿，给客户找麻烦，给自己找麻烦，不是我打击你

如果ceph / pve融合模式，对性能影响 ...

有点打击了积极性了