打算用PHP写一个日数据量200W的系统，是否现实可行？

luoluo · 发表于 2023-1-5 16:50:38

vihs 发表于 2023-1-4 21:01
你的想法恰恰相反。
1、这么大数据量，更需要数据安全，公司又不是你的，不需要你考虑成本。你替公司省 ...

我也是这样想的，一开始先用云服务。后面摸索清楚了再自建，那这样省出来的钱。。。

静香 · 发表于 2023-1-5 16:57:15

上springcloud数据存储用mysql 缓存用redis
插入量大的话在内存中做个队列缓存然后批量save

小怪 · 发表于 2023-1-5 17:01:27

用java嘛

zlwzlx · 发表于 2023-1-5 17:28:26

laravel 的性能不是强行需要做好心理准备，这种数据量设计时就应该考虑程序可分布式运行，性能不行就堆机器，上队列异步插入，不要用redis做队列用更成熟的kafka这类的。mysql，redis，kafka 这些建议直接上云服务商的集群。
能做到这些基本没啥大问题

拉斯 · 发表于 2023-1-5 17:30:46

算下来每秒不到一万，数据库没问题，不知道你这个日志是怎么产生的，如果不是访问一次接口产生一条日志用php问题就不大，

hzjdhr · 发表于 2023-1-5 17:32:52

luoluo 发表于 2023-1-4 20:39
对呀，就是考虑列队，不知道laravel支持redis列队，不知道这个方案若是在宕机情况下，能不能保证数据安全 ...

laravel 肯定是支持redis队列的，自带就有用着很方便

Backkom · 发表于 2023-1-5 17:35:02

redis集群然后持久化写入mysql呗

kagurazakashira · 发表于 2023-1-5 17:35:31

没遇到过这么高的场景
最高的是以前一个公司的1月1e条,设备每秒上传日志用的
然后老板钱多堆配置,512core 内存好像是1t,硬盘不确定是hdd还是ssd还是nvme组的阵列
跑的php5.2+mysql5.1
没有任何优化
写入很丝滑,只有查询慢

诡谲 · 发表于 2023-1-5 17:39:45

换webman laravel转过来没压力

奧巴马 · 发表于 2023-1-5 17:41:06

PHP做过每秒并发3万(写入肯定不止3万,单日志就3万了).
放内存里面跑,然后主从分,每月分一次表.

		自动登录	找回密码
密码			注册

[美国VPS] 打算用PHP写一个日数据量200W的系统，是否现实可行？