虚心求教,数据量上亿的爬虫数据用什么该用什么数据库呢

查看 380|回复 40
Jinnrry   
换 starrocks
1.兼容 mysql 协议,代码完全不用改
2.才亿级数据,对 sr 来说就是毛毛雨,都不够热身
缺点
成本高很多
lasuar   
海量数据(上亿)的查询问题,用 clickhouse 、tidb 、aliyun 的 adb ,来自 [实际经验] 。
vivisidea   
tidb ?
esee   
亿级就慢了吗?我用的阿里云的 rds mysql 的 1H1G 的入门款,有个表三四亿的数据量感觉也没啥影响。。不过我没啥联表的操作
iroha239   
clickhouse 吧
roundgis   
@esee 爬蟲數據庫理論上也不會有 join
LeegoYih   
ClickHouse
xieren58   
postgresql , 上亿够用...
june4   
才亿级,我的 mysql 单表几亿,一点都不慢。做好索引是关键。
mayli   
无脑 es 吧,数据量大了 水平扩展起来也方便。
或者 Cassandra 这种。
您需要登录后才可以回帖 登录 | 立即注册

返回顶部