订单数据实时汇总技术选型

查看 629|回复 40
Morii   
我觉得你应该先说一下你们的开发资源,还有数据的量级,毕竟要上大数据的话维护的成本还是挺高的
ppppppp123
OP
  
@FYFX 后面我再回复你,你的 comment 非常有价值。
@1996wang 非常谢谢!
sss15   
flink + Click house 的 累计计算引擎
话说订单量多大啊
OpenSea   
@Morii flink 和 ck 各自的作用是什么?公司所有的订单数据都是存储在 mysql 里的,我在担心实时性的问题。
SilenceLL   
你不说数据量,没办法技术选型啊,如果一天就几百单,直接 mysql 里 sum 就行了何必上组件。
淘宝的双 11 的实时订单统计,各排行榜都是用 flink 做的,所以楼上那么多推荐 flink 的。
flink 可以去 b 站看视频,硅上谷的视频做的不错,版本也新
https://www.bilibili.com/video/BV133411s7Sa/?spm_id_from=333.337.search-card.all.click
lry   
clickhouse 做实时的并发会成瓶颈吧
xieren58   
flink cdc + doris
datoujiejie221   
手动打点,数据写入到 InfluxDB / Prometheus, 再配置 Grafana 面板。
ppppppp123
OP
  
看数据量, 数据量少的话, 简单搞个定时任务就行啦.
bjfane   
canal 监控 mysql 的订单数据扔到 kafka
消费 kafka 的数据做实时计算,每日的结果落库,数据量大的话考虑用 flink
您需要登录后才可以回帖 登录 | 立即注册

返回顶部