因为我们的maxwell对接rabbitmq rabbitmq监听的是mysql的belog日志文件，所以mysql数据的实时操作都会同步数据到maxwell中 从而导致新增插入一条，修改插入一条，删除插入一条，导致同一条数据有大量的重复数据。
在仪表板调用统计相关接口之前，先将重复数据处理掉 OPTIMIZE TABLE table_name FINAL 这样就可以根据order by (uuid) 的uuid去掉重复数据，保留最新的一条数据
本站资源均来自互联网，仅供研究学习，禁止违法使用和商用，产生法律纠纷本站概不负责！如果侵犯了您的权益请与我们联系！
转载请注明出处： 免费源码网-免费的源码资源网站 » clickhouse去重复数据解决方案
微信公众账号
微信扫一扫加关注
发表评论 取消回复