-
Notifications
You must be signed in to change notification settings - Fork 112
New issue
Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.
By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.
Already on GitHub? Sign in to your account
proxy只会检测库是否健康,当磁盘坏掉会有数据丢失问题吗 #48
Comments
是的。其实没有influx-proxy,只有influxdb,像磁盘坏了、磁盘满了、文件句柄数不够了,也会出现类似情况,客户端无法知晓是否写进去。最好的方式还是都要对influxdb做更完整的监控 |
目前我使用的是三个proxy配置相同的circle,每一个circle三个相同的influxdb数据库数据完全相同的部署方式,我用的是实例化部署,每一台虚拟机一个proxy和一个influxdb,比如我其中一台虚拟机坏了,磁盘坏了,导致prxoy和inflxudb数据丢失,如何重新把这组proxy和inflxudb再加入整个集群中,数据同步过去,目前想到的只能是手动先把其他正常的inflxudb数据拷贝过去,然后启动这组损坏的proxy和inflxudb,在拷贝数据这段时间产生的数据差异再通过另外两台proxy积攒的数据写入到inflxudb中,最终数据一致,重新组成三组完整集群,不知道目前这种方案是否存在漏洞或者还有啥别的方式,请教大佬 |
这个有架构图不,一下没理解怎么部署的😂 |
公司限制了外网上传文件,简单点说就是一个proxy的json配置了三台influxdb,然后部署了三个proxy,这三个proxy的配置是一模一样的,只是起到了高可用,如果其中一个influxdb所在虚拟机磁盘换了,数据没了,我重新把这台influxdb部署起来时,如果把完整数据复制过去,因为磁盘坏了他没数据了 |
总共只有3个influxdb吗?是都在同一个circle里,还是一共3个circle、一个circle里一个influxdb? |
总共只有三个influxdb,一个circle里边三个influxdb,另外两个proxy配置的json里边也是这三个influxdb,总共就三个influxdb,三个proxy |
概念:
如果是这个配置,就只有一份全量数据,分散在了三个influxdb上,如果一个influxdb磁盘坏了,都无法恢复。如果要做高可用,至少得两个circle |
不好意思说错了,是你说的这种一个 circle只 包含了一个 influxdb 实例,这就是一个全量,部署了三个circle全量三份,不好意思说错了 |
其实就是想问一个副本因为磁盘问题数据丢失了如何重启后恢复该副本的数据 |
几种方案 |
我在调用[/recovery接口]总是报page not found page |
influx-proxy 要求 2.5.x,调用接口如下所示,需要 POST
是的 |
我用的是3.0的,报page not found page |
influxdb-v2这个分支 |
大佬我看了influxdb-v2看了这个版本的源码,似乎没有把一些接口加到这个版本中,而branch-2.5确实有,可否同步这些接口到influxdb-v2中 |
后面计划集成到influxdb-v2中 |
期待大佬的这个功能 |
大佬请问是不是在支持2.0语法的influx-proxy中hash_key: backend key for consistent hash, including "idx", "exi", "name" or "url", default is idx, once changed rebalance operation is necessary这个分库分表功能没有了 |
代码写死为 "exi" 的 hash 方式 |
exi指的是什么,不太明白,请教下 |
|
那我怎么配置和部署数据库才能测分库的效果?backends 里边配置的个数必须大于10吗,不太明白该怎么测试验证,求指教 |
backends 里至少两个就行 |
大佬,我们在使用插件测试的过程中无论是停止proxy和influxdb中一台多台,读写都没有任何问题,包括最终的数据一致性,我们是在6w/s点数据上报的情况下实测的,但是其中有一种一场需要请教下,比如部署的proxy和influxdb都没问题,但是磁盘坏了,这种情况prxoy只会监控influxdb是否健康,是不是还会向该influxdb读写数据,而这段数会因为写不进去出错
The text was updated successfully, but these errors were encountered: