jjzjj

replicating

全部标签

replication - 可扩展性设计问题 - 主/从数据库

我刚刚完成了一个基于redis的数据库层,提供了在多个数据库之间进行选择,但是我自己没有经验,不知道应该怎么做。可靠性是我最关注的重点。在从数据库和主数据库都可用的应用程序中,写入和读取通常是如何组织的?大人物是如何实现的? 最佳答案 规则1:不要。规则2:在您测量并证明数据库确实是您的瓶颈之前不要这样做。大多数Web应用程序瓶颈是提供静态内容和陈旧内容所需的时间。与数据库事务无关。规则3:即便如此,也要考虑其他分区数据的方法,而不是复制数据库。将历史数据从当前数据中提取到仓库中。按客户或主题领域或Web应用程序将数据拆分到多个对等

mysql - Binlog MySQL Replication 是一个 "Bag of Hurt"。有什么好的选择吗?

老实说triedthisleftandright并且仍然发现我的镜像服务器,设置为复制从属服务器仍然落后。我的应用程序的用户群不断增长,现在我已经到了无法“关闭”以“重新同步”数据库的地步(即使在周末也不行)。无论如何,我的问题是:是否有任何合理的、负担得起的的二进制日志复制替代方案?我有两台服务器,所以暂时不会考虑购买第三台服务器来实现负载平衡,除非这是唯一的选择。干杯,/mp 最佳答案 你的主人并行执行,你的奴隶串行执行。如果您的master可以在1个真实小时内处理1.5小时的插入/更新/执行,您的slave就会落后。如果您找不

java - Spark Streaming 收到警告 "replicated to only 0 peer(s) instead of 1 peers"

我使用SparkStreaming从Twitter接收推文。我收到很多警告说:replicatedtoonly0peer(s)insteadof1peers这个警告有什么用?我的代码是:SparkConfconf=newSparkConf().setAppName("Test");JavaStreamingContextsc=newJavaStreamingContext(conf,Durations.seconds(5));sc.checkpoint("/home/arman/Desktop/checkpoint");ConfigurationBuildercb=newConfigu

java - Apache Solr : Slave replicates 10+ times every time it polls (excessive commits? )

我们正在使用ApacheSolr(3.1.0)为为多个站点编写的大量文章编制索引。我们有一个主/从设置(底部的复制配置),其中服务器1索引文章,服务器2复制索引。从站应该每60秒轮询一次主站,但相反,我们几乎每次都可以看到10到最多75个连续的/replication调用。每个Solr核心(从配置中的${solr.core.name})代表不同的站点。我看到最多的/replication调用与最大的站点相关联。其中一个核心每分钟只有1个调用,在调用update?commit=true几次后我已经能够在那里重现这个,所以这让我认为它与数量有关主人执行的提交。所以我的问题是,如何阻止Sol

python - Tensorflow 的 Between-graph replication 是数据并行的一个例子吗?

我已阅读distributedtensorflowdocumentation和thisanswer.根据this,在数据并行方法中:Thealgorithmdistributesthedatabetweenvariouscores.Eachcoreindependentlytriestoestimatethesameparameter(s)Coresthenexchangetheirestimate(s)witheachothertocomeupwiththerightestimateforthestep.在模型并行方法中:Thealgorithmsendsthesamedatatoa

amazon-web-services - 在 terraform 中动态更改 aws_elasticache_replication_group 的配置

我正在使用terraform配置elasticache集群,一切正常!现在我的要求是我想在资源内部为集群模式做动态配置。下面是我常用的代码..resource"aws_elasticache_replication_group""elasticache_redis_cluster"{replication_group_id="cache"engine_version="${var.engine_version}"node_type="${var.node_type}"port="${var.elasticache_port}"parameter_group_name="${var.pa

redis - 在不同机器上使用 Redis Replication(多主)

我想在我的应用程序中使用Redis作为分布式缓存。其中一项要求是具有ActiveActive可用性,这意味着我在一个地方有一个数据中心,在其他地方有另一个数据中心。如果一个数据中心发生故障,我希望我的用户没有任何感觉,并且能够从第二个站点的第一个数据中心获取所有数据并继续工作——在第二个站点也有一个主数据。可能吗? 最佳答案 您要求的是主动-主动解决方案,即多主机解决方案,但您的问题表明您可能不需要它。如果您只需要一个数据库可用于写入,即所有写入始终进行,您可以使用Redis的标准主从复制来实现。指示您的应用程序使用master进行

redis master slave replication - 从站上丢失数据

问题我有一种情况,我在主服务器上创建的数据似乎没有正确复制到我的从服务器。掌握Redis数据库设置信息我有一个运行在10.1.1.1上的主机。配置设置为“保存”到磁盘。这是配置文件的一个片段:save9001save30010save6010000当我对有问题的散列运行扫描命令时,结果如下(正确):127.0.0.1:6379>scan0matchdep:*1)"13"2)1)"dep:+19999999999_00:00_00:00"2)"dep:+19999999999_19:00_25:00"3)"dep:+19999999999_08:00_12:00"127.0.0.1:63

Docker Swarm Redis 和 Sentinel with master-slave replication IP resolution client failure

我遇到了一个问题,我不确定如何解决这个问题。我的redissentinel生态系统如下:3哨兵集群-->使用docker-compose管理1master和2slave我已经为生态系统创建了一个dockeroverlay网络,并使用dockerstackdeploy来运行dockercomposeyml。每个节点上的redis-cli显示正确的信息配置。但是,外部客户遇到了问题。当我向客户端应用程序提供哨兵地址时(在我的例子中,它是一个springredis应用程序),我得到了主redis的覆盖网络的内部IP地址。这对客户端来说是不可识别的,并且它失败了。如何获取外部可解析的IP地址?

Redis replication和redis sharding(cluster)区别

有人知道Redis复制和Redis分片之间的区别吗?它们有什么用?Redis将数据存储在内存中,这对复制/分片有何影响?是否可以同时使用它们? 最佳答案 分片几乎是复制的对立面,尽管它们是正交的概念并且可以很好地协同工作。分片,也称为分区,是按键拆分数据;而复制,也称为镜像,是复制所有数据。分片有助于提高性能,减少任何一种资源的命中率和内存负载。复制对于获得读取的高可用性很有用。如果从多个副本读取,也会降低所有资源的命中率,但所有资源的内存需求保持不变。应该注意的是,虽然您可以写入从属,但复制只是主->从。所以你不能以这种方式扩展写