使用 Twemproxy 安装 Redis Cluster，我真的很困惑为什么有些 SET 命令被移动了

Question

我已经用 3.0.5 版的 Redis-Server (Ubuntu 14.04)

设置了一个 Redis-Cluster

为简单起见，我们将忽略复制。我在本地主机上有三个 redis 实例运行ning，端口 7001、7002 和 7003。它们都通过这个命令成为集群的主人

redis-trib.rb create 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003

我喜欢使用 twemproxy

的想法

twemproxy-config.yml

twem-1:
  listen: 127.0.0.1:22121
  hash: fnv1a_64
  distribution: ketama
  redis: true
  preconnect: true
  servers:
  - 127.0.0.1:7001:1
  - 127.0.0.1:7002:1
  - 127.0.0.1:7003:1

我用 nutcracker -c twemproxy-config.yml -d 初始化 twemproxy 然后我可以用 redis-cli -h 127.0.0.1 -p 22121

访问 twemproxy

请看一下这个输入输出

127.0.0.1:22121> set hello 4542342342424
OK
127.0.0.1:22121> set goodbye 345353535545
(error) MOVED 9354 159.203.136.204:7002

127.0.0.1:22121> get hello
"4542342342424"
127.0.0.1:22121> get goodbye
(error) MOVED 9354 159.203.136.204:7002

我担心这可能无法正常工作。如果我绕过 twemproxy 并使用 redis-cli -c -h 127.0.0.1 -p 7001 连接，我可以看到发生自动转发。像这样;

127.0.0.1:7001> get hello
"4542342342424"

127.0.0.1:7001> get goodbye
-> Redirected to slot [9354] located at 127.0.0.1:7002
(nil)

127.0.0.1:7002> set goodbye 3240923842094840
OK

127.0.0.1:7002> get goodbye
"3240923842094840"

参考

Redis Cluster Specification

Interesting read at code.hootsuite.com about use of twemproxy（大约下一页）

终极目标

我的最终目标是使用 redis 集群在负载均衡器后面的多个网络服务器上存储 PHP 会话数据。在 php.ini 中，我会有 session.save_handler = redis 和 session.save_path = tcp://127.0.0.1:22121（twemproxy 实例会在每个 Web 服务器上运行）。 PHP 会话配置位尚未设置。

我希望我说得有道理。我使用的哈希码是否正确？我真的很想看到 twemproxy 回馈 OK 而不是 MOVED.

谢谢！

更新

感谢@the-real-bill 的回答，我在两个节点上设置了 redis，标准 redis 运行ning 端口 6380 和 sentinel 运行ning 端口 16380，一个是 master 另一个是奴隶。查看日志，一切正常。

我看过predis and phpredis

这是我仍然有点不确定的一点，我相信给我更多的时间我会解决的。查询只能写入主服务器，查询只能从从服务器读取。我们让 Sentinel 根据可用性提升一个或另一个——会话处理程序如何知道它可以写入哪个？当然我需要提供两个IP地址..

Answer 1

您不能同时使用Redis集群和twemproxy。在Redis集群模式下，应该是client向正确的master发送请求。当您向错误的主人请求密钥时，它总是会发回 MOVE 回复，将您重定向到正确的主人。

Answer 2

Redis 集群是一种客户端感知模式。在 Redis 集群中，客户端总是最连接到给定键的 "correct" 节点。 MOVED 回复告诉客户端哪个节点服务该密钥。最初，客户端应该在连接时拉取当前拓扑，然后在它收到 MOVED 时进行更新。这是性能最高的模式，因为不涉及代理。

但是，这意味着您不能在 Redis 集群设置前使用任何现有代理。如您所见，Twemproxy 仅代理某些命令，并拒绝其他命令。为了让 Twemproxy 处理这个问题，它需要实现集群 API 并完成客户端所做的一切。这是行不通的，您也不应该期望它很快就会这样做。任何其他代理，如 nginx 或 HAProxy 都需要做同样的事情（假设使用 openresty 或自定义模块，你可以在 Nginx 中比其他人更容易做到这一点）。

此外，上次我检查了 PHP 客户端不支持 Redis 集群。

但是，对于您的用例，我怀疑您是否真的需要 Redis 集群。使用 Sentinel 在 Pod（master+slave（s））中配置 Redis 以管理故障转移并结合客户端 Sentinel 支持可能会很好地满足您的需求。我相信 PRedis 有支持，但我相信 phpredis 没有。

如果您对运行共享集群的复杂性有信心，那么在 Twemproxy 后面使用常规的 Redis + Sentinel，并让 Twemproxy 通过您告诉它使用的共享算法进行连接。这是尝试使用 Tweproxy 的另一个问题——它做 Redis Cluster 做的事情，但作为代理。所以实际上你会尝试将数据集分片两次。我相信你可以想象这是灾难性的。 ;)

如果您无法获得适当的支持或不想让 Twemproxy 为您管理共享，您最后的选择（除了自己添加客户端支持）是设置一个由 sentinel 配置的代理。例如，您可以使用配置为指向主服务器的 HAProxy。在故障转移时，Sentinel 可以为您执行脚本。

此脚本随后可以更新您的 HAProxy 配置并为您重新启动它，从而确保正确的重新连接行为。有很多方法可以做到这一点，Google 搜索它，结合 Redis Sentinel 文档并将它们应用到您的环境中，将为您显示路径。

使用 Twemproxy 安装 Redis Cluster，我真的很困惑为什么有些 SET 命令被移动了

Installed Redis Cluster with Twemproxy, I am really confused about why some SET commands are MOVED

php

redis

twemproxy

更新