我有一个运行 Cassandra 3.9 的 4 个节点的小型 Cassandra 集群。
我将 4 个 IP 地址传递给connect()
函数,当我检查连接时netstat -a4n | grep 9042
,我可以看到它们都已连接。请注意,无论我将 1 个 IP 还是 4 个传递给connect()
,一旦完全连接,结果是相同的,包括到 10.0.1.1 节点的双重连接......(10.0.1.1 和 10.0.1.3 是种子,但不知何故只有 10.0. 1.1有一个双重连接,所以我不太清楚为什么会发生这种情况,我试图洗牌用于连接的IP列表,同样,它最终没有任何区别。)
tcp 0 0 10.0.0.1:45012 10.0.1.3:9042 ESTABLISHED
tcp 0 0 10.0.0.1:48400 10.0.1.4:9042 ESTABLISHED
tcp 0 0 10.0.0.1:51514 10.0.1.2:9042 ESTABLISHED
tcp 0 0 10.0.0.1:56460 10.0.1.1:9042 ESTABLISHED
tcp 0 0 10.0.0.1:56452 10.0.1.1:9042 ESTABLISHED
当我查看 的输出时nodetool status
,它看起来相当不错:
Datacenter: dc1
===============
Status=Up/Down
|/ State=Normal/Leaving/Joining/Moving
-- Address Load Tokens Owns (effective) Host ID Rack
UN 10.0.1.1 7.92 MiB 256 76.1% (id) rack1
UN 10.0.1.4 12.26 MiB 256 77.7% (id) rack1
UN 10.0.1.3 10.08 MiB 256 72.2% (id) rack1
UN 10.0.1.2 8.77 MiB 256 74.0% (id) rack1
(注意:我删除了 ID,它们在这里没有用)。
然而,在网络方面,当我查看传输到这些机器的数据量时,我发现了巨大的差异。我使用该iptables -L -nvx
命令,令我惊讶的是,我向第一个 Cassandra 节点发送了大约 3 倍的数据包和近 20 倍的数据:
6856 13581751 RETURN all -- eth1 * 10.0.1.1 0.0.0.0/0
2736 816810 RETURN all -- eth1 * 10.0.1.2 0.0.0.0/0
2831 807426 RETURN all -- eth1 * 10.0.1.3 0.0.0.0/0
2745 806023 RETURN all -- eth1 * 10.0.1.4 0.0.0.0/0
(6,856 / 2,736 = 2.51 和 13,581,751 / 806,023 = 16.85)
我想在某种程度上,只要节点不忙,这并不重要,但我仍然想知道为什么我会看到如此巨大的差异?为什么不是所有 4 个连接都以相似的级别参与?