3

我有2个碎片。一个在独立服务器上，另一个在副本集上：

mongos> db.runCommand({listshards:1})
{
        "shards" : [
            {
                "_id" : "shard0000",
                "host" : "mongo3:10001"
            },
            {
                "_id" : "set1",
                "host" : "set1/mongo1:10001,mongo2:10001"
            }
        ],
        "ok" : 1
}

我已经插入了大约 30M 条记录。

据我了解，mongo 应该平等地平衡分片之间的数据，但它不会发生：

mongos> db.stats()
{
    "raw" : {
        "set1/mongo1:10001,mongo2:10001" : {
            "db" : "my_ginger",
            "collections" : 3,
            "objects" : 5308714,
            "avgObjSize" : 811.9953284354742,
            "dataSize" : 4310650968,
            "storageSize" : 4707774464,
            "numExtents" : 23,
            "indexes" : 2,
            "indexSize" : 421252048,
            "fileSize" : 10666115072,
            "nsSizeMB" : 16,
            "ok" : 1
        },
        "mongo3:10001" : {
            "db" : "my_ginger",
            "collections" : 6,
            "objects" : 25162626,
            "avgObjSize" : 1081.6777010475776,
            "dataSize" : 27217851444,
            "storageSize" : 28086624096,
            "numExtents" : 38,
            "indexes" : 6,
            "indexSize" : 1903266512,
            "fileSize" : 34276900864,
            "nsSizeMB" : 16,
            "ok" : 1
        }
    },
    "objects" : 30471340,
    "avgObjSize" : 1034.6936633571088,
    "dataSize" : 31528502412,
    "storageSize" : 32794398560,
    "numExtents" : 61,
    "indexes" : 8,
    "indexSize" : 2324518560,
    "fileSize" : 44943015936,
    "ok" : 1
}

我究竟做错了什么？

谢谢。

4

1 回答 1

3

根据sh.status()评论中的输出，您在 shard0000（单个主机）上有 164 个块，在 set1（副本集）上有 85 个块。发生这种不平衡的常见原因有两个：

  1. 您选择了错误的分片键（单调递增或类似）
  2. 您的所有数据最初都在一个分片上，并且正在重新平衡

平衡器将不断尝试将块从高分片移动到低分片，同时移动最大块（对于选择上述单调递增键的人，这会有所帮助）。但是，一次只能进行一次迁移，因此这将需要一些时间，特别是如果您同时继续从分片写入/读取。如果事情真的很糟糕，并且你确实选择了一个糟糕的分片键，那么这可能会持续一段时间。

如果您的所有数据首先在一个分片上，然后您添加了另一个分片，那么您会遇到类似的问题 - 块计数需要一段时间才能稳定，因为一半的数据必须从原始分片中移出（除了它的其他活动）来平衡事情。平衡器通常会选择低范围的块首先移动，所以如果这些块不太可能在内存中（再次回到糟糕的分片键），那么它们必须在它们被迁移之前被分页。

要检查平衡器是否正在运行：

http://docs.mongodb.org/manual/reference/method/sh.setBalancerState/#sh.getBalancerState

然后，要查看它在做什么，请连接到 mongos（最后 10 次操作）：

use config
db.changelog.find().sort({$natural:-1}).limit(10).pretty()

同样，如果您想查看它们的性能，您将在每个分片的主日志中看到与迁移相关的消息、它们花费了多长时间等。

于 2012-10-16T16:17:59.293 回答