我有一个名为 Emails 的列族，我将邮件保存到这个 CF 中，写 5000 封邮件需要 100 多秒。
我正在使用 i3 处理器，8gb 内存。我的数据中心有 6 个节点，复制因子 = 2。
我们存储在 Cassandra 中的数据大小会影响性能吗？影响写入性能的所有因素是什么？如何提高性能？
提前致谢..
问问题
7625 次
2 回答
9
您要询问的一些因素是：
- 客户端和集群之间以及集群中机器之间的连接速度和延迟（如@omnibear 所述）
- 您正在使用的复制因子 - 如果您一个接一个地插入电子邮件，复制因子可能会影响单个操作的延迟，这将导致总时间增加；我的意思是-您可以考虑批量写入操作。
- 你写过你使用 i3/8gb - 它是客户端还是服务器机器的配置？服务器机器的配置，尤其是内存量和在它们上运行的其他进程显然可能会影响性能
- 提交日志和数据文件位置 - 建议将提交日志放在与数据文件不同的物理磁盘上
- 压缩策略 - 我敢打赌，在你的情况下这并不重要，但总的来说它也会影响写入的性能；Cassandra首先将数据写入memtable和commit log，然后commit log被flush到sstables，最后sstables被合并（称为compaction）；可以调整此过程的参数以提高特定用例的性能；您可以在此处阅读有关 C* 中的写入路径的信息
- 您还可以浏览有关性能的优秀 DataStax 文档说明：（http://www.datastax.com/documentation/cassandra/2.0/cassandra/dml/dml_throughput_c.html），（http://www.datastax.com/documentation/ cassandra/2.0/cassandra/architecture/architecturePlanningAntiPatterns_c.html）和（http://www.datastax.com/documentation/cassandra/2.0/cassandra/operations/ops_tune_jvm_c.html）
顺便说一句，也许你应该考虑将复制因子增加到 3，因为 rf=2 不会给你太多 - 如果你使用一致性级别 = quorum，并且一个节点发生故障，你将无法使用你的集群；如果你决定使用 rf=3 和 cl=quorum，如果你想达到强一致性，你仍然需要读/写 2 个节点，但另外，丢失一个节点不会导致集群不可用。
于 2014-04-04T06:29:04.273 回答
0
首先使用 cassandra http://www.datastax.com/products/datastax-enterprise-visual-admin找出 Cassandra 花费的时间
你也可以使用
./nodetool cfstats
收集每个键空间和表中的统计信息。
在我看来，正如其他人所指出的那样，您的作家很慢。
于 2015-08-26T13:56:40.173 回答