iis服务器助手广告广告
返回顶部
首页 > 资讯 > 数据库 >怎么提高cassandra读存储性能
  • 643
分享到

怎么提高cassandra读存储性能

2024-04-02 19:04:59 643人浏览 八月长安
摘要

这篇文章给大家分享的是有关怎么提高cassandra读存储性能的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。  cassandra作为一个分布式的存储性能,其特点是写快读慢。最近

这篇文章给大家分享的是有关怎么提高cassandra读存储性能的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。

  cassandra作为一个分布式的存储性能,其特点是写快读慢。最近看了cassandra 1.0的文档,发现1.0在读性能上做了一些提高。用户可以根据系统的要求,合理配置,从而提高读的性能。下面编程网小编来讲解下如何提高cassandra读存储性能?

  如何提高cassandra读存储性能

  1、禁用read repair

  每一次读操作,cassandra都会在后台进行read repair操作。如果只要求读一个节点数据,cassandra在读到一个节点后,就将结果返回客户端,然后用read repair对其他的replicas进行同步(根据timestamp)。如果要求读多个节点,那么cassandra就读多个节点,然后根据timestamp进行比较,返回客户端最新的数据,然后再调用read repair对其他节点进行同步。Read repair在后台的操作,会占用一定的CPU和I/O,所以影响读性能。要提高读的性能,可以将read repair禁用掉,当然这会影响到一致性,但是对于节点比较稳定的系统,是可以考虑的。一种方法时用hinted off和nodel tool的node reapair定期对其进行同步,提高一致性。在cassandra1.0之前,禁用read repair需要修改代码,新的cassandra1.0可以通过对每个读操作调参(0到1),来设定read repair的机率。

  Compaction:使用Leveled compaction,并设定multithreaded_compaction,提高compaction的速度。

  在《cassandra中的压缩策略》(Http://www.cnblogs.com/marysam/articles/2266061.html)这个文章中,我介绍了cassandra1.0目前支持的两种compaction策略---Tiered Compaction和Leveled Compaction。

  对于leveled compaction,可以对读写性能带来提升。在cassandra1.0的文档中说明,使用了leveled compaction,读性能提高了400%。

  Leveled compaction能够给读性能带来提高的原因是,leveled comapction中每一层都没有重复的记录,这样保证了可以保证90%的读都可以在一个sstable中完成。最坏的情况是一个记录存在在每一层,但是这个时候10TB的数据也就7层,查7个SStable就可以了。

  2、Compression

  在http://www.datastax.com/dev/blog/whats-new-in-cassandra-1-0-compression中对cassandra 的compression做了介绍。这里说道,用compression,其读的性能提高了25%-35%。

  Compression 之所以能够提高读的性能,是因为经过compression之后,每个节点能够存储更多的数据。同时Cassandra能在SStable index中够迅速地定位到记录的位置,然后解压这些记录进行操作。也就是说compression从两方面提高了读的速度:

  允许更多的数据在内存中对于不再内存中,但是经常访问的数据,也能通过SStable index更快地访问。

  如何提高cassandra读存储性能

  3、调整key cache和row cache的值

  Key cache:在内存中保存了记录的位置。当一个row的column很大时,不适宜将row整个放在内存中,这个时候只要保存key的位置,也就是row的位置就可以。这样可以让程序快速定位到row并进行操作。对于有大量对row进行操作的系统,有很大的提高。默认时200,000。可以用nodetool cfstats或者时jconsole进行检测,查看其命中率。

  Row cache:row cache 把整个row 的内容都放在内存中。适合的情况是,有一小部分hot data是经常反问的,或者要返回整个columns.在使用row cache时,用注意它对内存的影响。

  key cache 如果命中的话,会减少一次的查询。Row cache如果命中的话,减少两次的查询,对于column的类型是图片的系统,当然每个row是很大的,不能寄希望于row cache提高性能。但是我们可以把key cache提高,甚至设置成全部row的keys。这样保证所有的读操作,都能在key cache中命中。

  4、设置JVM heap的大小

  在cassandra 1.0中的,key cache时保存在JVM heap中,而Row cache是保存在电脑的内存中。如果想要提高row cache 的命中率,就要注意JVM heap大小的设置。既要保证JVM heap可以容纳menber table, key cache以及其他大概1GB的使用,又要防止JVM heap过大,影响电脑中row cache的命中。

感谢各位的阅读!关于“怎么提高cassandra读存储性能”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,让大家可以学到更多知识,如果觉得文章不错,可以把它分享出去让更多的人看到吧!

您可能感兴趣的文档:

--结束END--

本文标题: 怎么提高cassandra读存储性能

本文链接: https://www.lsjlt.com/news/55179.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • sql怎么查看表的索引
    通过查询系统表,可以获取表的索引信息,包括索引名称、是否唯一、索引类型、索引列和行数。常用系统表有:mysql 的 information_schema.statistics、postg...
    99+
    2024-05-14
    mysql oracle
  • sql怎么查看索引
    您可以使用 sql 通过以下方法查看索引:show indexes 语句:显示表中定义的索引列表及其信息。explain 语句:显示查询计划,其中包含用于执行查询的索引。informat...
    99+
    2024-05-14
  • sql怎么查看存储过程
    如何查看 sql 存储过程的源代码:使用 show create procedure 语句直接获取创建脚本。查询 information_schema.routines 表的 routi...
    99+
    2024-05-14
  • sql怎么查看视图表
    要查看视图表,可以使用以下步骤:使用 select 语句获取视图中的数据。使用 desc 语句查看视图的架构。使用 explain 语句分析视图的执行计划。使用 dbms 提供...
    99+
    2024-05-14
    oracle python
  • sql怎么查看创建的视图
    可以通过sql查询查看已创建的视图,具体步骤包括:连接到数据库并执行查询select * from information_schema.views;查询结果将显示视图的名称、...
    99+
    2024-05-14
    mysql
  • sql怎么用循环语句实现查询
    可以通过 do 和 while 语句创建循环,并在循环内执行查询,详细步骤包括:定义循环变量设置循环初始值循环执行查询更新循环变量执行查询循环退出条件 SQL 中使用循环语句实现查询 ...
    99+
    2024-05-14
  • sql怎么用代码修改表中数据
    通过 sql 代码修改表中数据的方法包括:修改单个记录:使用 update 语句设置列值并指定条件。修改多条记录:在 update 语句中指定多个条件来修改满足条件的所有记录。增加新列:...
    99+
    2024-05-14
  • sql怎么用命令创建数据库
    在 sql 中使用 create database 命令创建新数据库,其语法包含以下步骤:指定数据库名称。指定数据库文件和日志文件的位置(可选)。指定数据库大小、最大大小和文件增长(可选...
    99+
    2024-05-14
  • sql怎么用身份证提取年龄
    sql 中提取身份证号码中的年龄的方法:提取出生日期部分(身份证号码中第 7-14 位);使用 to_date 函数转换为日期格式;使用 extract 函数计算与当前日期之间的年差。 ...
    99+
    2024-05-14
  • sql怎么看字段长度
    有两种方法可查看 sql 中的字段长度:使用 information_schema 架构,其中包含元数据信息,可用于查询字段长度。使用内建函数,如 length(),其适用于字符串数据类...
    99+
    2024-05-14
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作