Cassandra第一次使用

在FreeBSD上安装Cassandra: # pkg install cassandra2找了半天Cassandra的配置文件,原来安装位置是在这: /usr/local/share/cassandra/conf 配置文件是:cassandra.yaml 这个配置文件还挺长的. 反正第一次用我是懒得改了,就用默认的吧. 最后自己试出来了,要在/etc/profile中进行如下的配置 JAVA_HOME=/usr/local/openjdk8PATH=$JAVA_HOME/bin:$PATHCL…

cassandra.yaml 配置 (非原创，侵删)

Copy from: http://blog.csdn.net/y_h_t/article/details/11917531 Cassandra中所有的运行配置都是在配置文件cassandra.yaml中进行配置. 下面依次讲解Cassandra中的配置项:cluster_name设置Cassandra集群的名称.在Cassandra集群中,每一台服务器都必须具备相应的集群的名称.如果名称不一致,则当前Cassandra服务器无法加入集群. initial_tokenCassandra服务器的初…

Cassandra.yaml 配置详解

cluster_name 设置Cassandra集群的名称. 在Cassandra集群中,每一台服务器都必须具备相应的集群的名称.如果名称不一致,则当前Cassandra服务器无法加入集群. initial_token Cassandra服务器的初始化Token值,这个值代表了Cassandra服务器在一致性哈希环中的位置. 当Cassandra第一次启动的时候,会从该配置项中读取,如果留空,将随机生成一个Token值.如果Cassandra不是第一次启动,将从系统表中读取该Token值. au…

Cassandra1.2文档学习（2）——节点间通信协议之gossip协议

参考文档:http://www.datastax.com/documentation/cassandra/1.2/webhelp/index.html#cassandra/architecture/architectureGossipAbout_c.html#concept_ds_elb_tgd_fk 一.什么是gossip Cassandra使用一个名为gossip的协议去获得集群中其他节点的位置和状态信息.Gossip是一个点对点的通信协议,在这个协议中,节点之间定期交换状态信息.Gossi…

cassandra安装

从官网下载下来的包解压后有100多M,里面包含了已经编译好的全部程序. 按照方法,进入目录后运行 bin/cassandra -f 运行不成功. 然后根据"https://wiki.apache.org/cassandra/HowToBuild"的介绍,自己编译, 很简单的 ant 命令第一次发现编译不成功,提示错误貌似是 tmpfs下创建文件不成功, google了下这个问题,根据帖子 " https://ubuntuforums.org/showthread.php?t…

cassandra高级操作之索引、排序以及分页

本次就给大家讲讲cassandra的高级操作:索引.排序和分页:处于性能的考虑,cassandra对这些支持都比较简单,所以我们不能希望cassandra完全适用于我们的逻辑,而是应该将我们的逻辑设计的更适合于cassandra 一.索引和排序 Cassandra对查询的支持很弱,只支持主键列及索引列的查询,而且主键列还有各种限制,不过查询弱归弱,但它还是支持索引和排序的. cassandra的查询具有以下约束: 第一主键只能用=号查询第二主键支持= > < >= <= 索引…

cassandra高级操作之分页的java实现（有项目具体需求）

接着上篇博客,我们来谈谈java操作cassandra分页,需要注意的是这个分页与我们平时所做的页面分页是不同的,具体有啥不同,大家耐着性子往下看. 上篇博客讲到了cassandra的分页,相信大家会有所注意:下一次的查询依赖上一次的查询(上一次查询的最后一条记录的全部主键),不像mysql那样灵活,所以只能实现上一页.下一页这样的功能,不能实现第多少页那样的功能(硬要实现的话性能就太低了). 我们先看看驱动官方给的分页做法如果一个查询得到的记录数太大,一次性返回回来,那么效率非常低,并且很有…

[转载] Cassandra入门框架模型总结

转载自http://asyty.iteye.com/blog/1202072 一.Cassandra框架二.Cassandra数据模型 Colum / Colum Family, SuperColum / SuperColum Family Colum排序三.分区策略 Token,Partitioner bloom-filter,HASH四.副本存储五.网络嗅探六.一致性 Quorum NRW 维护最终一致性七.存储机制 CommitLog MenTable SSTable附一.Cassand…

伯克利推出世界最快的KVS数据库Anna：秒杀Redis和Cassandra

天下武功,唯快不破. 伯克利 RISE 实验室推出了最新的键值存储数据库 Anna,提供了惊人的存取速度.超强的伸缩性和史无前例的一致性保证.Jeff Dean 说,当一个系统增长到十倍规模时,就需要进行重新设计.那么,对于 RISE 实验室的研究员们来说,怎样才能设计出一个具备指数级增长规模的键值存储数据库呢? 题外话: RISE 实验室的前身是赫赫有名的伯克利 AMP 实验室,该实验室曾开发出了一大批大获成功的分布式技术,这些技术对高性能计算产生了深远的影响,包括 Spark.Mesos.T…

cassandra 3.x官方文档(3)---gossip通信协议及故障检测与恢复

写在前面 cassandra3.x官方文档的非官方翻译.翻译内容水平全依赖本人英文水平和对cassandra的理解.所以强烈建议阅读英文版cassandra 3.x 官方文档.此文档一半是翻译,一半是个人对cassandra的认知.尽量将我的理解通过引用的方式标注,以示区别.另外文档翻译是项长期并有挑战的工作,如果你愿意加入cassandra git book,可以发信给我.当然你也可以加入我们的QQ群,104822562.一起学习探讨cassandra. Gossip Gossip 是一个对等…

Cassandra使用pycassa批量导入数据

本周接手了一个Cassandra系统的维护工作,有一项是需要将应用方的数据导入我们维护的Cassandra集群,并且为应用方提供HTTP的方式访问服务.这是我第一次接触KV系统,原来只是走马观花似的看过KV啊,NoSQL啊.但是实际上没有实际的使用经验.经过两天的学习和接手,终于搞明白了在生产环境中的使用方式.在此简要的笔记一下.本文主要包括的内容有: Cassandra的简介, Cassandra的相关CLI Cassandra的Python API,并且给出一个批量导入数据的例子. 1. C…

cassandra vs mongo (1)存储引擎

摘要在MongoDB 初识篇中谈到过Mongo 与 Cassandra的区别,这边再谈谈Mongo与Cassandra的存储引擎差别概括存储引擎: 类型功能应用 hash 增删改.随机读.顺序扫描 Key-Value存储系统 B-Tree 增删改.随机读.顺序扫描关系型数据库 LSM 增删改.随机读.顺序扫描分布式存储系统,如cassandra.google LevelDB B-Tree 缓存管理缓存管理的核心在于置换算法,置换算法常见的有FIFO(First In First…

Cassandra联手Spark 大数据分析将迎来哪些改变？

2014Spark峰会在美国旧金山举行,与会数据库平台供应商DataStax宣布,与Spark供应商Databricks合作,在它的旗舰产品 DataStax Enterprise 4.5 (DSE)中,将Cassandra NoSQL数据库与Apache Spark开源引擎相结合,为用户提供基于内存处理的实时分析. Databricks是一家由Apache Spark创始人成立的公司.谈到这次合作,DataStax副总裁John Glendenning表示:“将Spark与Cassandra…

cassandra框架模型之二——存储机制 CommitLog MemTable SSTable

四.副本存储 Cassandra不像HBase是基于HDFS的分布式存储,它的数据是存在每个节点的本地文件系统中. Cassandra有三种副本配置策略: 1) SimpleStrategy (RackUnawareStrategy): 副本不考虑机架的因素,按照Token放置在连续下几个节点.如图3所示,假如副本数为3,属于A节点的数据在B.C两个节点中也放置副本. 2) OldNetworkTopologyStrategy (RackAwareStrategy): 考虑机架的因素,除了基本的…

Cassandra使用的各种策略

1. 背景介绍 Cassandra 使用分布式哈希表(DHT)来确定存储某一个数据对象的节点.在 DHT 里面,负责存储的节点以及数据对象都被分配一个 token.token 只能在一定的范围内取值,比如说如果用 MD5 作为 token 的话,那么取值范围就是 [0, 2^128-1].存储节点以及对象根据 token 的大小排列成一个环,即最大的 token 后面紧跟着最小的 token,比如对 MD5 而言,token 2^128-1 的下一个 token 就是 0.Cassandra 使…

Cassandra与职业发展 | 阿里云栾小凡 × 蔚来汽车张旭东 × 网龙阙乃祯

# 活动精彩实录 | Cassandra与职业发展点击此处观看完整活动录像大家好,我叫邓为,我目前在DataStax担任领航架构师.我在DataStax工作了7年多的时间,也有7年多的Cassandra经验,我在大数据和数据库领域的经验则有大约十多年的时间.很高兴今天能够邀请大家到我们的活动中,来听听我们的嘉宾们与职场相关的经验和感悟. 我们今天的嘉宾来自三个不同的公司,他们都是在Cassandra数据库方面有很多年经验的专家. 首先是阿里云高级技术专家栾小凡.14年第一次接触Ca…

cassandra权威指南读书笔记--客户端

DataStax驱动最成熟.默认,驱动程序会使用第一个连接的节点作为支持的版本协议.如果集群存在高低版本的节点(比如升级场景),如果驱动先连接不同不同版本的节点,可能会出现不兼容.驱动支持压缩客户端和cassandra节点之间的消息.目前支持2种压缩算法:LZ4和SNAPPY.默认为NONE,即不压缩.可以调用Cluster.Bilduer.withCompression()操作来覆盖这个设置.认证和加密驱动可插拔实现com.datastax.driver.core.AuthProvider.比…

cassandra权威指南读书笔记--Cassandra架构(2)

环和令牌cassandra的数据管理是用一个环来表示.为环中的每个节点分配一or多个数据范围,用token描述.token由64位整数ID表示,范围-2^(63)~2^(63)-1.使用对分区键进行一个hash来计算分区键落到哪个token中,进而决定分配到哪个节点.org.apache.cassandra.dht.Range类.虚拟节点(vnode),1.2版本引入,2.0默认开启.一个token就是对应一个vnode.将环分解为虚拟节点数的分段,可以让数据分布更均匀,在扩容,缩容,修复都会更…

基于docker创建Cassandra集群

一.概述简介 Cassandra是一个开源分布式NoSQL数据库系统. 它最初由Facebook开发,用于储存收件箱等简单格式数据,集GoogleBigTable的数据模型与Amazon Dynamo的完全分布式的架构于一身.Facebook于2008将 Cassandra 开源,此后,由于Cassandra良好的可扩展性,被Digg.Twitter等知名Web 2.0网站所采纳,成为了一种流行的分布式结构化数据存储方案. 不过国内并未流行起来,除了最早的淘宝和360在用,加上阿里巴巴后来一直…

技术基础 | 在Apache Cassandra中改变VNodes数量的影响

Apache Cassandra中num_tokens的默认值在4.0版本中将会有变化!这看起来好像只是在CHANGES.txt文件中做了个小小的改动,但实际上这个改动将会对集群的日常运维有着深远的影响. 在这篇文章中,我们将会来仔细讨论num_tokens值的改变将会如何影响集群极其运行情况. Apache Cassandra中有很多可以用于改变其行为的设置选项,num_tokens设置参数就是其中之一.像很多其他的设置参数一样,num_tokens也是在cassandra.yaml文…

[翻译] Cassandra 分布式结构化存储系统

Cassandra 分布式结构化存储系统摘要 Cassandra 是一个分布式存储系统,用于管理分布在许多商品服务器上的大量结构化数据,同时提供无单点故障(no single point of failure)的高可用服务.Cassandra 的目标是在数百个节点(可能分布在不同的数据中心)的基础…

Cassandra简介

在前面的一篇文章<图形数据库Neo4J简介>中,我们介绍了一种非常流行的图形数据库Neo4J的使用方法.而在本文中,我们将对另外一种类型的NoSQL数据库——Cassandra进行简单地介绍. 接触Cassandra的原因与接触Neo4J的原因相同:我们的产品需要能够记录一系列关系型数据库所无法快速处理的大量数据.Cassandra,以及后面将要介绍的MongoDB,都是我们在技术选型过程中的一个备选方案.虽然说最后我们并没有选择Cassandra,但是在整个技术选型过程中所接触到的一系列内部…

我的“第一次”，就这样没了：DDD（领域驱动设计）理论结合实践

写在前面插一句:本人超爱落网-<平凡的世界>这一期,分享给大家. 阅读目录: 关于DDD 前期分析框架搭建代码实现开源-发布后记第一次听你,清风吹送,田野短笛:第一次看你,半弯新湖,鱼跃翠堤:第一次念你,燕飞巢冷,释怀记忆:第一次梦你,云翔海岛,轮渡迤逦:第一次认你,怨江别续,草桥知己:第一次怕你,命悬一线,遗憾禁忌:第一次悟你,千年菩提,生死一起. 人生有很多的第一次:小时候第一次牙牙学语.第一次学蹒跚学步...长大后第一次上课.第一次逃课.第一次骑自行车.第一次懂事.第一次和喜…

IIS初始化（预加载），解决第一次访问慢，程序池被回收问题

你以为你可以慢,那是不可能的!你以为你可以不动,那也是不可能的! 河南是守株待兔故事情节的发源地,讲的是懒惰的农夫坐在树桩旁等待可爱的小毛兔撞树的故事,那么这种事情怎么可能天天出现呢!你以为的事并一定按照你想象的那样发展,所以主动出击将是最有效的方式!每一个圣徒都有过去,每一个罪人都有未来! 读在最前面: 1.本文以IIS8,Windows Server 2012R2做为案例 2.IIS8 运行在 Windows Server 2012 and Windows 8 版本以上的平台上. 3.IIS…

ASP.NET Core Web API Cassandra CRUD 操作

在本文中,我们将创建一个简单的 Web API 来实现对一个 “todo” 列表的 CRUD 操作,使用 Apache Cassandra 来存储数据,在这里不会创建 UI ,Web API 的测试将使用 Postman 来完成. ASP.NET Core 是 ASP.NET 的重大的重构,ASP.NET Core 是一个全新的开源和跨平台的框架,用于构建如 Web 应用.物联网(IoT)应用和移动后端应用等连接到互联网的基于云的现代应用程序. ASP.NET Core 已经内置了用 MVC 架…