Pilosa支持默认使用JSON的HTTP接口。

任何HTTP工具都可用于与Pilosa服务器进行交互。 本文档中的示例将使用curl,默认情况下可用于许多类UNIX系统,包括Linux和MacOS。 Windows用户可以在这里下载curl。

请注意,Pilosa服务器对打开文件的上限有要求。 检查系统文档,了解如何在达到该限制时增加它。 有关详细信息,请参阅Open File Limits。

开始 Pilosa

按照安装文档中的步骤安装Pilosa。 在终端中执行以下命令,以使用默认配置运行Pilosa(Pilosa将在localhost:10101中可用):

pilosa server

如果您使用的是Docker镜像,则可以使用以下命令在默认地址上运行短暂的Pilosa容器:

docker run -it --rm --name pilosa -p 10101:10101 pilosa/pilosa:latest

确保Pilosa正在运行:

curl localhost:10101/status
{"state":"NORMAL","nodes":[{"id":"91715a50-7d50-4c54-9a03-873801da1cd1","uri":{"scheme":"http","host":"localhost","port
":10101},"isCoordinator":true}],"localID":"91715a50-7d50-4c54-9a03-873801da1cd1"}

简单项目

为了更好地理解Pilosa的功能,我们将创建一个名为Star Trace的示例项目,其中包含有1000个流行的Github存储库的信息,这些存储库名称中包含go。Star Trace索引将包括数据点,例如编程语言,标签和star者(已经为项目加星标的人)。

尽管Pilosa没有以表格形式保存数据,但在描述数据模型时我们仍然使用术语列和行。我们将主对象放在列中,并将这些对象的属性放在行中。

例如,Star Trace项目将包含一个名为repository的索引,其中包含表示Github存储库的列,以及表示编程语言和标签等属性的行。我们可以通过将行分组为名为Fields的集合来更好地组织行。因此,repository(存储库)索引可能具有languages(语言)字段以及tags(标签)字段。您可以在文档的Data Model(数据模型)部分中了解有关索引和字段的更多信息。

创建架构(Create the Schema)

注意:如果您想在任何时候验证数据结构,可以按如下方式请求架构:

curl localhost:10101/schema
{"indexes":null}

在我们在导入数据或运行查询之前,需要创建索引及其中的字段。 下面先创建存储库索引:

下面命令成功的创建一个名为repository的索引

curl localhost:10101/index/repository -X POST
{"success":true}

接下来创建一个stargazer字段,该字段的行内容(数据)为star者的用户ID

curl localhost:10101/index/repository/field/stargazer \
-X POST \
-d '{"options": {"type": "time", "timeQuantum": "YMD"}}'
{"success":true}

由于我们的数据包含时间戳,这些时间戳代表用户start的时间,因此我们将字段类型设置为time。timeQuantum(时间量)是我们想要使用的时间分辨率,我们将其设置为star的YMD(年月日)。

接下来创建language字段,其行(数据)中包含编程语言的ID

curl localhost:10101/index/repository/field/language \
-X POST
{"success":true}

language是一个set(集合)字段,但由于默认字段类型是set,因此我们未在字段选项中指定它。

从CVS文件导入数据

下载stargazer.cvs和language.cvs文件

curl -O https://raw.githubusercontent.com/pilosa/getting-started/master/stargazer.csv
curl -O https://raw.githubusercontent.com/pilosa/getting-started/master/language.csv

运行下面的命令将数据导入到Pilosa

pilosa import -i repository -f stargazer stargazer.csv
pilosa import -i repository -f language language.csv

如果您正在使用Pilosa的Docker容器(名为pilosa),则应将* .csv文件复制到容器中,然后导入它们

docker cp stargazer.csv pilosa:/stargazer.csv
docker exec -it pilosa /pilosa import -i repository -f stargazer /stargazer.csv
docker cp language.csv pilosa:/language.csv
docker exec -it pilosa /pilosa import -i repository -f language /language.csv

请注意,用户ID(user IDs)和存储库ID(repository IDs)都重新映射到顺序整数存在数据文件中,它们不再与实际的Github ID相对应。 您可以查看languages.txt以查看语言的映射。

做一些查询(Queries)

  • 用户14(用户ID的映射整数值)star了那些repository(存储库)
curl localhost:10101/index/repository/query \
-X POST \
-d 'Row(stargazer=14)'
{
"results":[
{
"attrs":{},
"columns":[1,2,3,362,368,391,396,409,416,430,436,450,454,460,461,464,466,469,470,483,484,486,490,491,503,504,514]
}
]
}
  • 样本数据中的前5种编程语言是什么
curl localhost:10101/index/repository/query \
-X POST \
-d 'TopN(language, n=5)'
{
"results":[
[
{"id":5,"count":119},
{"id":1,"count":50},
{"id":4,"count":48},
{"id":9,"count":31},
{"id":13,"count":25}
]
]
}
  • 用户14且19star了哪些repository(存储库)
curl localhost:10101/index/repository/query \
-X POST \
-d 'Intersect(
Row(stargazer=14),
Row(stargazer=19)
)'
{
"results":[
{
"attrs":{},
"columns":[2,3,362,396,416,461,464,466,470,486]
}
]
}
  • 用户14或19star了哪些repository(存储库)
curl localhost:10101/index/repository/query \
-X POST \
-d 'Union(
Row(stargazer=14),
Row(stargazer=19)
)'
{
"results":[
{
"attrs":{},
"columns":[1,2,3,361,362,368,376,377,378,382,386,388,391,396,398,400,409,411,412,416,426,428,430,435,436,450,452,453,454,456,460,461,464,465,466,469,470,483,484,486,487,489,490,491,500,503,504,505,512,514]
}
]
}
  • 哪些存储库由用户14且19加星标,并且还用语言1编写:
curl localhost:10101/index/repository/query \
-X POST \
-d 'Intersect(
Row(stargazer=14),
Row(stargazer=19),
Row(language=1)
)'
{
"results":[
{
"attrs":{},
"columns":[2,362,416,461]
}
]
}
  • 将用户99999设置为存储库77777的star者
curl localhost:10101/index/repository/query \
-X POST \
-d 'Set(77777, stargazer=99999)'
{"results":[true]}

请注意,虽然用户ID99999可能此列其它ID不连续,但它仍然是一个相对较小的数字。 不要尝试在Pilosa中使用任意64位整数作为列ID或行ID,这将导致诸如性能不佳和内存不足错误等问题。

接下来做什么?

您可以跳转到Data Model数据模型以深入了解Pilosa的数据模型,或查询有关PQL(Pilosa的查询语言Query Language)的更多详细信息。

查看Examples示例页面,了解Pilosa的实际使用样例。看我们不断扩展的客户端库Client Libraries有没有你喜欢的编程语言版本。

Pilosa文档翻译(二)入门指南的更多相关文章

  1. Android(Lollipop/5.0) Material Design(二) 入门指南

    Material Design系列 Android(Lollipop/5.0)Material Design(一) 简介 Android(Lollipop/5.0)Material Design(二) ...

  2. 转 猫都能学会的Unity3D Shader入门指南(二)

    猫都能学会的Unity3D Shader入门指南(二) 关于本系列 这是Unity3D Shader入门指南系列的第二篇,本系列面向的对象是新接触Shader开发的Unity3D使用者,因为我本身自己 ...

  3. Asp.Net MVC4.0 官方教程 入门指南之二--添加一个控制器

    Asp.Net MVC4.0 官方教程 入门指南之二--添加一个控制器 MVC概念 MVC的含义是 “模型-视图-控制器”.MVC是一个架构良好并且易于测试和易于维护的开发模式.基于MVC模式的应用程 ...

  4. 分布式消息系统Jafka入门指南之二

    分布式消息系统Jafka入门指南之二 作者:chszs,转载需注明.博客主页:http://blog.csdn.net/chszs 三.Jafka的文件夹结构 1.安装tree命令 $ sudo yu ...

  5. 深入浅出 JMS(二) - ActiveMQ 入门指南

    深入浅出 JMS(二) - ActiveMQ 入门指南 上篇博文深入浅出 JMS(一) – JMS 基本概念,我们介绍了消息通信的规范JMS,这篇博文介绍一款开源的 JMS 具体实现-- Active ...

  6. Unity3D Shader入门指南(二)

    关于本系列 这是Unity3D Shader入门指南系列的第二篇,本系列面向的对象是新接触Shader开发的Unity3D使用者,因为我本身自己也是Shader初学者,因此可能会存在错误或者疏漏,如果 ...

  7. Redis入门指南之二(安装及配置)

    本节主要内容 1. 前言2. redis安装3. 启动和停止Redis 1. 前言 安装Redis需要知道自己需要哪个版本,有针对性的安装,比如如果需要redis GEO这个地理集合的特性,那么red ...

  8. 猫都能学会的Unity3D Shader入门指南(二)

    关于本系列 这是Unity3D Shader入门指南系列的第二篇,本系列面向的对象是新接触Shader开发的Unity3D使用者,因为我本身自己也是Shader初学者,因此可能会存在错误或者疏漏,如果 ...

  9. redis入门指南(二)—— 数据操作相关命令

    写在前面 以下绝大部分内容取材于<redis入门指南>,部分结合个人知识,实践后得出. 只记录重要,明确,属于新知的相关内容,杜绝冗余和重复. 字符串 1.字符串类型是redis中最常见的 ...

  10. 一起学微软Power BI系列-官方文档-入门指南(1)Power BI初步介绍

    我们在前一篇文章微软新神器-Power BI,一个简单易用,还用得起的BI产品中,我们初步介绍了Power BI的基本知识.由于Power BI是去年开始微软新发布的一个产品,虽然已经可以企业级应用, ...

随机推荐

  1. 026 UI调试

    读了这篇文档,感觉蛮好玩的.粘贴一下链接: http://www.cnblogs.com/Wayou/p/chrome-console-tips-and-tricks.html

  2. Python并发复习2 - 多线程模块threading

    一.多线程的调用 threading 模块建立在thread 模块之上.thread模块以低级.原始的方式来处理和控制线程,而threading 模块通过对thread进行二次封装, 提供了更方便的a ...

  3. chrome刷新CSS

    改动CSS发现页面根本没有变化,再三查看确实是这一处CSS,那么可能的就是浏览器缓存了CSS而刷新无效了. chrome刷新CSS: 方法1:直接ctrl+F5,进行强制刷新页面,浏览器会重新加载所有 ...

  4. for循环以及数据类型

    一.for循环(迭代式循环) 了解:当我们在写代码时,如果代码是纯运算的代码,会占用大量的CPU,如果是I/O代码,则不会占用CPU. for i in range(10):  #可以是任意类型(字符 ...

  5. Nginx 反向代理 -- 一路上的坑

    前些天刚过来新公司上班,公司的项目都挺多的,只不过项目都是第三方公司团队开发的,现在本公司要组建自己的团队,我作为一个Java后台人员去接手第三方公司的全部项目,我已经是直接崩溃了(先解释一下我崩溃的 ...

  6. Ubantu17.10 上安装gitlab

    http://www.jianshu.com/p/92f97939e33a 亲测成功

  7. CC NOV17

    PERPALIN 可以考虑最后的状态可以是两个非常长而且相同的前缀和后缀中间再加一小段,然后就是不断缩小区间至出解 CHEFHPAL 发现当字符集大于等于3的时候abc循环一定是没有大于1的回文子串的 ...

  8. 【DWM1000】 code 解密5一ACHOR 第一次回家Main 函数

    instance_run(); if((instance_data[0].monitor == 1) && ((portGetTickCnt() - instance_data[0]. ...

  9. 【开源GPS追踪】 之 为何费力不讨好

    GPS追踪,在X宝上一搜一大堆,价格几十到几百层次不齐,为何还要自己开发? 1 对我来说,就是手头有这些硬件资源(GPRS GPS MCU)以及软件资源(VPS),算闲的蛋疼,其实不然,本人工作也很忙 ...

  10. 潭州课堂25班:Ph201805201 tornado 项目 第一课 项目介绍和创建 (课堂笔记)

    tornado 相关说明 , 查找 python3 的路径: binbin@abc:~$ which python3/usr/bin/python3 创建虚拟环境 : 创建工程; 用 pycharm ...