pandas之数据选择
pandas中有三种索引方法:.loc,.iloc和[],注意:.ix的用法在0.20.0中已经不建议使用了
import pandas as pd
import numpy as np
In [5]:
dates = pd.date_range("20170101",periods=6)
df1 = pd.DataFrame(np.arange(24).reshape(6,4),index=dates,columns=["A","B","C","D"])
df1
Out[5]:
| A | B | C | D | |
|---|---|---|---|---|
| 2017-01-01 | 0 | 1 | 2 | 3 |
| 2017-01-02 | 4 | 5 | 6 | 7 |
| 2017-01-03 | 8 | 9 | 10 | 11 |
| 2017-01-04 | 12 | 13 | 14 | 15 |
| 2017-01-05 | 16 | 17 | 18 | 19 |
| 2017-01-06 | 20 | 21 | 22 | 23 |
In [6]:
将dataframe的列获取为一个series
df1["A"]#将dataframe的列获取为一个series
Out[6]:
2017-01-01 0
2017-01-02 4
2017-01-03 8
2017-01-04 12
2017-01-05 16
2017-01-06 20
Freq: D, Name: A, dtype: int32
In [7]:
df1.A#另一种获取
Out[7]:
2017-01-01 0
2017-01-02 4
2017-01-03 8
2017-01-04 12
2017-01-05 16
2017-01-06 20
Freq: D, Name: A, dtype: int32
In [8]:
切片,获取前2行
df1[0:2]#切片,获取前2行
Out[8]:
| A | B | C | D | |
|---|---|---|---|---|
| 2017-01-01 | 0 | 1 | 2 | 3 |
| 2017-01-02 | 4 | 5 | 6 | 7 |
In [9]:
通过索引获取指定行
df1["20170102":"20170104"]#通过索引获取指定行
Out[9]:
| A | B | C | D | |
|---|---|---|---|---|
| 2017-01-02 | 4 | 5 | 6 | 7 |
| 2017-01-03 | 8 | 9 | 10 | 11 |
| 2017-01-04 | 12 | 13 | 14 | 15 |
In [11]:
通过标签选择数据
#通过标签选择数据
df1.loc["20170102"]
Out[11]:
A 4
B 5
C 6
D 7
Name: 2017-01-02 00:00:00, dtype: int32
In [12]:
提取某个行的指定列
df1.loc["20170102",["A","C"]]#提取某个行的指定列
Out[12]:
A 4
C 6
Name: 2017-01-02 00:00:00, dtype: int32
In [13]:
df1.loc[:,["A","B"]]
Out[13]:
| A | B | |
|---|---|---|
| 2017-01-01 | 0 | 1 |
| 2017-01-02 | 4 | 5 |
| 2017-01-03 | 8 | 9 |
| 2017-01-04 | 12 | 13 |
| 2017-01-05 | 16 | 17 |
| 2017-01-06 | 20 | 21 |
In [14]:
通过位置选择数据
#通过位置选择数据
df1.iloc[2]#提取第二行
Out[14]:
A 8
B 9
C 10
D 11
Name: 2017-01-03 00:00:00, dtype: int32
In [15]:
df1.iloc[1:3,2:4]
Out[15]:
| C | D | |
|---|---|---|
| 2017-01-02 | 6 | 7 |
| 2017-01-03 | 10 | 11 |
In [18]:
提取不连续的行和列
#提取不连续的行和列
df1.iloc[[1,2,4],[1,3]]
Out[18]:
| B | D | |
|---|---|---|
| 2017-01-02 | 5 | 7 |
| 2017-01-03 | 9 | 11 |
| 2017-01-05 | 17 | 19 |
In [20]:
#混合标签位置选择
df1.ix[2:4,["A","C"]]
c:\users\wuzs\appdata\local\programs\python\python36-32\lib\site-packages\ipykernel_launcher.py:2: FutureWarning:
.ix is deprecated. Please use
.loc for label based indexing or
.iloc for positional indexing
See the documentation here:
http://pandas.pydata.org/pandas-docs/stable/user_guide/indexing.html#ix-indexer-is-deprecated
c:\users\wuzs\appdata\local\programs\python\python36-32\lib\site-packages\pandas\core\indexing.py:808: FutureWarning:
.ix is deprecated. Please use
.loc for label based indexing or
.iloc for positional indexing
See the documentation here:
http://pandas.pydata.org/pandas-docs/stable/user_guide/indexing.html#ix-indexer-is-deprecated
retval = getattr(retval, self.name)._getitem_axis(key, axis=i)
Out[20]:
| A | C | |
|---|---|---|
| 2017-01-03 | 8 | 10 |
| 2017-01-04 | 12 | 14 |
In [23]:
df1.ix["20170102":"20170104",2:4]
c:\users\wuzs\appdata\local\programs\python\python36-32\lib\site-packages\ipykernel_launcher.py:1: FutureWarning:
.ix is deprecated. Please use
.loc for label based indexing or
.iloc for positional indexing
See the documentation here:
http://pandas.pydata.org/pandas-docs/stable/user_guide/indexing.html#ix-indexer-is-deprecated
"""Entry point for launching an IPython kernel.
Out[23]:
| C | D | |
|---|---|---|
| 2017-01-02 | 6 | 7 |
| 2017-01-03 | 10 | 11 |
| 2017-01-04 | 14 | 15 |
In [24]:
判断某一行的值大小
#判断某一行的值大小
df1.A >6
Out[24]:
2017-01-01 False
2017-01-02 False
2017-01-03 True
2017-01-04 True
2017-01-05 True
2017-01-06 True
Freq: D, Name: A, dtype: bool
In [25]:
df1[df1.A>6]#根据判断组成新的DataFrame
Out[25]:
| A | B | C | D | |
|---|---|---|---|---|
| 2017-01-03 | 8 | 9 | 10 | 11 |
| 2017-01-04 | 12 | 13 | 14 | 15 |
| 2017-01-05 | 16 | 17 | 18 | 19 |
| 2017-01-06 | 20 | 21 | 22 | 23 |
In [ ]:
pandas之数据选择的更多相关文章
- Pandas:DataFrame数据选择方法(索引)
#首先创建我们的Series对象,然后合并到dataframe对象里面去 import pandas as pd import numpy as np area=pd.Series({,,,}) po ...
- 【转载】使用Pandas对数据进行筛选和排序
使用Pandas对数据进行筛选和排序 本文转载自:蓝鲸的网站分析笔记 原文链接:使用Pandas对数据进行筛选和排序 目录: sort() 对单列数据进行排序 对多列数据进行排序 获取金额最小前10项 ...
- 【转载】使用Pandas创建数据透视表
使用Pandas创建数据透视表 本文转载自:蓝鲸的网站分析笔记 原文链接:使用Pandas创建数据透视表 目录 pandas.pivot_table() 创建简单的数据透视表 增加一个行维度(inde ...
- 基于pandas进行数据预处理
很久没用pandas,有些有点忘了,转载一个比较完整的利用pandas进行数据预处理的博文:https://blog.csdn.net/u014400239/article/details/70846 ...
- pandas 新增数据列(直接赋值、apply,assign、分条件赋值)
# pandas新增数据列(直接赋值.apply.assign.分条件赋值) # pandas在进行数据分析时,经常需要按照一定条件创建新的数据列,然后进行进一步分析 # 1 直接赋值 # 2 df. ...
- python-数据描述与分析2(利用Pandas处理数据 缺失值的处理 数据库的使用)
2.利用Pandas处理数据2.1 汇总计算当我们知道如何加载数据后,接下来就是如何处理数据,虽然之前的赋值计算也是一种计算,但是如果Pandas的作用就停留在此,那我们也许只是看到了它的冰山一角,它 ...
- 利用Python进行数据分析(12) pandas基础: 数据合并
pandas 提供了三种主要方法可以对数据进行合并: pandas.merge()方法:数据库风格的合并: pandas.concat()方法:轴向连接,即沿着一条轴将多个对象堆叠到一起: 实例方法c ...
- 【转载】使用Pandas进行数据提取
使用Pandas进行数据提取 本文转载自:蓝鲸的网站分析笔记 原文链接:使用python进行数据提取 目录 set_index() ix 按行提取信息 按列提取信息 按行与列提取信息 提取特定日期的信 ...
- 【转载】使用Pandas进行数据匹配
使用Pandas进行数据匹配 本文转载自:蓝鲸的网站分析笔记 原文链接:使用Pandas进行数据匹配 目录 merge()介绍 inner模式匹配 lefg模式匹配 right模式匹配 outer模式 ...
随机推荐
- deep_learning_MNIST数据集
Code_link:https://pan.baidu.com/s/1dshQt57196fhh67F8nqWow 本文是为既没有机器学习基础也没了解过TensorFlow的码农.序媛们准备的.如果已 ...
- 数据库——Oracle(6)
1 默认值约束(默认值):对表中的某个列提前设置好默认值,当执行插入操作的时候,如果该列没有插入列值,则系统会自动的插入之前设置的默认值. 1)每个列只能插入一个默认值. 2)创建表的时候设置默认值. ...
- PHP工程师学习计划
从开始学习PHP到现在,只是大致的对PHP的一些基础的东西了解一下,从没有制定一个较为完整的学习计划,所以自己的编程水平一直都处在基本的入门阶段,所以结合自己的实际情况制定了一个感觉还算合理的学习计划 ...
- CSS如何水平垂直居中?
CSS如何水平垂直居中? 1.CSS如何实现水平居中? margin: 0 auto 2.CSS如何实现水平垂直居中? 首先设置一个div元素,设置背景颜色以便看出变化.代码如下: <!DOCT ...
- [转载]Spark-Task not serializable错误解析
Spark-Task not serializable错误解析 2018年05月17日 15:33:03 沙拉控 阅读数:1509 在学习SparkStreaming的时候偶然出现的一个问题,先看 ...
- PAM安全认证模块
- poj3417 Network/闇の連鎖[树上差分]
首先隔断一条树边,不计附加边这个树肯定是断成两块了,然后就看附加边有没有连着的两个点在不同的块内. 方法1:BIT乱搞(个人思路) 假设考虑到$x$节点隔断和他父亲的边,要看$x$子树内有没有点连着附 ...
- JavaScript中foreach、map函数
语法:forEach和map都支持2个参数:一个是回调函数(item,index,input)和上下文: •forEach:用来遍历数组中的每一项:这个方法执行是没有返回值的,对原来数组也没有影响: ...
- hive传递参数与调用
在运行hive命令时传入参数,使用-hivevar 和 -hiveconf 两种参数选项,来给此次的执行脚本传入参数 -hivevar : 传参数 ,专门提供给用户自定义变量. -hiveconf : ...
- union不支持orderByClause、clusterByClause、distributeByClause、sortByClause或limitClause
union all union 相同点 是 相当于上下拼接 上下两个拼接表必须字段保持一致 不同 union有去重效果,速度会更慢. ================================= ...