Pandas字符串和文本数据
在本章中,我们将使用基本系列/索引来讨论字符串操作。在随后的章节中,将学习如何将这些字符串函数应用于数据帧(DataFrame)。
Pandas提供了一组字符串函数,可以方便地对字符串数据进行操作。 最重要的是,这些函数忽略(或排除)丢失/NaN值。
几乎这些方法都使用Python字符串函数(请参阅: http://docs.python.org/3/library/stdtypes.html#string-methods )。 因此,将Series对象转换为String对象,然后执行该操作。
下面来看看每个操作的执行和说明。
| 编号 | 函数 | 描述 | 
|---|---|---|
| 1 | lower() | 将 Series/Index中的字符串转换为小写。 | 
| 2 | upper() | 将 Series/Index中的字符串转换为大写。 | 
| 3 | len() | 计算字符串长度。 | 
| 4 | strip() | 帮助从两侧的系列/索引中的每个字符串中删除空格(包括换行符)。 | 
| 5 | split(' ') | 用给定的模式拆分每个字符串。 | 
| 6 | cat(sep=' ') | 使用给定的分隔符连接系列/索引元素。 | 
| 7 | get_dummies() | 返回具有单热编码值的数据帧(DataFrame)。 | 
| 8 | contains(pattern) | 如果元素中包含子字符串,则返回每个元素的布尔值 True,否则为False。 | 
| 9 | replace(a,b) | 将值 a替换为值b。 | 
| 10 | repeat(value) | 重复每个元素指定的次数。 | 
| 11 | count(pattern) | 返回模式中每个元素的出现总数。 | 
| 12 | startswith(pattern) | 如果系列/索引中的元素以模式开始,则返回 true。 | 
| 13 | endswith(pattern) | 如果系列/索引中的元素以模式结束,则返回 true。 | 
| 14 | find(pattern) | 返回模式第一次出现的位置。 | 
| 15 | findall(pattern) | 返回模式的所有出现的列表。 | 
| 16 | swapcase | 变换字母大小写。 | 
| 17 | islower() | 检查系列/索引中每个字符串中的所有字符是否小写,返回布尔值 | 
| 18 | isupper() | 检查系列/索引中每个字符串中的所有字符是否大写,返回布尔值 | 
| 19 | isnumeric() | 检查系列/索引中每个字符串中的所有字符是否为数字,返回布尔值。 | 
现在创建一个系列,看看上述所有函数是如何工作的。
import pandas as pd
import numpy as np
s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t', np.nan, '1234','SteveMinsu'])
print (s)
执行上面示例代码,得到以下结果 -
0             Tom
1    William Rick
2            John
3         Alber@t
4             NaN
5            1234
6      SteveMinsu
dtype: object
1. lower()函数示例
import pandas as pd
import numpy as np
s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t', np.nan, '1234','SteveMinsu'])
print (s.str.lower())
执行上面示例代码,得到以下结果 -
0             tom
1    william rick
2            john
3         alber@t
4             NaN
5            1234
6      steveminsu
dtype: object
2. upper()函数示例
import pandas as pd
import numpy as np
s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t', np.nan, '1234','SteveMinsu'])
print (s.str.upper())
执行上面示例代码,得到以下结果 -
0             TOM
1    WILLIAM RICK
2            JOHN
3         ALBER@T
4             NaN
5            1234
6      STEVESMITH
dtype: object
3. len()函数示例
import pandas as pd
import numpy as np
s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t', np.nan, '1234','SteveMinsu'])
print (s.str.len())
执行上面示例代码,得到以下结果 -
0     3.0
1    12.0
2     4.0
3     7.0
4     NaN
5     4.0
6    10.0
dtype: float64
4. strip()函数示例
import pandas as pd
import numpy as np
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s)
print ("=========== After Stripping ================")
print (s.str.strip())
执行上面示例代码,得到以下结果 -
0             Tom
1     William Rick
2             John
3          Alber@t
dtype: object
=========== After Stripping ================
0             Tom
1    William Rick
2            John
3         Alber@t
dtype: object
5. split(pattern)函数示例
import pandas as pd
import numpy as np
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s)
print ("================= Split Pattern: ==================")
print (s.str.split(' '))
执行上面示例代码,得到以下结果 -
0             Tom
1     William Rick
2             John
3          Alber@t
dtype: object
================= Split Pattern: ==================
0              [Tom, ]
1    [, William, Rick]
2               [John]
3            [Alber@t]
dtype: object
6. cat(sep=pattern)函数示例
import pandas as pd
import numpy as np
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s.str.cat(sep=' <=> '))
执行上面示例代码,得到以下结果 -
Tom  <=>  William Rick <=> John <=> Alber@t
7. get_dummies()函数示例
import pandas as pd
import numpy as np
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s.str.get_dummies())
执行上面示例代码,得到以下结果 -
    William Rick  Alber@t  John  Tom
0              0        0     0     1
1              1        0     0     0
2              0        0     1     0
3              0        1     0     0
8. contains()函数示例
import pandas as pd
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s.str.contains(' '))
执行上面示例代码,得到以下结果 -
0     True
1     True
2    False
3    False
dtype: bool
9. replace(a,b)函数示例
import pandas as pd
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s)
print ("After replacing @ with $: ============== ")
print (s.str.replace('@','$'))
执行上面示例代码,得到以下结果 -
0             Tom
1     William Rick
2             John
3          Alber@t
dtype: object
After replacing @ with $: ==============
0             Tom
1     William Rick
2             John
3          Alber$t
dtype: object
10. repeat(value)函数示例
import pandas as pd
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s.str.repeat(2))
执行上面示例代码,得到以下结果 -
0                      Tom Tom
1     William Rick William Rick
2                      JohnJohn
3                Alber@tAlber@t
dtype: object
11. count(pattern)函数示例
import pandas as pd
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print ("The number of 'm's in each string:")
print (s.str.count('m'))
执行上面示例代码,得到以下结果 -
The number of 'm's in each string:
0    1
1    1
2    0
3    0
dtype: int64
12. startswith(pattern)函数示例
import pandas as pd
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print ("Strings that start with 'T':")
print (s.str. startswith ('T'))
执行上面示例代码,得到以下结果 -
Strings that start with 'T':
0     True
1    False
2    False
3    False
dtype: bool
13. endswith(pattern)函数示例
import pandas as pd
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print ("Strings that end with 't':")
print (s.str.endswith('t'))
执行上面示例代码,得到以下结果 -
Strings that end with 't':
0    False
1    False
2    False
3     True
dtype: bool
14. find(pattern)函数示例
import pandas as pd
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s.str.find('e'))
执行上面示例代码,得到以下结果 -
0   -1
1   -1
2   -1
3    3
dtype: int64
注意:
-1表示元素中没有这样的模式可用。
15. findall(pattern)函数示例
import pandas as pd
s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t'])
print (s.str.findall('e'))
执行上面示例代码,得到以下结果 -
0     []
1     []
2     []
3    [e]
dtype: object
空列表(
[])表示元素中没有这样的模式可用。
16. swapcase()函数示例
import pandas as pd
s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t'])
print (s.str.swapcase())
执行上面示例代码,得到以下结果 -
0             tOM
1    wILLIAM rICK
2            jOHN
3         aLBER@T
dtype: object
17. islower()函数示例
import pandas as pd
s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t'])
print (s.str.islower())
执行上面示例代码,得到以下结果 -
0    False
1    False
2    False
3    False
dtype: bool
18. isupper()函数示例
import pandas as pd
s = pd.Series(['TOM', 'William Rick', 'John', 'Alber@t'])
print (s.str.isupper())
执行上面示例代码,得到以下结果 -
0    True
1    False
2    False
3    False
dtype: bool
19. isnumeric()函数示例
import pandas as pd
s = pd.Series(['Tom', '1199','William Rick', 'John', 'Alber@t'])
print (s.str.isnumeric())
执行上面示例代码,得到以下结果 -
0    False
1     True
2    False
3    False
4    False
dtype: boolPandas字符串和文本数据的更多相关文章
- pandas处理大文本数据
		当数据文件是百万级数据时,设置chunksize来分批次处理数据 案例:美国总统竞选时的数据分析 读取数据 import numpy as np import pandas as pdfrom pan ... 
- 机器学习入门-文本数据-构造词频词袋模型  1.re.sub(进行字符串的替换)  2.nltk.corpus.stopwords.words(获得停用词表) 3.nltk.WordPunctTokenizer(对字符串进行分词操作) 4.np.vectorize(对函数进行向量化) 5. CountVectorizer(构建词频的词袋模型)
		函数说明: 1. re.sub(r'[^a-zA-Z0-9\s]', repl='', sting=string) 用于进行字符串的替换,这里我们用来去除标点符号 参数说明:r'[^a-zA-Z0- ... 
- 采用Json字符串,往服务器回传大量富文本数据时,需要注意的地方,最近开发时遇到的问题。
		json字符串中存在常规的用户输入的字符串,和很多的富文本样式标签(用户不能直接看到,点击富文本编辑器中的html源码按钮能看到),例如下面的: <p><strong>富文本& ... 
- Python文本数据互相转换(pandas and win32com)
		(工作之后,就让自己的身心都去休息吧) 今天介绍一下文本数据的提取和转换,这里主要实例的转换为excel文件(.xlsx)转换world文件(.doc/docx),同时需要使用win32api,同py ... 
- SQL server 存储过程  C#调用Windows CMD命令并返回输出结果  Mysql删除重复数据保留最小的id   C# 取字符串中间文本 取字符串左边 取字符串右边  C# JSON格式数据高级用法
		create proc insertLog@Title nvarchar(50),@Contents nvarchar(max),@UserId int,@CreateTime datetimeasi ... 
- 【转载】socket通信-C#实现tcp收发字符串文本数据
		在日常碰到的项目中,有些场景需要发送文本数据,也就是字符串,比如简单的聊天文字,JSON字符串等场景.那么如何如何使用SharpSocket来收发此类数据呢?其中要掌握的关键点是什么呢? 点击查看原博 ... 
- JAVASE02-Unit08: 文本数据IO操作 、 异常处理
		Unit08: 文本数据IO操作 . 异常处理 * java.io.ObjectOutputStream * 对象输出流,作用是进行对象序列化 package day08; import java.i ... 
- 《Python CookBook2》 第一章 文本 - 过滤字符串中不属于指定集合的字符 && 检查一个字符串是文本还是二进制
		过滤字符串中不属于指定集合的字符 任务: 给定一个需要保留的字符串的集合,构建一个过滤函数,并可将其应用于任何字符串s,函数返回一个s的拷贝,该拷贝只包含指定字符集合中的元素. 解决方案: impor ... 
- MySQL中游标使用以及读取文本数据
		原文:MySQL中游标使用以及读取文本数据 前言 之前一直没有接触数据库的学习,只是本科时候修了一本数据库基本知识的课.当时只对C++感兴趣,天真的认为其它的课都没有用,数据库也是半懂不懂,胡乱就考试 ... 
随机推荐
- Zend Studio 中创建简单的phpfile模板和xhtml类phpfile模板
			<!--简单的phpfile模板,带有创建时间和作者--><?php/*** ==============================================* @dat ... 
- Visual Assist X助手的一些使用技巧和快捷键
			部分快捷键 Shift+Alt+F // Find References 查找引用 Shift+Alt+S // FindSynbolDialog打开查找符号对话框 Alt+G // GotoImpl ... 
- Nginx-rtmp直播之业务流程分析 http://www.mamicode.com/info-detail-2287896.html
			Nginx-rtmp直播之业务流程分析 http://www.mamicode.com/info-detail-2287896.html 
- 在MyEclipse中改了项目名称,到tomcat的webroot下发现,部署的名称还是原来的。
			在MyEclipse中改了项目名称,到tomcat的webroot下发现,部署的名称还是原来的. 解决方法:选中项目名称右键properties,展开Myeclipse,选择web,web Conte ... 
- Oracle 11g数据库详解
			常见异常: ORA-14025:不能为实体化视图或实体化视图日志指定PARTITION ORA-14026:PARTITION和CLUSTER子句互相排斥 ORA-14027:仅可以指定一个PARTI ... 
- PyMySQL防止SQL注入
			一.SQL注入简介 SQL注入是比较常见的网络攻击方式之一,它不是利用操作系统的BUG来实现攻击,而是针对程序员编程时的疏忽,通过SQL语句,实现无帐号登录,甚至篡改数据库. 二.SQL注入攻击的总体 ... 
- VGA显示
			VGA控制器的编写主要是了解VGA的显示标准和时序,如1024X768@60Hz,确定时钟频率(65MHz=1344X806X60),列像素时间等于时钟周期,扫描从左到右.从上到下(类似于电视扫描PA ... 
- appium实现adb命令 截图和清空EditText
			原文地址http://www.cnblogs.com/tobecrazy/p/4592405.html 原文地址http://www.cnblogs.com/tobecrazy/ 该博主有很多干货,可 ... 
- 查看虚拟机操作系统、cpu核数、内存命令
			1.查看操作系统 在终端中执行下列指令:cat/etc/issue可以查看当前正在运行的 Ubuntu 的版本号.其输出结果类似下面的内容:Ubuntu 10.04 LTS \n \l方法二:使用 l ... 
- Spring.Net依赖注入(属性注入)
			一.前言: Spring.Net是Java开源框架迁移过来的,主要分为 1)依赖注入 2)面向方面编程 3)数据访问抽象 4)Asp.Net扩展 四个模块功能,这里只是简单介绍依赖注入模块功能. 对于 ... 
