Python Pandas - 处理文本数据
在本章中,我们将使用基本的系列/索引来讨论字符串操作。 在后续章节中,我们将学习如何在 DataFrame 上应用这些字符串函数。
Pandas 提供了一组字符串函数,可以方便地对字符串数据进行操作。 最重要的是,这些函数忽略(或排除)missing/NaN 值。
几乎所有这些方法都适用于 Python 字符串函数(参考:https://docs.python.org/3/library/stdtypes.html#string-methods)。 因此,将系列对象转换为字符串对象,然后执行操作。
现在让我们看看每个操作是如何执行的。
序号 | Function & 描述 |
---|---|
1 |
lower() 将 Series/Index 中的字符串转换为小写。 |
2 |
upper() 将 Series/Index 中的字符串转换为大写。 |
3 |
len() 计算字符串长度()。 |
4 |
strip() 帮助从两侧从系列/索引中的每个字符串中去除空格(包括换行符)。 |
5 |
split(' ') 用给定的模式分割每个字符串。 |
6 |
cat(sep=' ') 用给定的分隔符连接系列/索引元素。 |
7 |
get_dummies() 返回具有 One-Hot 编码值的 DataFrame。 |
8 |
contains(pattern) 如果子字符串包含在元素中,则为每个元素返回布尔值 True,否则返回 False。 |
9 |
replace(a,b) 将值 a 替换为值 b。 |
10 |
repeat(value) 以指定的次数重复每个元素。 |
11 |
count(pattern) 返回每个元素中出现模式的计数。 |
12 |
startswith(pattern) 如果 Series/Index 中的元素以模式开头,则返回 true。 |
13 |
endswith(pattern) 如果 Series/Index 中的元素以模式结尾,则返回 true。 |
14 |
find(pattern) 返回模式第一次出现的第一个位置。 |
15 |
findall(pattern) 返回所有出现的模式的列表。 |
16 |
swapcase Swaps the case lower/upper. |
17 |
islower() 检查系列/索引中每个字符串中的所有字符是否为小写。 返回布尔值 |
18 |
isupper() 检查系列/索引中每个字符串中的所有字符是否为大写。 返回布尔值。 |
19 |
isnumeric() 检查系列/索引中每个字符串中的所有字符是否都是数字。 返回布尔值。 |
现在让我们创建一个系列,看看上述所有功能是如何工作的。
import pandas as pd import numpy as np s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t', np.nan, '1234','SteveSmith']) print s
它的输出如下 −
0 Tom 1 William Rick 2 John 3 Alber@t 4 NaN 5 1234 6 Steve Smith dtype: object
lower()
import pandas as pd import numpy as np s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t', np.nan, '1234','SteveSmith']) print s.str.lower()
它的输出如下 −
0 tom 1 william rick 2 john 3 alber@t 4 NaN 5 1234 6 steve smith dtype: object
upper()
import pandas as pd import numpy as np s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t', np.nan, '1234','SteveSmith']) print s.str.upper()
它的输出如下 −
0 TOM 1 WILLIAM RICK 2 JOHN 3 ALBER@T 4 NaN 5 1234 6 STEVE SMITH dtype: object
len()
import pandas as pd import numpy as np s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t', np.nan, '1234','SteveSmith']) print s.str.len()
它的输出如下 −
0 3.0 1 12.0 2 4.0 3 7.0 4 NaN 5 4.0 6 10.0 dtype: float64
strip()
import pandas as pd import numpy as np s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s print ("After Stripping:") print s.str.strip()
它的输出如下 −
0 Tom 1 William Rick 2 John 3 Alber@t dtype: object After Stripping: 0 Tom 1 William Rick 2 John 3 Alber@t dtype: object
split(pattern)
import pandas as pd import numpy as np s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s print ("Split Pattern:") print s.str.split(' ')
它的输出如下 −
0 Tom 1 William Rick 2 John 3 Alber@t dtype: object Split Pattern: 0 [Tom, , , , , , , , , , ] 1 [, , , , , William, Rick] 2 [John] 3 [Alber@t] dtype: object
cat(sep=pattern)
import pandas as pd import numpy as np s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s.str.cat(sep='_')
它的输出如下 −
Tom _ William Rick_John_Alber@t
get_dummies()
import pandas as pd import numpy as np s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s.str.get_dummies()
它的输出如下 −
William Rick Alber@t John Tom 0 0 0 0 1 1 1 0 0 0 2 0 0 1 0 3 0 1 0 0
contains ()
import pandas as pd s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s.str.contains(' ')
它的输出如下 −
0 True 1 True 2 False 3 False dtype: bool
replace(a,b)
import pandas as pd s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s print ("After replacing @ with $:") print s.str.replace('@','$')
它的输出如下 −
0 Tom 1 William Rick 2 John 3 Alber@t dtype: object After replacing @ with $: 0 Tom 1 William Rick 2 John 3 Alber$t dtype: object
repeat(value)
import pandas as pd s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s.str.repeat(2)
它的输出如下 −
0 Tom Tom 1 William Rick William Rick 2 JohnJohn 3 Alber@tAlber@t dtype: object
count(pattern)
import pandas as pd s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print ("The number of 'm's in each string:") print s.str.count('m')
它的输出如下 −
The number of 'm's in each string: 0 1 1 1 2 0 3 0
startswith(pattern)
import pandas as pd s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print ("Strings that start with 'T':") print s.str. startswith ('T')
它的输出如下 −
0 True 1 False 2 False 3 False dtype: bool
endswith(pattern)
import pandas as pd s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print ("Strings that end with 't':") print s.str.endswith('t')
它的输出如下 −
Strings that end with 't': 0 False 1 False 2 False 3 True dtype: bool
find(pattern)
import pandas as pd s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s.str.find('e')
它的输出如下 −
0 -1 1 -1 2 -1 3 3 dtype: int64
"-1"表示元素中没有可用的这种模式。
findall(pattern)
import pandas as pd s = pd.Series(['Tom ', ' William Rick', 'John', 'Alber@t']) print s.str.findall('e')
它的输出如下 −
0 [] 1 [] 2 [] 3 [e] dtype: object
Null list([ ]) 表示元素中不存在这样的模式。
swapcase()
import pandas as pd s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t']) print s.str.swapcase()
它的输出如下 −
0 tOM 1 wILLIAM rICK 2 jOHN 3 aLBER@T dtype: object
islower()
import pandas as pd s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t']) print s.str.islower()
它的输出如下 −
0 False 1 False 2 False 3 False dtype: bool
isupper()
import pandas as pd s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t']) print s.str.isupper()
它的输出如下 −
0 False 1 False 2 False 3 False dtype: bool
isnumeric()
import pandas as pd s = pd.Series(['Tom', 'William Rick', 'John', 'Alber@t']) print s.str.isnumeric()
它的输出如下 −
0 False 1 False 2 False 3 False dtype: bool