stringr包字符处理函数简介

R语言字符串处理包stringr

原文  http://blog.fens.me/r-stringr/

http://www.tuicool.com/articles/2yQVBfA

R的极客理想系列文章，涵盖了R的思想，使用，工具，创新等的一系列要点，以我个人的学习和体验去诠释R的强大。

R语言作为统计学一门语言，一直在小众领域闪耀着光芒。直到大数据的爆发，R语言变成了一门炙手可热的数据分析的利器。随着越来越多的工程背景的人的加入，R语言的社区在迅速扩大成长。现在已不仅仅是统计领域，教育，银行，电商，互联网….都在使用R语言。

要成为有理想的极客，我们不能停留在语法上，要掌握牢固的数学，概率，统计知识，同时还要有创新精神，把R语言发挥到各个领域。让我们一起动起来吧，开始R的极客理想。

关于作者：

• 张丹(Conan), 程序员Java,R,PHP,Javascript
• weibo：@Conan_Z
• blog: http://blog.fens.me
• email: [e-mail]

转载请注明出处：

http://blog.fens.me/r-stringr/

前言

用R语言处理字符串，总觉得很麻烦，即不能用向量的方法进行分割，也不能用循环遍历索引。grep()家族函数常常记不住，paste()函数默认以空格分割，各种不顺手啊！随着使用R语言的场景越来越多，字符串处理是必不可少的。给大家推荐一个由 Hadley Wickham 开发的一个灵活的字符串处理包stringr。

目录

1. stringr介绍
2. stringr安装
3. stringr的API介绍

1. stringr介绍

stringr包被定义为一致的、简单易用的字符串工具集。所有的函数和参数定义都具有一致性，比如，用相同的方法进行NA处理和0长度的向量处理。

字符串处理虽然不是R语言中最主要的功能，却也是必不可少的，数据清洗、可视化等的操作都会用到。对于R语言本身的base包提供的字符串基础函数，随着时间的积累，已经变得很多地方不一致，不规范的命名，不标准的参数定义，很难看一眼就上手使用。字符串处理在其他语言中都是非常方便的事情，R语言在这方面确实落后了。stringr包就是为了解决这个问题，让字符串处理变得简单易用，提供友好的字符串操作接口。

stringr的项目主页： https://cran.r-project.org/web/packages/stringr/index.html

2. stringr安装

本文所使用的系统环境

• Win10 64bit
• R: 3.2.3 x86_64-w64-mingw32/x64 b4bit

stringr是在CRAN发布的标准库，安装起来非常简单，2条命令就可以了。

~ R> install.packages('stringr')> library(stringr)

3. stringr的API介绍

stringr包1.0.0版本，一共提供了30个函数，方便我们对字符串处理。常用的字符串的处理以str_开头来命名，方便更直观理解函数的定义。我们可以根据使用习惯对函数进行分类：

字符串拼接函数

• str_c: 字符串拼接。
• str_join: 字符串拼接，同str_c。
• str_trim: 去掉字符串的空格和TAB(\t)
• str_pad: 补充字符串的长度
• str_dup: 复制字符串
• str_wrap: 控制字符串输出格式
• str_sub: 截取字符串
• str_sub<- 截取字符串，并赋值，同str_sub

字符串计算函数

• str_count: 字符串计数
• str_length: 字符串长度
• str_sort: 字符串值排序
• str_order: 字符串索引排序，规则同str_sort

字符串匹配函数

• str_split: 字符串分割
• str_split_fixed: 字符串分割，同str_split
• str_subset: 返回匹配的字符串
• word: 从文本中提取单词
• str_detect: 检查匹配字符串的字符
• str_match: 从字符串中提取匹配组。
• str_match_all: 从字符串中提取匹配组，同str_match
• str_replace: 字符串替换
• str_replace_all: 字符串替换，同str_replace
• str_replace_na:把NA替换为NA字符串
• str_locate: 找到匹配的字符串的位置。
• str_locate_all: 找到匹配的字符串的位置,同str_locate
• str_extract: 从字符串中提取匹配字符
• str_extract_all: 从字符串中提取匹配字符，同str_extract

字符串变换函数

• str_conv: 字符编码转换
• str_to_upper: 字符串转成大写
• str_to_lower: 字符串转成小写,规则同str_to_upper
• str_to_title: 字符串转成首字母大写,规则同str_to_upper

参数控制函数，仅用于构造功能的参数，不能独立使用。

• boundary: 定义使用边界
• coll: 定义字符串标准排序规则。
• fixed: 定义用于匹配的字符，包括正则表达式中的转义符
• regex: 定义正则表达式

3.1 字符串拼接函数

3.1.1 str_c，字符串拼接操作，与str_join完全相同，与paste()行为不完全一致。

函数定义：

str_c(..., sep = "", collapse = NULL)str_join(..., sep = "", collapse = NULL)

参数列表：

• …: 多参数的输入
• sep: 把多个字符串拼接为一个大的字符串，用于字符串的分割符。
• collapse: 把多个向量参数拼接为一个大的字符串，用于字符串的分割符。

把多个字符串拼接为一个大的字符串。

> str_c('a','b')[1] "ab"> str_c('a','b',sep='-')[1] "a-b"> str_c(c('a','a1'),c('b','b1'),sep='-')[1] "a-b"   "a1-b1"

把多个向量参数拼接为一个大的字符串。

> str_c(head(letters), collapse = "")[1] "abcdef"> str_c(head(letters), collapse = ", ")[1] "a, b, c, d, e, f"# collapse参数，对多个字符串无效> str_c('a','b',collapse = "-")   [1] "ab"> str_c(c('a','a1'),c('b','b1'),collapse='-')[1] "ab-a1b1"

拼接有NA值的字符串向量时，NA还是NA

> str_c(c("a", NA, "b"), "-d")[1] "a-d" NA    "b-d"

对比str_c()函数和paste()函数之间的不同点。

# 多字符串拼接，默认的sep参数行为不一致> str_c('a','b')[1] "ab"> paste('a','b')[1] "a b"# 向量拼接字符串，collapse参数的行为一致> str_c(head(letters), collapse = "")[1] "abcdef"> paste(head(letters), collapse = "")[1] "abcdef" #拼接有NA值的字符串向量，对NA的处理行为不一致> str_c(c("a", NA, "b"), "-d")[1] "a-d" NA    "b-d"> paste(c("a", NA, "b"), "-d")[1] "a -d"  "NA -d" "b -d" 

3.1.2 str_trim:去掉字符串的空格和TAB(\t)

函数定义：

str_trim(string, side = c("both", "left", "right"))

参数列表：

• string: 字符串，字符串向量。
• side: 过滤方式，both两边都过滤，left左边过滤，right右边过滤

去掉字符串的空格和TAB(\t)

#只过滤左边的空格> str_trim("  left space\t\n",side='left') [1] "left space\t\n"#只过滤右边的空格> str_trim("  left space\t\n",side='right')[1] "  left space"#过滤两边的空格> str_trim("  left space\t\n",side='both')[1] "left space"#过滤两边的空格> str_trim("\nno space\n\t")[1] "no space"

3.1.3 str_pad:补充字符串的长度

函数定义：

str_pad(string, width, side = c("left", "right", "both"), pad = " ")

参数列表：

• string: 字符串，字符串向量。
• width: 字符串填充后的长度
• side: 填充方向，both两边都填充，left左边填充，right右边填充
• pad: 用于填充的字符

补充字符串的长度。

# 从左边补充空格，直到字符串长度为20> str_pad("conan", 20, "left")[1] "               conan"# 从右边补充空格，直到字符串长度为20> str_pad("conan", 20, "right")[1] "conan               "# 从左右两边各补充空格，直到字符串长度为20> str_pad("conan", 20, "both")[1] "       conan        "# 从左右两边各补充x字符，直到字符串长度为20> str_pad("conan", 20, "both",'x')[1] "xxxxxxxconanxxxxxxxx"

3.1.4 str_dup: 复制字符串

函数定义：

str_dup(string, times)

参数列表：

• string: 字符串，字符串向量。
• times: 复制数量

复制一个字符串向量。

> val <- c("abca4", 123, "cba2")# 复制2次> str_dup(val, 2)[1] "abca4abca4" "123123"     "cba2cba2"  # 按位置复制> str_dup(val, 1:3)[1] "abca4"        "123123"       "cba2cba2cba2"

3.1.5 str_wrap，控制字符串输出格式

函数定义：

str_wrap(string, width = 80, indent = 0, exdent = 0)

参数列表：

• string: 字符串，字符串向量。
• width: 设置一行所占的宽度。
• indent: 段落首行的缩进值
• exdent: 段落非首行的缩进值

 txt<-'R语言作为统计学一门语言，一直在小众领域闪耀着光芒。直到大数据的爆发，R语言变成了一门炙手可热的数据分析的利器。随着越来越多的工程背景的人的加入，R语言的社区在迅速扩大成长。现在已不仅仅是统计领域，教育，银行，电商，互联网….都在使用R语言。'# 设置宽度为40个字符> cat(str_wrap(txt, width = 40), "\n")R语言作为统计学一门语言，一直在小众领域闪耀着光芒。直到大数据的爆发，R语言变成了一门炙手可热的数据分析的利器。随着越来越多的工程背景的人的加入，R语言的社区在迅速扩大成长。现在已不仅仅是统计领域，教育，银行，电商，互联网….都在使用R语言。 # 设置宽度为60字符，首行缩进2字符> cat(str_wrap(txt, width = 60, indent = 2), "\n")  R语言作为统计学一门语言，一直在小众领域闪耀着光芒。直到大数据的爆发，R语言变成了一门炙手可热的数据分析的利器。随着越来越多的工程背景的人的加入，R语言的社区在迅速扩大成长。现在已不仅仅是统计领域，教育，银行，电商，互联网….都在使用R语言。 # 设置宽度为10字符，非首行缩进4字符> cat(str_wrap(txt, width = 10, exdent = 4), "\n")R语言作为    统计学一    门语言，    一直在小    众领域闪    耀着光芒。    直到大数据    的爆发，R    语言变成了    一门炙手可    热的数据分    析的利器。    随着越来    越多的工程    背景的人的    加入，R语    言的社区在    迅速扩大成    长。现在已    不仅仅是统    计领域，教    育，银行，    电商，互联    网….都在使    用R语言。 

3.1.6 str_sub,截取字符串

函数定义：

str_sub(string, start = 1L, end = -1L)

参数列表：

• string: 字符串，字符串向量。
• start : 开始位置
• end : 结束位置

截取字符串。

> txt <- "I am Conan."# 截取1-4的索引位置的字符串> str_sub(txt, 1, 4)[1] "I am"# 截取1-6的索引位置的字符串> str_sub(txt, end=6)[1] "I am C"# 截取6到结束的索引位置的字符串> str_sub(txt, 6)[1] "Conan."# 分2段截取字符串> str_sub(txt, c(1, 4), c(6, 8))[1] "I am C" "m Con" # 通过负坐标截取字符串> str_sub(txt, -3)[1] "an."> str_sub(txt, end = -3)[1] "I am Cona"

对截取的字符串进行赋值。

> x <- "AAABBBCCC"# 在字符串的1的位置赋值为1> str_sub(x, 1, 1) <- 1; x[1] "1AABBBCCC"# 在字符串从2到-2的位置赋值为2345> str_sub(x, 2, -2) <- "2345"; x[1] "12345C"

3.2 字符串计算函数

3.2.1 str_count, 字符串计数

函数定义：

str_count(string, pattern = "")

参数列表：

• string: 字符串，字符串向量。
• pattern: 匹配的字符。

对字符串中匹配的字符计数

> str_count('aaa444sssddd', "a")[1] 3

对字符串向量中匹配的字符计数

> fruit <- c("apple", "banana", "pear", "pineapple")> str_count(fruit, "a")[1] 1 3 1 1> str_count(fruit, "p")[1] 2 0 1 3

对字符串中的'.'字符计数，由于.是正则表达式的匹配符，直接判断计数的结果是不对的。

> str_count(c("a.", ".", ".a.",NA), ".")[1]  2  1  3 NA# 用fixed匹配字符> str_count(c("a.", ".", ".a.",NA), fixed("."))[1]  1  1  2 NA# 用\\匹配字符> str_count(c("a.", ".", ".a.",NA), "\\.")[1]  1  1  2 NA

3.2.2 str_length,字符串长度

函数定义：

str_length(string)

参数列表：

• string: 字符串，字符串向量。

计算字符串的长度:

> str_length(c("I", "am", "张丹", NA))[1]  1  2  2 NA

3.2.3 str_sort, 字符串值排序，同str_order索引排序

函数定义：

str_sort(x, decreasing = FALSE, na_last = TRUE, locale = "", ...)str_order(x, decreasing = FALSE, na_last = TRUE, locale = "", ...)

参数列表：

• x: 字符串，字符串向量。
• decreasing: 排序方向。
• na_last:NA值的存放位置，一共3个值，TRUE放到最后，FALSE放到最前，NA过滤处理
• locale:按哪种语言习惯排序

对字符串值进行排序。

# 按ASCII字母排序> str_sort(c('a',1,2,'11'), locale = "en")  [1] "1"  "11" "2"  "a" # 倒序排序> str_sort(letters,decreasing=TRUE)          [1] "z" "y" "x" "w" "v" "u" "t" "s" "r" "q" "p" "o" "n" "m" "l" "k" "j" "i" "h"[20] "g" "f" "e" "d" "c" "b" "a"# 按拼音排序> str_sort(c('你','好','粉','丝','日','志'),locale = "zh")  [1] "粉" "好" "你" "日" "丝" "志"

对NA值的排序处理

 #把NA放最后面> str_sort(c(NA,'1',NA),na_last=TRUE) [1] "1" NA  NA #把NA放最前面> str_sort(c(NA,'1',NA),na_last=FALSE) [1] NA  NA  "1"#去掉NA值 > str_sort(c(NA,'1',NA),na_last=NA)    [1] "1"

3.3 字符串匹配函数

3.3.1 str_split,字符串分割，同str_split_fixed

函数定义：

str_split(string, pattern, n = Inf)str_split_fixed(string, pattern, n)

参数列表：

• string: 字符串，字符串向量。
• pattern: 匹配的字符。
• n: 分割个数

对字符串进行分割。

> val <- "abc,123,234,iuuu"# 以,进行分割> s1<-str_split(val, ",");s1[[1]][1] "abc"  "123"  "234"  "iuuu"# 以,进行分割，保留2块> s2<-str_split(val, ",",2);s2[[1]][1] "abc"          "123,234,iuuu"# 查看str_split()函数操作的结果类型list> class(s1)[1] "list"# 用str_split_fixed()函数分割，结果类型是matrix> s3<-str_split_fixed(val, ",",2);s3     [,1]  [,2]          [1,] "abc" "123,234,iuuu"> class(s3)[1] "matrix"

3.3.2 str_subset:返回的匹配字符串

函数定义：

str_subset(string, pattern)

参数列表：

• string: 字符串，字符串向量。
• pattern: 匹配的字符。

> val <- c("abc", 123, "cba")# 全文匹配> str_subset(val, "a")[1] "abc" "cba"# 开头匹配> str_subset(val, "^a")[1] "abc"# 结尾匹配> str_subset(val, "a$")[1] "cba"

3.3.3 word, 从文本中提取单词

函数定义：

word(string, start = 1L, end = start, sep = fixed(" "))

参数列表：

• string: 字符串，字符串向量。
• start: 开始位置。
• end: 结束位置。
• sep: 匹配字符。

> val <- c("I am Conan.", "http://fens.me, ok")# 默认以空格分割，取第一个位置的字符串> word(val, 1)[1] "I"               "http://fens.me,"> word(val, -1)[1] "Conan." "ok"    > word(val, 2, -1)[1] "am Conan." "ok"       # 以,分割，取第一个位置的字符串 > val<-'111,222,333,444'> word(val, 1, sep = fixed(','))[1] "111"> word(val, 3, sep = fixed(','))[1] "333"

3.3.4 str_detect匹配字符串的字符

函数定义：

str_detect(string, pattern)

参数列表：

• string: 字符串，字符串向量。
• pattern: 匹配字符。

> val <- c("abca4", 123, "cba2")# 检查字符串向量，是否包括a> str_detect(val, "a")[1]  TRUE FALSE  TRUE# 检查字符串向量，是否以a为开头> str_detect(val, "^a")[1]  TRUE FALSE FALSE# 检查字符串向量，是否以a为结尾> str_detect(val, "a$")[1] FALSE FALSE FALSE

3.3.6 str_match,从字符串中提取匹配组

函数定义：

str_match(string, pattern)str_match_all(string, pattern)

参数列表：

• string: 字符串，字符串向量。
• pattern: 匹配字符。

从字符串中提取匹配组

> val <- c("abc", 123, "cba")# 匹配字符a，并返回对应的字符> str_match(val, "a")     [,1][1,] "a" [2,] NA  [3,] "a" # 匹配字符0-9，限1个，并返回对应的字符> str_match(val, "[0-9]")     [,1][1,] NA  [2,] "1" [3,] NA  # 匹配字符0-9，不限数量，并返回对应的字符> str_match(val, "[0-9]*")     [,1] [1,] ""   [2,] "123"[3,] ""  

从字符串中提取匹配组，以字符串matrix格式返回

> str_match_all(val, "a")[[1]]     [,1][1,] "a" [[2]]     [,1][[3]]     [,1][1,] "a" > str_match_all(val, "[0-9]")[[1]]     [,1][[2]]     [,1][1,] "1" [2,] "2" [3,] "3" [[3]]     [,1]

3.3.7 str_replace，字符串替换

函数定义：

str_replace(string, pattern, replacement)

参数列表：

• string: 字符串，字符串向量。
• pattern: 匹配字符。
• replacement: 用于替换的字符。

> val <- c("abc", 123, "cba")# 把目标字符串第一个出现的a或b，替换为-> str_replace(val, "[ab]", "-")[1] "-bc" "123" "c-a"# 把目标字符串所有出现的a或b，替换为-> str_replace_all(val, "[ab]", "-")[1] "--c" "123" "c--"# 把目标字符串所有出现的a，替换为被转义的字符> str_replace_all(val, "[a]", "\1\1")[1] "\001\001bc" "123"        "cb\001\001"

3.3.8 str_replace_na把NA替换为NA字符串

函数定义：

str_replace_na(string, replacement = "NA")

参数列表：

• string: 字符串，字符串向量。
• replacement : 用于替换的字符。

把NA替换为字符串

> str_replace_na(c(NA,'NA',"abc"),'x')[1] "x"   "NA"  "abc"

3.3.9 str_locate，找到的模式在字符串中的位置。

函数定义：

str_locate(string, pattern)str_locate_all(string, pattern)

参数列表：

• string: 字符串，字符串向量。
• pattern: 匹配字符。

> val <- c("abca", 123, "cba")# 匹配a在字符串中的位置> str_locate(val, "a")     start end[1,]     1   1[2,]    NA  NA[3,]     3   3# 用向量匹配> str_locate(val, c("a", 12, "b"))     start end[1,]     1   1[2,]     1   2[3,]     2   2# 以字符串matrix格式返回> str_locate_all(val, "a")[[1]]     start end[1,]     1   1[2,]     4   4[[2]]     start end[[3]]     start end[1,]     3   3# 匹配a或b字符，以字符串matrix格式返回> str_locate_all(val, "[ab]")[[1]]     start end[1,]     1   1[2,]     2   2[3,]     4   4[[2]]     start end[[3]]     start end[1,]     2   2[2,]     3   3

3.3.10 str_extract从字符串中提取匹配模式

函数定义：

str_extract(string, pattern)str_extract_all(string, pattern, simplify = FALSE)

参数列表：

• string: 字符串，字符串向量。
• pattern: 匹配字符。
• simplify: 返回值，TRUE返回matrix，FALSE返回字符串向量

> val <- c("abca4", 123, "cba2")# 返回匹配的数字> str_extract(val, "\\d")[1] "4" "1" "2"# 返回匹配的字符> str_extract(val, "[a-z]+")[1] "abca" NA     "cba" > val <- c("abca4", 123, "cba2")> str_extract_all(val, "\\d")[[1]][1] "4"[[2]][1] "1" "2" "3"[[3]][1] "2"> str_extract_all(val, "[a-z]+")[[1]][1] "abca"[[2]]character(0)[[3]][1] "cba"

3.4 字符串变换函数

3.4.1 str_conv:字符编码转换

函数定义：

str_conv(string, encoding)

参数列表：

• string: 字符串，字符串向量。
• encoding: 编码名。

对中文进行转码处理。

# 把中文字符字节化> x <- charToRaw('你好');x[1] c4 e3 ba c3# 默认win系统字符集为GBK，GB2312为GBK字集，转码正常> str_conv(x, "GBK")[1] "你好"> str_conv(x, "GB2312")[1] "你好"# 转UTF-8失败> str_conv(x, "UTF-8")[1] "���"Warning messages:1: In stri_conv(string, encoding, "UTF-8") :  input data \xffffffc4 in current source encoding could not be converted to Unicode2: In stri_conv(string, encoding, "UTF-8") :  input data \xffffffe3\xffffffba in current source encoding could not be converted to Unicode3: In stri_conv(string, encoding, "UTF-8") :  input data \xffffffc3 in current source encoding could not be converted to Unicode

把unicode转UTF-8

> x1 <- "\u5317\u4eac"> str_conv(x1, "UTF-8")[1] "北京"

3.4.2 str_to_upper,字符串大写转换。

函数定义：

str_to_upper(string, locale = "")str_to_lower(string, locale = "")str_to_title(string, locale = "")

参数列表：

• string: 字符串。
• locale:按哪种语言习惯排序

字符串大写转换:

> val <- "I am conan. Welcome to my blog! http://fens.me"# 全大写> str_to_upper(val)[1] "I AM CONAN. WELCOME TO MY BLOG! HTTP://FENS.ME"# 全小写> str_to_lower(val)[1] "i am conan. welcome to my blog! http://fens.me"# 首字母大写> str_to_title(val)[1] "I Am Conan. Welcome To My Blog! Http://Fens.Me"

字符串在平常的数据处理中经常用过，需要对字符串进行分割、连接、转换等操作，本篇中通过介绍stringr，灵活的字符串处理库，可以有效地提高代码的编写效率。有了好的工具，在用R语言处理字符串就顺手了。