当所需变量的数量未知时如何使用 tidyr::separate
How to use tidyr::separate when the number of needed variables is unknown
我有一个包含电子邮件通信的数据集。一个例子:
library(dplyr)
library(tidyr)
dat <- data_frame('date' = Sys.time(),
'from' = c("person1@gmail.com", "person2@yahoo.com",
"person3@hotmail.com", "person4@msn.com"),
'to' = c("person2@yahoo.com,person3@hotmail.com", "person3@hotmail.com",
"person4@msn.com,person1@gmail.com,person2@yahoo.com", "person1@gmail.com"))
在上面的示例中,很简单就能看出我需要多少个变量,所以我可以执行以下操作:
dat %>% separate(to, into = paste0("to_", 1:3), sep = ",", extra = "merge", fill = "right")
#Source: local data frame [4 x 5]
#
# date from to_1 to_2 to_3
# (time) (chr) (chr) (chr) (chr)
#1 2015-10-22 14:52:41 person1@gmail.com person2@yahoo.com person3@hotmail.com NA
#2 2015-10-22 14:52:41 person2@yahoo.com person3@hotmail.com NA NA
#3 2015-10-22 14:52:41 person3@hotmail.com person4@msn.com person1@gmail.com person2@yahoo.com
#4 2015-10-22 14:52:41 person4@msn.com person1@gmail.com NA NA
但是,我的数据集有 4,000 条记录,我不想遍历并找到其中包含最多元素的行,这样我就可以确定需要创建多少个变量。我的处理方法是先自己拆分列并获取每个拆分的长度,然后找到最大值:
n_vars <- dat$to %>% str_split(",") %>% lapply(function(z) length(z)) %>% unlist() %>% max()
但这似乎效率不高。有更好的方法吗?
这是一个很好的问题 - 我通常的回答是使用 strsplit
,然后是 unnest
和 spread
,这也不是非常有效:
library(dplyr)
library(tidyr)
dat %>% mutate(to = strsplit(to, ",")) %>%
unnest(to) %>%
group_by(from) %>%
mutate(row = row_number()) %>%
spread(row, to)
Source: local data frame [4 x 5]
date from 1 2 3
(time) (chr) (chr) (chr) (chr)
1 2015-10-22 15:03:17 person1@gmail.com person2@yahoo.com person3@hotmail.com NA
2 2015-10-22 15:03:17 person2@yahoo.com person3@hotmail.com NA NA
3 2015-10-22 15:03:17 person3@hotmail.com person4@msn.com person1@gmail.com person2@yahoo.com
4 2015-10-22 15:03:17 person4@msn.com person1@gmail.com NA NA
我们可以使用 cSplit
library(splitstackshape)
cSplit(dat, 'to', ',')
我有一个包含电子邮件通信的数据集。一个例子:
library(dplyr)
library(tidyr)
dat <- data_frame('date' = Sys.time(),
'from' = c("person1@gmail.com", "person2@yahoo.com",
"person3@hotmail.com", "person4@msn.com"),
'to' = c("person2@yahoo.com,person3@hotmail.com", "person3@hotmail.com",
"person4@msn.com,person1@gmail.com,person2@yahoo.com", "person1@gmail.com"))
在上面的示例中,很简单就能看出我需要多少个变量,所以我可以执行以下操作:
dat %>% separate(to, into = paste0("to_", 1:3), sep = ",", extra = "merge", fill = "right")
#Source: local data frame [4 x 5]
#
# date from to_1 to_2 to_3
# (time) (chr) (chr) (chr) (chr)
#1 2015-10-22 14:52:41 person1@gmail.com person2@yahoo.com person3@hotmail.com NA
#2 2015-10-22 14:52:41 person2@yahoo.com person3@hotmail.com NA NA
#3 2015-10-22 14:52:41 person3@hotmail.com person4@msn.com person1@gmail.com person2@yahoo.com
#4 2015-10-22 14:52:41 person4@msn.com person1@gmail.com NA NA
但是,我的数据集有 4,000 条记录,我不想遍历并找到其中包含最多元素的行,这样我就可以确定需要创建多少个变量。我的处理方法是先自己拆分列并获取每个拆分的长度,然后找到最大值:
n_vars <- dat$to %>% str_split(",") %>% lapply(function(z) length(z)) %>% unlist() %>% max()
但这似乎效率不高。有更好的方法吗?
这是一个很好的问题 - 我通常的回答是使用 strsplit
,然后是 unnest
和 spread
,这也不是非常有效:
library(dplyr)
library(tidyr)
dat %>% mutate(to = strsplit(to, ",")) %>%
unnest(to) %>%
group_by(from) %>%
mutate(row = row_number()) %>%
spread(row, to)
Source: local data frame [4 x 5]
date from 1 2 3
(time) (chr) (chr) (chr) (chr)
1 2015-10-22 15:03:17 person1@gmail.com person2@yahoo.com person3@hotmail.com NA
2 2015-10-22 15:03:17 person2@yahoo.com person3@hotmail.com NA NA
3 2015-10-22 15:03:17 person3@hotmail.com person4@msn.com person1@gmail.com person2@yahoo.com
4 2015-10-22 15:03:17 person4@msn.com person1@gmail.com NA NA
我们可以使用 cSplit
library(splitstackshape)
cSplit(dat, 'to', ',')