怎么删除重复项

cheetahfly 发表于 2018-5-4 21:55
不超过1G的数据应该妥妥的没问题，如果超过10个G，就用data.table包：
dt

超过10G了，还是用read.table()读取数据吗？感觉读取数据就很费时间

不二不幸福 发表于 2018-5-5 11:12
超过10G了，还是用read.table()读取数据吗？感觉读取数据就很费时间

data.table::fread()

不错。 好多方法

1. library(dplyr)
   
2. x <- data.frame(v1 = c("aaa","aaa","bbb","aaa","ccc","bbb"), v2 = c(111,222,111,111,222,111), v3 = c(222,111,333,222,222,444))
   
3. x
   
4. 
   
5. x <- x %>%
   
6.   distinct(v1,v2,v3,.keep_all = TRUE)

复制代码