web-dev-qa-db-ja.com

nan値の行を削除します

たとえば、このデータがあるとします。

data <- c(1,2,3,4,5,6,NaN,5,9,NaN,23,9)
attr(data,"dim") <- c(6,2)
data

     [,1] [,2]
[1,]    1  NaN
[2,]    2    5
[3,]    3    9
[4,]    4  NaN
[5,]    5   23
[6,]    6    9

ここで、NaN値を含む行を削除します：行1および4。しかし、これらの行が100.000行以上のデータセットである場合、どこにあるかわかりません。完全な行。

誰かが私を正しい方向に向けることができますか？

rnandata-manipulation
26
Sir Ksilem

関数 complete.casesは、行が必要な場所を示します。

data <- matrix(c(1,2,3,4,5,6,NaN,5,9,NaN,23,9), ncol=2)
data[complete.cases(data), ]

     [,1] [,2]
[1,]    2    5
[2,]    3    9
[3,]    5   23
[4,]    6    9
41
Andrie

データ

data <- matrix(rnorm(100000000), ncol=10000)
idx <- sample(1:10000,100)
idy <- sample(1:10000,100)
data[idx,idy] <- NaN

関数

foo <- function(d=data) d[apply(d,2,function(x) any(is.nan(x))),]

実行時間

> system.time(data[complete.cases(data),])
   user  system elapsed 
   3.53    0.12    3.65 

> system.time(foo(data))
   user  system elapsed 
   2.37    0.09    2.46
5
Wojciech Sobala