-->

GoogleSearch


Scientist. Husband. Daddy. --- TOLLE. LEGE
외부자료의 인용에 있어 대한민국 저작권법(28조)과 U.S. Copyright Act (17 USC. §107)에 정의된 "저작권물의 공정한 이용원칙 | the U.S. fair use doctrine" 을 따릅니다. 저작권(© 최광민)이 명시된 모든 글과 번역문들에 대해 (1) 복제-배포, (2) 임의수정 및 자의적 본문 발췌, (3) 무단배포를 위한 화면캡처를 금하며, (4) 인용 시 URL 주소 만을 사용할 수 있습니다. [후원 | 운영] [대문으로] [방명록] [옛 방명록] [티스토리 (백업)]

이 블로그 검색

huge data loading into R

라벨:





Best solution?


bigdf <- data-blogger-escaped-20="" data-blogger-escaped-4e7="" data-blogger-escaped-50="" data-blogger-escaped-br="" data-blogger-escaped-data.frame="" data-blogger-escaped-dim="sample(letters," data-blogger-escaped-fact1="rnorm(4e7)," data-blogger-escaped-fact2="rnorm(4e7," data-blogger-escaped-replace="T,"> write.csv(bigdf, ‘bigdf.csv’, quote = F)

then test,

library(sqldf)
f <- data-blogger-escaped-bigdf.csv="" data-blogger-escaped-br="" data-blogger-escaped-file=""> system.time(bigdf <- data-blogger-escaped-dbname="tempfile()," data-blogger-escaped-f="" data-blogger-escaped-file.format="list(header" data-blogger-escaped-from="" data-blogger-escaped-row.names="F)))<br" data-blogger-escaped-select="" data-blogger-escaped-sqldf="" data-blogger-escaped-t="">

then compare,

system.time(read.table( file="bigdf.csv")







라벨:




Scientist. Husband. Daddy. --- TOLLE. LEGE
외부자료의 인용에 있어 대한민국 저작권법(28조)과 U.S. Copyright Act (17 USC. §107)에 정의된 "저작권물의 공정한 이용원칙 | the U.S. fair use doctrine" 을 따릅니다. 저작권(© 최광민)이 명시된 모든 글과 번역문들에 대해 (1) 복제-배포, (2) 임의수정 및 자의적 본문 발췌, (3) 무단배포를 위한 화면캡처를 금하며, (4) 인용 시 URL 주소 만을 사용할 수 있습니다. [후원 | 운영] [대문으로] [방명록] [옛 방명록] [티스토리 (백업)] [신시내티]

-