É, realmente funciona com o pacote ff. Consegui ler as 70 milhões de linhas e 50 variáveis em pouco menos de 2 horas. Abraços, Leonardo. Em 12 de junho de 2014 12:39, Benilton Carvalho <beniltoncarvalho@gmail.com> escreveu:
a resposta e' 'sim'...
a detalhada e': 'sim, se vc tiver espaco suficiente em disco'
o jeito de saber e' testando.
Em 12 de junho de 2014 11:39, Leonardo Aguirre <leoaguirre32@gmail.com> escreveu:
conheço, mas não sei se ele vai aguentar, o banco tem mais de 70milhões de
linhas e 50 variáveis. Uso um Mac com 12Gb de RAM...Você saberia me dizer se ele aguenta?
Obrigado,
Leonardo.
Em 12 de junho de 2014 10:51, Edson Lira <edinhoestat@yahoo.com.br> escreveu:
Conheces o pacote ff para ler arquivos grandes em csv?
Edson Lira Estatístico Manaus-Amazonas
Em Quinta-feira, 12 de Junho de 2014 9:32, Leonardo Aguirre < leoaguirre32@gmail.com> escreveu:
Pessoal,
Alguém sabe como definir o encoding do arquivo usando a função read.csv.sql? Tenho um banco em CSV com 19Gb e preciso ler já aplicando alguns filtros, e pensei em fazer isso usando a função read.csv.sql, do pacote sqldf. Entretanto, preciso definir o encoding="latin1" ao ler essa base.
Obrigado,
Leonardo.
_______________________________________________ R-br mailing list R-br@listas.c3sl.ufpr.br https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça código mínimo reproduzível.
_______________________________________________ R-br mailing list R-br@listas.c3sl.ufpr.br https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça código mínimo reproduzível.
_______________________________________________ R-br mailing list R-br@listas.c3sl.ufpr.br https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça código mínimo reproduzível.
--
[image: Benilton Carvalho on about.me]
Benilton Carvalho about.me/benilton <http://about.me/benilton>
_______________________________________________ R-br mailing list R-br@listas.c3sl.ufpr.br https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça código mínimo reproduzível.