Ok, obrigado Rodrigo! Leonardo. Em 12 de junho de 2014 11:45, Rodrigo Coster <rcoster@gmail.com> escreveu:
Cara,
Eu usava o read.csv.sql(), mas ele era bastante demorado e dava erro com alguns bancos grandes (não tão grandes quanto os teus)... Uma solução foi usar o pacote RSQLite para transformar o .csv em um banco SQLite e depois chamar só as variáveis de interesse de acordo com critérios de interesse (via SQLite)...
Da uma nessa postagem que fiz como ler bancos grandes: http://rcoster.blogspot.com.br/2014/02/lendo-grandes-bancos-de-dados.html
[]'s
2014-06-12 11:39 GMT-03:00 Leonardo Aguirre <leoaguirre32@gmail.com>:
conheço, mas não sei se ele vai aguentar, o banco tem mais de 70milhões de
linhas e 50 variáveis. Uso um Mac com 12Gb de RAM...Você saberia me dizer se ele aguenta?
Obrigado,
Leonardo.
Em 12 de junho de 2014 10:51, Edson Lira <edinhoestat@yahoo.com.br> escreveu:
Conheces o pacote ff para ler arquivos grandes em csv?
Edson Lira Estatístico Manaus-Amazonas
Em Quinta-feira, 12 de Junho de 2014 9:32, Leonardo Aguirre < leoaguirre32@gmail.com> escreveu:
Pessoal,
Alguém sabe como definir o encoding do arquivo usando a função read.csv.sql? Tenho um banco em CSV com 19Gb e preciso ler já aplicando alguns filtros, e pensei em fazer isso usando a função read.csv.sql, do pacote sqldf. Entretanto, preciso definir o encoding="latin1" ao ler essa base.
Obrigado,
Leonardo.
_______________________________________________ R-br mailing list R-br@listas.c3sl.ufpr.br https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça código mínimo reproduzível.
_______________________________________________ R-br mailing list R-br@listas.c3sl.ufpr.br https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça código mínimo reproduzível.
_______________________________________________ R-br mailing list R-br@listas.c3sl.ufpr.br https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça código mínimo reproduzível.
_______________________________________________ R-br mailing list R-br@listas.c3sl.ufpr.br https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça código mínimo reproduzível.