[R-br] Problema de memória: MATRIZES GIGANTES

Quarta Agosto 24 23:06:56 BRT 2011

Se não me engano, há um tempo atrás correu na lista o mesmo problema e me
lembro de terem citado uma solução que fazia o R trabalhar com dados
reescrevendo e lendo do disco, permitindo a análise de bancos maiores, mas
com custo de tempo de processamento.

Em 24 de agosto de 2011 19:56, Pedro Rafael
<pedro.rafael.marinho em gmail.com>escreveu:

> Sim, o Revolution R é bom mas novas mudanças demoram mais para chegar nele,
> como novos pacotes, correções, etc.
>
> Pedro
>
> Em 24 de agosto de 2011 18:06, Alexandre Castagna [via R-br] <
> ml-node+3766656-34166862-223914 em n4.nabble.com> escreveu:
>
>> Caros,
>>
>> Também estou enfrentando um problema e memória e encontrei um software
>> chamado Revolution R Enterprise (http://www.revolutionanalytics.com/) que
>> é compatível com o R, mas permite análise de grandes bancos de dados; ele é
>> pago, mas tem licença gratuita para acadêmicos. Ainda não testei (acabei de
>> instalar), mas segue a dica se alguém se interessar.
>>
>> Abraços,
>>
>> Em 23 de agosto de 2011 20:03, Márcio Luís Moreira de Souza <[hidden
>> email] <http://user/SendEmail.jtp?type=node&node=3766656&i=0>> escreveu:
>>
>> Olá, Henrique!
>>>
>>> Muito obrigado pela atenção.
>>> Darei uma olhada.
>>>
>>> Abração!!
>>>
>>>
>>> Em 23 de agosto de 2011 18:05, Henrique Leme Felizatti <[hidden email]<http://user/SendEmail.jtp?type=node&node=3766656&i=1>
>>> > escreveu:
>>>
>>> Existe um projeto em R, com respectivo pacote, denominado BigMemory (
>>>> www.*bigmemory*.org/) que serve exatamente para isso. Nem todas as
>>>> funções do R estão disponíveis nesse projeto no entanto as principais
>>>> funções de manipulação de dados está implementada.
>>>>
>>>> Atenciosamente
>>>>
>>>> Henrique
>>>>
>>>>
>>>>
>>>> Em 23 de agosto de 2011 17:01, Márcio Luís Moreira de Souza <[hidden
>>>> email] <http://user/SendEmail.jtp?type=node&node=3766656&i=2>>escreveu:
>>>>
>>>> Tentei rodar:
>>>>>
>>>>> expand.grid(1:5,1:5,1:5,1:5,1:5,1:5,1:5,1:5,1:5,1:5,1:5)E deu o resultado
>>>>> Error: cannot allocate vector of size 186.3 Mb
>>>>>
>>>>> O que posso fazer?? Alguma sugestão?
>>>>>
>>>>>
>>>>> p.s.: tal comando geraria um data.frame com números inteiros.
>>>>>       Meu PC é HP pavilon (processador I5), 4 Gb de memória...
>>>>>
>>>>>
>>>>>
>>>>>
>>>>> Em 23 de agosto de 2011 16:30, Benilton Carvalho <[hidden email]<http://user/SendEmail.jtp?type=node&node=3766656&i=3>
>>>>> > escreveu:
>>>>>
>>>>>> defina gigantes.
>>>>>>
>>>>>> eu trabalho com 7M+ linhas e centenas de colunas diariamente e sem
>>>>>> problemas.
>>>>>>
>>>>>> vc precisa ser especifico com o seu problema. matrizes de reais?
>>>>>> inteiros? logicos?
>>>>>>
>>>>>> que OS? qto de RAM? que operacoes precisa na matriz?
>>>>>>
>>>>>> b
>>>>>>
>>>>>>
>>>>>> _______________________________________________
>>>>>> R-br mailing list
>>>>>> [hidden email] <http://user/SendEmail.jtp?type=node&node=3766656&i=4>
>>>>>>
>>>>>> https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br
>>>>>> Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça
>>>>>> código mínimo reproduzível.
>>>>>>
>>>>>
>>>>>
>>>>>
>>>>> --
>>>>>
>>>>> Prof. Márcio Souza, M.Sc. (DE/UFJF)
>>>>> www.profmsouza.blogspot.com
>>>>> http://lattes.cnpq.br/4578008002785684
>>>>>
>>>>>
>>>>> _______________________________________________
>>>>> R-br mailing list
>>>>> [hidden email] <http://user/SendEmail.jtp?type=node&node=3766656&i=5>
>>>>>
>>>>> https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br
>>>>> Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça
>>>>> código mínimo reproduzível.
>>>>>
>>>>
>>>>
>>>> _______________________________________________
>>>> R-br mailing list
>>>> [hidden email] <http://user/SendEmail.jtp?type=node&node=3766656&i=6>
>>>>
>>>> https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br
>>>> Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça
>>>> código mínimo reproduzível.
>>>>
>>>
>>>
>>>
>>> --
>>>
>>> Prof. Márcio Souza, M.Sc. (DE/UFJF)
>>> www.profmsouza.blogspot.com
>>> http://lattes.cnpq.br/4578008002785684
>>>
>>>
>>> _______________________________________________
>>> R-br mailing list
>>> [hidden email] <http://user/SendEmail.jtp?type=node&node=3766656&i=7>
>>>
>>> https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br
>>> Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça
>>> código mínimo reproduzível.
>>>
>>
>>
>>
>> --
>> Alexandre Castagna Mourão e Lima
>> Laboratório de Radioecologia e Mudanças Globais - UERJ
>> Rua São Francisco Xavier, 524, Maracanã
>> Pav. Haroldo Lisboa da Cunha, Sub-solo
>>
>> _______________________________________________
>> R-br mailing list
>> [hidden email] <http://user/SendEmail.jtp?type=node&node=3766656&i=8>
>> https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br
>> Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça
>> código mínimo reproduzível.
>>
>> ------------------------------
>>  If you reply to this email, your message will be added to the discussion
>> below:
>>
>> http://r-br.2285057.n4.nabble.com/R-br-Problema-de-memoria-MATRIZES-GIGANTES-tp3763660p3766656.html
>>  To unsubscribe from R-br, click here<http://r-br.2285057.n4.nabble.com/template/NamlServlet.jtp?macro=unsubscribe_by_code&node=3357982&code=cGVkcm8ucmFmYWVsLm1hcmluaG9AZ21haWwuY29tfDMzNTc5ODJ8NTAyMjI0MDYw>.
>>
>>
>
>
>
> --
> Saudações,
> Pedro Rafael Diniz Marinho - Estatístico SES-PB
> Currículo Lattes:
> http://buscatextual.cnpq.br/buscatextual/visualizacv.jsp?id=K4250792T6
>
>
> _______________________________________________
> R-br mailing list
> R-br em listas.c3sl.ufpr.br
> https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br
> Leia o guia de postagem (http://www.leg.ufpr.br/r-br-guia) e forneça
> código mínimo reproduzível.
>

-- 
Alexandre Castagna Mourão e Lima
Laboratório de Radioecologia e Mudanças Globais - UERJ
Rua São Francisco Xavier, 524, Maracanã
Pav. Haroldo Lisboa da Cunha, Sub-solo
-------------- Próxima Parte ----------
Um anexo em HTML foi limpo...
URL: <http://listas.inf.ufpr.br/pipermail/r-br/attachments/20110824/17055c17/attachment.html>