[R-es] Importar grandes volumenes de datos

Marcuzzi, Javier Rubén javier.ruben.marcuzzi en gmail.com
Jue Ene 24 23:26:47 CET 2013


Estimada Paulina

Casualmente ayer leí un trozo de una tesis doctoral, en esta menciona la
cantidad de memoria ram de acuerdo a como utiliza las matrices. Copio y
pego esa parte de la tesis.

The computation takes about 7 minutes on a 3.4 GHz processor resulting
in a 4, 583 ×
29, 265 dimensioned matrix. A dense matrix would require about 4
Gigabyte RAM
(4, 583 · 29, 265 · 32/1, 0243 ), the sparse compressed S4 matrix
instead requires only 6
Megabyte RAM as reported by object.size(). The reason is the extremely
sparse
internal structure since most combinations of documents and terms are
zero. Besides
using sparse matrices another common approach for handling the memory
problem is
to reduce the number of terms dramatically. 

Javier Marcuzzi


El jue, 24-01-2013 a las 22:56 +0100, Carlos Ortega escribió:
> Hola Paulina,
> 
> El que puedas o no depende de tu mquina, del Sistema Operativo, de si es
> de 32 o 64 bits, de la RAM, etc.
> Sobre un Windows-7, 32-bits y 4 Gb de RAM he trabajado con cierta comodidad
> recientemente sobre un conjunto de equivalente al que comentas.
> 
> Obviamente el primer paso es cargar el conjunto, pero despus tambin
> depende del tipo de anlisis que quieras hacer.
> 
> Saludos,
> Carlos Ortega
> www.qualityexcellence.es
> 
> 
> El 24 de enero de 2013 22:33, Paulina Dffffedaz <paulipollet en yahoo.es>escribi:
> 
> > Hola tod en s
> >
> > Estoy subiendo informacin pero esta es extensa y R no me permite tengo
> > 18'000.000  de registros con 30 campos, alguien puede indicarme como subir
> > esta informacion o no es posible?
> >
> > Gracias por su ayuda
> >         [[alternative HTML version deleted]]
> >
> >
> > _______________________________________________
> > R-help-es mailing list
> > R-help-es en r-project.org
> > https://stat.ethz.ch/mailman/listinfo/r-help-es
> >
> >
> 
> 
> _______________________________________________
> R-help-es mailing list
> R-help-es en r-project.org
> https://stat.ethz.ch/mailman/listinfo/r-help-es



Más información sobre la lista de distribución R-help-es