search for: colbycol

Hello, I submitted a small package, colbycol, to CRAN. I developed it on Linux and tested it on my Linux box and another Windows machine. Besides, other people kindly tested it in their systems. The package seems to "compile" correctly in r-forge for Windows. In fact, you can find the binary package at http://r-forge.r-project.or...

Hola, Estoy todavía dando mis primeros pasos en R y una de las cosas que tengo que hacer es trabajar con un csv de 16 GB. Consta de 10 columnas, 7 númericas He probado varias cosas entre ellas  los paquetes  'colbycol', data.table, ff , etc,  pero nada, mi ordenador de queda frito. Por cierto, tiene 8GB de RAM y Windows 8 ¿Debo trocear previamente el csv,me recomendais algún paquete en especial, etc para trabajar con un fichero tan pesado, otra solución?... Muchas gracias [[alternative HTML version delete...

I have a humongous csv file containing census data, far too big to read into RAM. I have been trying to extract individual columns from this file using the colbycol package. This works for certain subsets of the columns, but not for others. I have not yet been able to precisely identify the problem columns, as there are 731 columns and running colbycol on the file on my old slow machine takes about 6 hours. However, my suspicion is that there are some funky...

...[R-es] Cargar csv de 16GB en R > > > > > Hola, > > Estoy todavía dando mis primeros pasos en R y una de las cosas que tengo > que > hacer es trabajar con un csv de 16 GB. Consta de 10 columnas, 7 númericas > He > probado varias cosas entre ellas los paquetes 'colbycol', data.table, ff > , > etc, pero nada, mi ordenador de queda frito. Por cierto, tiene 8GB de RAM > y > Windows 8 > > ¿Debo trocear previamente el csv,me recomendais algún paquete en especial, > etc para trabajar con un fichero tan pesado, otra solución?... > > Muchas...

Hola a todos, Quería saber si alguien tiene un buen tutorial para el paquete data.table. Estoy levantando los micro datos del censo Uruguayo del 2011, con una maquina no muy buena, solo lo he logrado utilizando dicho paquete. Ahora no puedo hacer operaciones sencillas como contar los mayores de 18 años de edad por departamento. Bueno si alguien tiene un tutorial de dicho paquete o algún otro

...; > > > > > > Hola, > > > > Estoy todavía dando mis primeros pasos en R y una de las cosas que > > tengo que hacer es trabajar con un csv de 16 GB. Consta de 10 > > columnas, 7 númericas He probado varias cosas entre ellas los > > paquetes 'colbycol', data.table, ff , etc, pero nada, mi ordenador > > de queda frito. Por cierto, tiene 8GB de RAM y Windows 8 > > > > ¿Debo trocear previamente el csv,me recomendais algún paquete en > > especial, etc para trabajar con un fichero tan pesado, otra > solución?... &...

Hi I am using Stata 10 and I need to import a data set in stata 10 to R, I have saved the dataset in lower versions of Stata as well by using saveold command in Stata. My RAM is 4gb and the stata file is 600MB, I am getting an error message which says : "Error: cannot allocate vector of size 3.4 Mb In addition: There were 50 or more warnings (use warnings() to see the first 50)" Thus

...> > > > > > > Hola, > > > > Estoy todavía dando mis primeros pasos en R y una de las cosas que > > tengo que hacer es trabajar con un csv de 16 GB. Consta de 10 > > columnas, 7 númericas He probado varias cosas entre ellas los > > paquetes 'colbycol', data.table, ff , etc, pero nada, mi ordenador > > de queda frito. Por cierto, tiene 8GB de RAM y Windows 8 > > > > ¿Debo trocear previamente el csv,me recomendais algún paquete en > > especial, etc para trabajar con un fichero tan pesado, otra > solución?... &gt...

...iar estas recomendaciones serían: - ¿Tienes que tener todos los datos simultáneamente en memoria para el análisis? Porque si no es así ahorras mucho espacio en memoria y tiempo leyendo nada más lo necesario para el análisis. Un paquete para hacer esto es el de nuestro colega Carlos Gil de Bellosta, colbycol. - Los datos de entrada ¿dónde están? Puede ser texto plano, pero también puedes tenerlo en una base de datos que te permite hacer consultas, muestreo etc. antes de la carga. A mi me ha funcionado (pero hace tiempo) muy bien mysql con RMySQL en diferentes sistemas, y también tienes librerías para a...

I'm working with a 350MB CSV file on a server that has 3GB of RAM, yet I'm hitting a memory error when I try to store the data frame into a survey design object, the R object that stores data for complex sample survey data. When I launch R, I execute the following line from Windows: "C:\Program Files\R\R-2.9.1\bin\Rgui.exe" --max-mem-size=2047M Anything higher, and I get an