similar to: R y la gestión de memoria

Hola: Por lo visto tengo un problema de gestión de la memoria en R con un programa que trabaja con archivos por lotes (no sé si se dice así en castellano, en "batch" mode) para elaborar unos informes, etc. En el conjunto de datos de un año concreto, tengo 197 archivos xml que procesar, de entre 50 y 200Kb la mayoría, con un total de 28 Mb en total. Trabajo con Eclipse como IDE (lo

Hola a todos. Tengo un problema y quería saber si hay alguna solución más allá de ampliar la memoria del ordenador. El caso es que tengo un script en el que voy generando datos... y al final tengo unos ficheros enormes que tarde o temprano me dan errores de memoria (en especial cuando los exporto a excel con XLConnect) Yo suponía que si en R borraba una variable con rm() el espacio de memoria

Y aún así veremos si puedes apañarte... R no es muy buen gestor de memoria. Además de lo que te ha dicho Carlos, lo mejor es "programar bien", sabiendo cuando R hace copias de los objetos (cosa que hace muy a menudo), para evitarlo al máximo. Otra cosa que puede hacerse es "adelgazar los objetos" si no necesitas mucha de la información que contienen. Por ejemplo, si haces un

Estaba usando el ESS pero me he dado cuenta que si tiene csv, yo lo bajé de aquí en formato SPSS pero me da el error de falta de memoria http://www.europeansocialsurvey.org/downloadwizard/ 2017-06-27 10:38 GMT-05:00 Freddy Omar López Quintero < freddy.lopez.quintero en gmail.com>: > > 2017-06-27 11:34 GMT-04:00 Antonio Rodriguez Andres < > antoniorodriguezandres70 en

Si de hecho he utilizado el read_spss por el tema de las labels. Pero obtengo el mismo mensaje de problema de memoria. Antonio 2017-06-27 10:30 GMT-05:00 Freddy Omar López Quintero < freddy.lopez.quintero en gmail.com>: > > 2017-06-27 11:10 GMT-04:00 Antonio Rodriguez Andres < > antoniorodriguezandres70 en gmail.com>: > >> El >> survey solo tiene los datos en

Antes de nada, me gustaría daros las gracias por toda vuestra ayuda. He estado probando todo lo que me habéis dicho a la vez, y no hay manera, sigo teniendo el problema con el espacio. En cuanto al tamaño de la base de datos, es más grande de lo que puse, me equivoqué y puse el tamaño de una base anterior con la que estuve trabajando, la actual tiene 36866 filas x 6500 columnas. He seguido todas

Buenas tardes amigos, De nuevo por aqui con un incoveniente, tengo el siguiente arreglo: > MuestraS [1] 1 0 0 0 1 0 1 1 1 1 1 0 Deseo realizar todas las permutaciones posibles para luego tomar una muestra aleatoria pequeña, esto lo debo hacer varias veces incrementando el largo del arreglo "MuestraS". El inconveniente esta en que al hacer las permutaciones con este arreglo de 12

Javier, R también tiene opciones de "debug" como la que estás comentando. Te adjunto un ejemplo práctico: http://www.burns-stat.com/an-r-debugging-example/?utm_source=rss&utm_medium=rss&utm_campaign=an-r-debugging-example Saludos, Carlos Ortega www.qualityexcellence.es El 13 de junio de 2013 21:45, Marcuzzi, Javier Rubén < javier.ruben.marcuzzi@gmail.com> escribió:

Buenas tardes, Solicito por favor ayuda con este error: Error: OutOfMemoryError (Java): Java heap space Estoy trabajando con matrices de grandes dimensiones y el programa no logra completarse porque dice le falta memoria. Gracias [unnamed] Sara Suarez Zapata Estudiante en práctica - Unidad Gestion Bolsa de Energia. Tel: (574) 380 61 18 Correo: sara.suarez en

Buenos días: A ver.... una duda muy general, y otra más específica... Después de haber conseguido tratar con R.... y hacer un script de 161 páginas... es hora de empezar a hacer bucles para reducirlo a menos de 5 hojas.... el primer problema que me encuentro es que se queja de que el vector de datos que intruduzco (una base de datos de 11 años) es demasiado grande; tengo segun R... un vector de

Estimado Mauricio Monsalvo R es un lenguaje medio complicado, no es orientado a objetos, aunque hay formas para un trabajo con objetos, por otro lado se puede definir una función o emplear 5 paquetes para lo mismo en dos líneas de código. Usted tiene 1500 líneas de código, no es fácil de comprenderlas, tampoco hay recetas mágicas. Yo ordenaría como si fuesen cajas, una entrada, un proceso

Yo creo que el problema principal está en betapart.core(), que crea y mantiene simultáneamente en memoria varios objetos de alrededor de 1 Gb que luego combina en una lista... Probablemente es entre las líneas el código de betaper.core donde hay que ir eliminando objetos. Saludos, Marcelino El 22/12/2015 a las 18:26, Carlos J. Gil Bellosta escribió: > Hola, ¿qué tal? > > Yo no

Hola, ¿qué tal? Lo que quieres es un "debugger visual" (como el de muchos IDEs, incluyendo Netbeans y Eclipse) para R, como el de Revolution, http://www.youtube.com/watch?feature=player_embedded&v=7shLKEINM9A#! Pues sí, efectivamente, existe, pero solo con la versión de Revolutions de R. Y verás también que está basado en el "debugger" tradicional de R, que permite

Muchas gracias Xabier. He intentaddo trabajar con la sparse matrix pero al pasar tdm a matriz me dice también que "cannot allocate a vector of size 12 gb". He hecho tdm<-as.matrix(tdm) ¿Está bien hecho eso para trabajar con la sparse matrix? Gracias! El Lun, 10 de Febrero de 2020, 16:15, Xavier-Andoni Tibau Alberdi escribió: > La respuesta de Carlos creo que es mucho mas

Es cierto que R carga los objetos en memoria, pero ésta puede ser memoria RAM + Virtual. Yo he trabajado con data frames mayores que la memoria física. Es cierto que esto ralentiza las operaciones. Lo que marca realmente los límites de la memoria es la versión del sistema operativo y de R, que han de ser de 64 bits. En un sistema de 32 bits el direccionamiento teórico máximo es de 4 Gbytes, pero

Con oracle puedes usar, si tu máquina es de 64bits la librería Roracle que va muy bien y no es muy complicada de instalar. Hay que distinguir 2 cosas, cuando accedes a la base de datos y allí haces la consulta, eso da igual si lo haces con RODBC o Roracle y cuando cargas los datos en tu data.frame, en esta operación, ya no está usando el gestor de base de datos sino tu propio R. La velocidad y

No soy experto en data mining con R, sé que existe algún paquete al respecto, pero no sé si R sería lo más adecuado para cantidades ingentes de datos… Saludos, Juan Carmona. De: Eduardo Bieñkowski [mailto:edukoski@gmail.com] Enviado el: miércoles, 04 de junio de 2014 17:07 Para: Joan Carmona CC: Isidro Hidalgo; r-help-es Asunto: Re: [R-es] Cargar csv de 16GB en R Si pero que pasaría

Estoy de acuerdo con la observación de Joan, yo supe utilizar formas para trabajar con más memoria de la configurada como base, pero tengamos en cuenta que una vez importados los datos, cualquier operación estará entre la memoria física y la virtual, es todo un desafío y dependerá del análisis estadístico (me refiero a los algoritmos que ordenen al CPU). Mi experiencia cuándo trabaje con muchos

Hola Rubén, Totalmente de acuerdo con los consejos de Carlos. Ten en cuenta que aunque R disponga de varios (bastantes) GB de memoria, algunos de los objetos que va creando durante el proceso pueden consumirla por completo. Es decir, que aunque tu ordenador tenga 64GB de RAM, es posible que no queden 10 GB libres para almacenar un objeto (porque ya hay demasiados objetos grandes en la

In winecfg is alsadrv selected but i cant see any asio audio device in a asio compatible aplication and no ports in jack too if i do: env WINEDEBUG=+asio wine '/home/xxx/.wine/drive_c/Program Files/FXpansion/Geist/Geist.exe' Code: p11-kit: couldn't load module: /usr/lib/i386-linux-gnu/pkcs11/gnome-keyring-pkcs11.so: /usr/lib/i386-linux-gnu/pkcs11/gnome-keyring-pkcs11.so: no se