Supongamos que quiero crear un cuadro de diálogo, un elemento secundario de mi progtwig principal: from PyQt4 import QtGui, QtCore class WizardJournal(QtGui.QDialog): def __init__(self, parent): super(WizardJournal, self).__init__(parent) self.parent = parent self.initUI() def initUI(self): self.parent.wizard = QtGui.QWidget() self.ok_button = QtGui.QPushButton(“OK”, self) self.vbox_global = QtGui.QVBoxLayout(self) self.vbox_global.addWidget(self.ok_button) self.paret.wizard.setLayout(self.vbox_global) self.parent.wizard.show() if __name__ == ‘__main__’: app = QtGui.QApplication(sys.argv) parent = […]
Supongamos que tengo un kernel para calcular la sum de dos arreglos en cuanto a elementos. En lugar de pasar a, b y c como tres parámetros, los hago estructurar miembros de la siguiente manera: typedef struct { __global uint *a; __global uint *b; __global uint *c; } SumParameters; __kernel void compute_sum(__global SumParameters *params) { […]
Tengo tres DataFrames que estoy tratando de concatenar. concat_df = pd.concat([df1, df2, df3]) Esto resulta en un error de memoria. ¿Cómo puedo resolver esto? Tenga en cuenta que la mayoría de las preguntas similares existentes están relacionadas con las MemoryErrors que se producen al leer archivos grandes. No tengo ese problema He leído mis archivos […]
Estoy usando numpy para crear una matriz de cubos con lados de longitud 100, por lo que contiene un total de 1 millón de entradas. Para cada uno de los millones de entradas, estoy insertando una matriz de 100×100 cuyas entradas se componen de números generados aleatoriamente. Estoy usando el siguiente código para hacerlo: import […]
Estoy experimentando Exceeded soft private memory limit error de Exceeded soft private memory limit ocasional en una amplia variedad de manejadores de solicitudes en el motor de aplicaciones. Entiendo que este error significa que la RAM utilizada por la instancia ha excedido la cantidad asignada, y cómo eso hace que la instancia se cierre. Me […]
Estoy tratando de usar setrlimit para limitar el uso de mi memoria en un sistema Linux, a fin de evitar que mi proceso setrlimit en la máquina (mi código estaba dañando los nodos en un clúster de alto rendimiento, porque un error provocó un consumo de memoria superior a 100). Gibraltar). Parece que no puedo […]
Tengo alrededor de 700 matrices almacenadas en el disco, cada una con alrededor de 70k filas y 300 columnas. Tengo que cargar partes de estas matrices con relativa rapidez, alrededor de 1k filas por matriz, en otra matriz que tengo en la memoria. La forma más rápida que encontré para hacer esto es usar mapas […]
En un sistema de 64 bits, un entero en Python toma 24 bytes. Esto es 3 veces la memoria que se necesitaría, por ejemplo, en C para un entero de 64 bits. Ahora, sé que esto es porque los enteros de Python son objetos. ¿Pero para qué se usa la memoria extra? Tengo mis conjeturas, […]
Estoy invocando Pyspark con Spark 2.0 en modo local con el siguiente comando: pyspark –executor-memory 4g –driver-memory 4g El dataframe de entrada se está leyendo desde un archivo tsv y tiene 580 K x 28 columnas. Estoy realizando algunas operaciones en el dataframe y luego trato de exportarlo a un archivo tsv y obtengo este […]
Tengo unos pocos (casi diez) Gb de memoria tomados por el kernel ipython. Creo que esto proviene de objetos grandes (matrices, listas, matrices numpy, …) que podría haber producido durante alguna operación y ahora ya no necesito más. Me gustaría enumerar todos los objetos que he definido y ordenarlos por su huella de memoria. ¿Hay […]