Pasar una PyTable muy grande a un QTableWidget

[edanvar]

Hola,

Tengo una PyTable muy grande, mas de un millon de lineas, la idea es mostrarla en una GUI dentro de una QTableWidget.

Me gustaria saber como hacer esto de forma que no se muestre toda la tabla de golpe en la QTableWidget, porque es demasiado grande.

Me gustaria saber como hacer que se muestren solo unas lineas, 50 o 100, y segun se va haciendo scroll en la QTableWidget, se vayan mostrando las demas hasta el final.

El problema que estoy teniendo al intentar hacerlo de golpe es que se me bloquea la GUI, este es el codigo que estoy utilizando para hacerlo:

Código Python:

#Con la PyTable abierta y obtenido el nodo a la tabla 
 
self.ui.tableWidget.setRowCount(tab.nrows)
self.ui.tableWidget.setColumnCount(len(tab.colnames))
self.ui.tableWidget.setHorizontalHeaderLabels(tab.colnames)
res = []
 
#Intento leer y almacenar la PyTable
for x in tab.where('col1 > -1'):
    res.append(x[:])
 
#Intento escribirla en el QTableWidget
for i, row in enumerate(res):
    for j, col in enumerate(row):
        item = QTableWidgetItem(str(col))
        self.ui.tableWidget.setItem(i, j, item)   
 
#Haciendo esto con la PyTable de mas de un millon de lineas, no funciona
 

Me gustaria saber si alguien me puede indicar como hacerlo segun he dicho arriba, intentando que solo se muestre un trozo, y se vaya mostrando poco a poco al hacer scroll.

Gracias.

[AlvaroG]

¿se te bloquea la GUI? ¿no será que lo haces en el mismo hilo de ejecución?

[edanvar]

Iniciado por AlvaroG

¿se te bloquea la GUI? ¿no será que lo haces en el mismo hilo de ejecución?

Si, lo hago en el mismo hilo, pero la cosa no va por los hilos o por hacer multithreading, la cosa pasa por NO MOSTRAR toda la tabla de golpe, solo lo que es visible en pantalla, y luego al hacer scroll ir mostrando mas poco a poco.

[carbon]

Debe haber un evento que sea llamado cuando el usuario hace un scroll en la tabla. Esto te puede servir.

[AlvaroG]

Iniciado por edanvar

Si, lo hago en el mismo hilo, pero la cosa no va por los hilos o por hacer multithreading, la cosa pasa por NO MOSTRAR toda la tabla de golpe, solo lo que es visible en pantalla, y luego al hacer scroll ir mostrando mas poco a poco.

Lo comentaba porque si lo haces en el mismo hilo, es claro que se te va a bloquear la GUI. Deberías hacerlo en un hilo separado, incluso si en situaciones normales el tiempo de bloqueo es corto.

La sugerencia de carbon debería funcionarte :)

[edanvar]

Lo he hecho, utilizando el evento generado al hacer scroll.

Todo funciona, pero no tan bien como yo quisiera....pongo el codigo y luego explico por que no va bien, a ver si alguien puede sugerir algo:

Código Python:

#La primera vez que muestro la tabla, solo
#muestro unas pocas lineas de la PyTable,
#las necesarias para llenar la pantalla
for x in tab.iterrows(start=0, stop=35):
    res.append(x[:])
 
for i, row in enumerate(res):
     #aqui almaceno el indice de linea, para usarlo luego
     self.indexi = i
     for j, col in enumerate(row):
        #Y aqui relleno la QTableWidget
         item = QTableWidgetItem(str(col))
         self.ui.tableWidget.setItem(i, j, item)
 

Previamente a todo esto ya habia hecho la conexion del evento de scroll asi:

Código Python:

QtCore.QObject.connect(self.ui.tableWidget.verticalScrollBar(), QtCore.SIGNAL('valueChanged(int)'), self.updateTable)
 

Y el slot que responde al evento, es mas o menos como lo anterior:

Código Python:

@QtCore.pyqtSlot(int)
def updateTable(self, number):
    res = []
    for x in self.node.iterrows(start=self.indexi+1, stop=self.indexi+number):
        res.append(x[:])
    for i, row in enumerate(res):
            self.indexi = self.indexi + 1
            for j, col in enumerate(row):
                item = QTableWidgetItem(str(col))
                self.ui.tableWidget.setItem(self.indexi, j, item)   
                QApplication.instance().processEvents()
 

Ahora, EL PROBLEMA: todo esto funciona bien, el slot responde y todo eso, PERO, la PyTable es muy grande, mas de 1millon de lineas, y al hacer scroll en la QTableWidget, como ya habia definido previamente sus atributos, lo que sucede es que al hacer scroll en la QTableWidget, el scroll es un avance de mas de 5000 lineas, con lo cual al intentar actualizar la QTableWidget con 5000 o mas lineas de golpe, no responde instantaneo, le cuesta varios segundos.

Código Python:

self.ui.tableWidget.setRowCount(tab.nrows)
self.ui.tableWidget.setColumnCount(len(tab.colnames))
 

P.D: tampoco responde bien si haces varios scrolls seguidos, rapidos en la QTableWidget

[carbon]

Y que tal si, como te comentaron, lo haces en otro hilo?

[razpeitia]

¿Y si haces paginado?

http://sateeshkumarb.wordpress.com/2...-data-in-pyqt/