Problema select tabla 45.000 registros

[israel965]

Hola de nuevo,

El tema de la normalización es complejo con esta base de datos, aunque estoy completamente de acuerdo, (El hecho de que los datos provengan de una única tabla de Access, no es óbice para no normalizar).

El problema es que aunque suene extraño, no tenemos campos que sean not null en nuestra tabla, todos tienen algún valor que no nos provee datos.

Aún así podríamos mejorar su estructura y sacar campos que se repiten como localizaciones(comarcas, territorios etc).

La base de datos access es administrada por n personas y cada una lo hace a su criterio, para nosotros es incluso complicada su importación por muchos motivos.

Nosotros creamos la siguiente vista que hace una union all contra otra tabla

Código MySQL:

CREATE VIEW `vwtac` AS select 
`totact`.`tipus` AS `id_tipus`,
`totact`.`id_unic` AS `id`,
`totact`.`DIA` AS `data_inici`,
`totact`.`DIA` AS `data_fi`,
`totact`.`id_poblacio` AS `id_poblacio`,
`totact`.`id_comarca` AS `id_comarca`,
`totact`.`id_territori` AS `id_territori`,
`totact`.`poblacio` AS `poblacio`,
`totact`.`Comarca` AS `comarca`,
`totact`.`territori` AS `territori`,
`totact`.`municipi` AS `municipi`,
`totact`.`cbla1` AS `cbl1`,
`totact`.`cbla2` AS `cbl2`,
`totact`.`cbla3` AS `cbl3`,
`totact`.`cbla4` AS `cbl4`,
`totact`.`cbla5` AS `cbl5`,
`totact`.`cbla6` AS `cbl6`,
`totact`.`cbla7` AS `cbl7`,
0 AS `id_indret`,
`totact`.`latitud` AS `lat`,
`totact`.`longitud` AS `lng`,
0 AS `idind`,
`totact`.`latitudmaltemps` AS `lat_mal_temps`,
`totact`.`longitudmaltemps` AS `lng_mal_temps`,
`totact`.`latitudPoblacio` AS `latitudPoblacio`,
`totact`.`longitudPoblacio` AS `longitudPoblacio`,
`totact`.`LinkPrograma` AS `link_programa`,
`totact`.`fkf` AS `programa`,
`totact`.`HMATI` AS `hora1`,
`totact`.`HTARDA` AS `hora2`,
`totact`.`HNIT` AS `hora3`,
'' AS `hora4`,
`totact`.`descripcio` AS `desctipus`,
`totact`.`lloc` AS `lloc`,
`totact`.`llocre` AS `llocre`,
`totact`.`sipl` AS `sipl`,
`totact`.`splre` AS `splre`,
`totact`.`idcl1` AS `idcl1` from `totac` `totact` 
 
union all select 
 
999 AS `id_tipus`,
`tblcu`.`id` AS `id`,
`tblcu`.`data_inici` AS `data_inici`,
`tblcu`.`data_acabament` AS `data_fi`,
`tblpob`.`id` AS `id_poblacio`,
`tblcom`.`id` AS `id_comarca`,
`tblter`.`id` AS `id_territori`,
`tblpob`.`poblacio` AS `poblacio`,
`tblcom`.`comarca` AS `comarca`,
`tblter`.`territori` AS `territori`,
'' AS `municipi`,
'' AS `cbl1`,
'' AS `cbl2`,
'' AS `cbl3`,
'' AS `cbl4`,
'' AS `cbl5`,
'' AS `cbl6`,
'' AS `cbl7`,
0 AS `id_indret`,
NULL AS `lat`,
NULL AS `lng`,
NULL AS `idind`,
NULL AS `lat_mal_temps`,
NULL AS `lng_mal_temps`,
NULL AS `latitudPoblacio`,
NULL AS `longitudPoblacio`,
NULL AS `link_programa`,
0 AS `programa`,
`tblcu`.`hini1` AS `hora1`,
`tblcu`.`hfi1` AS `hora2`,
`tblcu`.`hini2` AS `hora3`,
`tblcu`.`hfi2` AS `hora4`,
'' AS `desctipus`,
'' AS `lloc`,
'' AS `llocre`,
'' AS `sipl`,
'' AS `splre`,
'' AS `idcl1` 
from (((`tblcu` 
join `tblpob` on((`tblcu`.`id_poblacio` = `tblpob`.`id`))) 
join `tblcom` on((`tblpob`.`id_comarca` = `tblcom`.`id`))) 
join `tblter` on((`tblcom`.`id_territori` = `tblter`.`id`)));
 

Una vez hecha la vista, como la aplicación soporta varios idiomas tenemos tablas de traducción contra la que hacemos su respectiva join, si esto no es suficiente, tenemos un buscador que genera consultas de este tipo:

Código MySQL:

(programa != 0 OR link_programa IS NOT NULL) AND data_inici BETWEEN '2010-08-06' AND '2015-08-31' AND id_tipus IN(1,5,4) AND vw.id_comarca IN(38,60) AND vw.id_territori IN(9,3,7) AND vw.id_poblacio IN(1037,1020) AND idcl1IN(225,145,224,300,192,335)
 

Finalmente con todo eso generamos una consulta que realiza una paginación mostrando 20, 30, 50 o 100 resultados a demanda del usuario.

Sí tenemos índices, son sobre los que hacemos las búsquedas, aunque no los hemos añadido, de todos modos, como puedes ver, hacemos búsquedas sobre campos de tipo entero y fechas.

Gracias por vuestra ayuda.