Estabilització Datawarehouse
- Àrea Conceptual: VLDB, Arquitectura
- , Sector: Admin. Pública
Empresa pública del sector de salut on NUCLI ha col.laborat per a la estabilització de la
plataforma de Datawarehouse ja que patia caigudes en l'execució de les aplicacions de Business Intelligence (BI). Es tracta d'un sistema Datawarehouse amb un Gestor de Base de Dades Oracle 10gR2 amb 2,5 TB d'informació donant servei a uns 250 usuaris concurrents.
Pràctica
L'objectiu ha estat l'estabilització de la plataforma de Datawarehouse eliminant les caigudes de les aplicacions de BI. S'ha millorat en la qualitat del servei minimitzant el temps de resposta d'informes analítics, quadres de comandament i processos de càrrega ETL que coincideixen en el temps amb l'explotació d'informes per part dels usuaris. S'ha definit una arquitectura plataforma Oracle per a garantir la escalabilitat i el servei d'acord amb les expectatives de creixement de BI.
Implementació
• Anàlisi dels colls d'ampolla en l'execució d'informes concurrents.
• Canvi de de servidors de la plataforma BI i upgrade de Microstrategy on NUCLI ha col.laborat en l'optimizació de 100 informes obtenint millores del 300% en el temps d'execució.
• Definició de llibres normatius Oracle per a aplicar als processos ETL i model físic.
• Optimització de processos de càrrega amb millores del 150% (14 hores a 5 hores).
• Publicació de dades amb EXCHANGE PARTITION evitant el tancament de projectes durant les carregues, per anar cap a una disponibilitat del servei 24x7.
• Compressió de segments i definició d'un nou procedimient de pas d'estadístiques que milloren els temps d'execució dels informes i alliberen un 30% d'espai del DWH (700GB).
• Definició d'arquitectura de serveis amb Resource Manager, dedicada a processos Batch i Explotació de Datamarts segons criticitat dels mateixos.
• Suport tecnològic Oracle (projectes): model de dades, model físic, disseny ETL, PL/SQL.
• Transportable Tablespaces per a la sincronització entre entorns.
• Tecnología AUDIT TRAIL i FGA amb opció XML Extended pel compliment de LOPD.
• Millores sistema de backup (RMAN): copies en calent (metadades BI), reducció de la finestra de backup del DWH (tablespaces històrics en modus READ ONLY).
