Estabilización Datawarehouse
- Área Conceptual: Arquitectura, VLDB
- , Sector: Admin. Pública
Empresa pública del sector de sanidad donde NUCLI ha colaborado para la estabilización de la
plataforma de Datawarehouse ya que sufría caídas en la ejecución de las aplicaciones de Business Intelligence (BI). Se trata de un sistema Datawarehouse con un Gestor de Base de Datos Oracle 10gR2 con 2,5 TB de información dando servicio a unos 250 usuarios concurrentes.
Práctica
El objetivo ha sido la estabilización de la plataforma de Datawarehouse eliminando las caídas de las aplicaciones de BI. Se ha mejorado en la calidad del servicio minimizando el tiempo de respuesta de informes analíticos, cuadros de mando y procesos de carga ETL que se solapan con la explotación de informes por parte de los usuarios. Se ha definido una arquitectura plataforma Oracle para garantizar la escalabilidad y el servicio acorde con las expectativas de crecimiento de BI.
Implementación
• Análisis de los cuellos de botella en la ejecución de informes concurrentes.
• Cambio de servidores plataforma BI y upgrade de Microstrategy donde NUCLI ha colaborado en la optimización de 100 informes con mejoras del 300% en tiempo de ejecución.
• Definición de libros normativos Oracle para aplicar a los procesos ETL y modelo físico.
• Optimización de procesos de carga con mejoras del 150% (14 horas a 5 horas).
• Publicación de datos mediante EXCHANGE PARTITION evitando el cierre de proyectos durante las cargas, y por ende ir hacía una disponibilidad de servicio 24x7.
• Compresión de segmentos y definición de nuevo procedimiento de paso de estadísticas que mejoran los tiempos de ejecución de los informes y liberan un 30% del espacio del DWH (700 GB).
•Definición de arquitectura de servicios con Resource Manger, dedicada a procesos Batch y Explotación Datamarts según criticidad de los mismos.
• Soporte tecnológico Oracle (proyectos): modelo de datos, modelo físico, diseño ETL, PL/SQL.
• Transportable tablespaces para sincronización entre entornos.
• Tecnología AUDIT TRAIL y FGA con opción XML Extended para cumplir LOPD.
• Mejoras sistema de backup (RMAN): copias en caliente (metadatos), reducción de la ventana de backup del DWH (tablespaces históricos en modo READ ONLY).
