Monitoring von ETL- / ELT-Prozessen im Business Intelligence-Umfeld

Die PTA identifiziert relevante bzw. geeignete Metriken, um die ETL- bzw. ELT-Prozesse zu überwachen. Hierzu werden die Metadaten aus der Oracle Repository Datenbank des ETL/ELT Tools Oracle Data Integrator (12c) in regelmäßigen Abständen extrahiert und als Metriken in die dafür vorgesehene Timeseries Database InfluxDB importiert. Analog zu der bestehenden Data-Warehouse-Architektur in der Form eines Business Object Models (BOM) erstellt die PTA auf Grundlage der Metriken für alle Komponenten dedizierte Grafana Dashboards. In einem Übersichtsdashboard wird außerdem jede Komponente als Kachel visualisiert, die den aktuellen Zustand anhand der Metriken und definierter Schwellenwerte in den Farben grün, gelb oder rot anzeigt. Via Drill-Down kann jederzeit das Detaildashboard der jeweiligen Komponente bzw. Teilkomponenten aufgerufen werden.