Verarbeitung der Daten

Die Daten liegen nach dem Anlegen eines SAP NetWeaver BW Accelerator Index zunächst auf dem Datei-Server des BW Accelerator Servers. Beim ersten Ausführen einer Query bzw. durch das Starten eines speziellen Vorladeprogramms werden sie in den Hauptspeicher geladen. Die Daten bleiben im Hauptspeicher verfügbar, bis sie entweder verdrängt werden oder durch das Starten eines speziellen Löschprogramms aus dem Hauptspeicher entfernt werden. Ein gezieltes Löschen kann z.B. dann nötig sein, wenn auf dem BW Accelerator Server nicht genug Hauptspeicher für alle BW Accelerator Indizes vorhanden ist, zu speziellen Zeiten aber die Daten bestimmter InfoCubes auf jeden Fall vorgeladen sein sollen, andere dagegen (zu dieser Zeit) nicht benötigt werden.

Die Tabellendaten werden spaltenweise im Hauptspeicher abgelegt. Diese vertikale Zerlegung von Datentabellen ist effizienter als die zeilenbasierte Speicherung in herkömmlichen relationalen Datenbanksystemen. Bei einer herkömmlichen Datenbank müssen alle Daten in der Tabelle durchsucht werden, wenn kein vordefiniertes Aggregat für die Beantwortung einer Query vorhanden ist. Die BW Accelerator Engine greift dagegen gezielt nur auf die relevanten Datenspalten zu. Sie sortiert die Spalten einzeln und stellt dann die wesentlichen Einträge an den Anfang. Das verbessert die Performance wesentlich, da die Datenflüsse kleiner sind, und es reduziert die Ein- und Ausgabelast sowie den Hauptspeicherverbrauch erkennbar.

Komprimierung der Daten

Die Daten liegen auf dem BW Accelerator Server in einer lese-optimierten Form vor. Die BW Accelerator Engine nutzt eine Dictionary-basierte Komprimierung. Dabei werden ganze Zahlen verwendet, um einen Text oder Werte in Tabellenzellen darzustellen. Die Verwendung ganzer Zahlen ermöglicht eine leistungsfähige numerische Kodierung und intelligente Caching-Strategien.

Dies wiederum ermöglicht, die gesamte Query-Verarbeitung im Hauptspeicher durchzuführen, und reduziert den Netzwerkverkehr in verteilten Landschaften.

Geteilte (gesplittete) Indices

Die BW Accelerator Engine ist in der Lage, riesige Datenmengen zu verarbeiten, ohne die Grenzen der installierten Speicherarchitekturen zu überschreiten. Große Tabellen (Faktentabellen, aber auch große X- und Y-Tabellen) können horizontal aufgeteilt, auf mehreren Servern gespeichert und dadurch schnell und parallel verarbeitet werden. Ab welcher Größe diese Verteilung vorgenommen wird, hängt von der vorhandenen Hardware des BW Accelerator Servers ab. Die Daten werden dann in einem Round-Robin-Verfahren auf die Teilindizes verteilt. Schreibe-, Optimier- und Lese-Zugriffe werden auf dem BW Accelerator Server parallelisiert.

Diese Skalierbarkeit ermöglicht es den Anwendern, hoch entwickelte Adaptive-Computing-Infrastrukturen wie z.B. Blade-Server und Grid Computing zu nutzen.

Indextypen

Es gibt folgende Indextypen: