1 / 26

Datenbankarchivierung

Datenbankarchivierung. Vortrag an HAW - Hamburg 2002 Mykola Birger. Inhalt. Einleitung Motivation Anwendungsgebiete der Archivierung Grundlagen der Archivierung Anwendungsorientiertes Archivieren Architekturansätze Anwendungsbeispiele Stand der Forschung Beispiele

ojal
Download Presentation

Datenbankarchivierung

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. Datenbankarchivierung Vortrag an HAW - Hamburg 2002 Mykola Birger

  2. Inhalt • Einleitung • Motivation • Anwendungsgebiete der Archivierung • Grundlagen der Archivierung • Anwendungsorientiertes Archivieren • Architekturansätze • Anwendungsbeispiele • Stand der Forschung • Beispiele • Archivierung im System R/3 • DB2 Row Archive Manager • Vergleich und Bewertung • Zusammenfassung und Ausblick • Literaturverzeichnis M.Birger Datenbankarchivierung AIS Vortrag

  3. Einleitung: Motivation Marktforscher: Durchschnittliche Größe wird jährlich verdoppelt • Gründe • Neue Anwendungen mit großen Datenmengen (Audio, Video) • Einzelne Datenbestände zu großen Datenbanken zusammengeführt • Konventionelle Geschäftsdaten werden in DB gespeichert • Ablage und Nutzung des Wissens eines Unternehmens in DB • Probleme • Speicherkosten • Administration • Leistungsprobleme bei der Verarbeitung von Daten M.Birger Datenbankarchivierung AIS Vortrag

  4. Einleitung: Motivation • Eine der Lösungen : Archivierung in Datenbanksystemen Datenbank Archiv Operative Daten Einlagern Archivdaten Nichtoperative Daten Auslagern M.Birger Datenbankarchivierung AIS Vortrag

  5. Einleitung: Anwendungsgebiete der Archivierung • Technisch-wissenschaftliches Bereich • CAD • Wissensverarbeitung und Expertensysteme • Prozessdatenverarbeitung • Klima- und Umweltdatenbanken • Administrativ-betriebswirtschaftliches Bereich • Personalverwaltung • Auftragsverwaltung • Finanzwesen • Beschaffungslogistik • Platzbuchungs- und Reservierungssysteme M.Birger Datenbankarchivierung AIS Vortrag

  6. Grundlagen der Archivierung: Anwendungsorientiertes Archivieren Anwendungsorientiertes DB-Archivieren: ein von einem Datenbanksystem zur Verfügung gestellter Dienst, der zur Archivierung von gespeicherten Daten dient (A. Herbst). Archivierungsfunktionalität: Archivieren logischer Datengranulate Benutzerveranlassung Datenauslagerung Archivzugriff M.Birger Datenbankarchivierung AIS Vortrag

  7. Anwendung mit Archivierungsfunktionalität DBMS Archiv Datenbank Grundlagen der Archivierung: Architekturansätze Datenbanksystem - basierte Archivierung M.Birger Datenbankarchivierung AIS Vortrag

  8. Grundlagen der Archivierung: Architekturansätze Datenbanksystem - basierte Archivierung Das Archiv ist kein Bestandteil des Datenbanksystems • Vorteile: • Einfache Realisierbarkeit • Erweiterungen durch Nutzer möglich • Hohe Flexibilität • In der Praxis: bis jetzt einzige Möglichkeit, Archivierungsfunktionalität umzusetzen, wenn ein Datenbanksystem zur Datenhaltung eingesetzt wird • Nachteile: • Daten verlassen das Datenbanksystem • Archivdaten bedürfen eine eigen Verwaltung • Die Sicherung der Integrität von Archiven muss von Archivierungsanwendung gewährleistet werden • Die Daten müssen zuerst explizit gelagert werden M.Birger Datenbankarchivierung AIS Vortrag

  9. DBMS mit Archivierungsfunktionalität Datenbank Archiv Datenbanksystem Grundlagen der Archivierung: Architekturansätze Datenbanksystem - integrierte Archivierung M.Birger Datenbankarchivierung AIS Vortrag

  10. Grundlagen der Archivierung: Architekturansätze Datenbanksystem - integrierte Archivierung Archivierung als Datenbanksystemdienst • Vorteile: • Eine einfache Handhabung (durch erweiterte Benutzerschnittstelle) • Logik in Anwendungsprogrammen überflüssig • Archiv Operationen können direkt auf Archiv arbeiten • Der Administrationsaufwand für ein Archiv ist vergleichbar mit dem einer Datenbank • Nachteile: • Dieser Dienst kann nicht alle spezifische Anforderungen bestimmter Anwendungsszenarien erfüllen • Die Daten werden die das Datenbanksystem nicht verlassen M.Birger Datenbankarchivierung AIS Vortrag

  11. Grundlagen der Archivierung: Anwendungsbeispiele • Archiviere Finanz-, Vertriebs- und Personaldaten in einem betriebswirtschaftlichen Anwendungssystem • Bewahre alle Date, die die Spezifikation nicht mehr hergestellter Produkte betreffen in unveränderlicher Form auf • Zeichne die historische Entwicklung einer Datenbank durch die Archivierung gelöschter und geänderter Daten auf • Lege Beobachtungs- und Messdaten direkt im Archiv ab • Ergänze das Archiv jeweils zum Quartalsende um operative Daten ausgewählter Datenbanktabellen M.Birger Datenbankarchivierung AIS Vortrag

  12. Grundlagen der Archivierung: Stand der Forschung • Integration von Tertiärspeicher in Datenbanksysteme • Partitionierung von Tabellen • Vacuuming in temporalen Datenbanken • Data Warehousing • Temporale Datenbanken • Schemaevolution und -versionierung • Aktive Datenbanksysteme M.Birger Datenbankarchivierung AIS Vortrag

  13. Beispiele aus der Praxis: Archivierung im System R/3 • Anforderungen • Die Daten sollen langfristig lesbar und interpretierbar sein • Gesetzliche Vorgaben • Hardwareunabhängigkeit • Abhängigkeit zwischen Daten • Prinzip Datenbank Archivierungsobjekt Archivdateien Online Offline M.Birger Datenbankarchivierung AIS Vortrag

  14. Beispiele aus der Praxis: Archivierung im System R/3 • Das ADK (Archive Development Kit) • Das ADK bildet eine Zwischensicht für schreibende bzw. lesende ABAP - Programme und Archivdateien. • Möglich Archivdateien an ArchivLink zu übergeben (ArchivLink ist eine Schnittstelle, die zum Anschluss von optischen Archivsystem an das System R/3 dient ) • Das ADK stellt Funktionsbausteine bereit, die eine Verarbeitung sowohl auf der Ebene von Datencontainer als auch von Datenobjekten ermöglichen • Das ADK führt eine automatische Konvertierung alter Archivdateien M.Birger Datenbankarchivierung AIS Vortrag

  15. System R/3 Daten -bank ArchivLink Archivdatei Datenbankschnittstelle Anwendung ABAP - Programm Archivverwaltung ADK Archivsystem mit tetrtiären Speichermedien Beispiele aus der Praxis: Archivierung im System R/3 Einbindung des ADK in das System R/3 M.Birger Datenbankarchivierung AIS Vortrag

  16. Lösch-programm Lösch-programm Lösch -programm Beispiele aus der Praxis: Archivierung im System R/3 • Ablauf der Archivierung • Schreiben der zu archivierenden Daten aus der Datenbank in Archivdateien • Löschen der Daten aus der Datenbank Schreib -programm lesen R/3 Datenbank schreiben Löschen Archivdatei lesen M.Birger Datenbankarchivierung AIS Vortrag

  17. Beispiele aus der Praxis: Archivierung im System R/3 • Archivierungsprogramme • Vorlaufprogramm • Schreibprogramm • Löschprogramm • Nachlaufprogramm • Rückladeprogramm M.Birger Datenbankarchivierung AIS Vortrag

  18. Beispiele aus der Praxis: Archivierung im System R/3 Zugriff auf archivierte Daten • Auswertung über eine Menge von Daten • Zugriff auf einzelne Datenobjekte Es ist Möglich, Archivdateien zu lesen, auszuwerten und die Daten zurück in die Datenbank zu laden. Voraussetzung für den Zugriff: die zu lesende Archivdatei befindet sich im Dateisystem. Der Zugriff auf einzelne Datenobjekte im Archiv wird durch einen Index ermöglicht. M.Birger Datenbankarchivierung AIS Vortrag

  19. Beispiele aus der Praxis: DB2 Row Archive Manager • Einführung • Der DB2 Row Archive Manager (RAM) ergänzt seit 1998 das Datenbanksystem DB2 um Möglichkeit zur Archivierung von Daten. • DB2 ist ein Beispiel für den Datenbanksystem mit datenbanksystem-integrierter Archivierung. • Ziele • Den Umfang der Aktiven Daten unter Kontrolle zu halten • Den Zugriff auf alte Daten zu gewährleisten • Den Bedarf an teuren Sekundärspeicher zu beschränken M.Birger Datenbankarchivierung AIS Vortrag

  20. Beispiele aus der Praxis: DB2 Row Archive Manager Daten und Komponenten • Aktuelle Daten Menge der DB2 Tabellen, welche die aktuellsten und von den Anwendungen aktiv genutzten Daten enthalten. Diese Daten befinden sich typischerweise im direkten Zugriff und können auf die übliche Weise genutzt werden • Archivierte DatenMenge der DB2 Tabellen, die gealterte Daten enthalten. Für diese Daten können kostengünstige Speichermedien genutzt werden. Archivierung von Daten wird nicht automatisch erfolgen • Hauptbestandteilen Archivierungsvorgang (archive process) Rückholvorgang (retrive process) Speicherverwaltungsvorgang (storage management process) Dienstprogramme (utilities) M.Birger Datenbankarchivierung AIS Vortrag

  21. Aktuelle Daten Zurückgeholte Daten Archivierte Daten Utilites Storage Management Process Beispiele aus der Praxis: DB2 Row Archive Manager Komponenten das DB2 RAM Archive Process Retrive Process M.Birger Datenbankarchivierung AIS Vortrag

  22. Beispiele aus der Praxis: DB2 Row Archive Manager • Archivierungsvorgang • Folgende Funktionen stellt der DB2 RAM zur Verfügung • MOVE: kopiert Daten aus den Produktionstabellen in ihre korrespondierenden Archivtabellen und löscht die Daten aus den Produktionstabellen • COPY: kopiert Daten aus den Produktionstabellen in ihre korrespondierenden Archivtabellen, verändert die Produktionstabellen aber nicht • DELETE: löscht Daten aus den Produktionstabellen • REFER (REFERENCE): bearbeitet keine Daten, sondern verbindet zwei oder mehr ´Tabellen miteinander M.Birger Datenbankarchivierung AIS Vortrag

  23. Beispiele aus der Praxis: DB2 Row Archive Manager Rückholvorgang • Es werden zunächst die relevanten Archivdaten bestimmt • Dann die zurückzuholenden Daten ausgewählt • Schließlich diese Daten in angegebene Tabellen abgelegt Bei einem Rückholvorgang können Daten aus mehreren Archiven zurückgeholt werden. Die eigentliche Datenauswahl erfolgt für jede Tabelle durch Spezifikation einer SQL – WHERE - Klausel M.Birger Datenbankarchivierung AIS Vortrag

  24. Beispiele aus der Praxis: Vergleich und Bewertung • Beide Lösungen sind dem anwendungsorientierten Archivieren zuzurechnen. • Der wesentlicher Unterschied besteht in der Architektur • Die Archivierung in System R/3 zeichnet sich durch eine hohe Anwendungsintegration aus. Der DB2 RAM verfügt über eine menübasierte Schnittstelle, welche die Spezifikation von Archivierungsanforderungen ermöglicht. • Eine integrierte Unterstützung von Tertiärspeichern ist durch das ADK im Gegensatz zu DB2 RAM nicht gegeben. Fazit: Ein Archivierungsdienst sollte von der Komponente bereitgestellt werden, die bereits für Datenhaltung zuständig ist, also von Datenbanksystem M.Birger Datenbankarchivierung AIS Vortrag

  25. Zusammenfassung • Folgen der ständig wachsenden Datenbanken sind hohe Speicherkosten, Schwierigkeiten bei der Administration und Leistungsprobleme bei der Verarbeitung von Daten. Bestehende Technologie von Datenbanksystemen gelangt an ihre Grenze. Für zukünftige Datenbanksysteme sind daher neue Ansätze zum Umgang mit sehr großen Datenbanken gefragt. • Das Konzept der Archivierung in Datenbanksystemen sollte über eine Sprache nutzbar gemacht werden. Aufgrund ihrer Bedeutung wurde die normierte Datenbanksprache SQL in der Version von 1992 als Grundlage für ASQL ausgewählt. ASQL verfügt neben den bekannten SQL-Anweisungen über Möglichkeiten zur Definition von Archiven, Archivtabellen, Integritätsbedingungen für Archive, Datenbank- und Archivregeln sowie zusätzliche Rechte M.Birger Datenbankarchivierung AIS Vortrag

  26. Literaturverzeichnis • R. Schaarschmidt. Archivierung in Datenbanksystemen. Teubner Verlag, Stuttgart 2001 • A. Herbst. Anwendungsorientiertes DB-Archivieren. Springer-Verlag, Berlin 1997 • http://help.syp.com • www.rag- informatik.de/download_generated/Optische_Archivierung.pdf • www.zri.uni-kl.de/ZRI-JB1997.ps M.Birger Datenbankarchivierung AIS Vortrag

More Related