bi projekt mit exadata / golden gate oc niederlassung

© OPITZ CONSULTING GmbH 2014 Seite 1 High Level BI Projekt: Exadata, Golden Gate, OBIEE und ODI

OPITZ CONSULTING Vorlage Powerpoint 2011; Version 1.3; 10.05.2011; TGA, KSH

Titelfolie: • Damit beginnt ein Vortrag.

• Haupttitel: 1zeilig!

• Untertitel: max 2. Zeilen

• Referent: Name, Funktion,

OC Niederlassung

• Logo: Optional.

Entweder ein Kunden/ oder

themenbezogenes Logo

verwenden. Ideal

quadratisch, 3 Raster breit.

• Fußzeile mit Haupttitel füllen.

Andrzej Rydzanicz,

Senior Consultant

OPITZ CONSULTING Polska Sp. z.o.o.

Borys Neselovskyi,

Solution Architect

OPITZ CONSULTING Deutschland GmbH

High Level BI Projekt: Exadata, Golden Gate, OBIEE und ODI

DOAG Exadata Day, Hamburg, 13 April 2016

BI Projekt mit Exadata / Golden Gate

Design: • Das Farbschema ist im

Design als „OC 2009“

hinterlegt.

• Ebenso sind die Schriftarten

als „OC 2009“ hinterlegt.

• Die Standardfarben sind:



Agenda • Diese Folie dient zur

Darstellung der Agenda


• Die Agenda sollte

möglichst nur die

Hauptteile erläutern.

• Die 1. Ebene ist numeriert,

• Sofern Ebene 2 genutzt

wird, ist diese als

Spiegelstrichaufzählung zu

gestalten.

• Wichtig: Die Agenda ist

kein Inhaltsverzeichnis!!!

Agenda

1. Motivation

2. Herausforderungen

3. Architektur

4. Exadata X5-2 Inbetriebnahme

5. Data Replikation mittels Oracle Golden Gate

6. Installation Middleware Komponenten (OBIEE und ODI)

7. Fazit



hinterlegt.






Teiltrenner • Layout für Trennseiten

zwischen Teilen in einer

Präsentation

• Titel: 1-2zeilen

• Bitte den Titel immer auf die

Agenda abstimmen.

• Bitte die Teile gemäß

Agenda nummerieren.

• Eine Grafik ist auf dieser

Seite nicht vorgesehen.

1 Motivation



hinterlegt.






Titel und Inhalt: • Dies ist das Haupttemplate

für Inhaltsseiten.

• Titel: 1-2zeilig!

• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten

• Max bis zur 3. Ebene

• Logo: optional. rechts des

Titels zwischen den letzten

beiden Rastern


Projektmotivation

Umgebung Telekommunikationsbranche

Mehrere Engineered Systems (ODA/Exadata) im Einsatz

Mehrere Rechenzentren

Projektdaten Neue Data Warehouse Lösung: sehr viele Daten werden geladen und

verwaltet:

Batch

Real Time

Streams

ETL Tools: direkt in die Datenbank

Neue BI Lösung

Erstellen von Auswertungen, Dashboards und Reports aus der DWH Datenbank

Anforderungen:

24 x 7 Umgebung



hinterlegt.








Präsentation



Agenda abstimmen.


Agenda nummerieren.



2 Herausforderungen



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Herausforderungen

Hohes Datenaufkommen

Parallele Verarbeitung

Performance von ETL

Prozessen

DWH Performance

DWH: Daten Management

Hochverfügbarkeit 24 x 7



hinterlegt.








Präsentation



Agenda abstimmen.


Agenda nummerieren.



3 Architektur



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Architektur



hinterlegt.




DWH

DB1

DB2 DB3

DBn

PDF

TXT

CSV

XML

Externe

Daten

BI Tools

Dashboards

Ad hoc

Reporting

Analyse

Standard-

Reporting

Data Mining




für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Architektur

Umgebung

Exadata X5-2

RDBMS 12.1

Enterprise Edition

Optionen Partitioning

In Memory

Advanced Compression

DWH + Datenreplikation Oracle Data Integrator

Oracle Golden Gate

BI Oracle Business Intelligence



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Architektur: Infrastruktur



hinterlegt.




DWH

OBIEE Domain

Linux Server 1

• AdminServer (Primary)

• Managed Server

• OPMN

Loadbalancer

Linux Server 2

• AdminServer (Passiv)

• Managed Server

• OPMN

Shared Storage

OBIEE

Repo

ODI Domain

Linux Server 1

• AdminServer

(Primary)

• Managed Server

Linux Server 2

(Standby)

ODI

Repo




für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Architektur: BI Sicht



hinterlegt.








Präsentation



Agenda abstimmen.


Agenda nummerieren.



4 Exadata X5-2 Inbetriebnahme



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Exadata Auswahlkriterien

Mehrere Engineered Systems im Einsatz: ODA

X3

X4-2

X5-2

Exadata X2

Storage Anforderungen für DWH: Platz

IO Durchsatz

Performance Anforderungen für die Datenbank

Knowhow in Exadata Bereich Gute Erfahrungen über die Jahre mit einer Exadata X2 gesammelt



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Exadata: Geschichte



hinterlegt.




September 2008 (Exadata

v1) – DWH HP Oracle Database Machine

10 mal schneller als andere

DWH


v2) – OLTP Sun Hardware

Smart Flash Cache


X2) – „best

consolidation“ Zwei Modellen:

X2-2

X2-8




für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Exadata: Geschichte



hinterlegt.




September 2012 (Exadata X3)

In Memory

Zwei Versionen

X3-2

X3-8

Dezember 2013 (Exadata X4)

January 2015 (Exadata X5)







möglichst nur die




wird, ist diese als


gestalten.



Exadata Installation / Inbetriebnahme

Schritt 1: Vorbereitung

Runterladen des OEDA auf PC

Generieren der Exadata Installationstemplates

Kontrolle der Netzwerk Einstellungen – checkip

Schritt 2: Deployment und Installation (Oracle ACS)

Schritt 3: Inbetriebnahme

Runterladen der Dokumentation / Betreibshandbuch

How do I find the Exadata documentation, such as Owner and User Guide? (Doc ID 1342281.1)

Konfiguration der Überwachung

CC12c - Exadata Plugin Deployment

Einrichten von SNMP Traps in der ILOM Konsole



hinterlegt.








Präsentation



Agenda abstimmen.


Agenda nummerieren.



5 Data Replikation mittels Oracle Golden Gate



hinterlegt.










möglichst nur die




wird, ist diese als


gestalten.



Replizierung

1. Was ist Oracle Golden Gate?

2. Architektur und Funktionsweise

3. Projekt Anforderungen

4. OGG Kopplung an ODI Design: • Das Farbschema ist im


hinterlegt.










möglichst nur die




wird, ist diese als


gestalten.



Oracle Golden Gate

Eigenständiges Produkt

Strategische Replikationslösung

Repliziert die Daten:

Auf der Transaktionsebene

Zwischen heterogenen Datenbanken

Real Time Replikation Design: • Das Farbschema ist im


hinterlegt.










möglichst nur die




wird, ist diese als


gestalten.



Oracle Golden Gate Merkmale



hinterlegt.




1 Leistungsfähigkeit

• Geringe Belastung der Infrastruktur

• Hoher Transaktionsdurchsatz

• Geringe Latenz

2 Flexibilität

• Heterogene Quell- und Zielsysteme

• Vielzahl von Konfiguration

3 Fehlertoleranz

• Bietet viele Troubleshooting Möglichkeiten

• Robust gegen Störungen







möglichst nur die




wird, ist diese als


gestalten.



Replizierung




4. OGG Kopplung an ODI Design: • Das Farbschema ist im


hinterlegt.










möglichst nur die




wird, ist diese als


gestalten.



Architektur und Funktionsweise



hinterlegt.




Erfasst kontinuierlich erfolgreich abgeschlossene Transaktionen

LAN/WAN TCP/IP

Speichert abgefangene Transaktionen in einen DB-unabhängigen Format

Sendet die Daten an das Zielsystem ggf. verschlüsselt, komprimiert

Aktualisiert die ZielDB über native SQL befehle. Transformation der Daten möglich







möglichst nur die




wird, ist diese als


gestalten.



Replizierung




4. OGG Kopplung an ODI



hinterlegt.










möglichst nur die




wird, ist diese als


gestalten.



Warum Golden Gate?

OGG-ODI Kopplung Möglich

Das Quellsystem ist sehr transaktionslastig

Das Quellsystem darf nur gering modifiziert werden

Sicherheit: Die Daten des Quellsystems sind per TDE Wallet

verschlüsselt

Sicherheit: Daten in der Zielsystem müssen auch

verschlüsselt werden



hinterlegt.










möglichst nur die




wird, ist diese als


gestalten.



Replizierung




4. OGG Kopplung an ODI



hinterlegt.










möglichst nur die




wird, ist diese als


gestalten.



ODI / Golden Gate Begriffe

Initial Load

Change Data Capture (CDC)

JKM (Journalize Knowledge Module)



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


OGG und ODI: Zusammenspiel

„Staging Area“

CDC im ODI

ODI JKM (Journalize Knowledge Module)

ODI erstellt eigene Tabellen/Views

„Simple“ CDC

„Consistent“ CDC

OGG JAgents



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern



J$ Tabelle

JV$ View

JV$D View



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern



Aktualisieren der J$* Tabellen



hinterlegt.




1

2





Präsentation



Agenda abstimmen.


Agenda nummerieren.



6 Installation Middleware Komponenten (OBIEE und ODI)



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Oracle Business Intelligence

OBIEE 11.1.1.9 Installation JDK 1.7

WebLogic Server 10.3.6

WLS Patch Set Update 10.3.6.0.11

Repository Creation Utility 11.1.1.9

OBIEE 11.1.1.9

Erstellung der Domain

Dokumentation:

Deploying Oracle Business Intelligence for High

Availability:

http://docs.oracle.com/cd/E14571_01/bi.1111/e10541/hi

ghavail.htm

Scaling Out the Oracle Business Intelligence System:

http://docs.oracle.com/cd/E14571_01/doc.1111/e15722/

bi_clusters.htm#sthref333



hinterlegt.




Loadbalancer

OBIEE Domain

Linux Server 1

• AdminServer

(Primary)

• Managed

Server

• OPMN

Linux Server 2

• AdminServer

(Passiv)

• Managed

Server

• OPMN

Shared directory Metadaten-Repository

Webkatalog

Active-Active

Cluster

DWH

http://docs.oracle.com/cd/E14571_01/bi.1111/e10541/highavail.htm

http://docs.oracle.com/cd/E14571_01/bi.1111/e10541/highavail.htm

http://docs.oracle.com/cd/E14571_01/doc.1111/e15722/bi_clusters.htm#sthref333

http://docs.oracle.com/cd/E14571_01/doc.1111/e15722/bi_clusters.htm#sthref333




für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Oracle Data Integrator

ODI 12.1.3 Installation JDK 1.7

WebLogic Server 12.1.3

WLS Patch Set Update 12.1.3.0.4

Repository Creation Utility 12.1.3

ODI 12.1.3

Erstellung der Domain

Hochverfügbarkeit Installation auf dem Server1

Virtuelle IP Adresse

Der Inhalt des Servers 1 wird auf

den Server 2 referenziert

Beim Ausfall des Server 1:

Virtuelle IP Adresse auf den Server 2

schwenken

ODI auf dem Server 2 starten



hinterlegt.




ODI Domain

Linux Server 1

• AdminServer

(Primary)

• Managed

Server (ODI

Agent)

Linux Server 2

(Standby) Datenübertragung

DWH

Clients: ODI Studio, Repository Explorer …

ODI Repositories

ODI Master

Repository ODI Work

Repository





Präsentation



Agenda abstimmen.


Agenda nummerieren.



7 Fazit



hinterlegt.







für Inhaltsseiten.


• Inhalt:

• 3-7 Punkte o 2-3

Hauptpunkte mit

Unterpunkten




beiden Rastern


Fazit

Exadata erfüllt die Erwartungen: Performance

Qualität

Schwierigkeiten bei der Integration ODI mit Golden Gate Golden Gate ist schwierig in der Konfiguration

Golden Gate hat einige Bugs

Middleware High Availability: Middleware Knowhow erforderlich

POC ist erforderlich

Ausblick in die Zukunft: Beschaffung der zweiten Exadata für Aufbau der Data Guard Konfiguration



Fragen und Antworten: • Diese Folie kann als Q&A

Folie verwendet werden,

sofern dies überhaupt nötig

ist.

• Die Alten Folien F&A, Q&A

(mit/ohne Schatten, aus

anderen Design abgekupfert

oder wie auch immer, werden

NICHT MEHR

EINGESETZT.)

Fragen und Antworten



Kontakt 1. fach: • Diese Folie wird als vorletzte

Folie genutzt, um den

individuellen Bezug zum

Referenten herzustellen.

• Als Foto muss ein

quadratisches Foto des

Referenten in qualitativ

hochwertiger Form vorliegen.

• Das Foto geht über 3

Rasterbreiten.

• Die Daten der Adresse sollten

vollst. eingegeben werden

Kontakt und Ansprechpartner

Andrzej Rydzanicz

Senior Consultant

OPITZ CONSULTING Polska Sp. z.o.o.

E-Mail: [email protected]

Telefon: +48 12617-1802

Mobil: +48 519 309 702

Borys Neselovskyi

Solution Architect

OPITZ CONSULTING Deutschland GmbH

E-Mail: [email protected]

Telefon: +49 201 892994-1797

Mobil: +49 173 7279029

bi projekt mit exadata / golden gate oc niederlassung

Documents