Die Datenbank-Spezialisten.
Marco Friebe – DOAG 2016 Nürnberg, 16.11.2016
Next Generation Oracle Database Appliance
Die Datenbank-Spezialisten.
Zahlen und FaktenRobotron Datenbank-Software GmbH
Gründungsjahr 1990
Geschäftsform GmbH (9 Gesellschafter)
Mitarbeiterzahl 398 (Stand 11/2016)
Stammkapital 2,4 Mio. EUR
Umsatz 2015 32,8 Mio. EUR
Umsatz 2016 36,8 Mio. EUR
Oracle-Partner
ISO 9001 zertifiziert
Hauptsitz
Schulungs- und Kongresszentrum
Die Datenbank-Spezialisten.
Agenda
• Was gab‘s bisherODA
• X6-2 – die neuen SystemeODA
• Storage-Architektur & PerformanceODA
• DeploymentODA LITE
• BetriebsthemenODA LITE
• Erkenntnisse und WünscheFazit
Die Datenbank-Spezialisten.
ODA – was gab‘s bisher…
V1 (Sep 2011) X3-2 (Mär 2013) X4-2 (Dez 2013) X5-2 (Feb 2015)
CPU1) 2 x 6-core 3.07 Ghz X5675
(12 Cores)
2 x 8-core 2.9 Ghz E5-2690
(16 Cores)
2 x 12-core 2.7 Ghz E5-2697 v2
(24 Cores)
2 x 18-core 2.3 Ghz E5-2699 v3
(36 Cores)
Memory1) 96 GB 256 GB 256 GB 256 (768) GB
Network1) 2 x 1 GbE (onboard)
Quad-port GbE NIC (PCIe)
Dual-port 10 GbE NIC (PCIe)
Redundant private 1 GbE
interconnects for cluster
communication
4 x 100/1000/10G Base-T Ethernet
ports (onboard)
Dual-port 10GBase-T as
interconnect for cluster
communication (PCIe)
4 x 100/1000/10G Base-T Ethernet
ports (onboard)
Dual-port 10GBase-T as
interconnect for cluster
communication (PCIe)
(copper and fibre)
4 x 100/1000/10G Base-T Ethernet
ports (onboard)
Dual-port Infiniband interconnect
for cluster communication (PCIe)
(copper and fibre)
Local Storage1)
2 x 3.5” 500 GB 7200 rpm SATA 2 x 2.5” 600 GB 10k rpm SAS-2 2 x 2.5” 600 GB 10k rpm SAS-2 2 x 2.5” 600 GB 10k rpm SAS-2
Shared Storage2)
20 x 3.5” 600 GB 15k rpm SAS
(12 TB RAW)
4 x 3.5” 73GB SAS SSD (292 GB
RAW)
HDD (4000 i/o per sec)
20 x 2.5” 900 GB 10k rpm SAS-2
(18 resp. 36 TB RAW)
4 x 2.5” 200 GB SAS-2 SLC SSD
(800 GB RAW)
HDD (3.300 i/o per sec)
20 x 2.5” 900 GB 10k rpm SAS-2
(18 resp. 36 TB RAW)
4 x 2.5” 200 GB SAS-2 SLC SSD
(800 GB RAW)
HDD (3.300 i/o per sec)
16 x 3.5” 8 TB 7.2k rpm SAS-2
(128 resp. 256 TB RAW)
4 x 2.5” 200 GB SAS-2 SLC SSD
(800 GB RAW)
4 x 2.5” 400 GB SAS-2 SLC SSD
(150.000 i/o per sec.) (1.6 TB
RAW)
HDD (1500 i/o per sec.)
1) per Knoten2) Read IOPS ohne Storage Expansion – Oracle Kennziffern
x3
x8
x21
/2,5
Die Datenbank-Spezialisten.
ODA – was gab‘s bisher…
5
nur für Enterprise Edition Installationen
nur als 2 Knoten HA-System…
…mit vielen Cores, RAM, HDD-Platz etc.
…und trotzdem häufig zu wenig I/O
relativ hoher Einstiegspreis für “kleinere” Unternehmen (~60.000 EUR Listenpreis)
Die Datenbank-Spezialisten.
Agenda
• Was gab‘s bisherODA
• X6-2 – die neuen SystemeODA
• Storage-Architektur & PerformanceODA
• DeploymentODA LITE
• BetriebsthemenODA LITE
• Erkenntnisse und WünscheFazit
Die Datenbank-Spezialisten.7
Oracle Database Appliance X6-2S
Single-Instance
SE/SE1/SE2 oder EE
10 Kerne
Bis zu 12.8 TB Raw Storage
15.650,- EUR*
Oracle Database Appliance X6-2M
Single-Instance
SE/SE1/SE2 oder EE
20 Kerne
Bis zu 12.8 TB Raw Storage
20.859,- EUR*
Oracle Database Appliance X6-2L
Single-Instance
SE/SE1/SE2 oder EE
20 Kerne
Bis zu 28.8 TB Raw Storage
34.750,- EUR*
Oracle Database Appliance X6-2-HA
EE, RAC, RAC
40 Kerne
Bis zu 48 TB Raw Storage
62.576,- EUR*
ODA – die neuen X6-2 Systeme
Seit Juni 2016 Seit Oktober 2016
*Oracle Listenpreise netto zzgl. Support, Optionen und FrachtODA LITE
Die Datenbank-Spezialisten.
ODA – X6-2 Hardware (jetzt AllFlash)
X6-2 S X6-2 M X6-2 L X6-2 HA
CPU1) 1 x 10 Core (E5-2630 V4 2,2 GHz)
(10 Cores)
2 x 10 Core (E5-2630 V4 2,2 GHz)
(20 Cores)
2 x 10 Core (E5-2630 V4 2,2 GHz)
(20 Cores)
2 x 10 Core (E5-2630 V4 2,2 GHz)
(20 Cores)
Memory1) 128(384) GB 256 (768) GB 256 (768) GB 256 (768) GB
Network1)
2 x 10 GbE Base T Ethernet ports
2 x 10 GbE dual–rate SFP+
4 x 10 GbE Base T Ethernet ports
2 x 10 GbE dual–rate SFP+
4 x 10 GbE Base T Ethernet ports
2 x 10 GbE dual–rate SFP+
4 x 10 GbE Base T Ethernet ports
Dual-port Infiniband
interconnect for cluster
communication (PCIe)
Optional 2 x 10 GbE dual–rate
SFP+
Local Storage1)
2 x 480 GB SSD (gespiegelt) 2 x 480 GB SSD (gespiegelt) 2 x 480 GB SSD (gespiegelt) 2 x 480 GB SSD (gespiegelt)
Storage2)
2 x 3.2 TB NVMe Flash
(6.4 TB RAW)
Expandable to 12.8 TB raw
NVMe (240k i/o per sec)
2 x 3.2 TB NVMe Flash
(6.4 TB RAW)
Expandable to 12.8 TB raw
NVMe (240k i/o per sec)
6 x 3.2 TB NVMe Flash
(19.2 TB RAW)
Expandable to 28.8 TB raw
NVMe (240.000 i/o per sec)
10 x 1.6 TB SAS-3 SSD formatted
to 1.2 TB (12 TB RAW)
Expandable to 24 and 48 TB raw
4 x 200 GB SAS-3 SLC SSD (800
GB RAW) für Redologs
SSD (250k i/o per sec)
~Usable DatabaseStorage3)
2.33, 4.66 TB (+DATA) 2.33, 4.66 TB (+DATA) 5.76, 9.28 TB (+DATA) 3.92, 8.40, 17.20 TB (+DATA)
1) per Knoten2) Read IOPS ohne
Storage Expansion –Oracle Kennziffern
3) Normal Redundancy80% DATA, 20% FRA
Die Datenbank-Spezialisten.
ODA – Vergleich X5-2 und X6-2 HA
X5-2 X6-2 HA
CPU1) 2 x 18-core 2.3 Ghz E5-2699 v3
(36 Cores)
2 x 10 Core (E5-2630 V4 2,2 GHz)
(20 Cores)
Memory1) 256 (768) GB 256 (768) GB
Network1) 4 x 10 GbE Base T Ethernet ports
Dual-port Infiniband interconnect for cluster communication (PCIe)
Optional 2 x 10 GbE dual–rate SFP+
4 x 10 GbE Base T Ethernet ports
Dual-port Infiniband interconnect for cluster communication (PCIe)
Optional 2 x 10 GbE dual–rate SFP+
Local Storage1)2 x 600 GB 10k rpm HDD SSD (gespiegelt) 2 x 480 GB SSD (gespiegelt)
Storage2)
16 x 3.5” 8 TB 7.2k rpm SAS-2 (128 TB RAW)
Expandable to 256 TB raw
4 x 2.5” 200 GB SAS-2 SLC SSD (800 GB RAW) for Redologs
4 x 2.5” 400 GB SAS-2 SLC SSD (150.000 i/o per sec.) (1.6 TB RAW)
HDD (1500 i/o per sec.)
10 x 1.6 TB SAS SSD formatted to 1.2 TB (12 TB RAW)
Expandable to 24 and 48 TB raw
4 x 200 GB SAS-2 SLC SSD (800 GB RAW) for Redologs
SSD (250.000 i/o per sec)
~Usable Database Storage3)
46.57, 93.13 (+DATA) 3.92, 8.40, 17.20 TB (+DATA)
1) per Knoten2) Read IOPS ohne Storage Expansion – Oracle Kennziffern3) Normal Redundancy 80% DATA, 20% FRA
/1,8
/5,5
x166
Die Datenbank-Spezialisten.
ODA – X6-2 Software, Features, Besonderheiten
X6-2 LITE (S/M/L) X6-2 HA
HA Features Bedingt verfügbar (nur Restart über Clusterware) Verfügbar (RAC, RAC One Node, Failover)
Appliance
manageraktuell DCS + OAK (odacli bzw. odaadmcli) OAK (oakcli)
Virtualisierung aktuell nicht unterstützt grundsätzlich (aber noch nicht mit v12.1.2.8.1)
VLAN aktuell nicht unterstützt ODAVP nativ im OAK („oakcli create vlan“)
ODABM MOS-Note: Doc ID 1500709.1
DB-Snapshot Clone aktuell nicht unterstützt Verfügbar („oakcli create snapshotdb“)
EM CC Plugin geplant für EE Datenbanken noch nicht vollständig supportet
ASM für DB-Dateien möglich für 12c Datenbanken möglich für 12c Datenbanken (noch nicht mit v12.1.2.8.1)
Systemvalidierung und HW Monitoring
aktuell nur über „odaadmcli show komponente“ über „oakcli validate, orachk, show …“
DB Lizenzierung SE1, SE, SE2 oder EE über „Pay as you grow“ (cmdline) EE (ODAVP über CoD, ODABM über „Pay as you grow“)
Die Datenbank-Spezialisten.
ODA – X6-2 weitere Besonderheiten Lite und HA
eigene MOS Master Notes:
– Lite: Doc ID 2144642.1
– HA: Doc ID 888888.1
eigene Softwarepakete z.B. ISO-Image
– Lite: Patch: 23530609
– HA BM: Patch: 12999313
eigene Dokumentationen:
– Lite: http://docs.oracle.com/cd/E75550_01/doc.121/e76900/toc.htm
– HA: http://docs.oracle.com/cd/E75550_01/doc.121/e79567/toc.htm
Die Datenbank-Spezialisten.
Agenda
• Was gab‘s bisherODA
• X6-2 – die neuen SystemeODA
• Storage-Architektur & PerformanceODA
• DeploymentODA LITE
• BetriebsthemenODA LITE
• Erkenntnisse und WünscheFazit
Die Datenbank-Spezialisten.
ODA – X6-2 Flash Connectivity
PCI Express (PCIe) SSDs
Direkt am PCIe Bus
kein SAS (SCSI Protokoll) Overhead
bis zu 5x schneller als SAS SSDs
geringste Latenz
„Hot Swappable“ ( odaadmcli power disk off n)
Herkömmliche SAS-3 SSDs
SAS (SCSI Protokoll) Overhead
Hot Swappable
ODA Lite ODA HA
Die Datenbank-Spezialisten.14
ODA – X6 Storage Architektur
ASM Cluster File System (ACFS)
NVMe
ASM Cluster File System (ACFS)
+DATA +RECO +REDO
Log SSD
SSD
+DATA +RECO
ODA Lite ODA HA
Redologs, Controlfiles
Die Datenbank-Spezialisten.
ODA - X6-2S/M Performance (IOPS und Durchsatz)
2 x 3.2 TB NVMe 4 x 3.2 TB NVMe
Read IOPS 240K 480K
Write IOPS 120K 240K
Read Bandwidth 2.5 GB/Sec 5 GB/Sec
Write Bandwidth 1.5 GB/Sec 3 GB/Sec
15
Hinweis: 8K Block SizeSequential IO 1MB
ODA X6-2 M 2 x 3.2 TB NVMe
Read IOPS bis zu 770K (im ASM Test)
Write IOPS bis zu 105K
Read Bandwidth bis zu 3.2 GB/Sec
Write Bandwidth bis zu 1.3 GB/Sec*
Hinweis: DB I/O mit SLOB (8K)Durchsatz mit DD
*theoretische 30-40 Minuten Rebalance Zeit
Die Datenbank-Spezialisten.
Agenda
• Was gab‘s bisherODA
• X6-2 – die neuen SystemeODA
• Storage-Architektur & PerformanceODA
• DeploymentODA LITE
• BetriebsthemenODA LITE
• Erkenntnisse und WünscheFazit
Die Datenbank-Spezialisten.
ODA – X6-2 Lite Deployment
Vorbereitung• Vorbereitung, Verkabelung, Starten des Systems
Netzwerk
• temporäre Netzwerkkonfiguration über ILOM• configure-firstnet
Software• SIB Software Download, Kopieren, Unzippen
Repository
• Updaten des Metadata Repository*• /opt/oracle/dcs/bin/odacli update-repository –f Dateien
Systemupdate
• wenn Install Bundle (SIB) neuer als System Image (ISO) • /opt/oracle/dcs/bin/odacli update-dscagent –v Version, update-server -v Version
Deployment
• Deployment der Appliancesoftware (Web GUI)• https://odahost:7093/mgmt/index.html
nur ca. 40-50 Minuten
*wenn DSC noch v12.1.2.7, dann vorher DSC Agent Update notwendig
Die Datenbank-Spezialisten.
ODA – X6-2 Lite Deployment
inituitive Webconsole
https://odahost:7093/mgmt/index.html
Die Datenbank-Spezialisten.
ODA – X6-2 Lite Deployment
Database Edition
– SE oder EE
Backup Location
– External, Internal, Custom
Die Datenbank-Spezialisten.
ODA – X6-2 Lite Deployment
mit 2. Netzwerk
– 3. Netzwerk für M, L über odacli
Die Datenbank-Spezialisten.
ODA – X6-2 Lite Deployment
SE2 max. 8 Cores (16 Hypertreated)
– für 11.2.0.4, (SE/SE1) auch!
• manuell cpu_count anpassen
ACFS/ASM Storage
– 11.2.0.4 DB immer auf ACFS
EM Console/Express
Die Datenbank-Spezialisten.
ODA – X6-2 Lite Deployment
weitere DBs über Web GUI oder odacli
Create InstanzOnly für DataGuardmit ocacli
CleanUpDeployment über cleanup.pl
Die Datenbank-Spezialisten.
Agenda
• Was gab‘s bisherODA
• X6-2 – die neuen SystemeODA
• Storage-Architektur & PerformanceODA
• DeploymentODA LITE
• BetriebsthemenODA LITE
• Erkenntnisse und WünscheFazit
Die Datenbank-Spezialisten.
ODA – X6-2 Lite Patchmanagement
Software• SIB Software Download, Kopieren, Unzippen (Patch 24391219)
Repository
• Update des Metadata Repository*• /opt/oracle/dcs/bin/odacli update-repository –f tmp/oda-sm-12.1.2.8.0-160817-server.zip
Agent
• Update des DSC Agents• /opt/oracle/dcs/bin/odacli update-dcsagent -v 12.1.2.X
Systemupdate
• Update des ODA Systems (FW, Treiber, OS, OAK, GI)• /opt/oracle/dcs/bin/odacli update-server -v 12.1.2.X
Datenbanken
• Update der Datenbank-Homes und Datenbanken (optional)• /opt/oracle/dcs/bin/odacli update-dbhome -dh 89427c39-7f87-43c7-a8bf-0a5f59c3a33a -v 12.1.2.X
Repository
• Bereitstellen der aktuellen Software für DB 11, 12, GI (optional) • /opt/oracle/dcs/bin/odacli update-repository –f Dateien
ca. 15-30 Minuten
*in 12.1.2.8 vorher Update des DSC Agents
Quartalsweise Bundle Patch für ODA
Server Update max. 1 Patch Bundle zurück
DB gemäß Applikations-bzw. Unternehmensfreigabe
versionsabhängiger Bundlepatch Readme folgen
OneOff Patches nach Rücksprache mit dem Oracle Support
Die Datenbank-Spezialisten.
ODA – X6-2 Lite weitere Betriebsthemen
Backup/Recovery
Tool Monitoring Administration
EM CC, DB Control/Express HW (EE + CC Plugin), OS, GI, DB OS, GI, DB
DSC/OAK HW HW, OS, Gridinfra, DB
ILOM SNMP HW n/a
ILOM Alerting HW n/a
ASR HW n/a
Third Party Monitoring HW über snmp n/a
Backup-Ebene Backup-Type
Betriebssystem per Backup-Agent
per NFS/CIFS/iSCSI auf Backup-Server
Datenbanken per Backup-Agent
per NFS/CIFS/iSCSI auf Backup-Server
in Oracle Cloud
in Fast Recovery Area
Empfehlung
Einbindung odacli und SNMP für Service Desk (Operating)
OEM für DBA/DMA
Empfehlung
external DB Backup (Absicherung und „Schonung“ NVMe Flash)
NFS Implementierung
Monitoring/Administration
Die Datenbank-Spezialisten.
ODA – DB Desaster Recovery
ProduktionDesaster Recovery
(Active) Data Guard QS/Test
RZ 1 RZ 2
QS/Test
Produktion Desaster Recovery(Active) Data Guard
GoldenGate
Robotron Standby
Dbvisit Standby
andere Third Party Lösungen
ODA HA
ODA Lite
Oracle DatabaseCloud Service
Die Datenbank-Spezialisten.
Agenda
• Was gab‘s bisherODA
• X6-2 – die neuen SystemeODA
• Storage-Architektur & PerformanceODA
• DeploymentODA LITE
• BetriebsthemenODA LITE
• Erkenntnisse und WünscheFazit
Die Datenbank-Spezialisten.
ODA – X6-2 (Lite) - Fazit
Mehr Flexibilität für den Kunden mit Einführung der Lite ODAs
– Unterstützung der SE(2) erlaubt vielfältige(re) Einsatzfälle
– Einsatz von NVMe und SSD garantiert hohe I/O Performance
neues Appliance Kit (Web GUI, odacli) noch sehr leichtgewichtig aktuell noch viele fehlendeFunktionalitäten (z.B.)
– aktuell keine Übersicht der ODA Versionsstände (ala oakcli show version –detail)
• Firmwarestände nur über fwupdate list all
– wenig gesprächige Ausgaben des Web GUI
• Debugging in /opt/oracle/dcs/log/*
– …
aktuell (noch) keine Unterstützung für HA, Virtualisierung, VLAN, EM-Plugin und DB Snapshot-Clones
Und wir sind (weiterhin) überzeugt vom ODA-Konzept
Die Datenbank-Spezialisten.
ODA – Erweiterungswünsche Release 2
Performante Lösung zur Nutzung der DB SE2 (optimal ohne EE licensing) auf ODA LITE
ODAVP mit separaten “ODA_BASEs” für DB Versionen, Editionen, DB Optionen
Clustering von HA ODAs via Infiniband
“High Performance” ODA, wählbar SSD, schneller HDD oder Kapazität teilweise
erweitertes Backup/Recovery-Concept für ODAVP
integriertes Disaster Recovery für VM (z.B. unter Verwendung von ACFS Replikation etc.)
Partitioning der ODA for mittlere und kleine Kunden ala Half-ODA or oder flexiblereKonfigurationen (Exadata like) neue ODA LITE
mehr Flexibilität bei Plattenaufteilung im ASM/ACFS (wie Exadata) teilweise
EE und SE(2) nativ gemeinsam nutzbar neu
mittelfristiges Zusammenführen der Appliance Software und Dokumentationen neu
Die Datenbank-Spezialisten.
weitere Informationsmöglichkeiten
Data Guard DOs and DON'Ts - (nicht nur) mit der ODAMarco Mischke - 16.11.2016, 14:00 Uhr, Raum BudapestSchwerpunkt: Infrastruktur
SQL*Net Verschlüsselung leicht gemachtThomas Lehmann - 16.11.2016, 14:00 Uhr, Raum Shanghai, Schwerpunkt: Datenbank
Bei Fragen, einfach Fragen
ODA Unconference
16.11. 11:00 Uhr im Pressecenter Ebene 1
oder
Informationen
am Robotron-Stand 226 auf Ebene 2
Standby Datenbank in 45 MinutenMarco Mischke - 15.11.2016, 11:00 Uhr, Raum RigaSchwerpunkt: Datenbank
Heiter bis wolkig - Oracle Datenbanken in der Oracle CloudKatharina Büchse - 15.11.2016, 16:00 Uhr, Raum KrakauSchwerpunkt: Infrastruktur
Die interessantesten Features des Oracle Appliance KitsFlorian Barth - 15.11.2016, 17:00 Uhr, Konferenzraum EGSchwerpunkt: Infrastruktur
Zeilen- vs. spaltenorientierte Datenhaltung im HauptspeicherFrank Effenberger - 16.11.2016, 09:00 Uhr, Raum Helsinki, Schwerpunkt: DWH & BI
Die Datenbank-Spezialisten.
Fragen?
Marco FriebeLeiter Oracle Services & Support
Telefon: 0351 [email protected]
www.robotron.de