SOA Suite 12c aus der Infrastruktur-Sicht

überraschend mehr Möglichkeiten!

DOAG 2017 Konferenz

Borys Neselovskyi | November 2017

SOA Suite 12c aus der

Infrastruktur-Sicht

überzählige blaue Zahlenboxen löschen!

Agenda

SOA Architektur und Planung

Installation und Konfiguration

Monitoring

Administration

SOA Suite 12c aus der Infrastruktur-Sicht

Tuning und Troubleshooting5

SOA Architektur und Planung

Architektur

Hochverfügbarkeit

Security

Anforderungen

Shared Storage

möglich

SOA Suite Komponenten

AdminServer – Zentrale Konfigurations-

instanz

OWSM – Security Komponente Management / Anwendung von Policies

ESS – Scheduler Komponente

SOA Integrations-/Automatisierungsplattform

Entwicklung zustandsbehafteter Services

SB Standalone Enterprise Service Bus

Entwicklung zustandsloser Services Source: https://thecattlecrew.net/2016/08/21/soa-suite-12-2-1-1-0-create-configure-and-tune-a-soaosb-domain/

möglich

SOA Suite Topologie (EDG)

Load Balancer

3 Tier Architektur Web Tier

Application Tier

Data Tier

High Availability

Source: https://docs.oracle.com/middleware/12213/lcm/SOEDG/SOEDG.pdf

möglich

High Availability

Managed Server in Cluster

AdminServer: Single point of failure

Whole Server Migration Für 12c nicht empfohlen: EDG

Service Migration: Empfohlene Option für 12c

Redundante Loadbalancer

Redundante Webserver

Redundanz für die Datenbank: RAC

Data Guard oder DBVisit

Redundante Netzwerkkomponente: Switsches

Bonding

möglich

Load Balancer Anforderungen

Software Load Balancer Oracle Traffic Director

OHS Nur Round Robin möglich

Hardware Load Balancer Citrix Netscaler: gute Erfahrungen

F5 BIG-IP

Anforderungen Sticky session routing: route traffic to the

same server that processes the first

request

Ability to configure virtual server names

and ports on the load balancer

SSL acceleration. Oracle recommends

this feature but doesn't require it

Client IP Address (Preserving): the load

balancer must be able to insert a

request's original client IP address in an

X-Forwarded-For HTTP header to

preserve it.

möglich

Shared Storage in der Cluster Architektur $ORACLE_HOME

Verzeichnisse: $DOMAIN_HOME/config

$DOMAIN_HOME/bin

$DOMAIN_HOME/servers/AdminServer

Deployments

JMS Persistent Store / TLog

Logfiles

SOA Connectors: Anpassung soa-

connectors auf Shared-Storage und

kopieren der .rar Files

Shared Storage: NAS / SAN

NFS Optionen:

mount nasfiler:/vol/vol1/u01/oracle

/u01/oracle -t nfs -o rw,bg,hard,

nointr,tcp,vers=3, timeo=300,rsize=32768,

wsize=32768

Tipps: ORACLE_HOME: mount read only

ORACLE_HOME: Alle Upgrade/Patch

Aktionen auf dem Server durchführen, wo

die Installation stattgefunden ist

Info: Example Implementation How to Effectively Use the Enterprise Deployment Guide for Oracle

SOA Suite Products (SOA, BPM, BAM, OSB) (Doc ID 1536364.2)

https://docs.oracle.com/middleware/12213/lcm/SOEDG/SOEDG.pdf

möglich

Datenbank Voraussetzungen SOA Repository:

RDBMS Versionen:

11.2.0.4

12.1 (und höher)

Java muss installiert werden

Zeichensatz ATL32UTF8

http://docs.oracle.com/html/E82037_01/toc.h

tm#GUID-85F0EAF9-3ACE-421D-BD72-

F1A8E6B91116

Fachdaten sollen in einer separaten

Datenbank aufbewahrt werden LifeCycle von Fachdaten implementieren

Hochverfügbarkeit: RAC

Data Guard

Data Guard Failover: Datenquelle Definition:jdbc:oracle:thin:@(DESCRIPTION_LIST=(LOAD_BALA

NCE=OFF)(FAILOVER=ON)

(DESCRIPTION=(CONNECT_TIMEOUT=3)(TRANSPORT_CON

NECT_TIMEOUT=3)(RETRY_COUNT=3)

(ADDRESS_LIST=(LOAD_BALANCE=OFF)(FAILOVER=ON)

(ADDRESS=(PROTOCOL=TCP)(HOST=<primary db

host>)(PORT=1521)))

(CONNECT_DATA=(SERVICE_NAME=myorcl)))

(DESCRIPTION=(CONNECT_TIMEOUT=3)(TRANSPORT_CON

NECT_TIMEOUT=3)(RETRY_COUNT=3)

(ADDRESS_LIST=(LOAD_BALANCE=OFF)(FAILOVER=ON)(

ADDRESS=(PROTOCOL=TCP)(HOST=<standby db

host>)(PORT=1521)))

(CONNECT_DATA=(SERVER=DEDICATED)(SERVICE_NAME=

myorcl))))

möglich

Security

OHS Module:

mod_ossl: SSL Unterstützung

mod_security: Sicherheitsregeln

mod_certheaders:Proxy für SSL Terminating

mod_ora_audit: Auditing

mod_webgate: SSO für WebGate

SOA Suite SSL für SOA Domain

SAML Konfiguration

Configuring SOA Composite Applications for

Two-Way SSL Communication

Dokumentation:

https://docs.oracle.com/middleware/12213/soasu

ite/administer/SOAAG.pdf

Netzwerk Firewall

ACL‘s

Auditing

Betriebssystem: Härtung

Auditing

Datenbank: SSL Konfiguration für Datenbank

Listener

Datenbank Security: viele Optionen

möglich

Planung der Installation Best Practices:

OSB / SOA / BAM:

Eigene ORACLE_HOME / Eigene Domäne

Grund 1: unterschiedliche Patch Anforderungen

Grund 2: BAM – Performance, OSB – Stand-alone für mehrere SOA Domänen

Eventuell separate Hosts für BAM und SOA/OSB (wegen Ressourcen Aufteilung)

Dokumentation: Supported System Configurations:

http://www.oracle.com/technetwork/middleware/ias/downloads/fusion-certification-100350.html

Enterprise Deployment Guide:

https://docs.oracle.com/middleware/12213/lcm/SOEDG/SOEDG.pdf

Planning Workbook for SOA Suite:

http://www.oracle.com/pls/topic/lookup?ctx=fmw122130&id=soa_edg_workbook_12213

System Requirements and Specifications

http://docs.oracle.com/html/E82037_01/toc.htm

Installation Guides:

SOA: https://docs.oracle.com/middleware/12213/lcm/INSOA/INSOA.pdf

OSB: https://docs.oracle.com/middleware/12213/lcm/INOSB/INOSB.pdf

Installation und Konfiguration

möglich

Konfiguration: Repository Datenbank Voraussetzung:

Datenbankbenutzer mit DBA /

SYSDBA Berechtigungen

Starten RCU (Repository

Creation Utility):

Beispiel:

${ORACLE_HOME}/oracle_common/bin/rcu

Erstellt einige Datenbank

Schemas und Tablespaces

Wichtig: Sizing: Medium und Large setzen die

Partitioning Option voraus!!! Zusätzliche Lizenzkosten

Quelle:

https://docs.oracle.com/middleware/12213/soasuite/administer/SOAAG.pdf

möglich

Konfiguration: Erstellen SOA Domäne

Die Binary config.sh ausführen: Beispiel:

${ORACLE_HOME}/oracle_common/common/bin/co

nfig.sh

Templates auswählen: Nur notwendige Templates auswählen!

Andernfalls: Performance Einbüße

Mehr Administration

Mehr Wartung

möglich

Konfiguration: Erstellen SOA Domäne

Domain Template Referenz: https://docs.oracle.com/middleware/12213/lcm/WLDTR/WLDTR.pdf

möglich

Cluster Konfiguration

möglich

Erweiterte Konfiguration Derby Datenbank deaktivieren:

cd ${ORACLE_HOME}/wlserver/common/derby/lib/

mv derby.jar disable_derby.jar

Tuning Fusion Middleware Control : MOS Note “How to Enable Discovery Cache To Avoid Long Delay During Login To Fusion Middleware

Control (Doc ID 1423893.1)

EM > … > System MBeanBrowser > emoms.properties >set Property

ORACLE.SYSMAN.EMAS.DISCOVERY.WLS.FMW_DISCOVERY_USE_CACHED_RESULTS=TRUE

ORACLE.SYSMAN.EMAS.DISCOVERY.WLS.FMW_DISCOVERY_MAX_CACHE_AGE=7200000

ORACLE.SYSMAN.EMAS.DISCOVERY.WLS.FMW_DISCOVERY_MAX_WAIT_TIME=100007

möglich

JVM Konfiguration: SetUserOverrides.sh

$DOMAIN_HOME/bin/setUserOverrides.sh:

#!/bin/bash

echo "Setting from UserOverrides.sh"

# global settinga (for all servers)s

export JAVA_OPTIONS="$JAVA_OPTIONS -Dweblogic.MaxMessageSize=300000000"

# customer settings for each server

if [ "${SERVER_NAME}" = "AdminServer" ]

echo "Customizing USER_MEM_ARGS for SERVER_NAME ${SERVER_NAME}"

export USER_MEM_ARGS="-Xms3g -Xmx3g"

export JAVA_OPTIONS="$JAVA_OPTIONS -Djava.awt.headless=true"

if [ "${SERVER_NAME}" = "soa_server1" -o "${SERVER_NAME}" = "soa_server2" -o "${SERVER_NAME}" = "soa_server3" ]

echo "Customizing USER_MEM_ARGS for SERVER_NAME ${SERVER_NAME}"

export USER_MEM_ARGS="-Xms3g -Xmx3g -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:NewSize=1g"

export JAVA_OPTIONS="$JAVA_OPTIONS -Djava.awt.headless=true"

echo "End setting from UserOverrides.sh"

möglich

JVM Tuning Garbage Collection (Auszug

aus dem Tuning Guide) Kapitel 4.3.6 Java HotSpot VM

Heap Size Options:

https://docs.oracle.com/middle

ware/1221/wls/PERFM.pdf

Training - How to Tune G1

Garbage Collector (Doc ID

2103280.1)

https://borysneselovskyi.word

press.com/2016/07/24/how-

to-customize-java-virtual-

machine-settings-in-oracle-

weblogic-server-12-on-os-

linux-unix/

möglich

Coherence Konfiguratrion:

1 Coherence Cluster pro Domain

Kommunikation: Tangosol Cluster Management Protocol (TCMP)

Unicast/Multicast

Infos und Notes: SOA 11g Health Check: Check for Coherence Protocol Conflict (Doc ID 1520616.1)

https://coherencedownunder.wordpress.com/2016/05/04/coherence-12-2-1-cluster-discovery-made-easy/

http://www.oracle.com/technetwork/middleware/coherence/learnmore/oracle-coherence-12c-deployment-

3049521.pdf

Konfiguration der reinen Unicast-Kommunikation (WKAs):

https://docs.oracle.com/middleware/12213/coherence/develop-applications/setting-cluster.htm#GUID-

EC077736-7187-4186-9E95-38D6107A8294

Troubleshooting Notes:

How To Verify that Multicast Communication Works Correctly Between Machines the Coherence Cluster

Members Are Running On (Doc ID 1936452.1)

How To Verify That Peer-To-Peer UDP Communication Does Work Well Between Machines Coherence

Cluster Members Are Supposed To Be Running On (Doc ID 1936575.1)

How To Verify That the IPMonitor Feature Works Correctly Between the Machines Coherence Cluster

Members Are Running On (Doc ID 1936105.1)

General Coherence Network Troubleshooting And Configuration Advice (Doc ID 1389045.1)

möglich

Coherence: Unicast Konfigurationsbeispiel

SOA_SERVER1: IP - 11.1.1.1 SOA_SERVER2: IP - 11.1.1.2 SOA_SERVER3: IP - 11.1.1.3

SetUserOverrides.sh:

soa_server1)

JAVA_OPTIONS="$JAVA_OPTIONS -Dtangosol.coherence.localhost=11.1.1.1"

JAVA_OPTIONS="$JAVA_OPTIONS -Dtangosol.coherence.wka1=11.1.1.1 -

Dtangosol.coherence.wka2=11.1.1.2 -Dtangosol.coherence.wka3=11.1.1.3"

JAVA_OPTIONS="$JAVA_OPTIONS -Dtangosol.coherence.localport=8090"

JAVA_OPTIONS="$JAVA_OPTIONS -Dtangosol.coherence.localport.adjust=true"

soa_server2)

soa_server3)

Monitoring

möglich

Monitoring

Tools: Skript-basierte Lösung für Logfile

Überwachung

Introscope: Logfile Überwachung und SOA Überwachung

Dynatrace: Logfile Überwachung

Flopstar: SOA Überwachung

Cloud Control Metriken für WebLogic

Cloud Control und SOA Überwachung: SOA Plug-In

BTM: wird dessuported

Check_MK und Jolokia:

Monitoring: Cloud Control: sinnvolle Metriken

möglich

SOA Monitoring: Logs und Mbeans

OHS Logs Pfad: $DOMAIN_HOME/servers/<component name>/logs

Dateien: access.log/error.log

SOA Suite: WLDF:

Oracle WebLogic Server Mbeans

JVM: weblogic.management.runtime.JVMRuntimeMBean

Server Status: weblogic.management.runtime.ServerRuntimeMBean

JDBC: weblogic.management.runtime.JDBCDataSourceRuntimeMBean

Diagnostic Oracle SOA Suite MBeans

Deployment: oracle.fabric.management.wldf.mbean.DeploymentWatchMXBeanImpl

Logs: $DOMAIN_HOME/servers/<servername>/logs

Administration

möglich

Patching

Notes: Master Note on WebLogic Server Patch Set Updates (PSUs) (Doc ID 1470197.1)

SOA 11g and 12c: Bundle Patch Reference (Doc ID 1485949.1)

Service Bus 11g and 12c: Bundle Patch Reference (Doc ID 1499170.1)

Strategie: Patche in der Testumgebung installieren

Testen… testen… testen

Probleme beseitigen

Installation in der Produktionsumgebung

möglich

Start - Stop

Automatisches Starten – Stoppen

konfigurieren: „rebootfest“

Reihenfolge von Komponenten beim Starten

/ Stoppen beachten

Ablauf: Start:

NodeManager

AdminServer

SOA Managed Server(s)

AdminServer

NodeManager

Webserver und Loadbalancer betrachten

Realisierung: Python (WLST) / Shell Skripte

NodeManager Start/Stop:

Als Dienst konfigurieren

Beispiel Skript:

#!/bin/bash

## fmw_nodemanager.sh

DOMAIN_HOME=/opt/oracle/user_projects/domains/base_domain

WORK_DIR=/home/oracle/scripts

export DOMAIN_HOME WORK_DIR

case "$1" in

start) nohup ${DOMAIN_HOME}/bin/startNodeManager.sh ;;

stop) ${DOMAIN_HOME}/bin/stopNodeManager.sh ;;

*) echo "usage: $0 [start|stop]„

exit 2 ;;

möglich

Start - Stop WLST Beispiele:

Mit dem NodeManager verbinden:

nmConnect(userConfigFile='<Pfad zum

File>/userConfigFile',userKeyFile='<Pfad zum

File>/userKeyFile',host=‚xxx',port='5556',domainName='soa_domain',do

mainDir='/u01/domains/soa_domain‘)

Start/Stop OHS Server:

nmStart(serverName='ohs1', serverType='OHS‘)

nmKill(serverName='ohs1', serverType='OHS')

Start/Stop AdminServer:

nmStart('AdminServer')

nmKill(‘AdminServer’)

Start/Stop Managed Server:

nmStart(‘soa_server1')

nmKill(‘soa_server1')

Beispiele im Netz:

https://jan-peter.me/oracle-wlst-

sammlung/programm-sammlung-wlst/start-und-

stop-skript

möglich

Purging

möglich

Purging

Purging Strategie: SQL Skripte

DBMS_SCHEFULER Jobs

Anpassung:

Parallelität

Wie lange sollen Daten

aufbewahrt werden

Wie häufig soll der Job laufen

Tuning auf der DB Ebene

Master Tabellen: SCA_FLOW_INSTANCE

CUBE_INSTANCE

Daten Wachstum überwachen - Componenten:

SQL> CREATE TABLE SOA_FABRIC_HIST (SFH_DATE TIMESTAMP,

SFH_COUNT NUMBER);

SQL> INSERT INTO SOA_FABRIC_HIST SELECT SYSTIMESTAMP,

COUNT(*) FROM SCA_FLOW_INSTANCE GROUP BY SYSTIMESTAMP;

SQL> CREATE TABLE SOA_BPEL_HIST (SBH_DATE TIMESTAMP,

SBH_COUNT NUMBER);

SQL> INSERT INTO SOA_BPEL_HIST SELECT SYSTIMESTAMP,

COUNT(*) FROM CUBE_INSTANCE GROUP BY SYSTIMESTAMP;

SOA Schema Wachstum:

SQL> CREATE TABLE SOA_SIZE_SCHEMA_HIST (SSCH_DATE

TIMESTAMP, SSCH_SUM_MB NUMBER);

SQL> INSERT INTO SOA_SIZE_SCHEMA_HIST SELECT

SYSTIMESTAMP, SUM(BYTES)/1024/1024 FROM DBA_SEGMENTS

WHERE OWNER='<SOA_OWNER>' GROUP BY SYSTIMESTAMP;

möglich

Purging

Verwaltung von fachlichen Daten: Eigene Datenbank

EE + Partitioning

Datenverwaltung auf der Partitionsebene

Dokumentation: SOA Administration Guide:

https://docs.oracle.com/middleware/12213/soasuite/administer/SOAAG.pdf

How to run Serial Purge manually and outline of default values (Doc ID 2215059.1)

How to Interpret Serial Purge Debug Output (Doc ID 2171891.1)

How to run Parallel Purge manually with outline of default values. (Doc ID 2214284.1)

How to Interpret Parallel Purge Debug Output (Doc ID 2214333.1)

Relationship of Auto-Purge to Parallel/Single Loop Purge Procedure (Doc ID 2209979.1)

Relationship of EM purge (per flow id) to PL/SQL purge procedure (Doc ID 2213788.1)

Tuning und Troubleshooting

möglich

SOA Tuning und Troubleshooting

Konfiguration Callback URL für den Webserver:

https://borysneselovskyi.wordpress.com/2015/11/03/configuring-frontenhost-in-weblogic-and-soa-

suite/

Data Source Konfiguration:

Connection Pool Einstellungen (Default: 50)

XA Transaction Timeout (Default: 0)

SOA Composites mit viel Last:

JTA Timeout vergrössern (Default: 30 Sekunden)

Große Anzahl (z.B. 200000) von Benachrichtigungen werden gesendet:

JTA Timeout erhöhen: min. 1200 Sekunden

EJB Timeout erhöhen: min. 1800 Sekundne

Datenquelle XA Transaction Timeout erhöhen: min. 1330

Datenbankparameter: distributed_lock_timeout: 1440

möglich

SOA Tuning und Troubleshooting

Langlaufende synchrone Anfragen zu externen Webservices:

JTA Timeout vergrössern (Default: 30 Sekunden)

Broken Pipe Fehler: Erhöhen HTTP POST Timeout

Dokumentation und MOS Notes:

SOA 11g and SOA 12c: How to configure transaction timeouts for BPEL (Doc ID 880313.1)

Configuring Transaction Timeouts in BPM and SOA (Doc ID 2002067.1)

STUCK Threads With The OSB Service Because It Is Not Taking The Database Timeout (Doc ID

2291297.1)

Tuning Guide: https://docs.oracle.com/middleware/12213/lcm/ASPER/ASPER.pdf

java.net.SocketException: Broken pipe

at java.net.SocketOutputStream.socketWrite0(Native Method)

at java.net.SocketOutputStream.socketWrite(SocketOutputStream.java:113)

möglich

Datenbank Tuning

Statistiken verwalten: Für SOA Tabellen: automatisches Sammeln deaktivieren

Performance prüfen: AWR Reports

Statspack

Tuning von Datenbank Parameter

Falls notwendig: Anlegen von Indexes

möglich

Gute Planung: Grundlage für reibungslosen Betrieb

Viel Aufwand bei der Installation, Konfiguration und Tuning

Vor dem Rollout: testen… testen… testen

Lasttests sind notwendig!

Wenn alles richtig eingestellt und konfiguriert: Stabil im Betrieb

Fragen

überraschend mehr Möglichkeiten!

@OC_WIRE OPITZCONSULTING opitzconsultingWWW.OPITZ-CONSULTING.COM

Kontaktdaten

Borys Neselovskyi

Solution Architect

OPITZ CONSULTING Deutschland GmbHLazarettstr. 15, 45127 Essen, Germany

Phone: +49 173 7279029Mail: borys.neselovskyi@opitz-consulting.com

@bneselov

https://borysneselovskyi.wordpress.com

SOA Suite 12c aus der Infrastruktur-Sicht

Technology

12c M167 WIR C17.notebook

SOA - Vom Geschäftsprozess zum Webservice

SOA Strategiebaukasten · SOA Strategiebaukasten Fazit Eine Anzahl von Web Services sind noch keine SOA Strategisches Vorgehen ist notwendig für den unternehmensweiten Erfolg Standards

SOA Testing - DOAG Deutsche ORACLE … · SOA Testing SOA Testing © OPITZ CONSULTING GmbH 2010 Seite 1 ... DB-Adapter BAM-Adapter Assert. Aufruf beliebiger Services Abfangen beliebiger

Oracle SOA Suite 11g Mediator vs. Oracle Service Bus … SOA Suite 11g Mediator vs. Oracle Service Bus (OSB) Guido Schmutz Trivadis Bern, Schweiz Schlüsselworte: Oracle SOA Suite

Anforderungsanalyse für SOA Services mittels BPMN 2.0 · PDF fileLaufzeit: 12 Monate ... Oracle BPM Suite ©2012 MID GmbH, OPITZ CONSULTING GmbH 9 Überblick des Vorgehens Fachliche

Versteckte Schätze in BPM & SOA Suite 11g -gesammelte ... · Versteckte Schätze in BPM & SOA Suite 11g © OPITZ CONSULTING GmbH 2011 Seite 1 Jens Hündling ORACLE Deutschland B.V

SOA oder so

Blue Chip Technologydl.bluechiptechnology.com/dl/tm1/Documentation/TM1-Product-Infor… · lcd go uart2 tx lcd r5 uarti rx lcd r4 uarti tx lcd r3 general (gpio lcd r2 12c soa lcd

BPMN in der Praxis - Java Forum Stuttgart 2017alt.java-forum-stuttgart.de/jfs/2010/folien/D5.pdf · Modelling Monitoring Human Workflow EAI / SOA Business IT Magic BPM-Suite. Warum

12c Oracle Warehousing – voll Groovy; Ein Projektbericht

Ivory Soa Suite

Basiswissen SOA • BI • CRM • ECM · 2011. 6. 29. · 2.1.2 SOA-Dienste 51 2.1.3 Dienstverzeichnis und -nutzer 52 2.1.4 Ausführbare Aktionen 53 2.1.5 SOA – ein neues „Programmierkonzept“

Micro-SOA vs Macro-SOA - OIO€¦ · 1 Orientation in Objects GmbH Weinheimer Str. 68 68309 Mannheim Version: info@oio.de Micro-SOA vs. Macro-SOA Von der Ökonomie zweier Architekturstile

Interoperabilidad del Estado · Introducción Caso de éxito ... WebCenter Suite BUS de Servicios Servidor de Aplicaciones Weblogic 11g Base de Datos Oracle 11g SOA Suite 11g BAM

SOA DEZ 2010

SOA Expert Series: 12c Upgrade Experience - Lessons Learned and Best Practices

BPM Suite oder doch nur SOA Suite und Prozessmodellierung · PDF fileOracle BPM Suite bei größerem Budget und falls BPMN gefordert ist ... BPM, BPMN, BPEL, Oracle BPM Suite, Oracle

What's stopping you from upgrading to Oracle SOA Suite 12c?

Forms 11g meets BI - Home: DOAG e.V. · FORMS_BUILDER_CLASSPATH=...;C: ... Oracle Forms meets BI: 10:00 bis 10:45 Uhr, Raum Kiew. Praxis Knowhow: Skalierung von SOA Suite 11g Cluster: