Mein Oracle Linux System bootet nicht mehr - was nun? · Unser Unternehmen. 2 11/21/17 Trivadis DOAG17: Linux Recovery Trivadis ist führend bei der IT-Beratung, der Systemintegration,

Mein Oracle Linux System bootet nicht mehr - was nun?Roman Gächter – Principal Consultant

@Trivadis

Unser Unternehmen.

Trivadis DOAG17: Linux Recovery2 11/21/17

Trivadis ist führend bei der IT-Beratung, der Systemintegration, dem Solution Engineering und der Erbringung von IT-Services mit Fokussierung auf -und -Technologien in der Schweiz, Deutschland, Österreich und Dänemark. Trivadis erbringt ihre Leistungen aus den strategischen Geschäftsfeldern:

Trivadis Services übernimmt den korrespondierenden Betrieb Ihrer IT Systeme.

B E T R I E B

KOPENHAGEN

MÜNCHEN

LAUSANNEBERN

ZÜRICHBRUGG

GENF

HAMBURG

DÜSSELDORF

FRANKFURT

STUTTGART

FREIBURG

BASEL

WIEN

Mit über 600 IT- und Fachexperten bei Ihnen vor Ort.


14 Trivadis Niederlassungen mitüber 600 Mitarbeitenden.

Über 200 Service Level Agreements.

Mehr als 4'000 Trainingsteilnehmer.

Forschungs- und Entwicklungsbudget: CHF 5.0 Mio. / EUR 4.0 Mio.

Finanziell unabhängig undnachhaltig profitabel.

Erfahrung aus mehr als 1'900 Projekten pro Jahr bei über 800 Kunden.

Agenda


1. Recovery Plan2. GRUB Bootloader3. Recovery CD4. Desaster Recovery Tools5. Recovery von Linux Systemen in virtuellen Umgebungen6. Recovery mit Kickstart und Konfigurationsmanagement7. Systemdokumentation8. Demo9. Fazit


Recovery Plan

Recovery Plan


Vor dem Desaster

Erstellen eines Recovery Plans

– Für alle meine Systeme notwendig

– Verschiedene Szenarien möglich

– Zeit und Budget einplanen

– An Management kommunizieren

Recovery testen!!!!!!!!!!

– Super wenn Recovery HW verfügbar ist

Recovery Plan


Kenne ich meine Systeme?

Funktioniert mein Zugriff auf die Systemkonsole?

– Service Prozessor

– Virtuelle Konsole

Habe ich die notwendigen Passwörter?

– root

– grub

– Application Server des Management Systems für die Virtualisierung

– Cloud Portal

Systemdokumentation vorhanden?

Erste Schritte


Erste Tests

Zugang Konsole

BIOS / UEFI

– Boot-Reihenfolge

• CD / Netz / Disk

RAID Kontroller

Bootloader

• MBR

• Grub2 Kernel Zeile


Grub Bootloader

Alternativen Kernel über GRUB starten


GRUB2

3 Menu Einträge bei neuer Installation

– Nach Kernel Update auch alte Kernel Einträge

• Alternativen Kernel booten

alternativen Kernel selektieren

Grub Troubleshooting


GRUB2

Editieren

– Taste e

Verwerfen der Änderung

– ESC

Boot mit angepassten Parametern

– Ctrl-X / F10

– Änderungen sind nicht persistent



GRUB2

Jump zur grub2 Command Line

– Ctrl-c



root PW recovery

Kernel Zeile editieren

– Am Ende „init=/bin/bash“ anfügen

linux16/vmlinuz-4.1.12-103.9.2.el7uek.x86_64root=/dev/mapper/ol-rootro crashkernel=autord.lvm.lv=ol/rootrd.lvm.lv=ol/swaprhgb quietLANG=en_US.UTF-8 init=/bin/bash



SELINUX Konfiguration verhindert System-Boot

Syntaxfehler im /etc/sysconfig/selinux

– Kernel Zeile editieren

linux16/vmlinuz-4.1.12-103.9.2.el7uek.x86_64root=/dev/mapper/ol-rootro crashkernel=autord.lvm.lv=ol/rootrd.lvm.lv=ol/swaprhgb quietLANG=en_US.UTF-8selinux=0



Boot in „single user“ Mode

Kernel Zeile editieren

linux16/vmlinuz-4.1.12-103.9.2.el7uek.x86_64root=/dev/mapper/ol-rootro crashkernel=autord.lvm.lv=ol/rootrd.lvm.lv=ol/swaprhgb quietLANG=en_US.UTF-8single

GRUB2 Administrations Tasks


Konfigurationsfiles generieren

Edit /etc/default/grub

– grub2-mkconfig

– UEFI

#grub2-mkconfig-o/boot/grub2/grub.cfg

#grub2-mkconfig-o/boot/efi/EFI/redhat/grub.cfg#efibootmgr –v#efibootmgr -c-d/dev/sdk -l/boot/efi/EFI/redhat/grubx64.efi-L"RHELb140i"

GRUB2 Administrations Tasks


Grub2 help

Info im /etc/grub2.cfg

– List Menu Zeilen

– Welches ist der default boot Eintrag

– EFI

#awk -F\''$1=="menuentry "{printi++":"$2}'/etc/grub2.cfg

#grub2-editenvlist#grub2-set-default2

#efibootmgr


Recovery CD

Recovery CD


Boot der Recovery CD

Troubleshooting

Rescue a Oracle Linux System

Recovery CD



Schweizerdeutsche oder Deutsche Tastatur

Lokale Disk auf /mnt/sysimage

#loadkeys sg#loadkeys dg

#chroot /mnt/sysimage

Recovery CD



Remount auf read / write

Initial Ramdisk und Kernel vorhanden?

MBR neu erstellen

#mount –oremount,rw /mnt/sysimage

#ls –l/boot

#grub2-install/dev/sda


Desaster Recovery Tools



Recovery Tools

Mondorescue

ReaR “relax and recover“

– Bestandteil des OL Repos

– list config of rear

#yuminstallrear

#reardump



Relax and recover

Konfiguration von rear

– /etc/rear/local.conf

– /etc/rear/site.conf

Externe Backup Programme wählbar

BACKUP=BACULA#BACKUP=TSM

OUTPUT=ISOBACKUP=NETFSBACKUP_URL="nfs://tulpe/nfs/rear/"



Relax and recover

Erstellen eines bootbaren Images

Erstellen eines bootbaren Images und eines Backup Archivs

#rear-vmkrescue

#rear-vmkbackup



Recovery mit ReaR

Boot über PXE, von USB, von einer CD von einem ISO Image

Restore z. Beispiel vom NFS Share



DEMO Beispiel ReaR

OUTPUT=ISOBACKUP=NETFSBACKUP_URL="nfs://tulpe/nfs/rear/"

/etc/rear/local.conf


Recovery von Linux Systemen in virtuellen Umgebungen



Virtualisierte Linux Systeme

Zugang auf Management Server

– Konsole

– Snapshots

• Vor Updates oder Konfigurationsänderungen

– Klonen

– Master Templates



Beispiel einer Virtuelle Umgebung mit automatischem Provisioning von MySQL KVM



Beispiel einer Virtuelle Umgebung mit automatischem Deployment von MySQL KVM



Recovery Beispiel einer Virtuelle Umgebung mit automatischem Deployment von MySQL KVM


Recovery mit Kickstart und Konfigurationsmanagement

Life Cycle Management


Kickstart Umgebungen

Standard Linux Bordmittel

– TFTP, PXE boot

– WebServer

– NFS

– DHCP

Spacewalk

Foreman

Katello

Sattelite

Konfigurationsmanagement


OpenSource Configuration Management Tools

Beispiel einer Recovery Umgebung



Systemdokumentation

Systemdokumentation


Wie war mein System konfiguriert

Disks?

Partitionen?

LVM?

Filesysteme?

RPM Pakete?

Netzwerk?

SAN?

Systemdokumentation


Tools

cfg2html

sosreport

Life Cycle Management Tools

– PE Console

– Foreman

– Satellite

– Spacewalk


Demo


Fazit

Fazit


Linux Recovery

Recovery Plan

Recovery schon mal getestet

Vorbereitung

– Wissen wie der Zugang zur Konsole möglich ist, kennen der Passwörter

– Gute Systemdokumentation

Recovery Tools einsetzen

Backup

– Konfiguration, Linux OS, Daten

Fazit


Linux Recovery

Automatisierungsgrad der Umgebung hilft

– Life Cycle Management Umgebungen

– Konfigurationsmanagement Tools

Virtualisierte & Cloud Umgebungen

– Erleichtert das Recovery

Literatur


Dokumentation

Standard Dokumentation der Distributionen konsultieren

http://relax-and-recover.org/

http://www.cfg2html.com/

https://theforeman.org/

https://spacewalkproject.github.io/

https://www.redhat.com/de/technologies/management/satellite

https://puppet.com/products/puppet-enterprise

11/21/17 Trivadis DOAG17: Linux Recovery45

Technik allein bringt Sie nicht weiter.Man muss wissen, wie man sie richtig nutzt.

Trivadis @ DOAG 2017#opencompany

Stand: 3ter Stock, direkt an der Rolltreppe

Wir teilen unser Know how!Einfach vorbei kommen, Live-Präsentationenund DokumentenarchivT-Shirts, Gewinnspiel und mehrWir freuen uns wenn Sie vorbei schauen

11/21/17 Trivadis DOAG17: Linux Recovery46

Documents

Mein Oracle Linux System bootet nicht mehr - was nun? · Unser Unternehmen. 2 11/21/17 Trivadis DOAG17: Linux Recovery Trivadis ist führend bei der IT-Beratung, der Systemintegration,