Systemverwaltung mit Spacewalk - FrOSCon...2Hier ist Nagios / Icinga jedoch eindeutig besser! Christian Stankowic Systemverwaltung mit Spacewalk Motivation Installation & Administration

MotivationInstallation & Administration

Tipps & Tricks

Systemverwaltung mit SpacewalkPraxis-Tipps zur Verwaltung von Linux und Solaris

Christian Stankowic

http://www.stankowic-development.net, @stankowic_devel

Free and Open Source Software Conference, 2014

Christian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks

whoami

$ whoami

Christian StankowicVMware-, UNIX-, Linux-AdministratorMesser Information Services GmbH

$ apropos

Spacewalk / RHN Satellite / SUSE ManagerIcinga / OMDEnterprise Linux, SUSE, VMware vSphere



Tipps & Tricks

Agenda

1 MotivationAnforderungen und NotwendigkeitSpacewalk-VariationenNeuigkeiten

2 Installation & AdministrationGrundinstallation und SystemverwaltungErrata für CentOSSolaris

3 Tipps & TricksKickstart-AutomatisierungAufräumenPatch-Reporting



Tipps & Tricks

Anforderungen und NotwendigkeitSpacewalk-VariationenNeuigkeiten

Agenda






Tipps & Tricks


Anforderungen und Notwendigkeitoder auch: die Qualen eines IT-Administrators

Üblicherweise betreuen wenige Administratoren vieleSystemeHäufig kurzfristige Projekte und Anfragen

"Wir benötigen kurzfristig 10 Server ""Wir brauchen das bis Ende der Woche, also morgen.""Kannst Du schnell diese Anpassung vornehmen? Habegleich eine Demo mit der Geschäftsführung."



Tipps & Tricks


Anforderungen und Notwendigkeitoder auch: die Qualen eines IT-Administrators

Resultat: Standards und Dokumentation werden oftvernachlässigt



Tipps & Tricks


Anforderungen und NotwendigkeitProduktvielfalt

Zentrale Systemverwaltung unabdingbar - nur welche?Die Auswahl ist groß, einige Beispiele1:

PuppetChefAnsible. . .

Alternative Suiten: Spacewalk, Red Hat Satellite, SUSEManagerkombinieren u.a. Software-, Configuration- undContent-Management

1Diese Tools verfügen nur über eine Teilmenge der Spacewalk-FeaturesChristian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks


Agenda






Tipps & Tricks


Spacewalk-Variationen

2002: Erste Version von Red Hat Network Satellite Server2008: Satellite Quellcode als Spacewalk veröffentlichtSpacewalk ist das Upstream-Projekt für Red Hat SatelliteServer und SUSE ManagerSUSE Manager und Red Hat Satellite erfordernWartungsverträge, Spacewalk ist kostenlosFunktionen in Spacewalk erprobt, später meist in denEnterprise-Produkten übernommen



Tipps & Tricks


Gemeinsame Funktionen

MandantenfähigkeitConfiguration ManagementSoftware/Update ManagementContent-Provisioning/-Caching



Tipps & Tricks


Gemeinsame Funktionen

System-ProvisioningSicherheits-/Lizenz-AuditCrash-ReportingMonitoring2

2Hier ist Nagios / Icinga jedoch eindeutig besser!Christian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks


Unterschiede

Spacewalk Satellite SUSE Mgr.Release 2-5 Monate 9-12 Monate ?Arch i386, x86_64 + s390x + s390x, ia64,

ppc/ppc64Distro EL, Debian3,

openSUSE,Fedora

+ RHEL + RHEL4,SLES

Datenbank PostgreSQL, Oracle 10gR2/11gExklusiv jQuery-UI,

Solaris,Strom-Verwaltung5

Solaris, RHN-Verbindung

jQuery-UI, Strom-Verwaltung

3beschränkte Unterstützung4Support bei Red Hat entfällt, SUSE Expanded Support5Cobbler kann so Systeme effizienter kickstarten



Tipps & Tricks


Spacewalk-Architektur



Tipps & Tricks


Spacewalk-ArchitekturOpen Source Architecture Daemon

(fehlen in der Zeichnung)osad - Open Source Architecture DaemonEchtzeit-SystemverwaltungAktionen werden über Jabber-Protokoll gestartetClient muss Netzwerk-Port 5222/tcp öffnen



Tipps & Tricks


Spacewalk-ArchitekturZusätzliche Komponenten

tftp-server - für Client Netzwerk-Boot benötigtcobblerd - kann automatisch TFTP, DHCP und DNSkonfigurierenSpacewalk Proxy - Pakete werden lokal vorgehalten,Traffic-/Last-Reduzierung



Tipps & Tricks


Agenda






Tipps & Tricks


Neues in Spacewalk 2.2

Version 2.2 wurde am 16.07.2014 veröffentlichtEnterprise Linux 7-Clients werden unterstützt6

read-only API-Benutzer für Audit-ZweckeAction-Chains, Gruppierung voneinander abhängendenAktionen7

Perl-/Python-/Ruby-API überarbeitet (neue Calls)Solaris-Unterstützung nun “deprecated“

6Host: Enterprise Linux 5/67Demo: http://turing.suse.de/%7Esmoioli/Action%

20Chaining%20screencast.webm


http://turing.suse.de/%7Esmoioli/Action%20Chaining%20screencast.webm

http://turing.suse.de/%7Esmoioli/Action%20Chaining%20screencast.webm


Tipps & Tricks

Grundinstallation und SystemverwaltungErrata für CentOSSolaris

Agenda






Tipps & Tricks


Systemanforderungen

2 GB+ ArbeitsspeicherEnterprise Linux 5/6 Host 8

Spacewalk-RepositoryRHEL Server Optional-Channel9

JPackage- und EPEL-Repository10

Fedora 20: rpm-{build,python} installieren,RPM-Bibliotheken downgraden11

8Neuere Versionen als Spacewalk 2.2 unterstützen nur noch EL69nur unter Red Hat Enterprise Linux

10nur unter CentOS/Scientific Linux/OEL11Version 4.11.1-7.fc20



Tipps & Tricks


Netzwerk

FQDN und Shortname müssen auflösbar sein12

Firewall-Freigabentcp 80,443 - Weboberflächetcp 5222 - Einplanung von Aufgaben (Client-Systeme)tcp 5269 - Einplanung von Aufgaben (Proxy)udp 69 - TFTP (Kickstart)

12Unbedingt hostname -s|-f beachten!Christian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks


Speicherplatz

Speicherplatz-Berechnung:mindestens 12 GB für PostgreSQL-Datenbank13

mindestens 6 GB für RPM-Paketeabhängig von der Systemlandschaft:

250 KiB pro registriertes System500 KiB pro Software-Kanal230 KiB pro Paket im Software-Kanal

13Oracle: Je nach Version/Edition abweichendChristian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks


SpeicherplatzBeispiel

Beispielrechnung:10 CentOS 6-Systeme, 2 Repositories (base + updates)10 Systeme: 3 MiB (10* 250 KiB)CentOS 6 Base: 500 KiB

6367 Pakete: 1,4 GiB (6367 * 230 KiB)CentOS 6 Updates: 500 KiB

1103 Pakete: 248 MiB (1103 * 230 KiB)

insgesamt: 1,7 GiB



Tipps & Tricks


Installation

PostgreSQL:yum install spacewalk-{,setup-}postgresql

Oracle:yum install spacewalk-{,setup,oracle}XE: Oracle Instant-Client verwenden14

Details: https://fedorahosted.org/spacewalk/wiki/FullOracleSetup

14Der XE-Client funktioniert wirklich nicht!Christian Stankowic Systemverwaltung mit Spacewalk

https://fedorahosted.org/spacewalk/wiki/FullOracleSetup

https://fedorahosted.org/spacewalk/wiki/FullOracleSetup


Tipps & Tricks


Erste Konfiguration

Listing 1: Einrichtung des neuen Systems

1 # spacewalk-setup --disconnected2 Admin Email Address? admin@localhost3 CA certificate password?4 Organization? MyCompany5 ...6 ** SSL: Generation CA certificate.7 ...8 # chkconfig spacewalk-service on9 # service spacewalk-service start



Tipps & Tricks


Erste Konfiguration

Admin -> Spacewalk Konfiguration -> Nichtverbundener Spacewalk deaktivierenAnpassen an das eigene Unternehmen

Solaris-Support aktivieren?Zusätzliche Benutzerkonten anlegenZusätzliche Organisationen und Trusts anlegen. . .



Tipps & Tricks


Kanäle, Subkanäle und Repositories

Jede Distribution wird als Kanal abgebildetJeder Kanal kann über Unterkanäle verfügenJeder Kanal wird über ein Repository synchronisiertKanalzugriff kann separat pro System limitiert werden



Tipps & Tricks


Kanäle, Subkanäle und RepositoriesBeispiel



Tipps & Tricks


Kanäle, Subkanäle und Repositories

Synchronisierung der Repositories:spacwalk-repo-sync

Cronjob oder Taskomatic-Plan

Listing 2: Repository synchronisieren

1 # /usr/bin/spacewalk-repo-sync --channel ⤦Ç centos6-base-x86_64 --url http://mirror.⤦Ç centos.org/centos/6/os/x86_64/ --type ⤦Ç yum



Tipps & Tricks


Kanäle, Subkanäle und RepositoriesKanalzuweisung pro System



Tipps & Tricks


Verwaltungsaufgaben

Einige mögliche Aufgaben:Installieren, Aktualisieren und Entfernen vonSoftware-PaketenAnwendung von ErrataAusführen von Shell-BefehlenNeustarten von SystemenAktualisieren von Konfigurationsdateienu.v.m. . .



Tipps & Tricks


VerwaltungsaufgabenSystem-Set-Manager

Ähnliche Systeme lassen sich gruppieren (z.B.Web-/Datenbank-Server,. . . )Systeme werden wie ein einzelner Host verwaltetErleichtert Verwaltung großer SystemlandschaftenTipp: Gruppen pro Applikation und Priorität (Test,Entwicklung, Produktion) erstellen



Tipps & Tricks


Configuration management

Konfigurationsdateien15 werden in einem oder mehrerenKonfigurationskanälen gespeichertKanäle können hierarchisch geordnet werden (anhandNetzwerk/Anwendung, . . . )Liegt eine Konfigurationsdatei in mehreren Kanälen vor,wird das erste Vorkommnis gewähltUpload/Anpassung zentraler Konfigurationsdateien überWebUI

15Auch symbolische Links und Binärdateien werden unterstützt!Christian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks


Configuration Management

WebUI verfügt über integrierten ASCII-EditorMakros können einzelne Werte aus dem System-Profilentnehmen (Hostname, IP-Adresse,...)16

Aktualisierungen werden in Revisionen gespeichert,Verwendung von MD5-Prüfsummenkeine automatischen Update-Rollouts

16Siehe Red Hat Satellite-DokumentationChristian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks


Configuration ManagementBeispiel

Angabe von:Dateiname/PfadBesitzer und BerechtigungsmodiSELinux-Kontextggf. benutzerdefinierten Makro-TrennzeichenInhalt der Konfigurationsdatei

Konfigurationsdateien können auch hochgeladen werden



Tipps & Tricks


Configuration ManagementBeispiel - Konfigurationskanal-Prioritäten



Tipps & Tricks


Configuration ManagementBeispiel - Ausrollen einer neuen Revision



Tipps & Tricks


Agenda






Tipps & Tricks


CEFS - CentOS Errata for Spacewalk

RHEL-Kunden erhalten Errata über RHNCentOS-Patches werden nur als Update angezeigtCEFS Service17 erstellt Errata automatisiert(Mailing-Listen)CEFS importiert Errata lokalErrata-Informationen können mit Red Hat SecurityAnnouncements (RHSA) verknüpft werden, mehr Details

17Vielen Dank, Steve!Christian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks


CEFS - CentOS Errata for SpacewalkBeispiel

Listing 3: Aktuelle Errata importieren

1 $ wget -N http://cefs.steve-meier.de/errata.⤦Ç latest.xml

2 $ ./errata-import.pl --server localhost --⤦Ç errata errata.latest.xml --include-⤦Ç channels=... --publish

1 Herunterladen der aktuellen Definitionen2 Importieren der Errata

–errata - XML-Datei–include-channels - Für diese Kanäle importieren–publish - Errata veröffentlichen



Tipps & Tricks


CEFS - CentOS Errata for Spacewalk



Tipps & Tricks


Agenda






Tipps & Tricks


Solaris-Integration



Tipps & Tricks


Solaris-Integration

Spacewalk / Red Hat Satellite verfügen über“UNIX-Support“18

Solaris-Systeme lassen sich wie Linux-Hosts registrieren /verwaltenOffiziell SUN/Oracle Solaris 8 bis 10 (x86 + SPARC)unterstütztInoffiziell funktionieren auch19:

Oracle Solaris 11OpenIndiana / OpenSolaristheoretisch auch andere Illumos-Derivate (napp-it,SmartOS,. . . )

18Seit Spacewalk 2.2 deprecated19erfolgreich getestet



Tipps & Tricks


Einschränkungen

Software kann nicht über Repositories importiert werden.pkg Dateien müssen konvertiert (solaris2mpm) undhochgeladen werdenEchtzeit-Verwaltung (osad) nicht möglich, rhnsd überprüftperiodischRemote-Kommandos bei manchen Architekturen/ReleasesunzuverlässigHardware-/Pakete-Informationen teilweise fehlerhaft



Tipps & Tricks


Vorbereitung - Spacewalk

Solaris-Support aktivierenSpacewalk / Red Hat Satellite neu startenSolaris-Basiskanal und Unterkanäle erstellenAktivierungsschlüssel für Solaris erstellen und mitBasiskanal verbinden



Tipps & Tricks


Installation - Solaris

Passendes Solaris Bootstrap-Paket20 herunterladen:http://spacewalkproject.org/solaris21

OpenSSL- / ZIP-Bibliotheken und GCC-Runtimeinstallieren22

Bootstrap-Paket installieren und LD Library PfadeanpassenSystem mittels rhnreg_ks registrieren undRemote-Konfiguration (rhn-actions-control, optional)

20Bei neueren Versionen i386-sol10 verwenden21auf Satellite lokal: http://fqdn/pub/bootstrap/22Pakete SUNWgccruntime, SUNWopensslr, SUNWzlib


http://spacewalkproject.org/solaris

http://fqdn/pub/bootstrap/


Tipps & Tricks


Installation - Solaris

rhnsd konfigurieren (Intervall setzen)Bis Solaris 9: Initskript erstellen / starten

/etc/init.d/rhnsd start

Solaris 10+: SMF-Manifest erstellen23 (oder meinesverwenden):

https://github.com/stdevel/rhnsd-solmansvcadm validate|import rhnsd.xmlsvcadm enable rhnsd

# ps -ef|grep -i rhnsd

23Details unter: http://st-devel.net/blssvChristian Stankowic Systemverwaltung mit Spacewalk

https://github.com/stdevel/rhnsd-solman

http://st-devel.net/blssv


Tipps & Tricks


Solaris-Pakete hochladen

.pkg-Datei herunterladenPaket mit solaris2mpm in .mpm konvertieren24

Datei mithilfe rhnpush auf Satellite / Spacewalk-Serverhochladen

24Bei Problemen --select-arch-Schalter verwenden!Christian Stankowic Systemverwaltung mit Spacewalk


Tipps & Tricks

Kickstart-AutomatisierungAufräumenPatch-Reporting

Agenda






Tipps & Tricks


Kickstart-Automatisierung

Enterprise Linux benötigt Kickstart-Distribution und -ProfilKS-Distribution besteht aus minimaler Boot-UmgebungBenötigte Dateien befinden sich auf DVD oderSpiegelservernKS-Profil startet Distribution + InstallationNachteil: manuelle Arbeit notwendig



Tipps & Tricks


Kickstart-Automatisierung

mkelfs schafft Abhilfe!Python-Tool zum Download benötigter Dateien vonNetzwerk-Spiegelnerstellt auch Kickstart-DistributionenUnterstützt CentOS, Scientific Linux, FedoraDownload: https://github.com/stdevel/mkelfs


https://github.com/stdevel/mkelfs


Tipps & Tricks


Kickstart-AutomatisierungBeispiele

./mkelfs.py --release 6.5 --arch x86_64 -c

lädt CentOS 6.5, x86_64 herunter, erstellt KS-DistributionDateien werden unterhalb /var/satellite/kickstart_treegespeichert

./mkelfs.py -r 6.2 -a i386 -o scientific -fq

lädt ScientificLinux 6.2, i386 herunterüberschreibt vorhandene Dateien, keine Ausgabe



Tipps & Tricks


Agenda






Tipps & Tricks


Aufräumen

alle ausgeführten Aufgaben werden als Aktionendokumentiertauch automatisierte Aufgaben (Überpüfen vonKonfigurationen) zählen dazu!nachträgliche Recherche selten benötigt, Löschen oftmalsvergessenResultat: Unnötige Informationen in der Datenbank!



Tipps & Tricks


Aufräumen

arsa schafft Abhilfe!Python-Tool zur Archivierung / Löschung von Aktionenideal als wöchentlicher CronjobDownload: https://github.com/stdevel/arsa


https://github.com/stdevel/arsa


Tipps & Tricks


AufräumenBeispiele

./arsa.py -l

listet abgeschlossene Aktionen auf (dry-run)

./arsa.py -rf

archiviert abgeschlossene und fehlerhafte Aktionenlöscht anschließend archivierten Aktionen



Tipps & Tricks


Agenda






Tipps & Tricks


Patch-Reporting

Detaillierte Patch-Reports häufig vom ManagementerwartetJe nach Zertifizierung des Unternehmens (ISO/IEC27001:2005) unabdingbarJe nach Systemlandschaft hoher Zeitaufwand



Tipps & Tricks


Patch-Reporting

satprep schafft Abhilfe!Python-Toolkit zur Erstellung detaillierter Patch-ReportsReports werden mittels TEXals PDF erstelltAuflistung von Patch-relevanten und allgemeinenSystem-InformationenDownload: https://github.com/stdevel/satprep


https://github.com/stdevel/satprep


Tipps & Tricks


Patch-ReportingFunktionsweise

1 Erstellen eines Snapshots relevanterErrata-/Patch-Informationen: ./satprep_snapshot.py

2 Patchen und Rebooten der Systeme3 Erneutes Erstellen eines Snapshots:./satprep_snapshot.py

4 Berechnen der Differenz und Erstellen der PDF-Reports:./satprep_diff.py 20140707*.csv

5 (Dokument unterschreiben und sich darüber freuen, Zeitgespart zu haben)



Tipps & Tricks


Patch-ReportingFunktionsweise

Systeminfo-Schlüssel definieren Meta-Informationen:SYSTEM_OWNER - SystembesitzerSYSTEM_CLUSTER - Hinweis auf Cluster-NodeSYSTEM_MONITORING - Monitoring-StatusSYSTEM_MONITORING_NOTES - Randnotiz zurSystem-ÜberwachungSYSTEM_BACKUP - Backup-Status. . .



Tipps & Tricks


Patch-ReportingAnpassung

Report-Individualisierung:Hochformat/QuerformatLogo des UnternehmensAuswahl zwischen möglichenSystem-/Patch-/Errata-InformationenKonventionelles TEX-Dokument dient als Vorlage


Anhang Weitere Informationen

Weitere Informationen I

http://fedorahosted.org/spacewalkWiki des Spacewalk-Projekts.

http://cefs.steve-meier.deCentOS Errata for Spacewalk.Steve Meier

http://red.ht/1mJA1q1Manage Solaris with Spacewalk and Red Hat SatelliteChristian Stankowic, Gast-Artikel im offiziellen RedHat-Blog

http://www.freiesmagazin.deSpacewalk-ArtikelserieChristian Stankowic, 08/2014 - xx/2014


http://fedorahosted.org/spacewalk

http://cefs.steve-meier.de

http://red.ht/1mJA1q1

http://www.freiesmagazin.de

Anhang Weitere Informationen

Danke für die Aufmerksamkeit!Fragen oder Anregungen?

In Kontakt bleiben:

Twitter: @stankowic_devel

Ein Blick auf meinen Blog für weitere Spacewalk-Themen lohntsich: http://www.stankowic-development.net


http://www.stankowic-development.net

Documents

Systemverwaltung mit Spacewalk - FrOSCon...2Hier ist Nagios / Icinga jedoch eindeutig besser! Christian Stankowic Systemverwaltung mit Spacewalk Motivation Installation & Administration