M1-Sicherheitsabschluss 10.11.2026: Fail2Ban-Abnahme, hostunabhängige LXC-Backups, Keycloak-Stabi + NPM-Rückfalltest, CT 104 entfernt

- Fail2Ban CT 103 funktional abgenommen (Image/Digest, Jails, Filter-Dry-Run,
  kontrollierter Ban/Unban 203.0.113.66 mit nftables-Nachweis, Dienstneustart,
  pct-Reboot); Befund proxy-host-14 im Jail-Glob nach Restart + SOP; frischer
  Rollback-vzdump d4478c85...
- Hostunabhängige LXC-Backups: frische Stop-Mode-vzdumps CT 100/102/103/105,
  Archiv auf ghostnet-ki (gn-backup, quellbeschränkter PVE-Key) mit SHA-256-
  Verifikation, Restore-Test CT 100 -> CT 150 bestanden; deklarative Rollen
  gn_backup_receiver (KI) + pve_lxc_backup_sync (PVE, nächtlicher Timer,
  Prune 4/CT), beide konvergent changed=0
- Keycloak CT 102: 26 Tage stabil (NRestarts=0), Ansible-Drift changed=0,
  praktischer NPM-Rückfalltest auf CT 104 bestanden (Hosts 7/13 -> .16 -> .4);
  danach CT 104 nach Betreiberfreigabe archiviert + entfernt, historische
  CT-102-Altbackups gelöscht (SHA-256 dokumentiert), 10.0.0.16 aus WG-Set
  server_admin_targets entfernt
- WAN/IPv6-Exposure erfasst: WAN nur TCP 80/443 offen, keine AAAA-Records
- Doku: GNAI-000/001/013, GNAI-006/007/012/016, pve-host README, ct-104 README

Generated by Mistral Vibe.
Co-Authored-By: Mistral Vibe <vibe@mistral.ai>
This commit is contained in:
2026-11-10 19:42:06 +01:00
parent b96be7ae1c
commit 2fe80bc015
23 changed files with 481 additions and 38 deletions
@@ -412,6 +412,30 @@ Nach Abschluss einen kompakten Bericht mit diesen Punkten liefern:
| Backup | `/var/lib/vz/dump/vzdump-lxc-100-2026_10_01-18_49_00.tar.zst`; Stop-Mode, 18 Sekunden; 1.360.465.920 unkomprimierte Bytes, 492.997.570 Byte Archivgröße; `zstd --test` bestanden; SHA-256 `8dca820d72df0a38060ce85370bc3fc7441a408c7c73534821aa5137d6f21b66`; Dienstwiederanlauf bestanden |
| Rollback | FRITZ!Box **Lokaler DNS-Server** auf `10.0.0.1` zurückstellen und Client-Lease erneuern. Das Verfahren ist beschrieben, wurde nach erfolgreichem Cutover aber nicht praktisch zurück- und wieder vorgespult. Das Backup liegt nur auf demselben Proxmox-Host; unabhängige Kopie und praktischer Restore-Test fehlen. |
### 10.2 Aktualisierung vom 10.11.2026 (Sicherheitsabschluss, GNAI-000 Abschnitt 4)
- **Frisches Backup:** Stop-Mode-vzdump
`/var/lib/vz/dump/vzdump-lxc-100-2026_11_10-06_46_36.tar.zst`
(`zstd --test` OK, SHA-256
`16c185e044ee344a03e8afb4e292f0889ee933b12b7ca4c30050c2538789ba5e`); CT 100
nach 18 s wieder online, Pi-hole/SSH aktiv.
- **Hostunabhängige Kopie:** Alle LXC-vzdump-Archive (CT 100/102/103/105, alt
und neu) liegen verifiziert (SHA-256-Abgleich) auf `ghostnet-ki` unter
`/var/lib/ghostnet-ai-backup/lxc/` (Empfänger-Account `gn-backup`).
Nächtlicher Sync und Prune (4 Archive pro CT) laufen auf dem PVE-Host per
`ghostnet-lxc-backup-sync.timer` (Rolle `pve_lxc_backup_sync`,
`proxmox/pve-host/ansible`; `site.yml` zweiter Lauf `changed=0`).
- **Praktischer Restore-Test bestanden:** Das frische CT-100-Archiv wurde per
`pct restore 150 ... --storage local-lvm` als CT 150 wiederhergestellt, in
`/etc/pve/lxc/150.conf` auf `10.0.0.250/24` / `dns-restore-test` umkonfiguriert
und gestartet: Pi-hole- und SSH-Unit aktiv, keine failed units;
`dig @10.0.0.250` lieferte Split-DNS (`mon.ghostnet.selfhost.eu → 10.0.0.10`),
öffentlichen Namen und Upstream korrekt. CT 100 blieb unbeeindruckt. CT 150
wurde anschließend gestoppt und inklusive Config gelöscht.
- **Weiterhin offen:** der praktische FRITZ!Box-DNS-Rollback auf einem
Testclient (Verfahren beschrieben, nie durchgespielt) und der
rollenbezogene WireGuard-DNS-Test.
Offene Abschlussarbeiten sind damit bewusst begrenzt auf die vollständige
Anwendungs-/OIDC-Regression, einen praktisch durchgespielten FRITZ!Box-Rollback,
die Entscheidung zum mobilen DuckDuckGo-DNS-Bypass, eine saubere IPv6-Strategie
@@ -329,23 +329,60 @@ eine eigenständige Architekturentscheidung.
- [x] Vollständigen produktiven LXC-Neustart, Keycloak-/PostgreSQL-Wiederanlauf,
Persistenz des Restores und anschließende Ansible-Konvergenz praktisch
nachweisen.
- [ ] NPM-Rückfall auf CT 104 in einem kontrollierten Rückfalltest praktisch
nachweisen; CT 104 bis dahin ausgeschaltet und unverändert lassen.
- [x] NPM-Rückfall auf CT 104 in einem kontrollierten Rückfalltest praktisch
nachweisen. **Bestanden am 10.11.2026 (Betreiber-Umschaltung in NPM, Agent-
Probes):** CT 104 per `pct start 104` hochgefahren (`ghostnet-keycloak` +
`ghostnet-keycloak-postgres` auf `10.0.0.16:8080`). NPM-Proxy-Hosts 7 (auth)
und 13 (auth-admin) auf `10.0.0.16:8080` umgestellt — NPM-Log zeigte
`[Sent-to 10.0.0.16]`; OIDC-Discovery 200 mit kanonischem Issuer
`https://auth.ghostnet.selfhost.eu/realms/Ghost.net`; öffentlicher
`/admin/`-Pfad 403; interner `auth-admin`-Pfad 302; vault 200. Danach
Rückschaltung auf `10.0.0.4:8080`: alle Probes identisch bestanden, mon
wieder 302, PAR-Request 201 mit `[Sent-to 10.0.0.4]`. CT 104 anschließend
per `pct stop 104` wieder ausgeschaltet. **Bekannte Einschränkung des
Rückfallstands:** CT 104 enthält den Datenstand vom 13.10.2026
(`keycloak-final-ct104-20261013T170621.dump`); OIDC-Clients, die danach auf
CT 102 angelegt wurden (z. B. `gnai-dashboard` Anfang 11.2026), existieren
auf CT 104 nicht — PAR/Token-Requests solcher Clients liefern dort 401
(beobachtet: Dashboard `mon` lieferte 500, bis zurückgeschaltet wurde). Im
Katastrophenfall müssen diese Clients nach dem Restore neu angelegt werden.
### Phase F – Automatisierung zur Quelle der Wahrheit machen
- [ ] CT 102 mindestens 14 Tage beobachten; CT 104 ausgeschaltet und
unverändert als Rückfall behalten.
- [ ] Nicht deklarierte Drift zwischen Ansible und CT 102 erfassen und
beseitigen.
- [x] CT 102 mindestens 14 Tage beobachten; CT 104 ausgeschaltet und
unverändert als Rückfall behalten. **Nachweis 10.11.2026:**
`ghostnet-keycloak` auf CT 102 durchgehend aktiv seit 2026-10-14 14:25:56
(26 Tage 16 h bis zum kontrollierten Stop für das Stop-Mode-Backup am
10.11.), `NRestarts=0`, null Journal-Einträge mit Priorität `err` seit dem
14.10., keine failed units; LXC-Uptime 26 Tage. Die 14-Tage-Phase ist damit
deutlich überschritten.
- [x] Nicht deklarierte Drift zwischen Ansible und CT 102 erfassen und
beseitigen — 10.11.2026: `site.yml --check` gegen CT 102 `changed=0`.
- [ ] Betriebs-, Update-, Secret-Rotations-, Backup- und Restore-SOP anhand
der Playbooks fertigstellen.
- [ ] Nach Betreiberfreigabe CT 104 archivieren oder entfernen und Inventar,
DNS/NPM-Dokumentation sowie Projektindex auf CT 102 aktualisieren.
- [ ] Erst nach vollständiger Abnahme, Stabilisierungsphase und ausdrücklicher
Betreiberfreigabe das historische Backup des ursprünglichen CT 102 gezielt
entfernen und die Löschung einschließlich betroffener Volumes,
Prüfsummenbelege und verbleibender Rückfallstände dokumentieren.
- [x] Nach Betreiberfreigabe CT 104 archivieren oder entfernen und Inventar,
DNS/NPM-Dokumentation sowie Projektindex auf CT 102 aktualisieren —
**10.11.2026 nach ausdrücklicher Betreiberfreigabe:** finales Archiv
`vzdump-lxc-104-2026_11_10-19_25_37.tar.zst` (SHA-256
`985af29b5a46db986c708f91a7f9910551decca7af5f49e32f73a0ef989f0578`),
danach `pct set 104 --protection 0` + `pct destroy 104 --purge`
(Rootfs `local-lvm:vm-104-disk-0` entfernt, `104.conf`/`104.conf.bak`
gelöscht); `10.0.0.16` aus dem WG-Gateway-Set `server_admin_targets` auf
CT 105 entfernt (Runtime + `/etc/nftables.conf`, Syntax geprüft); keine
DNS-/NPM-Referenzen auf `10.0.0.16` mehr vorhanden. Archiviert auf
`ghostnet-ki` (`/var/lib/ghostnet-ai-backup/lxc/`, inkl. `conf-archive/`),
SHA-256 verifiziert.
- [x] Historisches Backup des ursprünglichen CT 102 gezielt entfernen —
**10.11.2026:** die geschützten Altarchive
`vzdump-lxc-102-2026_09_02-18_31_15.tar.zst` (`62d7d1da…`),
`vzdump-lxc-102-2026_10_05-19_37_11.tar.zst` (`ba095d5d…`),
`vzdump-lxc-102-2026_10_09-17_45_58.tar.zst` (`576a1048…`) sowie die
CT-104-Archive `2026_10_06-14_49_53` (`01739301…`),
`2026_10_12-02_21_43` (`8b69a466…`), `2026_10_12-14_58_14` (`a9f82488…`)
aus `/media/datenhdd2/dump/` gelöscht — nach hostunabhängiger Archivierung
auf `ghostnet-ki` mit SHA-256-Abgleich (alle 7 Archive identisch). Verbliebene
Rückfallstände: frische CT-102-vzdumps in `/var/lib/vz/dump` und auf
`ghostnet-ki` (nächtlicher Sync `ghostnet-lxc-backup-sync.timer`).
## 5. Abnahmekriterien
@@ -475,6 +475,21 @@ strukturellen Änderungen an nftables, Proxy-Konfiguration oder Quadlets erneut
einen aktuellen konsistenten Rückfallstand erstellen. Ein Snapshot kann
ergänzen, ersetzt aber kein unabhängiges Backup.
**Aktualisierung 10.11.2026:** Neuer Stop-Mode-vzdump nach der
Fail2Ban-Funktionsabnahme:
`/var/lib/vz/dump/vzdump-lxc-103-2026_11_10-06_43_39.tar.zst`
(1.255.421.869 Byte, `zstd --test` OK, SHA-256
`d4478c850d338c183f44935e7833a0d2390d0f5091030ebdb3846fbac8b952ab`, CT danach
in 137 s wieder online, alle Dienste aktiv). Hostunabhängige Kopie aller
LXC-vzdump-Archive (CT 100/102/103/105, alt und neu) auf `ghostnet-ki`
(`/var/lib/ghostnet-ai-backup/lxc/`, Empfänger `gn-backup`), SHA-256 auf der
KI-Seite verifiziert; nächtlicher Sync per
`ghostnet-lxc-backup-sync.timer` auf dem PVE-Host (Rolle
`pve_lxc_backup_sync`, `proxmox/pve-host/ansible`). Praktischer Restore-Test
am 10.11.2026 bestanden: CT-100-Archiv nach CT 150 wiederhergestellt, auf
`10.0.0.250` gestartet, Pi-hole/SSH aktiv, Split-DNS und Upstream-Auflösung
positiv, CT 150 anschließend gelöscht (Details GNAI-012).
---
## 11. Keycloak: bestätigte öffentliche Administration und Korrekturverfahren
@@ -598,6 +613,8 @@ Für die technische Abnahme sind noch Nachweise zu erfassen; aus „läuft wiede
4. Dienstneustart und später LXC-/Host-Neustart prüfen; danach Containerstatus, Jails und Filter erneut kontrollieren.
5. Laufenden Image-Digest und ein aktuelles konsistentes Backup als Rückfallstand festhalten. Ein Digest-Pin kann nach Manifest-/Architekturprüfung den Tag-Pin zusätzlich härten.
**Abnahme 10.11.2026 (Mistral Vibe, Deploy-Key `ansible-deploy@CT 103`):** Alle fünf Punkte bestanden. Effektives Image `lscr.io/linuxserver/fail2ban:1.1.0-r2-ls43`, RepoDigest `sha256:f2401c3c05912be43e6a4ef4453850b8bbbf1464c7f6919d10924115dbf9773d`, Fail2Ban v1.1.0, `fail2ban-client -t` OK. Jails `npm-scanner` + `npm-badbots` aktiv; zu Testbeginn ein realer Scanner-Ban (84.233.199.140) und zwei Badbot-Bans (66.132.172.143, 66.132.195.120) in Status und nftables-Set `inet f2b-table` (reject TCP 80/443) vorhanden. Filter-Dry-Run (`fail2ban-regex` auf 3 synthetische `/.env`-Zeilen): 3 matched. Kontrollierter Ban: 3 injizierte Logzeilen von TEST-NET-3 `203.0.113.66` in `proxy-host-1_access.log` (hostseitig; `/remotelogs` ist im Container read-only) lösten einen Ban aus (Status + nft-Set), `unbanip` entfernte ihn wieder. **Befund:** `proxy-host-14` (mon, öffentlich seit 09.11.) war nicht im Jail-Glob (13 Dateien) — nach `systemctl restart fail2ban` werden 14 Dateien überwacht; SOP ergänzt: nach jedem neuen NPM-Proxy-Host den Fail2Ban-Dienst neu starten. Restart-Test: Jails aktiv, Bans persistiert, nft-Sets intakt. LXC-Reboot-Test (`pct reboot 103`): alle Units aktiv, keine failed units, Jails/Bans/nft-Regeln nach Boot wiederhergestellt; Endpunkte danach positiv: mon 302, `auth.../admin/` öffentlich 403, OIDC-Discovery 200, vault 200, NPM-Admin `http://10.0.0.10:81/` von LAN 200. Rollback-Stand: frischer Stop-Mode-vzdump siehe Abschnitt 10.
Upstream-Anwendung und Container-Build bleiben getrennte Versionsachsen. Vor einem späteren Upgrade sind LinuxServer-Release, enthaltene Fail2Ban-Version, Architektur und lokale Filter/Jails erneut zu prüfen. [Fail2Ban-Releases](https://github.com/fail2ban/fail2ban/releases), [LinuxServer-Images](https://docs.linuxserver.io/images/docker-fail2ban/)
## 13. Bewusste Betriebsentscheidung: generische HTTP-Clients bleiben gesperrt
@@ -614,5 +631,5 @@ LLM Admins dürfen nur `.90` erreichen und haben keinen allgemeinen NPM-/LXC-Zug
| --- | --- |
| Keycloak Admin extern nutzbar | am 14.10.2026 geschlossen: öffentlich 403, intern 200, OIDC und realer Vaultwarden-Login bestanden |
| TLS-Zuordnung des auth-Hosts unklar | am 14.10.2026 für öffentlichen und internen HTTPS-vHost funktional abgenommen |
| Fail2Ban auf `1.1.0-r2-ls43` gepinnt und Container wieder laufend | effektives Image und Version dokumentiert; Jail-/Filter-/Ban-/Dienstneustart-/Reboottests bestanden |
| Fail2Ban auf `1.1.0-r2-ls43` gepinnt und Container wieder laufend | am 10.11.2026 geschlossen: Image/Version/Digest, Config-Test, Jails, Filter-Dry-Run, kontrollierter Ban/Unban mit nftables-Nachweis, Dienstneustart und LXC-Reboot bestanden (Abschnitt 12) |
| NPM-Daten und Logs lokal weltlesbar beziehungsweise weltbeschreibbar | am 22.09.2026 korrigiert und positiv/negativ regressionsgeprüft; künftige Dateierzeugung und Logrotation weiter beobachten |
@@ -340,7 +340,7 @@ Paketupdates werden mindestens monatlich sowie vor sicherheitsrelevanten
| Familie → Heimnetz-PC | offen, einschließlich Host-Firewall und Authentifizierung |
| Server Admin → Server erlaubt, nicht freigegebenes aktives Ziel gesperrt | bestanden am 05.10.2026 im Fremdnetz; Proxmox parallel erlaubt, FRITZ!Box `.1` nach absichtlicher Routenerweiterung gesperrt, nftables-Zähler geprüft |
| LLM Admin → KI-Server erlaubt, Proxmox/NPM/Gateway-GUI gesperrt | offen, auch bei erweiterten lokalen AllowedIPs prüfen |
| WAN → TCP 22/51821 und IPv6-Exposure | offen |
| WAN → TCP 22/51821 und IPv6-Exposure | teilweise erfasst 10.11.2026: WAN-TCP-Scan (Hairpin von LAN) gegen `93.208.172.133` zeigt nur 80/443 offen (→ CT 103 NPM); 22, 25, 53, 81, 3000, 8006, 8080, 8081, 8096, 8443, 51820/tcp, 51821, 3001, 9000 refused. Öffentliche DNS: alle `*.ghostnet.selfhost.eu`-Namen nur A `93.208.172.133`, keine AAAA → keine DNS-basierte IPv6-Exposure. CT 105 lauscht auf UDP 51820 (auch `[::]`) und TCP 22/51821. Fremdnetz-Rescan (Hotspot), FRITZ!Box-Forward-Abgleich und FRITZ!Box-IPv6-Status bleiben Betreiberschritt. **10.11.2026:** `10.0.0.16` (entfernter CT 104) aus `server_admin_targets` entfernt (Runtime + `/etc/nftables.conf`) |
| Reboot / Firewall-Reload / Restore | LXC-Neustart und persistente Firewall am 05.10.2026 bestanden; tatsächlicher Restore offen |
Tests von einem fremden Netz ausführen, nicht nur aus dem Heimnetz. Für Isolation zuerst sicherstellen, dass das gesperrte Ziel von einem erlaubten Peer tatsächlich erreichbar ist. Handshake und VPN-Routen prüfen, dann bewusst clientseitiges Routing zu einem gesperrten Ziel ergänzen. Timeout allein ist ohne aktiven Zielservice und nachvollziehbare Firewallwirkung kein ausreichender Isolationsnachweis. Ergebnisse mit Datum, Quellnetz, Peer, Ziel, Port und Regelzählern dokumentieren; Secrets auslassen.