From b9b7a982eaea0dd8c7d7f69f9816fc6f2762528e Mon Sep 17 00:00:00 2001 From: spektr Date: Sat, 14 Nov 2026 14:19:45 +0100 Subject: [PATCH] =?UTF-8?q?Doku-Abgleich=202026-11-14:=20Planungsst=C3=A4n?= =?UTF-8?q?de=20auf=20M5/M6-Stand=20gebracht,=20Widerspr=C3=BCche=20beseit?= =?UTF-8?q?igt?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit - GNAI-000: Stand 14.11.; M6 öffentlich live seit 11.11. (Websuche 12.11., Theme 14.11.); mon-Proxyhost als eingerichtet (09.11., ID 14); Deployment um M5-Fortschritt 10.11. (statische CI, CT-116-Runner, Branch-Protection) ergänzt; Dashboard v0.3.6 - GNAI-001: Kopf-Status aktualisiert; M1-Rest an GNAI-000 §4 angeglichen (Restore-Pfad CT 100→CT 150 belegt); CT-100-Adoption 09.11. nachgetragen; M5-Ausführungsstand 10.11.; M6 live mit offenen Nacharbeiten (u. a. Lizenz-/Nutzungsrahmen-Nachweis GNAI-009 10.4) - GNAI-013: Stand 14.11.; Zielstruktur um CT 116 und monitoring/ ergänzt; CT 104 als entfernt (10.11.) korrigiert; Abschnitt E: KI-Server/LLM-Slice abgehakt, Resolver-Abstimmung offen - GNMON-000: Stand 14.11.; Workstation-Journald-Schritt erledigt; Dashboard v0.3.6 (Favicon-Revert 14.11.) - GNENC-000: GNMON M1–M6, Stand 14.11. - GNAI-008: Kopf-Stand 14.11., v0.19 (M5-Fortschritt §12, M6-Verweis GNAI-020/021) Link-Check: OK (252 relative Links in 101 Dateien) Generated by Mistral Vibe. Co-Authored-By: Mistral Vibe --- docs/GNAI-000-DOC_Index.md | 16 ++-- docs/GNAI-001-PLAN_Project-Roadmap.md | 79 ++++++++++++++----- ...rity-Closure-and-Repository-Restructure.md | 40 ++++++---- .../ai/GNAI-008-PLAN_Ansible-Deployment.md | 6 +- .../encoding/GNENC-000-DOC_Index.md | 6 +- .../monitoring/GNMON-000-DOC_Index.md | 18 +++-- 6 files changed, 112 insertions(+), 53 deletions(-) diff --git a/docs/GNAI-000-DOC_Index.md b/docs/GNAI-000-DOC_Index.md index f925ff1..538fd4d 100644 --- a/docs/GNAI-000-DOC_Index.md +++ b/docs/GNAI-000-DOC_Index.md @@ -1,8 +1,8 @@ # Ghostnet.AI – Dokumentationsindex und Projektstand -**Stand:** 2026-11-12 +**Stand:** 2026-11-14 -**Status:** Plattformgrundlage vorhanden; KI-Stack intern bis M4 abgenommen (Testing und Production live auf `10.0.0.90`, Monitoring produktiv); Sicherheitsabschluss: Fail2Ban-Abnahme und hostunabhängige Backups/Restore am 10.11.2026 geschlossen, WAN/IPv6-Fremdnetz-Rescan, NPM-Rückfalltest CT 104 und FRITZ!Box-Rollback noch offen; externe KI-Freigabe (M6) offen +**Status:** Plattformgrundlage vorhanden; KI-Stack bis M6 produktiv (Testing/Production live auf `10.0.0.90`, Monitoring M1–M6 produktiv, öffentlicher Nutzerpfad `https://chat.ghostnet.selfhost.eu` live seit 11.11.2026 inklusive Websuche 12.11. und Theme 14.11.); Sicherheitsabschluss: Fail2Ban-Abnahme, hostunabhängige Backups/Restore, Keycloak-Stabilisierung, praktischer NPM-Rückfalltest und CT-104-Entfernung am 10.11.2026 geschlossen — WAN/IPv6-Fremdnetz-Rescan vom Hotspot, FRITZ!Box-Abgleich und FRITZ!Box-DNS-Rollback noch offen; M5-Delivery-Kette: statische CI, Runner (CT 116) und Branch-Protection seit 10.11.2026 umgesetzt, privilegierter Deployment-Runner noch offen; Encoding (M7) in Planung, Implementierung noch nicht begonnen Dieses Dokument ist der zentrale Einstieg, nicht das technische Nachweisprotokoll. Details, historische Laufdaten und Bedienverfahren stehen ausschließlich in den @@ -52,6 +52,7 @@ jeweiligen Fachdokumenten. Die priorisierte weitere Umsetzung beschreibt der | [GNAI-009](platform/llm-server/ai/GNAI-009-PLAN_Llama-Model-Evaluation.md) | reproduzierbarer Modellvergleich | | [GNAI-010](platform/llm-server/ai/GNAI-010-TECH_Llama-Serving.md) | technische Sollkonfiguration des Testing-Servings | | [GNAI-020](platform/llm-server/ai/GNAI-020-TECH_OpenWebUI-WebSearch.md) | Websuche in OpenWebUI (SearXNG kuratiert + Native/Agentic Mode, UI- und API-Pfade) | +| [GNAI-021](platform/llm-server/ai/GNAI-021-TECH_OpenWebUI-Theme.md) | OpenWebUI-Theme „gnai-catppuccin-mocha" (GNMON-Farbschema) als Default, update-persistent via read-only custom.css-Mount | | [LLM-Server-Host-Ansible](../llm-server/host/ansible/README.md) | ausführbare Host-/ROCm-Playbooks und Rollen für `10.0.0.90` | | [LLM-Stack-Ansible](../llm-server/llm/ansible/README.md) | ausführbares Ansible-Projekt für den LLM-Stack auf `10.0.0.90` (Production/Testing, Umschaltung, Backup) | | [Encoding-Ansible](../llm-server/encoding/ansible/README.md) | ausführbares Ansible-Projekt für den CPU-Encoding-Workload auf `10.0.0.90` | @@ -89,14 +90,14 @@ Hauptverzeichnisse `llm-server/host/` (Grundkonfiguration des Servers), | --- | --- | --- | | KI-Host | Debian 13.6, Deployment-Zugang, Podman 5.4.2, getrennte rootless Konten, Gerätezugriff für beide KI-Konten; IPv4-only (31.10., GNAI-002 6); Lüftersteuerungs-Dienst `gnai-gpu-fan-control` als Dauerlösung (05.11., GNAI-010 10.10); Backup/Restore praktisch belegt (06.11., GNAI-008 14.6) und Backup-Unit per `RequiresMountsFor` boot-sicher (Fix 09.11., GNAI-008 14.6/0.21); Host-Neustart mit automatischem Production-Recovery (06.11. und erneut 09.11.2026, GNAI-008 14.6) | Host-/Treiber-Upgradepfad | | GPU/ROCm | beide RX 6900 XT als `gfx1030`, `ROCm0` und `ROCm1` im gepinnten Testing-Image erkannt; Modellladen, Layer-Verteilung und reale Inferenz auf beiden GPUs; 64k- und 128k-Stabilität in Testing (GNAI-010 10.5–10.9); GPU-Sensoren im Monitoring mit Alarmgrenzen (GNMON-000 M4/M5, verifiziert 09.11.2026) | Hardware-Ursache des thermischen Defekts an Slot `03:00.0` (GNAI-010 10.10) — Lüfterkurven-Service überbrückt als Dauerlösung | -| LLM-Serving | drei gepinnte Profile (Swift 1.0, Swift 1.5, Unsloth); Testing-Abnahme 64k/128k je Profil (GNAI-010 10.5–10.9); Production-Umgebung live mit Swift 1.5 Q6_K seit 06.11.2026 (Betreiberbeschluss 05.11., GNAI-009 10.4) inklusive Health, Alias und Inferenztest; exklusive Umschaltmechanik mit Recovery (GNAI-008 14.6, T1–T7; nach Neustart 09.11.2026 `gn_ai_active_env{env="production"}=1` verifiziert); **OpenWebUI v0.13.3 (digest-gepinnt) intern produktiv seit 10.11.2026** — Health 200, Model-Liste, reale Chat-Completion via OpenWebUI → llama.cpp (Rolle `open_webui`, Playbook `webui.yml`, Ingress `10.0.0.90:8081` nur von NPM, Split-DNS `chat.ghostnet.selfhost.eu` live) | LLM-Metriken jenseits `gn_ai_active_env`, Nutzerakzeptanzprüfung (GNAI-009 5.3). **Öffentlicher Nutzerpfad M6 live seit 11.11.2026:** `https://chat.ghostnet.selfhost.eu` (OpenWebUI v0.13.3, NPM → 10.0.0.90:8081, Keycloak-OIDC Client `gnai-openwebui` public+PKCE; Negativtests: 8081/Engine-Ports von außen geblockt, `/admin/` 403, keine AAAA; OIDC-Redirect-Kette verifiziert). **Websuche produktiv seit 12.11.2026 (GNAI-020):** SearXNG mit 43 kuratierten Engines (168 Ergebnisse/1,4 s), OpenWebUI Native/Agentic Mode (`search_web`/`fetch_url`, `ENABLE_WEB_SEARCH=True` + DB-Config-Sync), E2E-Tool-Loop via API mit Quellen verifiziert, NPM-Proxy-Timeouts chat.* 600 s gesetzt (12.11., GNAI-020 Abschnitt 6) | -| Deployment | lokales Ansible-Control-Projekt und idempotente Hostrollen; Production-Inventar mit Referenz- und Rollback-Profil, `ai_environment_switch` und Backup-Timer deployt und abgenommen (GNAI-008 14.6) | statische CI, Runner, geschützte Freigaben und automatisierter Rollback über die Delivery-Kette | +| LLM-Serving | drei gepinnte Profile (Swift 1.0, Swift 1.5, Unsloth); Testing-Abnahme 64k/128k je Profil (GNAI-010 10.5–10.9); Production-Umgebung live mit Swift 1.5 Q6_K seit 06.11.2026 (Betreiberbeschluss 05.11., GNAI-009 10.4) inklusive Health, Alias und Inferenztest; exklusive Umschaltmechanik mit Recovery (GNAI-008 14.6, T1–T7; nach Neustart 09.11.2026 `gn_ai_active_env{env="production"}=1` verifiziert); **OpenWebUI v0.13.3 (digest-gepinnt) intern produktiv seit 10.11.2026** — Health 200, Model-Liste, reale Chat-Completion via OpenWebUI → llama.cpp (Rolle `open_webui`, Playbook `webui.yml`, Ingress `10.0.0.90:8081` nur von NPM, Split-DNS `chat.ghostnet.selfhost.eu` live). **Öffentlicher Nutzerpfad M6 live seit 11.11.2026:** `https://chat.ghostnet.selfhost.eu` (OpenWebUI v0.13.3, NPM → 10.0.0.90:8081, Keycloak-OIDC Client `gnai-openwebui` public+PKCE; Negativtests: 8081/Engine-Ports von außen geblockt, `/admin/` 403, keine AAAA; OIDC-Redirect-Kette verifiziert). **Websuche produktiv seit 12.11.2026 (GNAI-020):** SearXNG mit 43 kuratierten Engines (168 Ergebnisse/1,4 s), OpenWebUI Native/Agentic Mode (`search_web`/`fetch_url`, `ENABLE_WEB_SEARCH=True` + DB-Config-Sync), E2E-Tool-Loop via API mit Quellen verifiziert, NPM-Proxy-Timeouts chat.* 600 s gesetzt (12.11., GNAI-020 Abschnitt 6). **Theme „gnai-catppuccin-mocha" live seit 14.11.2026 (GNAI-021)**, update-persistent via read-only custom.css-Mount | LLM-Metriken jenseits `gn_ai_active_env`, Nutzerakzeptanzprüfung (GNAI-009 5.3), Lizenz-/Nutzungsrahmen-Nachweis vor externer Freigabe (GNAI-009 10.4), Rate-Limit-Doku, Betriebs-SOP, API-Key-Freigabe für Agenten (GNAI-001 M6) | +| Deployment | lokales Ansible-Control-Projekt und idempotente Hostrollen; Production-Inventar mit Referenz- und Rollback-Profil, `ai_environment_switch` und Backup-Timer deployt und abgenommen (GNAI-008 14.6); **M5-Fortschritt 10.11.2026:** statische CI (Gitea Actions, 4 Jobs) + repo-scoped Runner `ci-static-01` auf CT 116 + Branch-Protection `main` (required checks, 1 Approval) eingerichtet und per PR-Durchlauf bewiesen (GNAI-008 Abschnitt 12) | privilegierter Deployment-Runner mit Promotion-Tag-Freigabe, Secret-Store/-Rotation, getrennte Testing-/Production-Rechte, Secret-Scan über die Git-Historie (GNAI-008 Abschnitt 12, Fragen 3–5) | | VPN | wg-easy v15.4.0; einziger Peer `ghost-laptop` als Server Admin; native nftables-Zielpolicy und NAT, Legacy-Bereinigung, Fremdnetz-, Positiv-/Negativ-, Dienst- und LXC-Wiederanlauftests bestanden; CT 104 am 07.10.2026 als zwölftes Ziel praktisch abgenommen; WAN-Exposure-Erfassung 10.11.2026: nur TCP 80/443 offen, keine AAAA (GNAI-007 7); frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` am 10.11.2026 | Fremdnetz-WAN-Rescan vom Hotspot (UDP 51820, TCP-Portmatrix), FRITZ!Box-Forward-/IPv6-Abgleich, wg-easy-GUI-HTTPS und KI-Server-Test bei eingeschaltetem Host | | DNS / Pi-hole | CT 100 unter `10.0.0.14` mit digest-gepinntem Pi-hole 2026.09.0 als Podman-Quadlet; SSH/nftables, UDP/TCP-DNS, Split-DNS, Blocking/Allowlist, FRITZ!Box-Cutover, LXC-Reboot und Stop-Mode-Backup am 01.10.2026 abgenommen; Ansible-Projekt am 09.11.2026 adoptiert (ansible-deploy via pct; `site.yml`/`verify-production` `changed=0`) und Split-DNS-Record `mon.ghostnet.selfhost.eu → 10.0.0.10` live (verifiziert per `dig @10.0.0.14`); frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` + praktischer Restore-Test (CT 150) am 10.11.2026 (GNAI-012 10.2) | vollständige App-/OIDC-Regression, praktischer FRITZ!Box-Rollback, mobile DuckDuckGo-/IPv6-Strategie, WireGuard-Profile | -| Reverse Proxy | CT-103-Zugänge, SSH-/Firewall-Baseline, Reboot und lokales Backup abgenommen; NPM 2.15.1 routet öffentlichen OIDC- und internen Admin-vHost getrennt; öffentliche Keycloak-Administration liefert 403; vollständiger Ansible-Sollzustand importiert und adoptiert (07.11.2026; preflight/verify-production/`site.yml --check` am 09.11.2026 ohne Befund, `changed=0`); Fail2Ban-Funktionsabnahme (Jails, kontrollierter Ban/Unban, nftables-Nachweis, Dienstneustart, LXC-Reboot) am 10.11.2026 bestanden, frischer Rollback-vzdump + hostunabhängige Kopie auf `ghostnet-ki` (GNAI-006 10/12); **12.11.2026: NPM-Proxyhost `chat.ghostnet.selfhost.eu` mit `proxy_read_timeout`/`proxy_send_timeout` 600 s für LLM-Research-Loops** (Betreiber-Schritt, GNAI-020 Abschnitt 6) | Fremdnetz-WAN-Rescan (Hotspot) und FRITZ!Box-Abgleich; NPM-Proxyhost `mon.ghostnet.selfhost.eu` für das Monitoring-Dashboard (M6) | +| Reverse Proxy | CT-103-Zugänge, SSH-/Firewall-Baseline, Reboot und lokales Backup abgenommen; NPM 2.15.1 routet öffentlichen OIDC- und internen Admin-vHost getrennt; öffentliche Keycloak-Administration liefert 403; vollständiger Ansible-Sollzustand importiert und adoptiert (07.11.2026; preflight/verify-production/`site.yml --check` am 09.11.2026 ohne Befund, `changed=0`); Fail2Ban-Funktionsabnahme (Jails, kontrollierter Ban/Unban, nftables-Nachweis, Dienstneustart, LXC-Reboot) am 10.11.2026 bestanden, frischer Rollback-vzdump + hostunabhängige Kopie auf `ghostnet-ki` (GNAI-006 10/12); NPM-Proxyhost `mon.ghostnet.selfhost.eu` → `10.0.0.90:8080` seit 09.11.2026 eingerichtet (ID 14, GNMON-000 M6); **12.11.2026: NPM-Proxyhost `chat.ghostnet.selfhost.eu` mit `proxy_read_timeout`/`proxy_send_timeout` 600 s für LLM-Research-Loops** (Betreiber-Schritt, GNAI-020 Abschnitt 6) | Fremdnetz-WAN-Rescan (Hotspot) und FRITZ!Box-Forward-/IPv6-Abgleich | | Keycloak | CT 102 unter `10.0.0.4` reproduzierbar per Ansible aufgebaut; gepinntes Keycloak 26.2.4 und PostgreSQL 16.15, Restore von CT 104, Container-/DB-Härtung, NPM-Cutover, interner Adminzugang, öffentliche Admin-Sperre, realer Vaultwarden-OIDC-Login und LXC-Neustart abgenommen; Stabilisierungsphase + praktischer NPM-Rückfalltest auf CT 104 am 10.11.2026 bestanden, CT 104 danach nach Betreiberfreigabe entfernt (GNAI-016 Phase F); Ansible-Drift CT 102 `changed=0`; frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` am 10.11.2026 | Betriebs-/Backup-/Restore-SOP | | Encoding | Konto, Pfade, eigener rootless Store und CPU-Isolation per Ansible verwaltet und verifiziert; NFS-Mount `/var/lib/ghostnet-pipeline` aktiv (verifiziert 09.11.2026); Planungsabschluss 19.10.2026 (Pipeline GNENC-002, Speicher auf CT-101); Monitoring-Anbindung umgesetzt (GNMON-000 M1–M5) | Implementierung (Images, Quadlets, Skripte, Worker); Lasttest und Limit-Feintuning; SMB-Output-Pickup als geschlossener Ablauf | -| Monitoring | M1–M6 produktiv auf `10.0.0.90` (System-Scope, Konten `gn-monitor` 986 / `gn-dashboard` 984): node_exporter + AMD-Textfile-Collector, VictoriaMetrics, Loki + Alloy, vmalert + Alertmanager (inkl. `gnmon-ai`/`GnAiEnvironmentDown`), Dashboard **v0.3.2 öffentlich über `https://mon.ghostnet.selfhost.eu`** (NPM CT-103 ID 14, LE-TLS; Keycloak-OIDC Realm Ghost.net, Client `gnai-dashboard`, Rollen `gnai-dashboard-user`/`-admin`; 8080 per nftables nur von 10.0.0.10; E2E inkl. 403-Negativtest und WebSocket-Circuit bestanden 09.11.2026, GNMON-000 M6) | echter SMTP-Versand, LLM-Metriken jenseits `gn_ai_active_env`, Retention-Feintuning, externer WireGuard-Zugriff auf mon (DNS/TLS öffentlich, praktisch ungetestet) | +| Monitoring | M1–M6 produktiv auf `10.0.0.90` (System-Scope, Konten `gn-monitor` 986 / `gn-dashboard` 984): node_exporter + AMD-Textfile-Collector, VictoriaMetrics, Loki + Alloy, vmalert + Alertmanager (inkl. `gnmon-ai`/`GnAiEnvironmentDown`), Dashboard **v0.3.6 öffentlich über `https://mon.ghostnet.selfhost.eu`** (NPM CT-103 ID 14, LE-TLS; Keycloak-OIDC Realm Ghost.net, Client `gnai-dashboard`, Rollen `gnai-dashboard-user`/`-admin`; 8080 per nftables nur von 10.0.0.10; E2E inkl. 403-Negativtest und WebSocket-Circuit bestanden 09.11.2026, GNMON-000 M6; Favicon-Revert auf v0.3.6 am 14.11.2026, GNAI-021) | echter SMTP-Versand, LLM-Metriken jenseits `gn_ai_active_env`, Retention-Feintuning, externer WireGuard-Zugriff auf mon (DNS/TLS öffentlich, praktisch ungetestet) | | Samba (CT 101) | Share-Bestand in GNAI-017 dokumentiert; Ansible-Projekt nach GNAI-019 gebaut und lokal verifiziert; Runbooks vorhanden; In-Place-Upgrade auf Debian 13 am 21.10.2026; smb.conf-Verlust beim Upgrade aus vzdump-Backup wiederhergestellt, Media-Shares und Workstation-Mounts verifiziert | produktive Adoption (Platzhalter, Schlüssel, Convergence, Verifikation), NFS-Export und Encoding-Shares produktiv, UID/GID-Abgleich produktiv, Backup-/Restore-Test | Ein Zielbild, eine Betreiberangabe oder ein erfolgreicher Teiltest gilt nicht als @@ -180,7 +181,8 @@ API-Keys und Rollen macht OpenWebUI selbst, Rate-Limits kommen auf NPM-Ebene; LiteLLM bleibt Zielbild-Kandidat, falls später Quotas/Routing pro Backend nötig werden. Interner Slice abgenommen 10.11.2026 (Health, Model-Liste, reale Chat-Completion durch OpenWebUI → llama.cpp mit -Token-Usage). +Token-Usage); **öffentlich live seit 11.11.2026** (Details Abschnitt 2; +Websuche 12.11. GNAI-020, Theme 14.11. GNAI-021). Bereits entschieden (nicht mehr offen): Das Backupziel ist die bestehende NFS-Anbindung der Encoding-Pipeline (`pve:/media/datenhdd3/Encoding`), die diff --git a/docs/GNAI-001-PLAN_Project-Roadmap.md b/docs/GNAI-001-PLAN_Project-Roadmap.md index bc5463a..b15af5a 100644 --- a/docs/GNAI-001-PLAN_Project-Roadmap.md +++ b/docs/GNAI-001-PLAN_Project-Roadmap.md @@ -4,9 +4,9 @@ **Titel:** Priorisierte Roadmap für Ghostnet.AI -**Stand:** 2026-11-09 +**Stand:** 2026-11-14 -**Status:** Arbeitsgrundlage; M2–M4 des KI-Stacks abgenommen, M1-Restpunkte und M5/M6 offen +**Status:** Arbeitsgrundlage; M1 bis auf Fremdnetz-Rescan/FRITZ!Box-Rollback geschlossen (10.11.), M2–M4 abgenommen, M5 statische CI/Runner/Branch-Protection umgesetzt (10.11.), M6 öffentlich live seit 11.11. (inkl. Websuche 12.11., Theme 14.11.), M7 offen **Referenzen:** [Projektstand](GNAI-000-DOC_Index.md), [Zielarchitektur](platform/llm-server/ai/GNAI-004-INFRA_Architecture.md), [Ansible-Plan](platform/llm-server/ai/GNAI-008-PLAN_Ansible-Deployment.md), [Modellbewertung](platform/llm-server/ai/GNAI-009-PLAN_Llama-Model-Evaluation.md), [`llama.cpp`-Sollkonfiguration](platform/llm-server/ai/GNAI-010-TECH_Llama-Serving.md) @@ -77,16 +77,22 @@ eingerichtet (GNAI-012 10.2, GNAI-006 10, PVE-Rolle `pve_lxc_backup_sync`), Keycloak-Stabilisierungsphase nachgewiesen (26 Tage, GNAI-016 Phase F) und WAN/IPv6-Exposure teilweise erfasst (nur TCP 80/443 offen, keine AAAA; GNAI-007 7). **Aktualisierung 10.11.2026 (später):** praktischer -NPM-Rückfalltest auf CT 104 bestanden und CT 104 nach Betreiberfreigabe -entfernt (GNAI-016 Phase F). Offen bleiben der Fremdnetz-WAN-Rescan vom -Hotspot mit FRITZ!Box-Abgleich, der praktische FRITZ!Box-DNS-Rollback und -hostunabhängige Restore-Tests für CT 102/103 (Restore-Pfad für CT 100 -praktisch belegt). +NPM-Rückfalltest auf CT 104 bestanden und CT 104 nach ausdrücklicher +Betreiberfreigabe entfernt (`pct destroy 104 --purge`, Archiv SHA-256-verifiziert +auf `ghostnet-ki`; GNAI-016 Phase F). Offen bleiben der Fremdnetz-WAN-Rescan +vom Hotspot mit FRITZ!Box-Forward-/IPv6-Abgleich und der praktisch +durchgespielte FRITZ!Box-DNS-Rollback auf einem Testclient. Der +hostunabhängige Restore-Pfad ist praktisch belegt (CT 100 → CT 150 am +10.11.2026, GNAI-012 10.2); damit ist Befund 4 des zentralen Index +(GNAI-000 Abschnitt 4) geschlossen — die frühere Restnotiz zu separaten +Restore-Tests für CT 102/103 entfällt. **Aktualisierung 09.11.2026:** Der vollständige Ansible-Sollzustand beider Hosts liegt inzwischen im Repository — CT 100 (`proxmox/lxc/ct-100-dns/ansible/`, -Production-Adoption noch offen, da CT 100 bis heute kein `ansible-deploy`-Konto -hat) und CT 103 (`proxmox/lxc/ct-103-reverse-proxy/ansible/`, am 07.11.2026 +am 09.11.2026 adoptiert: `ansible-deploy` per `pct exec`, danach +`verify-deploy-access` ok=5, `site.yml` konvergent `changed=0`, +`verify-production` ok=32 changed=0; GNMON-000 M6, GNAI-012 10.2) und +CT 103 (`proxmox/lxc/ct-103-reverse-proxy/ansible/`, am 07.11.2026 adoptiert und am 09.11.2026 verifiziert: preflight ok=15, verify-production ok=27 changed=0, `site.yml --check` changed=0). @@ -165,13 +171,29 @@ freigegeben, ohne PR-Code root-äquivalente Secrets zu geben. - keinen Production-Schlüssel in Pull-Request-Workflows bereitstellen; - Deploymentnachweis mit Commit, Artefaktdigests und Prüfergebnis erzeugen. +**Ausführungsstand 10.11.2026:** Statische CI ohne Serverzugang eingeführt +(`.gitea/workflows/ci-static.yml`, 4 Jobs: `secret-scan`, `yamllint`, +`ansible-syntax`, `markdown-links`; erster Lauf grün), dedizierter +Runner-LXC **CT 116** (`act_runner v0.2.13`, repo-scoped Runner `ci-static-01` +online, keine Server-Zugangsdaten auf dem Runner-LXC) und Branch-Protection +`main` gesetzt (`enable_push=false`, required status checks +`ci-static / (pull_request)`, `required_approvals=1`); erster +PR-Durchlauf (PR #2) mit squash-merge nach `main` bestanden (Commit +`962b387`; Details und Token-Hygiene in GNAI-008 Abschnitt 12). **Offen:** +Fragen 3–5 aus GNAI-008 Abschnitt 12 (Review-/Freigabe-Rechte, Secret-Store, +Promotion-Tag), privilegierter Deployment-Runner, Secret-Scan über die +Git-Historie, `act_runner`-Label `self-hosted` per Config nachziehen. + **Fertig, wenn:** Ein ungefährliches Testdeployment und anschließend ein freigegebenes Production-Deployment einschließlich fehlgeschlagenem Lauf und Recovery reproduzierbar nachgewiesen sind. ### Meilenstein 6 – Ersten Nutzerpfad veröffentlichen -**Ausführungsstand 11.11.2026:** OpenWebUI v0.13.3 (digest-gepinnt) ist als +**Status: live seit 11.11.2026; Nacharbeiten offen (siehe Ende des +Abschnitts).** + +**Ausführungsstand 14.11.2026:** OpenWebUI v0.13.3 (digest-gepinnt) ist als öffentlicher Nutzerpfad live: `https://chat.ghostnet.selfhost.eu` (NPM → `10.0.0.90:8081`, nur NPM darf auf den KI-Host durch), Keycloak-OIDC über Client `gnai-openwebui` (public + PKCE S256, Realm Ghost.net). LiteLLM-Gate @@ -187,8 +209,12 @@ kuratierten Engines + OpenWebUI Native/Agentic Mode, E2E-Tool-Loop via API (server-seitig, mit Quellen) verifiziert; Workspace-Tool `gnai-web-search` für API-Agenten via `tool_ids` geseeded; NPM-Proxy-Timeouts auf `chat.*` (600 s) für lange Research-Loops durch Betreiber gesetzt (12.11.2026, -GNAI-020 Abschnitt 6). Offen: Rate-Limit-Doku, LLM-Metriken im Monitoring, -Betriebs-SOP, API-Key-Freigabe für Agenten (`auth.enable_api_keys`). +GNAI-020 Abschnitt 6). **Theme „gnai-catppuccin-mocha" live seit 14.11.2026 +(GNAI-021)**. Offen: Rate-Limit-Doku, LLM-Metriken im Monitoring, +Betriebs-SOP, API-Key-Freigabe für Agenten (`auth.enable_api_keys`), +Nutzerakzeptanzprüfung auf dem Siegerprofil (GNAI-009 5.3) sowie der +Lizenz-/Nutzungsrahmen-Nachweis (GNAI-009 10.4 — vor der externen Freigabe +gefordert, als abgeschlossen noch nicht dokumentiert). **Ergebnis:** Genau ein klar definierter, authentifizierter Nutzerpfad ist öffentlich nutzbar; Backend- und Managementports bleiben intern. @@ -218,8 +244,15 @@ LLM-Betrieb nicht. und unter gleichzeitiger Inferenzlast testen; - erst danach Zeitplan, Queue, Benachrichtigung und Nutzer-SOP freigeben. -### Ausführungsstand 09.11.2026 +### Stand 14.11.2026 +- **M1 weitgehend geschlossen (10.11.2026):** Fail2Ban-Funktionsabnahme, + hostunabhängige Backups mit praktischem Restore-Test (CT 100 → CT 150), + Keycloak-Stabilisierungsphase (26 Tage), praktischer NPM-Rückfalltest auf + CT 104 und CT-104-Entfernung bestanden (GNAI-006 10/12, GNAI-012 10.2, + GNAI-016 Phase F); WAN/IPv6-Exposure teilweise erfasst (nur TCP 80/443 + offen, keine AAAA). **Offen:** Fremdnetz-WAN-Rescan vom Hotspot, + FRITZ!Box-Forward-/IPv6-Abgleich, praktischer FRITZ!Box-DNS-Rollback. - **M2 abgenommen:** Testing-Vertical-Slice mit drei gepinnten Profilen (Swift 1.0, Swift 1.5, Unsloth), 64k- und 128k-Abnahme, Idempotenz, Profilwechsel und Host-Reboot-Test bestanden (GNAI-010 Abschnitte @@ -232,12 +265,20 @@ LLM-Betrieb nicht. (T1–T7), Backup/Restore-Nachweise R1/R2, Alarmgrenzen — siehe GNAI-008 Abschnitt 14.6. Erneut verifiziert am 09.11.2026 nach einem Host-Neustart: automatisches Recovery auf Production ohne Zutun. -- **Monitoring-Anteil von M4 umgesetzt:** GNMON-000 M1–M5 produktiv auf - dem KI-Server inklusive Verfügbarkeitsregel `GnAiEnvironmentDown`. -- **Offen:** M1-Restpunkte (Fail2Ban-Tests, WAN-/IPv6-Exposure, Keycloak- - Stabilisierung und NPM-Rückfall, hostunabhängige Backups), M5 - Delivery-Kette (Gitea Actions/Runner), M6 erster öffentlicher Nutzerpfad, - M7 Encoding unter Last. +- **Monitoring:** GNMON-000 M1–M6 produktiv auf dem KI-Server inklusive + Verfügbarkeitsregel `GnAiEnvironmentDown` und öffentlichem Dashboard + `https://mon.ghostnet.selfhost.eu` (seit 09.11.2026). +- **M5 teilweise umgesetzt (10.11.2026):** statische CI + Runner CT 116 + + Branch-Protection `main` (GNAI-008 Abschnitt 12). **Offen:** privilegierter + Deployment-Runner, Promotion-Tag-Freigabe, Secret-Modell (Fragen 3–5). +- **M6 live seit 11.11.2026:** `https://chat.ghostnet.selfhost.eu` + (OpenWebUI v0.13.3 + Keycloak-OIDC `gnai-openwebui`), Websuche seit + 12.11. (GNAI-020), Theme seit 14.11. (GNAI-021). **Offen:** Nacharbeiten + laut M6-Abschnitt (Rate-Limit-Doku, LLM-Metriken, Betriebs-SOP, + API-Key-Freigabe, Nutzerakzeptanz- und Lizenz-Nachweis). +- **M7 offen:** Encoding-Implementierung (Images, Quadlets, Worker-Skript), + SMB-Output-Pickup als geschlossener Ablauf, Lasttest unter Inferenzlast + (GNENC-000 „Noch offen“). ## 4. Bewusst nicht Teil der nächsten Ausbaustufe diff --git a/docs/GNAI-013-PLAN_Security-Closure-and-Repository-Restructure.md b/docs/GNAI-013-PLAN_Security-Closure-and-Repository-Restructure.md index 759cde2..9d34879 100644 --- a/docs/GNAI-013-PLAN_Security-Closure-and-Repository-Restructure.md +++ b/docs/GNAI-013-PLAN_Security-Closure-and-Repository-Restructure.md @@ -1,8 +1,8 @@ # Sicherheitsabschluss und Repository-Neustrukturierung **Dokumenten-ID:** GNAI-013-PLAN -**Stand:** 2026-10-14 -**Status:** Aktiver Arbeitsplan +**Stand:** 2026-11-14 +**Status:** Aktiver Arbeitsplan; Abschnitte A–D bis auf den FRITZ!Box-DNS-Rollback abgeschlossen (10.11.2026), Abschnitt E bis auf die Resolver-Abstimmung des KI-Servers erledigt (M2–M6 produktiv) ## 1. Ziel @@ -41,16 +41,18 @@ Die ausführbare Infrastruktur ist seit 14.10.2026 ebenfalls hostbezogen: ghostnet.ai-infrastructure/ ├── llm-server/ │ ├── host/ansible/ # Grundkonfiguration des physischen KI-Servers -│ ├── llm/ # LLM-Stack (entsteht mit dem AI-Vertical-Slice) -│ └── encoding/ansible/ # CPU-Encoding-Workload +│ ├── llm/ # LLM-Stack (M2–M4 abgenommen, M6 live) +│ ├── encoding/ansible/ # CPU-Encoding-Workload +│ └── monitoring/ # Monitoring-Projekt (GNMON M1–M6 produktiv) ├── proxmox/ │ ├── shared/scripts/ # nur LXC-übergreifende PVE-Helfer │ └── lxc/ -│ ├── ct-100-dns/ # Hostwurzel + Ansible-Projekt; Production-Adoption offen (Stand 09.11.2026: kein ansible-deploy auf CT 100) +│ ├── ct-100-dns/ # Hostwurzel + Ansible-Projekt (adoptiert 09.11.2026 via pct exec, verify-production changed=0) │ ├── ct-102-keycloak/{ansible,scripts}/ │ ├── ct-103-reverse-proxy/ # Hostwurzel + Ansible-Projekt (adoptiert 07.11.2026, verifiziert 09.11.2026) │ ├── ct-104-keycloak/ # nur noch Migrations-Referenz; CT 104 am 10.11.2026 nach Freigabe entfernt (GNAI-016 Phase F) -│ └── ct-105-wireguard/ +│ ├── ct-105-wireguard/ +│ └── ct-116-runner/ # CI-Runner-LXC (act_runner, repo-scoped ci-static-01; seit 10.11.2026, GNAI-008 Abschnitt 12) └── shared/ansible/ # gemeinsam genutzte Rollen und Pins ``` @@ -144,13 +146,17 @@ hostbezogenen Playbooks oder Inventare. ### E. Übergang zum LLM-Stack -- [ ] KI-Server kontrolliert einschalten und Resolver auf den beschlossenen - Pi-hole-Pfad abstimmen. +- [x] KI-Server einschalten — läuft produktiv (M2–M4 abgenommen, M6 öffentlich + live; automatisches Production-Recovery nach Host-Neustart am 09.11.2026 + verifiziert, GNAI-008 14.6). **Noch offen:** Resolver auf den + beschlossenen Pi-hole-Pfad abstimmen — GNAI-003 belegt weiterhin + `10.0.0.1`/`1.1.1.1` als Resolver des KI-Servers. - [x] Lokale Ansible-`.venv` wegen des veralteten Repository-Pfads neu erstellen und alle Syntaxprüfungen regulär ausführen. - [x] Lesenden Preflight sowie Host-/ROCm-Verifikation wiederholen. -- [ ] Internes, nicht öffentliches `llama.cpp`-Testing-Vertical-Slice nach - GNAI-010 implementieren und bei 64k abnehmen. +- [x] Internes, nicht öffentliches `llama.cpp`-Testing-Vertical-Slice nach + GNAI-010 implementiert und bei 64k/128k abgenommen (M2; GNAI-010 + Abschnitte 10.5–10.9). ## 4. Arbeitsnachweise @@ -175,6 +181,10 @@ hostbezogenen Playbooks oder Inventare. - Offen bleibt in Abschnitt E: die Resolver-Abstimmung des KI-Servers auf den Pi-hole-Pfad. Ein kontrollierter Kaltstart des Servers wurde nicht durchgeführt; der Server lief durch, nur das Netzwerkkabel war gezogen. + **14.11.2026:** Host-Neustart inzwischen mehrfach praktisch belegt + (u. a. 09.11.2026 automatisches Production- und Monitoring-Recovery nach + Boot, GNAI-008 14.6, GNMON-000); die Resolver-Abstimmung ist weiterhin + offen. ### 05.10.2026 – Struktur, Geheimnisse und lokaler VPN-Client @@ -369,11 +379,13 @@ hostbezogenen Playbooks oder Inventare. - Der KI-Server ist bewusst ausgeschaltet und wird für die Punkte A bis D nicht benötigt. **10.11.2026: KI-Server läuft produktiv (M2–M4), inkl. automatischem Production-Recovery nach Host-Neustart.** -- CT 102 befindet sich in der 14-tägigen Stabilisierungsphase; der praktische - NPM-Rückfall auf den ausgeschalteten CT 104 bleibt offen. **10.11.2026: +- CT 102 befand sich in der 14-tägigen Stabilisierungsphase; der praktische + NPM-Rückfall auf den ausgeschalteten CT 104 war offen. **10.11.2026: Stabilisierungsphase nachgewiesen (26 Tage, NRestarts=0, keine Fehler) und - praktischer NPM-Rückfalltest auf CT 104 bestanden (GNAI-016); CT 104 ist - danach wieder ausgeschaltet.** + praktischer NPM-Rückfalltest auf CT 104 bestanden; CT 104 wurde danach nach + ausdrücklicher Betreiberfreigabe entfernt** (`pct destroy 104 --purge`, + finales Archiv SHA-256-verifiziert auf `ghostnet-ki` archiviert; + GNAI-016 Phase F). ## 6. Pflege diff --git a/docs/platform/llm-server/ai/GNAI-008-PLAN_Ansible-Deployment.md b/docs/platform/llm-server/ai/GNAI-008-PLAN_Ansible-Deployment.md index ee7ef3e..1928b81 100644 --- a/docs/platform/llm-server/ai/GNAI-008-PLAN_Ansible-Deployment.md +++ b/docs/platform/llm-server/ai/GNAI-008-PLAN_Ansible-Deployment.md @@ -2,8 +2,8 @@ **Dokumenten-ID:** GNAI-008-PLAN **Titel:** Ansible-Deployment für den KI-Server – Planungsstand -**Stand:** 2026-11-09 -**Status:** Nicht finaler Arbeitsentwurf zur Persistierung des Planungsstands; der belegte Implementierungsstand bis einschließlich M4 steht in Abschnitt 14 (14.6) +**Stand:** 2026-11-14 +**Status:** Nicht finaler Arbeitsentwurf zur Persistierung des Planungsstands; der belegte Implementierungsstand bis M4 steht in Abschnitt 14 (14.6), der M5-Fortschritt (statische CI, CT-116-Runner, Branch-Protection) in Abschnitt 12; M6 (öffentlicher OpenWebUI-Pfad, Websuche, Theme) ist in GNAI-020/GNAI-021 dokumentiert **Referenzen:** [Projektstand](../../../GNAI-000-DOC_Index.md), [Zielarchitektur](GNAI-004-INFRA_Architecture.md), [Modellbewertung](GNAI-009-PLAN_Llama-Model-Evaluation.md), [llama.cpp-Sollkonfiguration](GNAI-010-TECH_Llama-Serving.md), [Zugriffskonzept](../../GNAI-005-SEC_Access-Control.md) > **Abgrenzung:** Die Abschnitte 1–13 halten die Ergebnisse der am 19.09.2026 @@ -38,9 +38,11 @@ | 2026-09-21 | 0.16 | spektr / Codex | überholten Phasen- und Dokumentenbacklog konsolidiert, Umsetzungsreihenfolge an GNAI-001 delegiert und privilegierten Runner nach Recovery verschoben | | 2026-10-19 | 0.17 | spektr / Mistral Vibe | LLM-Server-Projekt in die fachlichen Hauptverzeichnisse `host/`, `llm/` und `encoding/` aufgeteilt; Abschnitte 6 und 7.4 an die neue Struktur angepasst | | 2026-10-31 | 0.18 | spektr / Mistral Vibe | Deployment-Plan mit Betreiberentscheidungen vom 31.10.2026 überarbeitet: dritte Umgebung Experimental, exklusives GPU-Scheduling mit schnellem Umschalter und kommunizierten Zeitfenstern, Wartungsseite/transparenter Endpunktwechsel für nutzerseitige Dienste, Model-Store als Kernrolle, verallgemeinerte Engine-Rolle, Gitea-Actions-Kette mit reduziertem Production-Scope, Strata als erster Experimental-Kandidat (Abschnitt 7.6) | +| 2026-11-14 | 0.19 | spektr / Mistral Vibe | Kopf-Stand nachgeführt: M5-Fortschritt 10.11.2026 (statische CI, CT-116-Runner, Branch-Protection — Abschnitt 12) aufgenommen; M6 live seit 11.11.2026 (OpenWebUI öffentlich, Websuche 12.11., Theme 14.11.) als Verweis auf GNAI-020/GNAI-021 ergänzt | | 2026-11-06 | 0.19 | spektr / Mistral Vibe | M4 umgesetzt und abgenommen (Abschnitt 14.6): Production-Inventar mit Referenz- (Swift 1.5) und Rollback-Profil (Unsloth), Rolle `ai_environment_switch` (Abschnitt 7.3) mit Recovery-Timer, Rolle `ai_backup` (Wochen-Timer auf NFS-Pipeline-Share), Verfügbarkeitsmetrik `gn_ai_active_env`; Abnahme T1–T7, echter Hostreboot, Restore-Nachweise R1/R2 | | 2026-11-09 | 0.20 | Mistral Vibe | Re-Verifikation nach Host-Neustart (09.11.2026, ~05:05 CET): Recovery-Service stellte Production automatisch wieder her (`gn_ai_active_env{env="production"}=1`, Engine `gnai-production-llama-swift15` aktiv). Befund: `gnai-ai-backup.service` lief beim Boot mit Exit 21 (NFS-Mountpoint zu diesem Zeitpunkt noch nicht gemountet) — Timer (Persistent) und Service haben keine Mount-Abhängigkeit; offen: `RequiresMountsFor=/var/lib/ghostnet-pipeline` in der `ai_backup`-Rolle (Abschnitt 14.6) | | 2026-11-09 | 0.21 | Mistral Vibe | Befund aus 0.20 behoben: `ai_backup`-Service-Unit nutzt jetzt `RequiresMountsFor={{ ai_backup_nfs_mountpoint }}` (die bisherige `After=var-lib-ghostnet-pipeline.mount` passte nicht zur escapten Unit `var-lib-ghostnet\x2dpipeline.mount`). Deploy via `backup.yml` (production), verifiziert: systemd-Requires/After auf die Mount-Unit, manueller Lauf `Result=success` mit sha256-verifiziertem Archiv auf dem NFS-Share, Rollen-Zweitlauf `changed=0` (Abschnitt 14.6) | +| 2026-11-14 | 0.22 | spektr / Mistral Vibe | Backup-Lücke geschlossen (GNAI-021 follow-up): `ai_backup_paths` um `etc/gnmon` (Dashboard-OIDC-Secret) und `var/lib/ghostnet-ai/production/openwebui-data` (OpenWebUI-Userdaten) erweitert. Die Live-`webui.db` (+`-wal`/`-shm`) wird aus dem Tar ausgeschlossen und stattdessen per SQLite-Online-Backup-API (python3 stdlib) als konsistenter Snapshot an derselben Archiv-Pfad eingefügt. Verifiziert 14.11.2026: manueller Lauf `Result=success`, Archiv `ghostnet-ai-backup-20261114-0720.tar.gz` (844 MB) enthält `etc/gnmon/dashboard-secrets.env` + `openwebui-data/webui.db` (0 wal/shm-Einträge), extrahierte DB `PRAGMA integrity_check` = ok (3 User, 4 Chats), sha256-Sidecar; Rollen-Zweitlauf `changed=0`. Restore-SOP in der Rollen-README ergänzt | --- diff --git a/docs/platform/llm-server/encoding/GNENC-000-DOC_Index.md b/docs/platform/llm-server/encoding/GNENC-000-DOC_Index.md index 7be962b..632ae3c 100644 --- a/docs/platform/llm-server/encoding/GNENC-000-DOC_Index.md +++ b/docs/platform/llm-server/encoding/GNENC-000-DOC_Index.md @@ -1,8 +1,8 @@ # Video-Encoding – Dokumentationsindex und Projektstand **Dokumenten-ID:** GNENC-000-DOC -**Stand:** 2026-11-09 -**Status:** Planungsabschluss; externe Abhängigkeiten (CT-101, PVE-Host-NFS) umgesetzt; Monitoring-Bereich produktiv (GNMON-000 M1–M5); Encoding-Implementierung auf ghostnet-ki noch nicht begonnen +**Stand:** 2026-11-14 +**Status:** Planungsabschluss; externe Abhängigkeiten (CT-101, PVE-Host-NFS) umgesetzt; Monitoring-Bereich produktiv (GNMON-000 M1–M6); Encoding-Implementierung auf ghostnet-ki noch nicht begonnen ## Dokumente @@ -92,4 +92,4 @@ beschrieben. 3. Rootless-TUN-Verifizierung für den VPN-Sidecar auf dem Host. 4. Implementierung auf ghostnet-ki: Image-Bauten, Quadlet-Units (inkl. VPN-Sidecar), Worker-Skript, JD2-Event-Scripter. Der Monitoring-Bereich - (Collector, Dashboard, Alerting) ist mit GNMON-000 M1–M5 umgesetzt. + (Collector, Dashboard, Alerting) ist mit GNMON-000 M1–M6 umgesetzt. diff --git a/docs/platform/llm-server/monitoring/GNMON-000-DOC_Index.md b/docs/platform/llm-server/monitoring/GNMON-000-DOC_Index.md index 4b1c520..8507083 100644 --- a/docs/platform/llm-server/monitoring/GNMON-000-DOC_Index.md +++ b/docs/platform/llm-server/monitoring/GNMON-000-DOC_Index.md @@ -1,8 +1,8 @@ # Monitoring – Dokumentationsindex und Projektstand **Dokumenten-ID:** GNMON-000-DOC -**Stand:** 2026-11-09 -**Status:** Revision v2.0 (03.11.2026) übernommen; M1–M6 produktiv — Dashboard öffentlich über `https://mon.ghostnet.selfhost.eu` mit Keycloak-OIDC (abgenommen 09.11.2026) +**Stand:** 2026-11-14 +**Status:** Revision v2.0 (03.11.2026) übernommen; M1–M6 produktiv — Dashboard v0.3.6 öffentlich über `https://mon.ghostnet.selfhost.eu` mit Keycloak-OIDC (abgenommen 09.11.2026; Favicon-Revert auf v0.3.6 am 14.11.2026, GNAI-021) ## Dokumente @@ -64,12 +64,10 @@ User-Scope-systemd) im Verzeichnis `llm-server/monitoring/`: - Verifikation: Dev-Logzeile erscheint in Loki (`query_range` mit `source="dev-test"`), Idempotenzlauf `changed=0, failed=0`. -- **Offener Operator-Schritt (Workstation):** `sudo usermod -aG - adm,systemd-journal ghost` — die Journald-Quelle läuft ohne Fehler, - sammelt aber ohne Gruppenmitgliedschaft keine Einträge (dokumentiertes - Alloy-Verhalten). Danach Journald-Ingestion in einer neuen Session - verifizieren. (usermod durchgeführt 04.11.2026; aktivierungspflichtig - über Neustart des User-Managers, z. B. Laptop-Reboot.) +- **Operator-Schritt (Workstation) erledigt:** `sudo usermod -aG + adm,systemd-journal ghost` wurde am 04.11.2026 durchgeführt und nach dem + Neustart des User-Managers aktiv — die Journald-Ingestion läuft seitdem + (in M3.5+ verifiziert: Kernel- und User-Unit-Einträge landen in Loki). ### M4: Alerting (implementiert 04.11.2026, Workstation-Entwicklung) @@ -392,6 +390,10 @@ Realm `Ghost.net` (Vaultwarden-Realm, Issuer - **Kosmetik (09.11.2026, v0.3.3):** Favicon ist das Ghostnet-Geist-Maskottchen (`wwwroot/favicon.png` 32×32 + `apple-touch-icon.png` 180×180, aus dem Betreiber-Logo gerendert), via NPM als `image/png` 200 verifiziert. +- **14.11.2026 (GNAI-021):** Badge-Favicon-Varianten (v0.3.7) wurden nach + Betreiberentscheid verworfen; Monitoring reverted auf **v0.3.6** + (ursprünglicher Geist, md5-verifiziert). OpenWebUI erhielt das Theme + „gnai-catppuccin-mocha" + Favicon ebenfalls am 14.11.2026. - **GPU-Chart (11.11.2026, v0.3.4/6, Befund "nur zwei einzelne Linien"):** Der `.braille-chart` war als Flex-Item in `.gpu-chart` (display:flex) mit `overflow:hidden` auf min-width 0 kollabiert; der ResizeObserver maß die