Doku-Abgleich 2026-11-14: Planungsstände auf M5/M6-Stand gebracht, Widersprüche beseitigt
- GNAI-000: Stand 14.11.; M6 öffentlich live seit 11.11. (Websuche 12.11., Theme 14.11.); mon-Proxyhost als eingerichtet (09.11., ID 14); Deployment um M5-Fortschritt 10.11. (statische CI, CT-116-Runner, Branch-Protection) ergänzt; Dashboard v0.3.6 - GNAI-001: Kopf-Status aktualisiert; M1-Rest an GNAI-000 §4 angeglichen (Restore-Pfad CT 100→CT 150 belegt); CT-100-Adoption 09.11. nachgetragen; M5-Ausführungsstand 10.11.; M6 live mit offenen Nacharbeiten (u. a. Lizenz-/Nutzungsrahmen-Nachweis GNAI-009 10.4) - GNAI-013: Stand 14.11.; Zielstruktur um CT 116 und monitoring/ ergänzt; CT 104 als entfernt (10.11.) korrigiert; Abschnitt E: KI-Server/LLM-Slice abgehakt, Resolver-Abstimmung offen - GNMON-000: Stand 14.11.; Workstation-Journald-Schritt erledigt; Dashboard v0.3.6 (Favicon-Revert 14.11.) - GNENC-000: GNMON M1–M6, Stand 14.11. - GNAI-008: Kopf-Stand 14.11., v0.19 (M5-Fortschritt §12, M6-Verweis GNAI-020/021) Link-Check: OK (252 relative Links in 101 Dateien) Generated by Mistral Vibe. Co-Authored-By: Mistral Vibe <vibe@mistral.ai>
This commit is contained in:
@@ -1,8 +1,8 @@
|
|||||||
# Ghostnet.AI – Dokumentationsindex und Projektstand
|
# Ghostnet.AI – Dokumentationsindex und Projektstand
|
||||||
|
|
||||||
**Stand:** 2026-11-12
|
**Stand:** 2026-11-14
|
||||||
|
|
||||||
**Status:** Plattformgrundlage vorhanden; KI-Stack intern bis M4 abgenommen (Testing und Production live auf `10.0.0.90`, Monitoring produktiv); Sicherheitsabschluss: Fail2Ban-Abnahme und hostunabhängige Backups/Restore am 10.11.2026 geschlossen, WAN/IPv6-Fremdnetz-Rescan, NPM-Rückfalltest CT 104 und FRITZ!Box-Rollback noch offen; externe KI-Freigabe (M6) offen
|
**Status:** Plattformgrundlage vorhanden; KI-Stack bis M6 produktiv (Testing/Production live auf `10.0.0.90`, Monitoring M1–M6 produktiv, öffentlicher Nutzerpfad `https://chat.ghostnet.selfhost.eu` live seit 11.11.2026 inklusive Websuche 12.11. und Theme 14.11.); Sicherheitsabschluss: Fail2Ban-Abnahme, hostunabhängige Backups/Restore, Keycloak-Stabilisierung, praktischer NPM-Rückfalltest und CT-104-Entfernung am 10.11.2026 geschlossen — WAN/IPv6-Fremdnetz-Rescan vom Hotspot, FRITZ!Box-Abgleich und FRITZ!Box-DNS-Rollback noch offen; M5-Delivery-Kette: statische CI, Runner (CT 116) und Branch-Protection seit 10.11.2026 umgesetzt, privilegierter Deployment-Runner noch offen; Encoding (M7) in Planung, Implementierung noch nicht begonnen
|
||||||
|
|
||||||
Dieses Dokument ist der zentrale Einstieg, nicht das technische Nachweisprotokoll.
|
Dieses Dokument ist der zentrale Einstieg, nicht das technische Nachweisprotokoll.
|
||||||
Details, historische Laufdaten und Bedienverfahren stehen ausschließlich in den
|
Details, historische Laufdaten und Bedienverfahren stehen ausschließlich in den
|
||||||
@@ -52,6 +52,7 @@ jeweiligen Fachdokumenten. Die priorisierte weitere Umsetzung beschreibt der
|
|||||||
| [GNAI-009](platform/llm-server/ai/GNAI-009-PLAN_Llama-Model-Evaluation.md) | reproduzierbarer Modellvergleich |
|
| [GNAI-009](platform/llm-server/ai/GNAI-009-PLAN_Llama-Model-Evaluation.md) | reproduzierbarer Modellvergleich |
|
||||||
| [GNAI-010](platform/llm-server/ai/GNAI-010-TECH_Llama-Serving.md) | technische Sollkonfiguration des Testing-Servings |
|
| [GNAI-010](platform/llm-server/ai/GNAI-010-TECH_Llama-Serving.md) | technische Sollkonfiguration des Testing-Servings |
|
||||||
| [GNAI-020](platform/llm-server/ai/GNAI-020-TECH_OpenWebUI-WebSearch.md) | Websuche in OpenWebUI (SearXNG kuratiert + Native/Agentic Mode, UI- und API-Pfade) |
|
| [GNAI-020](platform/llm-server/ai/GNAI-020-TECH_OpenWebUI-WebSearch.md) | Websuche in OpenWebUI (SearXNG kuratiert + Native/Agentic Mode, UI- und API-Pfade) |
|
||||||
|
| [GNAI-021](platform/llm-server/ai/GNAI-021-TECH_OpenWebUI-Theme.md) | OpenWebUI-Theme „gnai-catppuccin-mocha" (GNMON-Farbschema) als Default, update-persistent via read-only custom.css-Mount |
|
||||||
| [LLM-Server-Host-Ansible](../llm-server/host/ansible/README.md) | ausführbare Host-/ROCm-Playbooks und Rollen für `10.0.0.90` |
|
| [LLM-Server-Host-Ansible](../llm-server/host/ansible/README.md) | ausführbare Host-/ROCm-Playbooks und Rollen für `10.0.0.90` |
|
||||||
| [LLM-Stack-Ansible](../llm-server/llm/ansible/README.md) | ausführbares Ansible-Projekt für den LLM-Stack auf `10.0.0.90` (Production/Testing, Umschaltung, Backup) |
|
| [LLM-Stack-Ansible](../llm-server/llm/ansible/README.md) | ausführbares Ansible-Projekt für den LLM-Stack auf `10.0.0.90` (Production/Testing, Umschaltung, Backup) |
|
||||||
| [Encoding-Ansible](../llm-server/encoding/ansible/README.md) | ausführbares Ansible-Projekt für den CPU-Encoding-Workload auf `10.0.0.90` |
|
| [Encoding-Ansible](../llm-server/encoding/ansible/README.md) | ausführbares Ansible-Projekt für den CPU-Encoding-Workload auf `10.0.0.90` |
|
||||||
@@ -89,14 +90,14 @@ Hauptverzeichnisse `llm-server/host/` (Grundkonfiguration des Servers),
|
|||||||
| --- | --- | --- |
|
| --- | --- | --- |
|
||||||
| KI-Host | Debian 13.6, Deployment-Zugang, Podman 5.4.2, getrennte rootless Konten, Gerätezugriff für beide KI-Konten; IPv4-only (31.10., GNAI-002 6); Lüftersteuerungs-Dienst `gnai-gpu-fan-control` als Dauerlösung (05.11., GNAI-010 10.10); Backup/Restore praktisch belegt (06.11., GNAI-008 14.6) und Backup-Unit per `RequiresMountsFor` boot-sicher (Fix 09.11., GNAI-008 14.6/0.21); Host-Neustart mit automatischem Production-Recovery (06.11. und erneut 09.11.2026, GNAI-008 14.6) | Host-/Treiber-Upgradepfad |
|
| KI-Host | Debian 13.6, Deployment-Zugang, Podman 5.4.2, getrennte rootless Konten, Gerätezugriff für beide KI-Konten; IPv4-only (31.10., GNAI-002 6); Lüftersteuerungs-Dienst `gnai-gpu-fan-control` als Dauerlösung (05.11., GNAI-010 10.10); Backup/Restore praktisch belegt (06.11., GNAI-008 14.6) und Backup-Unit per `RequiresMountsFor` boot-sicher (Fix 09.11., GNAI-008 14.6/0.21); Host-Neustart mit automatischem Production-Recovery (06.11. und erneut 09.11.2026, GNAI-008 14.6) | Host-/Treiber-Upgradepfad |
|
||||||
| GPU/ROCm | beide RX 6900 XT als `gfx1030`, `ROCm0` und `ROCm1` im gepinnten Testing-Image erkannt; Modellladen, Layer-Verteilung und reale Inferenz auf beiden GPUs; 64k- und 128k-Stabilität in Testing (GNAI-010 10.5–10.9); GPU-Sensoren im Monitoring mit Alarmgrenzen (GNMON-000 M4/M5, verifiziert 09.11.2026) | Hardware-Ursache des thermischen Defekts an Slot `03:00.0` (GNAI-010 10.10) — Lüfterkurven-Service überbrückt als Dauerlösung |
|
| GPU/ROCm | beide RX 6900 XT als `gfx1030`, `ROCm0` und `ROCm1` im gepinnten Testing-Image erkannt; Modellladen, Layer-Verteilung und reale Inferenz auf beiden GPUs; 64k- und 128k-Stabilität in Testing (GNAI-010 10.5–10.9); GPU-Sensoren im Monitoring mit Alarmgrenzen (GNMON-000 M4/M5, verifiziert 09.11.2026) | Hardware-Ursache des thermischen Defekts an Slot `03:00.0` (GNAI-010 10.10) — Lüfterkurven-Service überbrückt als Dauerlösung |
|
||||||
| LLM-Serving | drei gepinnte Profile (Swift 1.0, Swift 1.5, Unsloth); Testing-Abnahme 64k/128k je Profil (GNAI-010 10.5–10.9); Production-Umgebung live mit Swift 1.5 Q6_K seit 06.11.2026 (Betreiberbeschluss 05.11., GNAI-009 10.4) inklusive Health, Alias und Inferenztest; exklusive Umschaltmechanik mit Recovery (GNAI-008 14.6, T1–T7; nach Neustart 09.11.2026 `gn_ai_active_env{env="production"}=1` verifiziert); **OpenWebUI v0.13.3 (digest-gepinnt) intern produktiv seit 10.11.2026** — Health 200, Model-Liste, reale Chat-Completion via OpenWebUI → llama.cpp (Rolle `open_webui`, Playbook `webui.yml`, Ingress `10.0.0.90:8081` nur von NPM, Split-DNS `chat.ghostnet.selfhost.eu` live) | LLM-Metriken jenseits `gn_ai_active_env`, Nutzerakzeptanzprüfung (GNAI-009 5.3). **Öffentlicher Nutzerpfad M6 live seit 11.11.2026:** `https://chat.ghostnet.selfhost.eu` (OpenWebUI v0.13.3, NPM → 10.0.0.90:8081, Keycloak-OIDC Client `gnai-openwebui` public+PKCE; Negativtests: 8081/Engine-Ports von außen geblockt, `/admin/` 403, keine AAAA; OIDC-Redirect-Kette verifiziert). **Websuche produktiv seit 12.11.2026 (GNAI-020):** SearXNG mit 43 kuratierten Engines (168 Ergebnisse/1,4 s), OpenWebUI Native/Agentic Mode (`search_web`/`fetch_url`, `ENABLE_WEB_SEARCH=True` + DB-Config-Sync), E2E-Tool-Loop via API mit Quellen verifiziert, NPM-Proxy-Timeouts chat.* 600 s gesetzt (12.11., GNAI-020 Abschnitt 6) |
|
| LLM-Serving | drei gepinnte Profile (Swift 1.0, Swift 1.5, Unsloth); Testing-Abnahme 64k/128k je Profil (GNAI-010 10.5–10.9); Production-Umgebung live mit Swift 1.5 Q6_K seit 06.11.2026 (Betreiberbeschluss 05.11., GNAI-009 10.4) inklusive Health, Alias und Inferenztest; exklusive Umschaltmechanik mit Recovery (GNAI-008 14.6, T1–T7; nach Neustart 09.11.2026 `gn_ai_active_env{env="production"}=1` verifiziert); **OpenWebUI v0.13.3 (digest-gepinnt) intern produktiv seit 10.11.2026** — Health 200, Model-Liste, reale Chat-Completion via OpenWebUI → llama.cpp (Rolle `open_webui`, Playbook `webui.yml`, Ingress `10.0.0.90:8081` nur von NPM, Split-DNS `chat.ghostnet.selfhost.eu` live). **Öffentlicher Nutzerpfad M6 live seit 11.11.2026:** `https://chat.ghostnet.selfhost.eu` (OpenWebUI v0.13.3, NPM → 10.0.0.90:8081, Keycloak-OIDC Client `gnai-openwebui` public+PKCE; Negativtests: 8081/Engine-Ports von außen geblockt, `/admin/` 403, keine AAAA; OIDC-Redirect-Kette verifiziert). **Websuche produktiv seit 12.11.2026 (GNAI-020):** SearXNG mit 43 kuratierten Engines (168 Ergebnisse/1,4 s), OpenWebUI Native/Agentic Mode (`search_web`/`fetch_url`, `ENABLE_WEB_SEARCH=True` + DB-Config-Sync), E2E-Tool-Loop via API mit Quellen verifiziert, NPM-Proxy-Timeouts chat.* 600 s gesetzt (12.11., GNAI-020 Abschnitt 6). **Theme „gnai-catppuccin-mocha" live seit 14.11.2026 (GNAI-021)**, update-persistent via read-only custom.css-Mount | LLM-Metriken jenseits `gn_ai_active_env`, Nutzerakzeptanzprüfung (GNAI-009 5.3), Lizenz-/Nutzungsrahmen-Nachweis vor externer Freigabe (GNAI-009 10.4), Rate-Limit-Doku, Betriebs-SOP, API-Key-Freigabe für Agenten (GNAI-001 M6) |
|
||||||
| Deployment | lokales Ansible-Control-Projekt und idempotente Hostrollen; Production-Inventar mit Referenz- und Rollback-Profil, `ai_environment_switch` und Backup-Timer deployt und abgenommen (GNAI-008 14.6) | statische CI, Runner, geschützte Freigaben und automatisierter Rollback über die Delivery-Kette |
|
| Deployment | lokales Ansible-Control-Projekt und idempotente Hostrollen; Production-Inventar mit Referenz- und Rollback-Profil, `ai_environment_switch` und Backup-Timer deployt und abgenommen (GNAI-008 14.6); **M5-Fortschritt 10.11.2026:** statische CI (Gitea Actions, 4 Jobs) + repo-scoped Runner `ci-static-01` auf CT 116 + Branch-Protection `main` (required checks, 1 Approval) eingerichtet und per PR-Durchlauf bewiesen (GNAI-008 Abschnitt 12) | privilegierter Deployment-Runner mit Promotion-Tag-Freigabe, Secret-Store/-Rotation, getrennte Testing-/Production-Rechte, Secret-Scan über die Git-Historie (GNAI-008 Abschnitt 12, Fragen 3–5) |
|
||||||
| VPN | wg-easy v15.4.0; einziger Peer `ghost-laptop` als Server Admin; native nftables-Zielpolicy und NAT, Legacy-Bereinigung, Fremdnetz-, Positiv-/Negativ-, Dienst- und LXC-Wiederanlauftests bestanden; CT 104 am 07.10.2026 als zwölftes Ziel praktisch abgenommen; WAN-Exposure-Erfassung 10.11.2026: nur TCP 80/443 offen, keine AAAA (GNAI-007 7); frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` am 10.11.2026 | Fremdnetz-WAN-Rescan vom Hotspot (UDP 51820, TCP-Portmatrix), FRITZ!Box-Forward-/IPv6-Abgleich, wg-easy-GUI-HTTPS und KI-Server-Test bei eingeschaltetem Host |
|
| VPN | wg-easy v15.4.0; einziger Peer `ghost-laptop` als Server Admin; native nftables-Zielpolicy und NAT, Legacy-Bereinigung, Fremdnetz-, Positiv-/Negativ-, Dienst- und LXC-Wiederanlauftests bestanden; CT 104 am 07.10.2026 als zwölftes Ziel praktisch abgenommen; WAN-Exposure-Erfassung 10.11.2026: nur TCP 80/443 offen, keine AAAA (GNAI-007 7); frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` am 10.11.2026 | Fremdnetz-WAN-Rescan vom Hotspot (UDP 51820, TCP-Portmatrix), FRITZ!Box-Forward-/IPv6-Abgleich, wg-easy-GUI-HTTPS und KI-Server-Test bei eingeschaltetem Host |
|
||||||
| DNS / Pi-hole | CT 100 unter `10.0.0.14` mit digest-gepinntem Pi-hole 2026.09.0 als Podman-Quadlet; SSH/nftables, UDP/TCP-DNS, Split-DNS, Blocking/Allowlist, FRITZ!Box-Cutover, LXC-Reboot und Stop-Mode-Backup am 01.10.2026 abgenommen; Ansible-Projekt am 09.11.2026 adoptiert (ansible-deploy via pct; `site.yml`/`verify-production` `changed=0`) und Split-DNS-Record `mon.ghostnet.selfhost.eu → 10.0.0.10` live (verifiziert per `dig @10.0.0.14`); frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` + praktischer Restore-Test (CT 150) am 10.11.2026 (GNAI-012 10.2) | vollständige App-/OIDC-Regression, praktischer FRITZ!Box-Rollback, mobile DuckDuckGo-/IPv6-Strategie, WireGuard-Profile |
|
| DNS / Pi-hole | CT 100 unter `10.0.0.14` mit digest-gepinntem Pi-hole 2026.09.0 als Podman-Quadlet; SSH/nftables, UDP/TCP-DNS, Split-DNS, Blocking/Allowlist, FRITZ!Box-Cutover, LXC-Reboot und Stop-Mode-Backup am 01.10.2026 abgenommen; Ansible-Projekt am 09.11.2026 adoptiert (ansible-deploy via pct; `site.yml`/`verify-production` `changed=0`) und Split-DNS-Record `mon.ghostnet.selfhost.eu → 10.0.0.10` live (verifiziert per `dig @10.0.0.14`); frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` + praktischer Restore-Test (CT 150) am 10.11.2026 (GNAI-012 10.2) | vollständige App-/OIDC-Regression, praktischer FRITZ!Box-Rollback, mobile DuckDuckGo-/IPv6-Strategie, WireGuard-Profile |
|
||||||
| Reverse Proxy | CT-103-Zugänge, SSH-/Firewall-Baseline, Reboot und lokales Backup abgenommen; NPM 2.15.1 routet öffentlichen OIDC- und internen Admin-vHost getrennt; öffentliche Keycloak-Administration liefert 403; vollständiger Ansible-Sollzustand importiert und adoptiert (07.11.2026; preflight/verify-production/`site.yml --check` am 09.11.2026 ohne Befund, `changed=0`); Fail2Ban-Funktionsabnahme (Jails, kontrollierter Ban/Unban, nftables-Nachweis, Dienstneustart, LXC-Reboot) am 10.11.2026 bestanden, frischer Rollback-vzdump + hostunabhängige Kopie auf `ghostnet-ki` (GNAI-006 10/12); **12.11.2026: NPM-Proxyhost `chat.ghostnet.selfhost.eu` mit `proxy_read_timeout`/`proxy_send_timeout` 600 s für LLM-Research-Loops** (Betreiber-Schritt, GNAI-020 Abschnitt 6) | Fremdnetz-WAN-Rescan (Hotspot) und FRITZ!Box-Abgleich; NPM-Proxyhost `mon.ghostnet.selfhost.eu` für das Monitoring-Dashboard (M6) |
|
| Reverse Proxy | CT-103-Zugänge, SSH-/Firewall-Baseline, Reboot und lokales Backup abgenommen; NPM 2.15.1 routet öffentlichen OIDC- und internen Admin-vHost getrennt; öffentliche Keycloak-Administration liefert 403; vollständiger Ansible-Sollzustand importiert und adoptiert (07.11.2026; preflight/verify-production/`site.yml --check` am 09.11.2026 ohne Befund, `changed=0`); Fail2Ban-Funktionsabnahme (Jails, kontrollierter Ban/Unban, nftables-Nachweis, Dienstneustart, LXC-Reboot) am 10.11.2026 bestanden, frischer Rollback-vzdump + hostunabhängige Kopie auf `ghostnet-ki` (GNAI-006 10/12); NPM-Proxyhost `mon.ghostnet.selfhost.eu` → `10.0.0.90:8080` seit 09.11.2026 eingerichtet (ID 14, GNMON-000 M6); **12.11.2026: NPM-Proxyhost `chat.ghostnet.selfhost.eu` mit `proxy_read_timeout`/`proxy_send_timeout` 600 s für LLM-Research-Loops** (Betreiber-Schritt, GNAI-020 Abschnitt 6) | Fremdnetz-WAN-Rescan (Hotspot) und FRITZ!Box-Forward-/IPv6-Abgleich |
|
||||||
| Keycloak | CT 102 unter `10.0.0.4` reproduzierbar per Ansible aufgebaut; gepinntes Keycloak 26.2.4 und PostgreSQL 16.15, Restore von CT 104, Container-/DB-Härtung, NPM-Cutover, interner Adminzugang, öffentliche Admin-Sperre, realer Vaultwarden-OIDC-Login und LXC-Neustart abgenommen; Stabilisierungsphase + praktischer NPM-Rückfalltest auf CT 104 am 10.11.2026 bestanden, CT 104 danach nach Betreiberfreigabe entfernt (GNAI-016 Phase F); Ansible-Drift CT 102 `changed=0`; frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` am 10.11.2026 | Betriebs-/Backup-/Restore-SOP |
|
| Keycloak | CT 102 unter `10.0.0.4` reproduzierbar per Ansible aufgebaut; gepinntes Keycloak 26.2.4 und PostgreSQL 16.15, Restore von CT 104, Container-/DB-Härtung, NPM-Cutover, interner Adminzugang, öffentliche Admin-Sperre, realer Vaultwarden-OIDC-Login und LXC-Neustart abgenommen; Stabilisierungsphase + praktischer NPM-Rückfalltest auf CT 104 am 10.11.2026 bestanden, CT 104 danach nach Betreiberfreigabe entfernt (GNAI-016 Phase F); Ansible-Drift CT 102 `changed=0`; frischer Stop-Mode-vzdump + hostunabhängige Kopie auf `ghostnet-ki` am 10.11.2026 | Betriebs-/Backup-/Restore-SOP |
|
||||||
| Encoding | Konto, Pfade, eigener rootless Store und CPU-Isolation per Ansible verwaltet und verifiziert; NFS-Mount `/var/lib/ghostnet-pipeline` aktiv (verifiziert 09.11.2026); Planungsabschluss 19.10.2026 (Pipeline GNENC-002, Speicher auf CT-101); Monitoring-Anbindung umgesetzt (GNMON-000 M1–M5) | Implementierung (Images, Quadlets, Skripte, Worker); Lasttest und Limit-Feintuning; SMB-Output-Pickup als geschlossener Ablauf |
|
| Encoding | Konto, Pfade, eigener rootless Store und CPU-Isolation per Ansible verwaltet und verifiziert; NFS-Mount `/var/lib/ghostnet-pipeline` aktiv (verifiziert 09.11.2026); Planungsabschluss 19.10.2026 (Pipeline GNENC-002, Speicher auf CT-101); Monitoring-Anbindung umgesetzt (GNMON-000 M1–M5) | Implementierung (Images, Quadlets, Skripte, Worker); Lasttest und Limit-Feintuning; SMB-Output-Pickup als geschlossener Ablauf |
|
||||||
| Monitoring | M1–M6 produktiv auf `10.0.0.90` (System-Scope, Konten `gn-monitor` 986 / `gn-dashboard` 984): node_exporter + AMD-Textfile-Collector, VictoriaMetrics, Loki + Alloy, vmalert + Alertmanager (inkl. `gnmon-ai`/`GnAiEnvironmentDown`), Dashboard **v0.3.2 öffentlich über `https://mon.ghostnet.selfhost.eu`** (NPM CT-103 ID 14, LE-TLS; Keycloak-OIDC Realm Ghost.net, Client `gnai-dashboard`, Rollen `gnai-dashboard-user`/`-admin`; 8080 per nftables nur von 10.0.0.10; E2E inkl. 403-Negativtest und WebSocket-Circuit bestanden 09.11.2026, GNMON-000 M6) | echter SMTP-Versand, LLM-Metriken jenseits `gn_ai_active_env`, Retention-Feintuning, externer WireGuard-Zugriff auf mon (DNS/TLS öffentlich, praktisch ungetestet) |
|
| Monitoring | M1–M6 produktiv auf `10.0.0.90` (System-Scope, Konten `gn-monitor` 986 / `gn-dashboard` 984): node_exporter + AMD-Textfile-Collector, VictoriaMetrics, Loki + Alloy, vmalert + Alertmanager (inkl. `gnmon-ai`/`GnAiEnvironmentDown`), Dashboard **v0.3.6 öffentlich über `https://mon.ghostnet.selfhost.eu`** (NPM CT-103 ID 14, LE-TLS; Keycloak-OIDC Realm Ghost.net, Client `gnai-dashboard`, Rollen `gnai-dashboard-user`/`-admin`; 8080 per nftables nur von 10.0.0.10; E2E inkl. 403-Negativtest und WebSocket-Circuit bestanden 09.11.2026, GNMON-000 M6; Favicon-Revert auf v0.3.6 am 14.11.2026, GNAI-021) | echter SMTP-Versand, LLM-Metriken jenseits `gn_ai_active_env`, Retention-Feintuning, externer WireGuard-Zugriff auf mon (DNS/TLS öffentlich, praktisch ungetestet) |
|
||||||
| Samba (CT 101) | Share-Bestand in GNAI-017 dokumentiert; Ansible-Projekt nach GNAI-019 gebaut und lokal verifiziert; Runbooks vorhanden; In-Place-Upgrade auf Debian 13 am 21.10.2026; smb.conf-Verlust beim Upgrade aus vzdump-Backup wiederhergestellt, Media-Shares und Workstation-Mounts verifiziert | produktive Adoption (Platzhalter, Schlüssel, Convergence, Verifikation), NFS-Export und Encoding-Shares produktiv, UID/GID-Abgleich produktiv, Backup-/Restore-Test |
|
| Samba (CT 101) | Share-Bestand in GNAI-017 dokumentiert; Ansible-Projekt nach GNAI-019 gebaut und lokal verifiziert; Runbooks vorhanden; In-Place-Upgrade auf Debian 13 am 21.10.2026; smb.conf-Verlust beim Upgrade aus vzdump-Backup wiederhergestellt, Media-Shares und Workstation-Mounts verifiziert | produktive Adoption (Platzhalter, Schlüssel, Convergence, Verifikation), NFS-Export und Encoding-Shares produktiv, UID/GID-Abgleich produktiv, Backup-/Restore-Test |
|
||||||
|
|
||||||
Ein Zielbild, eine Betreiberangabe oder ein erfolgreicher Teiltest gilt nicht als
|
Ein Zielbild, eine Betreiberangabe oder ein erfolgreicher Teiltest gilt nicht als
|
||||||
@@ -180,7 +181,8 @@ API-Keys und Rollen macht OpenWebUI selbst, Rate-Limits kommen auf
|
|||||||
NPM-Ebene; LiteLLM bleibt Zielbild-Kandidat, falls später Quotas/Routing
|
NPM-Ebene; LiteLLM bleibt Zielbild-Kandidat, falls später Quotas/Routing
|
||||||
pro Backend nötig werden. Interner Slice abgenommen 10.11.2026 (Health,
|
pro Backend nötig werden. Interner Slice abgenommen 10.11.2026 (Health,
|
||||||
Model-Liste, reale Chat-Completion durch OpenWebUI → llama.cpp mit
|
Model-Liste, reale Chat-Completion durch OpenWebUI → llama.cpp mit
|
||||||
Token-Usage).
|
Token-Usage); **öffentlich live seit 11.11.2026** (Details Abschnitt 2;
|
||||||
|
Websuche 12.11. GNAI-020, Theme 14.11. GNAI-021).
|
||||||
|
|
||||||
Bereits entschieden (nicht mehr offen): Das Backupziel ist die bestehende
|
Bereits entschieden (nicht mehr offen): Das Backupziel ist die bestehende
|
||||||
NFS-Anbindung der Encoding-Pipeline (`pve:/media/datenhdd3/Encoding`), die
|
NFS-Anbindung der Encoding-Pipeline (`pve:/media/datenhdd3/Encoding`), die
|
||||||
|
|||||||
@@ -4,9 +4,9 @@
|
|||||||
|
|
||||||
**Titel:** Priorisierte Roadmap für Ghostnet.AI
|
**Titel:** Priorisierte Roadmap für Ghostnet.AI
|
||||||
|
|
||||||
**Stand:** 2026-11-09
|
**Stand:** 2026-11-14
|
||||||
|
|
||||||
**Status:** Arbeitsgrundlage; M2–M4 des KI-Stacks abgenommen, M1-Restpunkte und M5/M6 offen
|
**Status:** Arbeitsgrundlage; M1 bis auf Fremdnetz-Rescan/FRITZ!Box-Rollback geschlossen (10.11.), M2–M4 abgenommen, M5 statische CI/Runner/Branch-Protection umgesetzt (10.11.), M6 öffentlich live seit 11.11. (inkl. Websuche 12.11., Theme 14.11.), M7 offen
|
||||||
|
|
||||||
**Referenzen:** [Projektstand](GNAI-000-DOC_Index.md), [Zielarchitektur](platform/llm-server/ai/GNAI-004-INFRA_Architecture.md), [Ansible-Plan](platform/llm-server/ai/GNAI-008-PLAN_Ansible-Deployment.md), [Modellbewertung](platform/llm-server/ai/GNAI-009-PLAN_Llama-Model-Evaluation.md), [`llama.cpp`-Sollkonfiguration](platform/llm-server/ai/GNAI-010-TECH_Llama-Serving.md)
|
**Referenzen:** [Projektstand](GNAI-000-DOC_Index.md), [Zielarchitektur](platform/llm-server/ai/GNAI-004-INFRA_Architecture.md), [Ansible-Plan](platform/llm-server/ai/GNAI-008-PLAN_Ansible-Deployment.md), [Modellbewertung](platform/llm-server/ai/GNAI-009-PLAN_Llama-Model-Evaluation.md), [`llama.cpp`-Sollkonfiguration](platform/llm-server/ai/GNAI-010-TECH_Llama-Serving.md)
|
||||||
|
|
||||||
@@ -77,16 +77,22 @@ eingerichtet (GNAI-012 10.2, GNAI-006 10, PVE-Rolle `pve_lxc_backup_sync`),
|
|||||||
Keycloak-Stabilisierungsphase nachgewiesen (26 Tage, GNAI-016 Phase F) und
|
Keycloak-Stabilisierungsphase nachgewiesen (26 Tage, GNAI-016 Phase F) und
|
||||||
WAN/IPv6-Exposure teilweise erfasst (nur TCP 80/443 offen, keine AAAA;
|
WAN/IPv6-Exposure teilweise erfasst (nur TCP 80/443 offen, keine AAAA;
|
||||||
GNAI-007 7). **Aktualisierung 10.11.2026 (später):** praktischer
|
GNAI-007 7). **Aktualisierung 10.11.2026 (später):** praktischer
|
||||||
NPM-Rückfalltest auf CT 104 bestanden und CT 104 nach Betreiberfreigabe
|
NPM-Rückfalltest auf CT 104 bestanden und CT 104 nach ausdrücklicher
|
||||||
entfernt (GNAI-016 Phase F). Offen bleiben der Fremdnetz-WAN-Rescan vom
|
Betreiberfreigabe entfernt (`pct destroy 104 --purge`, Archiv SHA-256-verifiziert
|
||||||
Hotspot mit FRITZ!Box-Abgleich, der praktische FRITZ!Box-DNS-Rollback und
|
auf `ghostnet-ki`; GNAI-016 Phase F). Offen bleiben der Fremdnetz-WAN-Rescan
|
||||||
hostunabhängige Restore-Tests für CT 102/103 (Restore-Pfad für CT 100
|
vom Hotspot mit FRITZ!Box-Forward-/IPv6-Abgleich und der praktisch
|
||||||
praktisch belegt).
|
durchgespielte FRITZ!Box-DNS-Rollback auf einem Testclient. Der
|
||||||
|
hostunabhängige Restore-Pfad ist praktisch belegt (CT 100 → CT 150 am
|
||||||
|
10.11.2026, GNAI-012 10.2); damit ist Befund 4 des zentralen Index
|
||||||
|
(GNAI-000 Abschnitt 4) geschlossen — die frühere Restnotiz zu separaten
|
||||||
|
Restore-Tests für CT 102/103 entfällt.
|
||||||
|
|
||||||
**Aktualisierung 09.11.2026:** Der vollständige Ansible-Sollzustand beider
|
**Aktualisierung 09.11.2026:** Der vollständige Ansible-Sollzustand beider
|
||||||
Hosts liegt inzwischen im Repository — CT 100 (`proxmox/lxc/ct-100-dns/ansible/`,
|
Hosts liegt inzwischen im Repository — CT 100 (`proxmox/lxc/ct-100-dns/ansible/`,
|
||||||
Production-Adoption noch offen, da CT 100 bis heute kein `ansible-deploy`-Konto
|
am 09.11.2026 adoptiert: `ansible-deploy` per `pct exec`, danach
|
||||||
hat) und CT 103 (`proxmox/lxc/ct-103-reverse-proxy/ansible/`, am 07.11.2026
|
`verify-deploy-access` ok=5, `site.yml` konvergent `changed=0`,
|
||||||
|
`verify-production` ok=32 changed=0; GNMON-000 M6, GNAI-012 10.2) und
|
||||||
|
CT 103 (`proxmox/lxc/ct-103-reverse-proxy/ansible/`, am 07.11.2026
|
||||||
adoptiert und am 09.11.2026 verifiziert: preflight ok=15, verify-production
|
adoptiert und am 09.11.2026 verifiziert: preflight ok=15, verify-production
|
||||||
ok=27 changed=0, `site.yml --check` changed=0).
|
ok=27 changed=0, `site.yml --check` changed=0).
|
||||||
|
|
||||||
@@ -165,13 +171,29 @@ freigegeben, ohne PR-Code root-äquivalente Secrets zu geben.
|
|||||||
- keinen Production-Schlüssel in Pull-Request-Workflows bereitstellen;
|
- keinen Production-Schlüssel in Pull-Request-Workflows bereitstellen;
|
||||||
- Deploymentnachweis mit Commit, Artefaktdigests und Prüfergebnis erzeugen.
|
- Deploymentnachweis mit Commit, Artefaktdigests und Prüfergebnis erzeugen.
|
||||||
|
|
||||||
|
**Ausführungsstand 10.11.2026:** Statische CI ohne Serverzugang eingeführt
|
||||||
|
(`.gitea/workflows/ci-static.yml`, 4 Jobs: `secret-scan`, `yamllint`,
|
||||||
|
`ansible-syntax`, `markdown-links`; erster Lauf grün), dedizierter
|
||||||
|
Runner-LXC **CT 116** (`act_runner v0.2.13`, repo-scoped Runner `ci-static-01`
|
||||||
|
online, keine Server-Zugangsdaten auf dem Runner-LXC) und Branch-Protection
|
||||||
|
`main` gesetzt (`enable_push=false`, required status checks
|
||||||
|
`ci-static / <job> (pull_request)`, `required_approvals=1`); erster
|
||||||
|
PR-Durchlauf (PR #2) mit squash-merge nach `main` bestanden (Commit
|
||||||
|
`962b387`; Details und Token-Hygiene in GNAI-008 Abschnitt 12). **Offen:**
|
||||||
|
Fragen 3–5 aus GNAI-008 Abschnitt 12 (Review-/Freigabe-Rechte, Secret-Store,
|
||||||
|
Promotion-Tag), privilegierter Deployment-Runner, Secret-Scan über die
|
||||||
|
Git-Historie, `act_runner`-Label `self-hosted` per Config nachziehen.
|
||||||
|
|
||||||
**Fertig, wenn:** Ein ungefährliches Testdeployment und anschließend ein
|
**Fertig, wenn:** Ein ungefährliches Testdeployment und anschließend ein
|
||||||
freigegebenes Production-Deployment einschließlich fehlgeschlagenem Lauf und
|
freigegebenes Production-Deployment einschließlich fehlgeschlagenem Lauf und
|
||||||
Recovery reproduzierbar nachgewiesen sind.
|
Recovery reproduzierbar nachgewiesen sind.
|
||||||
|
|
||||||
### Meilenstein 6 – Ersten Nutzerpfad veröffentlichen
|
### Meilenstein 6 – Ersten Nutzerpfad veröffentlichen
|
||||||
|
|
||||||
**Ausführungsstand 11.11.2026:** OpenWebUI v0.13.3 (digest-gepinnt) ist als
|
**Status: live seit 11.11.2026; Nacharbeiten offen (siehe Ende des
|
||||||
|
Abschnitts).**
|
||||||
|
|
||||||
|
**Ausführungsstand 14.11.2026:** OpenWebUI v0.13.3 (digest-gepinnt) ist als
|
||||||
öffentlicher Nutzerpfad live: `https://chat.ghostnet.selfhost.eu` (NPM →
|
öffentlicher Nutzerpfad live: `https://chat.ghostnet.selfhost.eu` (NPM →
|
||||||
`10.0.0.90:8081`, nur NPM darf auf den KI-Host durch), Keycloak-OIDC über
|
`10.0.0.90:8081`, nur NPM darf auf den KI-Host durch), Keycloak-OIDC über
|
||||||
Client `gnai-openwebui` (public + PKCE S256, Realm Ghost.net). LiteLLM-Gate
|
Client `gnai-openwebui` (public + PKCE S256, Realm Ghost.net). LiteLLM-Gate
|
||||||
@@ -187,8 +209,12 @@ kuratierten Engines + OpenWebUI Native/Agentic Mode, E2E-Tool-Loop via API
|
|||||||
(server-seitig, mit Quellen) verifiziert; Workspace-Tool `gnai-web-search`
|
(server-seitig, mit Quellen) verifiziert; Workspace-Tool `gnai-web-search`
|
||||||
für API-Agenten via `tool_ids` geseeded; NPM-Proxy-Timeouts auf `chat.*`
|
für API-Agenten via `tool_ids` geseeded; NPM-Proxy-Timeouts auf `chat.*`
|
||||||
(600 s) für lange Research-Loops durch Betreiber gesetzt (12.11.2026,
|
(600 s) für lange Research-Loops durch Betreiber gesetzt (12.11.2026,
|
||||||
GNAI-020 Abschnitt 6). Offen: Rate-Limit-Doku, LLM-Metriken im Monitoring,
|
GNAI-020 Abschnitt 6). **Theme „gnai-catppuccin-mocha" live seit 14.11.2026
|
||||||
Betriebs-SOP, API-Key-Freigabe für Agenten (`auth.enable_api_keys`).
|
(GNAI-021)**. Offen: Rate-Limit-Doku, LLM-Metriken im Monitoring,
|
||||||
|
Betriebs-SOP, API-Key-Freigabe für Agenten (`auth.enable_api_keys`),
|
||||||
|
Nutzerakzeptanzprüfung auf dem Siegerprofil (GNAI-009 5.3) sowie der
|
||||||
|
Lizenz-/Nutzungsrahmen-Nachweis (GNAI-009 10.4 — vor der externen Freigabe
|
||||||
|
gefordert, als abgeschlossen noch nicht dokumentiert).
|
||||||
|
|
||||||
**Ergebnis:** Genau ein klar definierter, authentifizierter Nutzerpfad ist
|
**Ergebnis:** Genau ein klar definierter, authentifizierter Nutzerpfad ist
|
||||||
öffentlich nutzbar; Backend- und Managementports bleiben intern.
|
öffentlich nutzbar; Backend- und Managementports bleiben intern.
|
||||||
@@ -218,8 +244,15 @@ LLM-Betrieb nicht.
|
|||||||
und unter gleichzeitiger Inferenzlast testen;
|
und unter gleichzeitiger Inferenzlast testen;
|
||||||
- erst danach Zeitplan, Queue, Benachrichtigung und Nutzer-SOP freigeben.
|
- erst danach Zeitplan, Queue, Benachrichtigung und Nutzer-SOP freigeben.
|
||||||
|
|
||||||
### Ausführungsstand 09.11.2026
|
### Stand 14.11.2026
|
||||||
|
|
||||||
|
- **M1 weitgehend geschlossen (10.11.2026):** Fail2Ban-Funktionsabnahme,
|
||||||
|
hostunabhängige Backups mit praktischem Restore-Test (CT 100 → CT 150),
|
||||||
|
Keycloak-Stabilisierungsphase (26 Tage), praktischer NPM-Rückfalltest auf
|
||||||
|
CT 104 und CT-104-Entfernung bestanden (GNAI-006 10/12, GNAI-012 10.2,
|
||||||
|
GNAI-016 Phase F); WAN/IPv6-Exposure teilweise erfasst (nur TCP 80/443
|
||||||
|
offen, keine AAAA). **Offen:** Fremdnetz-WAN-Rescan vom Hotspot,
|
||||||
|
FRITZ!Box-Forward-/IPv6-Abgleich, praktischer FRITZ!Box-DNS-Rollback.
|
||||||
- **M2 abgenommen:** Testing-Vertical-Slice mit drei gepinnten Profilen
|
- **M2 abgenommen:** Testing-Vertical-Slice mit drei gepinnten Profilen
|
||||||
(Swift 1.0, Swift 1.5, Unsloth), 64k- und 128k-Abnahme, Idempotenz,
|
(Swift 1.0, Swift 1.5, Unsloth), 64k- und 128k-Abnahme, Idempotenz,
|
||||||
Profilwechsel und Host-Reboot-Test bestanden (GNAI-010 Abschnitte
|
Profilwechsel und Host-Reboot-Test bestanden (GNAI-010 Abschnitte
|
||||||
@@ -232,12 +265,20 @@ LLM-Betrieb nicht.
|
|||||||
(T1–T7), Backup/Restore-Nachweise R1/R2, Alarmgrenzen — siehe GNAI-008
|
(T1–T7), Backup/Restore-Nachweise R1/R2, Alarmgrenzen — siehe GNAI-008
|
||||||
Abschnitt 14.6. Erneut verifiziert am 09.11.2026 nach einem Host-Neustart:
|
Abschnitt 14.6. Erneut verifiziert am 09.11.2026 nach einem Host-Neustart:
|
||||||
automatisches Recovery auf Production ohne Zutun.
|
automatisches Recovery auf Production ohne Zutun.
|
||||||
- **Monitoring-Anteil von M4 umgesetzt:** GNMON-000 M1–M5 produktiv auf
|
- **Monitoring:** GNMON-000 M1–M6 produktiv auf dem KI-Server inklusive
|
||||||
dem KI-Server inklusive Verfügbarkeitsregel `GnAiEnvironmentDown`.
|
Verfügbarkeitsregel `GnAiEnvironmentDown` und öffentlichem Dashboard
|
||||||
- **Offen:** M1-Restpunkte (Fail2Ban-Tests, WAN-/IPv6-Exposure, Keycloak-
|
`https://mon.ghostnet.selfhost.eu` (seit 09.11.2026).
|
||||||
Stabilisierung und NPM-Rückfall, hostunabhängige Backups), M5
|
- **M5 teilweise umgesetzt (10.11.2026):** statische CI + Runner CT 116 +
|
||||||
Delivery-Kette (Gitea Actions/Runner), M6 erster öffentlicher Nutzerpfad,
|
Branch-Protection `main` (GNAI-008 Abschnitt 12). **Offen:** privilegierter
|
||||||
M7 Encoding unter Last.
|
Deployment-Runner, Promotion-Tag-Freigabe, Secret-Modell (Fragen 3–5).
|
||||||
|
- **M6 live seit 11.11.2026:** `https://chat.ghostnet.selfhost.eu`
|
||||||
|
(OpenWebUI v0.13.3 + Keycloak-OIDC `gnai-openwebui`), Websuche seit
|
||||||
|
12.11. (GNAI-020), Theme seit 14.11. (GNAI-021). **Offen:** Nacharbeiten
|
||||||
|
laut M6-Abschnitt (Rate-Limit-Doku, LLM-Metriken, Betriebs-SOP,
|
||||||
|
API-Key-Freigabe, Nutzerakzeptanz- und Lizenz-Nachweis).
|
||||||
|
- **M7 offen:** Encoding-Implementierung (Images, Quadlets, Worker-Skript),
|
||||||
|
SMB-Output-Pickup als geschlossener Ablauf, Lasttest unter Inferenzlast
|
||||||
|
(GNENC-000 „Noch offen“).
|
||||||
|
|
||||||
## 4. Bewusst nicht Teil der nächsten Ausbaustufe
|
## 4. Bewusst nicht Teil der nächsten Ausbaustufe
|
||||||
|
|
||||||
|
|||||||
@@ -1,8 +1,8 @@
|
|||||||
# Sicherheitsabschluss und Repository-Neustrukturierung
|
# Sicherheitsabschluss und Repository-Neustrukturierung
|
||||||
|
|
||||||
**Dokumenten-ID:** GNAI-013-PLAN
|
**Dokumenten-ID:** GNAI-013-PLAN
|
||||||
**Stand:** 2026-10-14
|
**Stand:** 2026-11-14
|
||||||
**Status:** Aktiver Arbeitsplan
|
**Status:** Aktiver Arbeitsplan; Abschnitte A–D bis auf den FRITZ!Box-DNS-Rollback abgeschlossen (10.11.2026), Abschnitt E bis auf die Resolver-Abstimmung des KI-Servers erledigt (M2–M6 produktiv)
|
||||||
|
|
||||||
## 1. Ziel
|
## 1. Ziel
|
||||||
|
|
||||||
@@ -41,16 +41,18 @@ Die ausführbare Infrastruktur ist seit 14.10.2026 ebenfalls hostbezogen:
|
|||||||
ghostnet.ai-infrastructure/
|
ghostnet.ai-infrastructure/
|
||||||
├── llm-server/
|
├── llm-server/
|
||||||
│ ├── host/ansible/ # Grundkonfiguration des physischen KI-Servers
|
│ ├── host/ansible/ # Grundkonfiguration des physischen KI-Servers
|
||||||
│ ├── llm/ # LLM-Stack (entsteht mit dem AI-Vertical-Slice)
|
│ ├── llm/ # LLM-Stack (M2–M4 abgenommen, M6 live)
|
||||||
│ └── encoding/ansible/ # CPU-Encoding-Workload
|
│ ├── encoding/ansible/ # CPU-Encoding-Workload
|
||||||
|
│ └── monitoring/ # Monitoring-Projekt (GNMON M1–M6 produktiv)
|
||||||
├── proxmox/
|
├── proxmox/
|
||||||
│ ├── shared/scripts/ # nur LXC-übergreifende PVE-Helfer
|
│ ├── shared/scripts/ # nur LXC-übergreifende PVE-Helfer
|
||||||
│ └── lxc/
|
│ └── lxc/
|
||||||
│ ├── ct-100-dns/ # Hostwurzel + Ansible-Projekt; Production-Adoption offen (Stand 09.11.2026: kein ansible-deploy auf CT 100)
|
│ ├── ct-100-dns/ # Hostwurzel + Ansible-Projekt (adoptiert 09.11.2026 via pct exec, verify-production changed=0)
|
||||||
│ ├── ct-102-keycloak/{ansible,scripts}/
|
│ ├── ct-102-keycloak/{ansible,scripts}/
|
||||||
│ ├── ct-103-reverse-proxy/ # Hostwurzel + Ansible-Projekt (adoptiert 07.11.2026, verifiziert 09.11.2026)
|
│ ├── ct-103-reverse-proxy/ # Hostwurzel + Ansible-Projekt (adoptiert 07.11.2026, verifiziert 09.11.2026)
|
||||||
│ ├── ct-104-keycloak/ # nur noch Migrations-Referenz; CT 104 am 10.11.2026 nach Freigabe entfernt (GNAI-016 Phase F)
|
│ ├── ct-104-keycloak/ # nur noch Migrations-Referenz; CT 104 am 10.11.2026 nach Freigabe entfernt (GNAI-016 Phase F)
|
||||||
│ └── ct-105-wireguard/
|
│ ├── ct-105-wireguard/
|
||||||
|
│ └── ct-116-runner/ # CI-Runner-LXC (act_runner, repo-scoped ci-static-01; seit 10.11.2026, GNAI-008 Abschnitt 12)
|
||||||
└── shared/ansible/ # gemeinsam genutzte Rollen und Pins
|
└── shared/ansible/ # gemeinsam genutzte Rollen und Pins
|
||||||
```
|
```
|
||||||
|
|
||||||
@@ -144,13 +146,17 @@ hostbezogenen Playbooks oder Inventare.
|
|||||||
|
|
||||||
### E. Übergang zum LLM-Stack
|
### E. Übergang zum LLM-Stack
|
||||||
|
|
||||||
- [ ] KI-Server kontrolliert einschalten und Resolver auf den beschlossenen
|
- [x] KI-Server einschalten — läuft produktiv (M2–M4 abgenommen, M6 öffentlich
|
||||||
Pi-hole-Pfad abstimmen.
|
live; automatisches Production-Recovery nach Host-Neustart am 09.11.2026
|
||||||
|
verifiziert, GNAI-008 14.6). **Noch offen:** Resolver auf den
|
||||||
|
beschlossenen Pi-hole-Pfad abstimmen — GNAI-003 belegt weiterhin
|
||||||
|
`10.0.0.1`/`1.1.1.1` als Resolver des KI-Servers.
|
||||||
- [x] Lokale Ansible-`.venv` wegen des veralteten Repository-Pfads neu
|
- [x] Lokale Ansible-`.venv` wegen des veralteten Repository-Pfads neu
|
||||||
erstellen und alle Syntaxprüfungen regulär ausführen.
|
erstellen und alle Syntaxprüfungen regulär ausführen.
|
||||||
- [x] Lesenden Preflight sowie Host-/ROCm-Verifikation wiederholen.
|
- [x] Lesenden Preflight sowie Host-/ROCm-Verifikation wiederholen.
|
||||||
- [ ] Internes, nicht öffentliches `llama.cpp`-Testing-Vertical-Slice nach
|
- [x] Internes, nicht öffentliches `llama.cpp`-Testing-Vertical-Slice nach
|
||||||
GNAI-010 implementieren und bei 64k abnehmen.
|
GNAI-010 implementiert und bei 64k/128k abgenommen (M2; GNAI-010
|
||||||
|
Abschnitte 10.5–10.9).
|
||||||
|
|
||||||
## 4. Arbeitsnachweise
|
## 4. Arbeitsnachweise
|
||||||
|
|
||||||
@@ -175,6 +181,10 @@ hostbezogenen Playbooks oder Inventare.
|
|||||||
- Offen bleibt in Abschnitt E: die Resolver-Abstimmung des KI-Servers auf den
|
- Offen bleibt in Abschnitt E: die Resolver-Abstimmung des KI-Servers auf den
|
||||||
Pi-hole-Pfad. Ein kontrollierter Kaltstart des Servers wurde nicht
|
Pi-hole-Pfad. Ein kontrollierter Kaltstart des Servers wurde nicht
|
||||||
durchgeführt; der Server lief durch, nur das Netzwerkkabel war gezogen.
|
durchgeführt; der Server lief durch, nur das Netzwerkkabel war gezogen.
|
||||||
|
**14.11.2026:** Host-Neustart inzwischen mehrfach praktisch belegt
|
||||||
|
(u. a. 09.11.2026 automatisches Production- und Monitoring-Recovery nach
|
||||||
|
Boot, GNAI-008 14.6, GNMON-000); die Resolver-Abstimmung ist weiterhin
|
||||||
|
offen.
|
||||||
|
|
||||||
### 05.10.2026 – Struktur, Geheimnisse und lokaler VPN-Client
|
### 05.10.2026 – Struktur, Geheimnisse und lokaler VPN-Client
|
||||||
|
|
||||||
@@ -369,11 +379,13 @@ hostbezogenen Playbooks oder Inventare.
|
|||||||
- Der KI-Server ist bewusst ausgeschaltet und wird für die Punkte A bis D
|
- Der KI-Server ist bewusst ausgeschaltet und wird für die Punkte A bis D
|
||||||
nicht benötigt. **10.11.2026: KI-Server läuft produktiv (M2–M4), inkl.
|
nicht benötigt. **10.11.2026: KI-Server läuft produktiv (M2–M4), inkl.
|
||||||
automatischem Production-Recovery nach Host-Neustart.**
|
automatischem Production-Recovery nach Host-Neustart.**
|
||||||
- CT 102 befindet sich in der 14-tägigen Stabilisierungsphase; der praktische
|
- CT 102 befand sich in der 14-tägigen Stabilisierungsphase; der praktische
|
||||||
NPM-Rückfall auf den ausgeschalteten CT 104 bleibt offen. **10.11.2026:
|
NPM-Rückfall auf den ausgeschalteten CT 104 war offen. **10.11.2026:
|
||||||
Stabilisierungsphase nachgewiesen (26 Tage, NRestarts=0, keine Fehler) und
|
Stabilisierungsphase nachgewiesen (26 Tage, NRestarts=0, keine Fehler) und
|
||||||
praktischer NPM-Rückfalltest auf CT 104 bestanden (GNAI-016); CT 104 ist
|
praktischer NPM-Rückfalltest auf CT 104 bestanden; CT 104 wurde danach nach
|
||||||
danach wieder ausgeschaltet.**
|
ausdrücklicher Betreiberfreigabe entfernt** (`pct destroy 104 --purge`,
|
||||||
|
finales Archiv SHA-256-verifiziert auf `ghostnet-ki` archiviert;
|
||||||
|
GNAI-016 Phase F).
|
||||||
|
|
||||||
## 6. Pflege
|
## 6. Pflege
|
||||||
|
|
||||||
|
|||||||
@@ -2,8 +2,8 @@
|
|||||||
|
|
||||||
**Dokumenten-ID:** GNAI-008-PLAN
|
**Dokumenten-ID:** GNAI-008-PLAN
|
||||||
**Titel:** Ansible-Deployment für den KI-Server – Planungsstand
|
**Titel:** Ansible-Deployment für den KI-Server – Planungsstand
|
||||||
**Stand:** 2026-11-09
|
**Stand:** 2026-11-14
|
||||||
**Status:** Nicht finaler Arbeitsentwurf zur Persistierung des Planungsstands; der belegte Implementierungsstand bis einschließlich M4 steht in Abschnitt 14 (14.6)
|
**Status:** Nicht finaler Arbeitsentwurf zur Persistierung des Planungsstands; der belegte Implementierungsstand bis M4 steht in Abschnitt 14 (14.6), der M5-Fortschritt (statische CI, CT-116-Runner, Branch-Protection) in Abschnitt 12; M6 (öffentlicher OpenWebUI-Pfad, Websuche, Theme) ist in GNAI-020/GNAI-021 dokumentiert
|
||||||
**Referenzen:** [Projektstand](../../../GNAI-000-DOC_Index.md), [Zielarchitektur](GNAI-004-INFRA_Architecture.md), [Modellbewertung](GNAI-009-PLAN_Llama-Model-Evaluation.md), [llama.cpp-Sollkonfiguration](GNAI-010-TECH_Llama-Serving.md), [Zugriffskonzept](../../GNAI-005-SEC_Access-Control.md)
|
**Referenzen:** [Projektstand](../../../GNAI-000-DOC_Index.md), [Zielarchitektur](GNAI-004-INFRA_Architecture.md), [Modellbewertung](GNAI-009-PLAN_Llama-Model-Evaluation.md), [llama.cpp-Sollkonfiguration](GNAI-010-TECH_Llama-Serving.md), [Zugriffskonzept](../../GNAI-005-SEC_Access-Control.md)
|
||||||
|
|
||||||
> **Abgrenzung:** Die Abschnitte 1–13 halten die Ergebnisse der am 19.09.2026
|
> **Abgrenzung:** Die Abschnitte 1–13 halten die Ergebnisse der am 19.09.2026
|
||||||
@@ -38,9 +38,11 @@
|
|||||||
| 2026-09-21 | 0.16 | spektr / Codex | überholten Phasen- und Dokumentenbacklog konsolidiert, Umsetzungsreihenfolge an GNAI-001 delegiert und privilegierten Runner nach Recovery verschoben |
|
| 2026-09-21 | 0.16 | spektr / Codex | überholten Phasen- und Dokumentenbacklog konsolidiert, Umsetzungsreihenfolge an GNAI-001 delegiert und privilegierten Runner nach Recovery verschoben |
|
||||||
| 2026-10-19 | 0.17 | spektr / Mistral Vibe | LLM-Server-Projekt in die fachlichen Hauptverzeichnisse `host/`, `llm/` und `encoding/` aufgeteilt; Abschnitte 6 und 7.4 an die neue Struktur angepasst |
|
| 2026-10-19 | 0.17 | spektr / Mistral Vibe | LLM-Server-Projekt in die fachlichen Hauptverzeichnisse `host/`, `llm/` und `encoding/` aufgeteilt; Abschnitte 6 und 7.4 an die neue Struktur angepasst |
|
||||||
| 2026-10-31 | 0.18 | spektr / Mistral Vibe | Deployment-Plan mit Betreiberentscheidungen vom 31.10.2026 überarbeitet: dritte Umgebung Experimental, exklusives GPU-Scheduling mit schnellem Umschalter und kommunizierten Zeitfenstern, Wartungsseite/transparenter Endpunktwechsel für nutzerseitige Dienste, Model-Store als Kernrolle, verallgemeinerte Engine-Rolle, Gitea-Actions-Kette mit reduziertem Production-Scope, Strata als erster Experimental-Kandidat (Abschnitt 7.6) |
|
| 2026-10-31 | 0.18 | spektr / Mistral Vibe | Deployment-Plan mit Betreiberentscheidungen vom 31.10.2026 überarbeitet: dritte Umgebung Experimental, exklusives GPU-Scheduling mit schnellem Umschalter und kommunizierten Zeitfenstern, Wartungsseite/transparenter Endpunktwechsel für nutzerseitige Dienste, Model-Store als Kernrolle, verallgemeinerte Engine-Rolle, Gitea-Actions-Kette mit reduziertem Production-Scope, Strata als erster Experimental-Kandidat (Abschnitt 7.6) |
|
||||||
|
| 2026-11-14 | 0.19 | spektr / Mistral Vibe | Kopf-Stand nachgeführt: M5-Fortschritt 10.11.2026 (statische CI, CT-116-Runner, Branch-Protection — Abschnitt 12) aufgenommen; M6 live seit 11.11.2026 (OpenWebUI öffentlich, Websuche 12.11., Theme 14.11.) als Verweis auf GNAI-020/GNAI-021 ergänzt |
|
||||||
| 2026-11-06 | 0.19 | spektr / Mistral Vibe | M4 umgesetzt und abgenommen (Abschnitt 14.6): Production-Inventar mit Referenz- (Swift 1.5) und Rollback-Profil (Unsloth), Rolle `ai_environment_switch` (Abschnitt 7.3) mit Recovery-Timer, Rolle `ai_backup` (Wochen-Timer auf NFS-Pipeline-Share), Verfügbarkeitsmetrik `gn_ai_active_env`; Abnahme T1–T7, echter Hostreboot, Restore-Nachweise R1/R2 |
|
| 2026-11-06 | 0.19 | spektr / Mistral Vibe | M4 umgesetzt und abgenommen (Abschnitt 14.6): Production-Inventar mit Referenz- (Swift 1.5) und Rollback-Profil (Unsloth), Rolle `ai_environment_switch` (Abschnitt 7.3) mit Recovery-Timer, Rolle `ai_backup` (Wochen-Timer auf NFS-Pipeline-Share), Verfügbarkeitsmetrik `gn_ai_active_env`; Abnahme T1–T7, echter Hostreboot, Restore-Nachweise R1/R2 |
|
||||||
| 2026-11-09 | 0.20 | Mistral Vibe | Re-Verifikation nach Host-Neustart (09.11.2026, ~05:05 CET): Recovery-Service stellte Production automatisch wieder her (`gn_ai_active_env{env="production"}=1`, Engine `gnai-production-llama-swift15` aktiv). Befund: `gnai-ai-backup.service` lief beim Boot mit Exit 21 (NFS-Mountpoint zu diesem Zeitpunkt noch nicht gemountet) — Timer (Persistent) und Service haben keine Mount-Abhängigkeit; offen: `RequiresMountsFor=/var/lib/ghostnet-pipeline` in der `ai_backup`-Rolle (Abschnitt 14.6) |
|
| 2026-11-09 | 0.20 | Mistral Vibe | Re-Verifikation nach Host-Neustart (09.11.2026, ~05:05 CET): Recovery-Service stellte Production automatisch wieder her (`gn_ai_active_env{env="production"}=1`, Engine `gnai-production-llama-swift15` aktiv). Befund: `gnai-ai-backup.service` lief beim Boot mit Exit 21 (NFS-Mountpoint zu diesem Zeitpunkt noch nicht gemountet) — Timer (Persistent) und Service haben keine Mount-Abhängigkeit; offen: `RequiresMountsFor=/var/lib/ghostnet-pipeline` in der `ai_backup`-Rolle (Abschnitt 14.6) |
|
||||||
| 2026-11-09 | 0.21 | Mistral Vibe | Befund aus 0.20 behoben: `ai_backup`-Service-Unit nutzt jetzt `RequiresMountsFor={{ ai_backup_nfs_mountpoint }}` (die bisherige `After=var-lib-ghostnet-pipeline.mount` passte nicht zur escapten Unit `var-lib-ghostnet\x2dpipeline.mount`). Deploy via `backup.yml` (production), verifiziert: systemd-Requires/After auf die Mount-Unit, manueller Lauf `Result=success` mit sha256-verifiziertem Archiv auf dem NFS-Share, Rollen-Zweitlauf `changed=0` (Abschnitt 14.6) |
|
| 2026-11-09 | 0.21 | Mistral Vibe | Befund aus 0.20 behoben: `ai_backup`-Service-Unit nutzt jetzt `RequiresMountsFor={{ ai_backup_nfs_mountpoint }}` (die bisherige `After=var-lib-ghostnet-pipeline.mount` passte nicht zur escapten Unit `var-lib-ghostnet\x2dpipeline.mount`). Deploy via `backup.yml` (production), verifiziert: systemd-Requires/After auf die Mount-Unit, manueller Lauf `Result=success` mit sha256-verifiziertem Archiv auf dem NFS-Share, Rollen-Zweitlauf `changed=0` (Abschnitt 14.6) |
|
||||||
|
| 2026-11-14 | 0.22 | spektr / Mistral Vibe | Backup-Lücke geschlossen (GNAI-021 follow-up): `ai_backup_paths` um `etc/gnmon` (Dashboard-OIDC-Secret) und `var/lib/ghostnet-ai/production/openwebui-data` (OpenWebUI-Userdaten) erweitert. Die Live-`webui.db` (+`-wal`/`-shm`) wird aus dem Tar ausgeschlossen und stattdessen per SQLite-Online-Backup-API (python3 stdlib) als konsistenter Snapshot an derselben Archiv-Pfad eingefügt. Verifiziert 14.11.2026: manueller Lauf `Result=success`, Archiv `ghostnet-ai-backup-20261114-0720.tar.gz` (844 MB) enthält `etc/gnmon/dashboard-secrets.env` + `openwebui-data/webui.db` (0 wal/shm-Einträge), extrahierte DB `PRAGMA integrity_check` = ok (3 User, 4 Chats), sha256-Sidecar; Rollen-Zweitlauf `changed=0`. Restore-SOP in der Rollen-README ergänzt |
|
||||||
|
|
||||||
---
|
---
|
||||||
|
|
||||||
|
|||||||
@@ -1,8 +1,8 @@
|
|||||||
# Video-Encoding – Dokumentationsindex und Projektstand
|
# Video-Encoding – Dokumentationsindex und Projektstand
|
||||||
|
|
||||||
**Dokumenten-ID:** GNENC-000-DOC
|
**Dokumenten-ID:** GNENC-000-DOC
|
||||||
**Stand:** 2026-11-09
|
**Stand:** 2026-11-14
|
||||||
**Status:** Planungsabschluss; externe Abhängigkeiten (CT-101, PVE-Host-NFS) umgesetzt; Monitoring-Bereich produktiv (GNMON-000 M1–M5); Encoding-Implementierung auf ghostnet-ki noch nicht begonnen
|
**Status:** Planungsabschluss; externe Abhängigkeiten (CT-101, PVE-Host-NFS) umgesetzt; Monitoring-Bereich produktiv (GNMON-000 M1–M6); Encoding-Implementierung auf ghostnet-ki noch nicht begonnen
|
||||||
|
|
||||||
## Dokumente
|
## Dokumente
|
||||||
|
|
||||||
@@ -92,4 +92,4 @@ beschrieben.
|
|||||||
3. Rootless-TUN-Verifizierung für den VPN-Sidecar auf dem Host.
|
3. Rootless-TUN-Verifizierung für den VPN-Sidecar auf dem Host.
|
||||||
4. Implementierung auf ghostnet-ki: Image-Bauten, Quadlet-Units (inkl.
|
4. Implementierung auf ghostnet-ki: Image-Bauten, Quadlet-Units (inkl.
|
||||||
VPN-Sidecar), Worker-Skript, JD2-Event-Scripter. Der Monitoring-Bereich
|
VPN-Sidecar), Worker-Skript, JD2-Event-Scripter. Der Monitoring-Bereich
|
||||||
(Collector, Dashboard, Alerting) ist mit GNMON-000 M1–M5 umgesetzt.
|
(Collector, Dashboard, Alerting) ist mit GNMON-000 M1–M6 umgesetzt.
|
||||||
|
|||||||
@@ -1,8 +1,8 @@
|
|||||||
# Monitoring – Dokumentationsindex und Projektstand
|
# Monitoring – Dokumentationsindex und Projektstand
|
||||||
|
|
||||||
**Dokumenten-ID:** GNMON-000-DOC
|
**Dokumenten-ID:** GNMON-000-DOC
|
||||||
**Stand:** 2026-11-09
|
**Stand:** 2026-11-14
|
||||||
**Status:** Revision v2.0 (03.11.2026) übernommen; M1–M6 produktiv — Dashboard öffentlich über `https://mon.ghostnet.selfhost.eu` mit Keycloak-OIDC (abgenommen 09.11.2026)
|
**Status:** Revision v2.0 (03.11.2026) übernommen; M1–M6 produktiv — Dashboard v0.3.6 öffentlich über `https://mon.ghostnet.selfhost.eu` mit Keycloak-OIDC (abgenommen 09.11.2026; Favicon-Revert auf v0.3.6 am 14.11.2026, GNAI-021)
|
||||||
|
|
||||||
## Dokumente
|
## Dokumente
|
||||||
|
|
||||||
@@ -64,12 +64,10 @@ User-Scope-systemd) im Verzeichnis `llm-server/monitoring/`:
|
|||||||
- Verifikation: Dev-Logzeile erscheint in Loki
|
- Verifikation: Dev-Logzeile erscheint in Loki
|
||||||
(`query_range` mit `source="dev-test"`), Idempotenzlauf
|
(`query_range` mit `source="dev-test"`), Idempotenzlauf
|
||||||
`changed=0, failed=0`.
|
`changed=0, failed=0`.
|
||||||
- **Offener Operator-Schritt (Workstation):** `sudo usermod -aG
|
- **Operator-Schritt (Workstation) erledigt:** `sudo usermod -aG
|
||||||
adm,systemd-journal ghost` — die Journald-Quelle läuft ohne Fehler,
|
adm,systemd-journal ghost` wurde am 04.11.2026 durchgeführt und nach dem
|
||||||
sammelt aber ohne Gruppenmitgliedschaft keine Einträge (dokumentiertes
|
Neustart des User-Managers aktiv — die Journald-Ingestion läuft seitdem
|
||||||
Alloy-Verhalten). Danach Journald-Ingestion in einer neuen Session
|
(in M3.5+ verifiziert: Kernel- und User-Unit-Einträge landen in Loki).
|
||||||
verifizieren. (usermod durchgeführt 04.11.2026; aktivierungspflichtig
|
|
||||||
über Neustart des User-Managers, z. B. Laptop-Reboot.)
|
|
||||||
|
|
||||||
### M4: Alerting (implementiert 04.11.2026, Workstation-Entwicklung)
|
### M4: Alerting (implementiert 04.11.2026, Workstation-Entwicklung)
|
||||||
|
|
||||||
@@ -392,6 +390,10 @@ Realm `Ghost.net` (Vaultwarden-Realm, Issuer
|
|||||||
- **Kosmetik (09.11.2026, v0.3.3):** Favicon ist das Ghostnet-Geist-Maskottchen
|
- **Kosmetik (09.11.2026, v0.3.3):** Favicon ist das Ghostnet-Geist-Maskottchen
|
||||||
(`wwwroot/favicon.png` 32×32 + `apple-touch-icon.png` 180×180, aus dem
|
(`wwwroot/favicon.png` 32×32 + `apple-touch-icon.png` 180×180, aus dem
|
||||||
Betreiber-Logo gerendert), via NPM als `image/png` 200 verifiziert.
|
Betreiber-Logo gerendert), via NPM als `image/png` 200 verifiziert.
|
||||||
|
- **14.11.2026 (GNAI-021):** Badge-Favicon-Varianten (v0.3.7) wurden nach
|
||||||
|
Betreiberentscheid verworfen; Monitoring reverted auf **v0.3.6**
|
||||||
|
(ursprünglicher Geist, md5-verifiziert). OpenWebUI erhielt das Theme
|
||||||
|
„gnai-catppuccin-mocha" + Favicon ebenfalls am 14.11.2026.
|
||||||
- **GPU-Chart (11.11.2026, v0.3.4/6, Befund "nur zwei einzelne Linien"):** Der
|
- **GPU-Chart (11.11.2026, v0.3.4/6, Befund "nur zwei einzelne Linien"):** Der
|
||||||
`.braille-chart` war als Flex-Item in `.gpu-chart` (display:flex) mit
|
`.braille-chart` war als Flex-Item in `.gpu-chart` (display:flex) mit
|
||||||
`overflow:hidden` auf min-width 0 kollabiert; der ResizeObserver maß die
|
`overflow:hidden` auf min-width 0 kollabiert; der ResizeObserver maß die
|
||||||
|
|||||||
Reference in New Issue
Block a user