Files
infrastructure/docs/platform/llm-server
spektr 6384f72314 GNAI-010: Stabilitaetsstunde Swift 1.5 bestanden - Abnahme 10.9 abgeschlossen
12/12 gemischte Requests ueber 62 Minuten ohne Neustart (NRestarts=0),
VRAM konstant bei 15,3/15,0 GiB. Damit sind alle drei Modellprofile
vollstaendig technisch abgenommen; die fachlichen AB-Serien (GNAI-009 4)
koennen beginnen.

Generated by Mistral Vibe.
Co-Authored-By: Mistral Vibe <vibe@mistral.ai>
2026-11-02 05:30:46 +01:00
..

LLM-Server ghostnet-ki

Dieser Gerätebereich dokumentiert den physischen Server 10.0.0.90. Er gruppiert die gemeinsame Hostbasis, den eigentlichen LLM-Stack, den davon fachlich getrennten CPU-Encoding-Workload und das host-weite Monitoring. Alle vier Bereiche teilen Hardware, Betriebssystem und Ansible-Control-Projekt.

Bereich Inhalt
Host Hardware, Debian-Basis und GPU-Ausgangslage
Zugänge Benutzer, Netzwerk, Resolver und SSH
AI Architektur, Ansible-Deployment, Modellbewertung und llama.cpp-Serving
Encoding CPU-Encoding-Architektur und Pipeline-Plan
Monitoring Systemmetriken, Collector und Dashboard

Übergreifende Rollen stehen im Zugriffskonzept, der Gesamtstand im zentralen Dokumentationsindex.