Zum Inhalt springen

Worauf Mieter zugreifen können und worauf nicht

Kurz gesagt: Mieter können KI-Anfragen an die Modelle auf Ihrem Rechner senden, und sonst nichts.

Ein Mieter bekommt einen API-Schlüssel. Seine Anfragen gehen zuerst an GPUFlow. Die Liste der Modelle beantwortet GPUFlow selbst. An Ihren Rechner leitet GPUFlow nur eine einzige Art von Anfrage weiter:

AnfrageWas sie tut
POST /v1/chat/completionsChat mit einem Ihrer Modelle

Diese Anfrage geht über das Relay von GPUFlow an den Agenten auf Ihrem Rechner. Der Agent gibt sie an Ihre KI-Engine (Ollama) weiter.

Der Agent hat zusätzlich eine eigene Liste, als zweites Schloss. Er nimmt nur /v1/models, /v1/chat/completions, /v1/completions und /v1/embeddings an und lehnt alles andere ab, ganz gleich, woher die Anfrage kommt.

  • Ihr Netzwerk erreichen. Ihr Rechner baut nur ausgehende Verbindungen auf. An Ihrem Router wird nichts geöffnet, und Mieter erfahren nie Ihre IP-Adresse.
  • Eine Shell öffnen oder eigene Programme auf Ihrem Rechner ausführen.
  • Ihre Dateien sehen oder ändern.
  • Ihre Modelle herunterladen, löschen oder ändern.
  • Die Werte Ihres Rechners sehen. Die sehen nur Sie.

Das Installationsprogramm richtet den Agenten als Systemdienst mit strengen Beschränkungen ein. Er läuft als temporärer Benutzer ohne Passwort, kann sich keine zusätzlichen Rechte verschaffen, sieht den Rest des Systems nur lesend und sieht keine Home-Verzeichnisse. Seine Einstellungen liegen in /etc/gpuflow/agent.env, seine Daten in /var/lib/private/gpuflow.

  • Prompts und Antworten laufen über Ihren Rechner. So funktioniert die KI nun einmal. Respektieren Sie die Privatsphäre Ihrer Mieter: Zeichnen Sie ihre Prompts nicht auf und lesen Sie sie nicht.
  • Halten Sie den Rechner aktuell. Installieren Sie Ihre Linux-Updates und die Updates Ihres GPU-Treibers wie gewohnt. Der Agent startet danach von selbst neu.
  • Achten Sie auf die Temperatur. Mieter können Ihre GPU stundenlang auslasten. Die Live-Werte unter Meine Rechner zeigen ihre Temperatur. Sorgen Sie also dafür, dass das Gehäuse genug Luft bekommt.