https://api.tokios.com/v1 mit Ihrem sk-tok-… Schlüssel – und Msty erreicht ein Modell, das auf Ihrer eigenen Hardware läuft.
Voraussetzungen
Connector gepairt
Installieren und pairen Sie
tokios-connector neben dem Modell, das Msty erreichen soll.Modell registriert
Registrieren Sie ein Deployment (öffentlicher Name) für dieses Modell.
API-Schlüssel erstellt
Erstellen Sie einen
sk-tok-… Schlüssel, optional auf dieses Deployment beschränkt.Unterstützte Backends
Stellen Sie sicher, dass Ihr lokales Backend (Ollama, llama.cpp, vLLM, LM Studio) läuft.
Tokios als Remote-Modell-Provider hinzufügen
1
Remote-Modell-Provider öffnen
Öffnen Sie in Msty den Bereich für Modell-Provider und wählen Sie die Option, einen Remote Model Provider hinzuzufügen. Die genaue Bezeichnung und Position variieren zwischen Msty und Msty Studio-Versionen – prüfen Sie Ihre Version.
2
OpenAI Compatible auswählen
Wählen Sie OpenAI Compatible als Provider-Typ.
3
Endpunkt und Schlüssel festlegen
Füllen Sie die Provider-Felder aus:Der API Endpoint sollte mit
/v1 enden.4
Ihr Deployment abrufen oder hinzufügen
Klicken Sie auf Fetch Models. Da Tokios
GET /v1/models implementiert, werden Ihre registrierten Deployments (z. B. gemma-tunnel) automatisch geladen. Wenn ein Provider keine Modelle automatisch zurückgibt, fügen Sie den Deployment-Namen manuell hinzu. Klicken Sie dann auf Add, um den Provider zu speichern.Ersetzen Sie
gemma-tunnel durch den Deployment-Namen, den Sie registriert haben, und sk-tok-YOUR_KEY durch Ihren eigenen Schlüssel. Der Modellname, den Msty sendet, ist Ihr öffentlicher Deployment-Name – nicht die lokale Modell-ID von Ollama, llama.cpp, vLLM oder LM Studio.Desktop-App, Modell woanders
Msty läuft auf Ihrem Desktop; das Modell, das Sie verwenden möchten, kann sich auf einer ganz anderen Maschine befinden. Der Connector neben diesem Modell wählt eine Verbindung zu Tokios auf, und Msty rufthttps://api.tokios.com/v1 mit Ihrem sk-tok-… Schlüssel auf – keine eingehenden Ports, kein VPN. Die Multi-Model-Chats von Msty funktionieren dann über Ihr Tokios-Deployment und alle anderen Provider, die Sie hinzugefügt haben.
Fehlerbehebung
401-Fehler
401-Fehler
Der von Msty gesendete API-Schlüssel fehlt, ist fehlerhaft oder wurde widerrufen. Stellen Sie sicher, dass Sie den vollständigen
sk-tok-… Schlüssel ohne zusätzlichen Leerzeichen eingefügt haben, und prüfen Sie seinen Status auf der Keys-Registerkarte.Fetch Models gibt nichts oder einen 404 zurück
Fetch Models gibt nichts oder einen 404 zurück
Der Endpunkt oder der Schlüsselbereich ist falsch. Stellen Sie sicher, dass der API Endpoint
https://api.tokios.com/v1 ist, dass Sie ein Deployment auf der Models-Registerkarte registriert haben und dass der Bereich Ihres Schlüssels dieses Deployment einschließt.503-Fehler
503-Fehler
Der Connector für dieses Deployment ist offline oder hat sein gleichzeitiges Limit erreicht. Prüfen Sie die Connectors-Registerkarte – der Connector muss als Online angezeigt werden, und die Maschine, auf der er läuft, muss noch hoch und erreichbar sein.
Nächste Schritte
Kompatible Clients
Sehen Sie sich die Basis-URL- und Schlüsseleinstellungen für andere OpenAI- und Anthropic-kompatible Clients an.
API-Schlüssel
Erstellen, begrenzen und rotieren Sie
sk-tok-… Schlüssel für Teammitglieder und Agenten.