Installation et connectivité
Le connecteur démarre mais mes requêtes renvoient 503
Le connecteur démarre mais mes requêtes renvoient 503
503 indique que le passerelle Tokios ne parvient pas à établir de tunnel vers le connecteur pour le modèle demandé. Vérifiez ce qui suit :- Le processus du connecteur est toujours actif et connecté.
- Le nom du modèle indiqué dans votre requête API correspond à un déploiement enregistré dans la console.
- L’appareil a été approuvé lors du jumelage et apparaît en ligne dans l’onglet Connectors de la console. (Si vous utilisez le fichier de configuration multi-modèles avancé, assurez-vous également que les paramètres
ConnectorIdet les ID de modèles amont définis danstokios-connector.jsoncorrespondent au connecteur affiché dans la console.)
Dois-je ouvrir des ports sur le pare-feu ?
Dois-je ouvrir des ports sur le pare-feu ?
Puis-je exécuter le connecteur sur une machine différente de celle où se trouve mon modèle ?
Puis-je exécuter le connecteur sur une machine différente de celle où se trouve mon modèle ?
BaseUrl, par exemple http://192.168.1.50:11434/v1. Aucune configuration supplémentaire n’est requise : le connecteur transmet les requêtes uniquement aux hôtes listés dans son propre fichier de configuration, jamais à une URL fournie par le passerelle. Pour limiter un modèle amont à un hôte précis, ajoutez cet hôte à AllowedHosts ; toute modification ultérieure de BaseUrl vers une autre adresse entraînera un échec au démarrage. Consultez Configuration du Connecteur.Compatibilité API
Quelles interfaces API Tokios prend-il en charge ?
Quelles interfaces API Tokios prend-il en charge ?
/v1/chat/completions), les messages Anthropic (/v1/messages) ainsi que les réponses OpenAI (/v1/responses), plus /v1/models et /v1/messages/count_tokens. Le passerelle traduit les formats Messages et Réponses en complétions de chat adaptées à votre modèle. Les fonctionnalités propres à chaque fournisseur qui nécessitent son propre backend (comme les assistants OpenAI, la gestion de fichiers ou le réglage fin) ne sont pas disponibles.Est-il possible d’utiliser des réponses en streaming ?
Est-il possible d’utiliser des réponses en streaming ?
"stream": true dans le corps de votre requête. Tokios renvoie alors des événements envoyés par le serveur selon le format standard de streaming d’OpenAI ou d’Anthropic, quel que soit le type d’interface utilisée.Mon client envoie des requêtes vers /v1 — cela fonctionnera-t-il ?
Mon client envoie des requêtes vers /v1 — cela fonctionnera-t-il ?
https://api.tokios.com/v1 en y ajoutant le suffixe /v1. Pour les clients Anthropic utilisant ANTHROPIC_BASE_URL, renseignez plutôt l’URL https://api.tokios.com sans y inclure /v1, car le client ajoute lui-même le chemin. Consultez la documentation de votre client pour connaître le format attendu.Modèles locaux
Tokios conserve-t-il mes invites ou les réponses de mon modèle ?
Tokios conserve-t-il mes invites ou les réponses de mon modèle ?
Quels moteurs de modèles sont pris en charge ?
Quels moteurs de modèles sont pris en charge ?
BaseUrl (y compris /v1) dans tokios-connector.json. Consultez Moteurs de modèles.Puis-je héberger plusieurs modèles ?
Puis-je héberger plusieurs modèles ?
Routes et Upstreams, et vous pouvez enregistrer un déploiement (nom public) pour chacun. Il est également possible de lancer un connecteur par modèle. Consultez Routage des modèles.Compte et facturation
Tokios est-il gratuit ?
Tokios est-il gratuit ?
Comment révoquer une clé API ?
Comment révoquer une clé API ?