Dernière vérification : 2026-10-14
https://api.tokios.com — sans ouvrir de ports entrants ni recourir à un VPN.
Exécutez-le en local avec Ollama
Qwen3-VL figure dans la bibliothèque d’Ollama sous l’identifiantqwen3-vl. Téléchargez et lancez la balise par défaut (le modèle Instruct dense 8B) :
ollama run qwen3-vl:30b-a3b pour la version MoE ou ollama run qwen3-vl:8b-thinking pour l’édition Thinking. Consultez la page de la bibliothèque Ollama pour obtenir la liste complète des balises ; cette page décrit surtout la connexion, pas tous les détails d’exécution.
La fenêtre de contexte par défaut d’Ollama est limitée (2048 tokens), bien en dessous de la capacité native de Qwen3-VL qui atteint 256K tokens. Augmentez cette valeur à
num_ctx dans votre fichier Modelfile ou dans la requête client afin d’exploiter pleinement le potentiel du modèle.Variantes et balises
Toutes les valeurs ci-dessous proviennent des fiches techniques sur Hugging Face et de la bibliothèque Ollama. Les balises et tailles de téléchargement évoluent avec l’arrivée de nouvelles quantisations — vérifiez-les sur ollama.com/library/qwen3-vl/tags avant de retenir une version définitive.
Sources : ollama.com/library/qwen3-vl/tags, configuration de Qwen/Qwen3-VL-8B-Instruct et configuration de Qwen/Qwen3-VL-30B-A3B-Instruct. La bibliothèque Ollama propose également des tailles
2B, 4B, 32B et 235B-A22B ; ce tableau se concentre sur les tailles compatibles avec un déploiement local.
Quantification et formats
Les étiquettes d’Ollama incluent une quantification par défaut ainsi que-q8, et des étiquettes -bf16 distinctes pour chaque taille, disponibles en éditions -instruct et -thinking. Le format utilisable dépend de votre matériel ; consultez les formats de quantification et leurs exigences matérielles pour en connaître la matrice complète, ainsi que ce qu’est la quantification afin de décoder des noms tels que Q4_K_M.
Adéquation matérielle
Une utilisation confortable à environQ4 pour une longueur de contexte modérée. Chaque valeur indiquée est une estimation ; la taille réelle correspond à la taille GGUF plus la mémoire nécessaire au cache KV pour votre contexte. Consultez quelle taille de modèle convient à votre GPU ? pour les calculs de dimensionnement.
Mise en œuvre — pour débutants comme pour experts
- Ollama (le plus simple)
- LM Studio (interface graphique)
- vLLM (pour utilisateurs avancés)
- SGLang (version avancée)
http://127.0.0.1:11434 par défaut. Augmentez la valeur de num_ctx pour disposer d’un contexte plus vaste, et envoyez des images dans vos requêtes de chat comme vous le feriez avec n’importe quel autre modèle de vision d’Ollama.Fonctionnalités
- Vision : multimodale — accepte du texte, des images et des vidéos dans une même requête, avec un soutien natif pour l’OCR sur de longs documents, la compréhension d’interfaces graphiques et d’écrans par des agents, ainsi que le repérage spatial.
- Long contexte : 262,144 tokens nativement (confirmé pour les configurations
8Bet30B-A3B) ; la fiche modèle de Qwen indique que cette fenêtre est extensible via le scaling YaRN sur vLLM. - Raisonnement : deux éditions distinctes sont proposées selon la taille du modèle — Instruct (réponses directes) et Thinking (raisonnement renforcé, par exemple
qwen3-vl:8b-thinkingsur Ollama). Les exemples de déploiement officiels de Qwen pour vLLM ou SGLang ne mentionnent aucun paramètre spécifique pour activer le raisonnement dans Qwen3-VL. - Appel de fonctions : le modèle de chat sur Hugging Face prévoit un format JSON
<tool_call>, automatiquement appliqué par Ollama. Les exemples de déploiement officiels de Qwen3-VL ne font pas état d’un paramètre--tool-call-parser; il convient donc de tester cette fonctionnalité sur votre environnement avant de le mettre en production.
Connectez-le à Tokios
Une fois Qwen3-VL lancé localement, associez le connecteur Tokios afin de l’utiliser viahttps://api.tokios.com depuis Claude Code, Cline ou tout autre client compatible, plutôt que de se limiter à localhost:11434.
1
Procédez à l’association du connecteur Tokios
Rendez-vous sur tokios.com/console, ouvrez l’onglet Setup puis cliquez sur Start pairing pour obtenir un code d’appairage unique (Ensuite, sélectionnez approve le périphérique dans l’onglet Setup ou Connectors.
TKS-XXXX-XXXX). Installez et exécutez ensuite le connecteur sur la machine hébergeant Ollama.Windows
macOS
Linux
2
Orientez le connecteur vers l’API /v1 d’Ollama.
Ollama propose une interface compatible OpenAI à l’adresse
/v1. Dans un environnement à un seul modèle, l’assistant de configuration de la console renseigne automatiquement ce champ avec http://127.0.0.1:11434/v1. Pour plusieurs modèles, il faut le définir manuellement dans tokios-connector.json — consultez Configuration du connecteur.3
Enregistrez un déploiement.
Dans l’onglet Models, enregistrez le modèle et choisissez un nom public pour le déploiement, tel que
qwen3-vl-tunnel. Ce nom — et non l’ID de modèle amont d’Ollama — est celui que les clients transmettent dans le champ model.4
Créez une clé API.
Dans l’onglet Keys, cliquez sur Create key. Copiez immédiatement la clé
sk-tok-… car elle ne s’affiche qu’une seule fois.Appelez-la depuis n’importe où.
Points à prendre en compte.
- Qwen3-VL propose Instruct et Thinking en tant que téléchargements distincts, sans option de basculement ; sélectionnez dès le départ l’étiquette requise (
qwen3-vl:8bouqwen3-vl:8b-thinking). - Le README officiel et les fiches techniques de Qwen ne mentionnent pas explicitement les paramètres
--tool-call-parserou--reasoning-parserpour Qwen3-VL dans vLLM/SGLang, contrairement à d’autres versions de Qwen3. Il convient de tester le comportement relatif à l’appel d’outils et aux balises de réflexion dans votre environnement d’exécution avant de l’utiliser en production. - Le modèle MoE de type
30B-A3Bnécessite que l’ensemble de ses paramètres soient présents en mémoire, même si seuls 3B sont actifs par jeton ; dimensionnez donc votre matériel en fonction de la taille totale du téléchargement et non du nombre de paramètres actifs. - Les variantes
32Bet235B-A22Bexigent davantage de ressources matérielles que ce que la plupart des utilisateurs de Tokios disposent localement. Considérez-les comme des options avancées et vérifiez bien les fichiers requis, les paramètres contextuels et la compatibilité d’exécution avant de les intégrer à vos projets.
FAQ
De combien de VRAM Qwen3-VL a-t-il besoin ?
De combien de VRAM Qwen3-VL a-t-il besoin ?
Le modèle dense
8B nécessite ~6.1 Go en quantification par défaut (~18 Go en bf16). Le modèle MoE 30B-A3B nécessite ~20 Go en quantification par défaut (~62 Go en bf16). Ajoutez le cache KV pour votre longueur de contexte — les deux supportent 262,144 tokens nativement, mais les contextes longs multiplient l’utilisation mémoire.Qwen3-VL peut-il fonctionner sur un GPU de 24 Go ?
Qwen3-VL peut-il fonctionner sur un GPU de 24 Go ?
Oui — le
8B (~6 Go) et le 30B-A3B MoE (~20 Go) tiennent tous deux sur une carte de 24 Go (RTX 3090 / 4090) en quantification par défaut. Le 8B laisse largement de la marge pour un contexte long ; le 30B-A3B est confortable mais plus serré pour des contextes très longs. Même une carte de 16 Go (RTX 5080 / 4080) fait tourner le 8B confortablement.Qwen3-VL est-il open source ?
Qwen3-VL est-il open source ?
Oui — le
8B et le 30B-A3B sont publiés sous licence Apache 2.0, permissive et sans politique d’utilisation acceptable ni seuil d’utilisateurs. Notez qu’open weights et open source ne sont pas la même chose — les données d’entraînement et le pipeline ne sont pas publiés.Quelle est la différence entre les variantes Thinking et Instruct ?
Quelle est la différence entre les variantes Thinking et Instruct ?
Elles sont livrées en téléchargements séparés, pas via un basculement. Les éditions Instruct donnent des réponses directes. Les éditions Thinking (par ex.
qwen3-vl:8b-thinking) sont améliorées en raisonnement et émettent un raisonnement étape par étape avant la réponse finale. Choisissez dès le départ la balise dont vous avez besoin — le suffixe -thinking d’Ollama sélectionne l’édition de raisonnement.Qwen3-VL prend-il en charge l’entrée vidéo ?
Qwen3-VL prend-il en charge l’entrée vidéo ?
Oui — toute la famille Qwen3-VL accepte du texte, des images et de la vidéo dans la même requête, avec un soutien natif pour l’OCR sur de longs documents, la compréhension d’interfaces graphiques et d’écrans par des agents, ainsi que le repérage spatial. C’est l’une des différences avec l’ancien Qwen2.5-VL.
Démarrage rapide
Associez un connecteur et enregistrez votre premier modèle dans sa totalité.
Quelle taille de modèle convient à votre carte graphique ?
Déterminez d’abord la quantité de mémoire VRAM dont vous disposez avant de télécharger Qwen3-VL.
Quantification et matériel
Parmi les formats de Qwen3-VL —
GGUF et bf16 — lequel est compatible avec votre matériel ?Quel modèle local choisir selon la tâche à accomplir ?
Découvrez comment Qwen3-VL se positionne par rapport aux autres modèles visuels locaux selon les tâches.