Swiftlet, un moteur d’exécution Swift + Metal, permet d’exécuter de grands modèles MoE tels que Qwen3.6-35B-A3B et Qwen3-Next-80B-A3B avec un minimum de mémoire, en ne conservant que le cœur dense en RAM tout en chargeant les poids experts à partir d’un SSD. Sur un Mac M5, le modèle 35B atteint un pic de 2,6 Go (7 à 11 tok/s), et le modèle 80B un pic de 4,3 Go (4,5 à 5 tok/s). La version 35B fonctionne également en mode natif sur un iPhone 17 avec environ 2,5 Go et 1 tok/s. Le système utilise un routage fin des tokens vers les experts, des récupérations sur SSD basées sur la pré-lecture, une mise en cache LFU et des shaders Metal compilés à l’exécution, prenant en charge le déploiement sur iOS et les interfaces serveur compatibles OpenAI.
En cliquant sur "Accepter tous les cookies", vous consentez au stockage de cookies sur votre appareil afin d’améliorer la navigation sur le site, d’analyser l’utilisation du site et de soutenir nos efforts marketing.Politique de confidentialité Avis
Lorsque vous visitez un site web, il peut stocker ou récupérer des informations sur votre navigateur, principalement sous forme de cookies. Ces informations peuvent concerner vous, vos préférences ou votre appareil et sont principalement utilisées pour faire fonctionner le site comme vous vous y attendez. Ces informations n’identifient généralement pas directement vous-même, mais elles peuvent vous offrir une expérience web plus personnalisée. Parce que nous respectons votre droit à la vie privée, vous pouvez choisir de ne pas autoriser certains types de cookies. Cliquez sur les différents titres de catégorie pour en savoir plus et modifier nos paramètres par défaut. Cependant, bloquer certains types de cookies peut affecter votre expérience sur le site et les services que nous sommes en mesure de proposer. Politique de confidentialitéDéclaration
Gérer les préférences
Cookie strictement nécessaire
Toujours actif
Ces cookies sont nécessaires au fonctionnement du site web et ne peuvent pas être désactivés dans nos systèmes. Ils ne sont généralement définis qu’en réponse à des actions que vous effectuez qui équivalent à une demande de services, telles que la configuration de vos préférences de confidentialité, la connexion ou le remplissage de formulaires. Vous pouvez configurer votre navigateur pour bloquer ces cookies ou vous alerter à leur sujet, mais certaines parties du site ne fonctionneront alors plus. Ces cookies ne stockent aucune information permettant d’identifier personnellement.