ai newsDo., 15. Okt.
EilmeldungAlibaba Qwen N1 AI glasses go on sale in China

Microsoft bringt MAI Code 1.1 Flash fuer lokale Inferenz in GitHub Copilot

Microsoft will das Coding-Modell MAI Code 1.1 Flash kuenftig direkt auf dem Geraet in unterstuetzten GitHub Copilot-Workflows laufen lassen, statt nur auf Cloud-Inferenz zu setzen. Der Rollout startet mit begrenztem Nutzerkreis bis Ende Oktober 2026.

dev.toDonnerstag 00:30 · 08.10.DE5 Min. Lesezeit
Bild: dev.to

Veröffentlicht am 7. Okt. • Zuerst erschienen auf scalevise.com

Microsoft plant, MAI Code 1.1 Flash für lokale Coding-Workflows in GitHub Copilot bereitzustellen, sodass unterstützte Copilot-Funktionen das Coding-Modell auf einem Gerät ausführen können, anstatt sich ausschließlich auf Cloud-Inferenz zu verlassen. Der Rollout soll Ende Oktober 2026 mit einem begrenzten Nutzerkreis beginnen und umfasst Copilot CLI, die Copilot-App sowie IDE-Integrationen wie Visual Studio Code.

Diese Entwicklung ist relevant, weil sie Entwicklern einen weiteren Weg für KI-gestütztes Programmieren eröffnet: lokale Modellausführung für geeignete Aufgaben, neben in der Cloud gehosteten Modellen, wenn diese besser passen. Für Teams, die Copilot im Entwicklungsalltag nutzen, hängt der praktische Nutzen von kompatibler Hardware, der Qualität des Routings zwischen lokalen und Cloud-Modellen und den finalen Konditionen ab. Microsoft hat in seiner offiziellen Ankündigung keine Preise für lokale Inferenz genannt.

Laut Microsofts offizieller Übersicht zu lokalen Modellen und sandgeboxten Tools in GitHub Copilot ist MAI Code 1.1 Flash als lokales Coding-Modell mit einem Referenz-Kontextfenster von 256.000 Token konzipiert. Es verfügt über insgesamt 137 Milliarden Parameter, davon 6,8 Milliarden aktive Parameter, und nutzt Quantisierung sowie Speculative Decoding, um den Bedarf auf dem Gerät zu reduzieren.

Microsoft beschreibt zwei Wege zur Nutzung lokaler Inferenz. Bei der Auto-Orchestrierung entscheidet Copilot, ob eine Anfrage lokal oder in der Cloud bearbeitet wird. Dieses Routing basiert auf Microsofts HydraFusion-Orchestrierungsansatz, der Modelle über Edge- und Cloud-Umgebungen hinweg koordinieren soll.

Die zweite Option ist die explizite Auswahl des lokalen Modells. Nutzer können MAI Code 1.1 Flash über den Windows-ML-Provider auswählen oder Copilot mit lokalen Endpunkten verbinden. Diese Unterscheidung ist wichtig für Entwickler, die direkte Kontrolle darüber haben möchten, wo eine Coding-Anfrage verarbeitet wird, statt die Entscheidung dem automatischen Routing zu überlassen.

Microsoft kombiniert die lokale Modellausführung zudem mit sandgeboxter Toolnutzung. Die sogenannten Microsoft Execution Containers, kurz MXC, sollen die Ausführung von Tools isolieren. Das ist relevant für agentische Coding-Workflows, bei denen ein Modell Tools nutzen muss, um eine Entwicklungsaufgabe abzuschließen, statt lediglich Text in einem Editor zu generieren.

Das Unternehmen hatte MAI-Code-1-Flash bereits im Juni 2026 auf weitere Copilot-Oberflächen ausgeweitet, wie einem GitHub-Changelog-Eintrag zu entnehmen ist. MAI Code 1.1 Flash erweitert diese breitere Copilot-Präsenz um einen eigens angekündigten lokalen Coding-Pfad.

Lokale Inferenz bedeutet nicht, ein leichtgewichtiges Autocomplete-Tool auf einem beliebigen Laptop auszuführen. Microsofts veröffentlichte Referenzmessungen basieren auf einem Surface Laptop Ultra mit NVIDIA RTX Spark. In diesem Setup erreicht MAI Code 1.1 Flash bei einem Kontext von 256.000 Token eine Spitzen-speicherauslastung von etwa 75,5 GB.

Microsoft gibt in dieser Referenzkonfiguration folgende Decode-Durchsätze an:

Diese Zahlen zeigen, warum Hardware für die Verbreitung eine zentrale Rolle spielen wird. Die offizielle Ankündigung enthält weder eine allgemeine Mindestspezifikation noch eine vollständige Liste unterstützter Geräte. Unternehmen sollten daher nicht davon ausgehen, dass jeder bestehende Entwickler-Rechner das Modell lokal in den genannten Kontextgrößen oder Leistungsstufen ausführen kann.

Für Entwickler, die bereits mit Copilot CLI, der Copilot-App oder unterstützten IDE-Integrationen arbeiten, könnte lokale Inferenz Teil des bestehenden Copilot-Workflows werden statt eines separaten Coding-Assistenten, der installiert und erlernt werden muss. Die Option der expliziten Auswahl kann nützlich sein, wenn ein Entwickler mit einem lokalen Endpunkt arbeiten möchte, während die automatische Orchestrierung darauf ausgelegt ist, die manuelle Entscheidung für jede Aufgabe überflüssig zu machen.

Für Unternehmen geht es weniger darum, Cloud-KI vollständig zu ersetzen, sondern darum, Arbeiten der passenden Umgebung zuzuordnen. Lokale Verarbeitung kann relevant sein, wenn Teams über kompatible Rechner verfügen und eine lokale Option innerhalb ihrer bestehenden Entwicklungstools wünschen. Cloud-Inferenz bleibt Teil des von Microsoft angegebenen Routing-Modells, sodass die Ankündigung auf einen hybriden Workflow statt auf ein vollständig lokales Copilot-Erlebnis hinausläuft.

Die Kosten sind weiterhin ein offener Punkt. Zwar bezeichnete ein ursprünglicher Social-Media-Beitrag lokale Aufrufe als kostenlos in Bezug auf Inferenzgebühren, doch Microsofts offizielle Ankündigung nennt keine Preise für lokale Inferenz, keine Details zur Behandlung in Abos, keine Nutzungslimits und auch nicht, ob jeder lokale Workflow ohne zusätzliche Kosten bleibt. Teams sollten den Rollout und die Produktdokumentation abwarten, bevor sie Budgetannahmen auf diese Aussage stützen.

Für Unternehmen, die prüfen, wo KI-Coding-Unterstützung in ihren Software-Lieferprozess passt, sind Implementierungsdetails ebenso wichtig wie die Modellleistung. Scalevise kann helfen, praktische Entwicklungsaufgaben abzubilden, KI-Tools an verlässliche Workflows anzubinden und wiederkehrende operative Arbeit durch Services für KI-Workflow-Automatisierung zu reduzieren. Eine gezielte Analyse kann aufzeigen, wo lokale und cloudbasierte KI-Fähigkeiten zu Ihren bestehenden Tools passen, ohne die Arbeitsweise der Entwickler zu stören. Fordern Sie eine Beratung an, um ein KI-Automatisierungsprojekt zu besprechen.

Was ist MAI Code 1.1 Flash in GitHub Copilot?

MAI Code 1.1 Flash ist Microsofts Coding-Modell, das für lokale Inferenz in GitHub Copilot eingeführt wurde. Microsoft zufolge soll es in Copilot CLI, der Copilot-App und IDE-Integrationen funktionieren.

Wann wird lokales MAI Code 1.1 Flash verfügbar sein?

Microsoft plant, den begrenzten Rollout bis Ende Oktober 2026 zu beginnen. Einen breiteren Verfügbarkeitstermin nennt die offizielle Ankündigung nicht.

Können Nutzer lokale Inferenz statt Cloud-Inferenz wählen?

Ja. Microsoft beschreibt die explizite Auswahl des lokalen Modells über den Windows-ML-Provider oder durch die Verbindung mit lokalen Endpunkten. Copilot kann Anfragen auch automatisch zwischen lokaler und Cloud-Inferenz weiterleiten.

Nennt Microsoft den Preis für lokale Copilot-Inferenz?

Nein. Microsofts offizielle Ankündigung enthält keine Preise, Nutzungslimits oder Abo-Details für lokale Inferenz. Die Behauptung, lokale Aufrufe seien gebührenfrei, wird in der offiziellen Ankündigung nicht bestätigt.

MAI Code 1.1 Flash stattet GitHub Copilot mit einer geplanten Option für lokale Inferenz aus, die auf hybrides Routing, explizite lokale Auswahl und sandgeboxte Tool-Ausführung setzt. Die angekündigten Leistungswerte sind beachtlich, ebenso jedoch die referenzierten Speicheranforderungen. Der praktische Nutzen wird vom Rollout, von unterstützter Hardware und von kommerziellen Details abhängen, die Microsoft noch veröffentlichen muss.

Mit Vorlagen lassen sich FAQs schnell beantworten oder Snippets zur Wiederverwendung speichern.

Sind Sie sicher, dass Sie diesen Kommentar ausblenden möchten? Er wird in Ihrem Beitrag verborgen, bleibt aber über den Permalink des Kommentars sichtbar.

Für weitere Maßnahmen können Sie diese Person blockieren und/oder eine Meldung wegen Missbrauchs einreichen.

Automatisch übersetzt. Das Original auf Englisch ist unten aufklappbar.

Original (Englisch) anzeigen

Posted on Oct 7 • Originally published at scalevise.com

Microsoft plans to bring MAI Code 1.1 Flash to local coding workflows in GitHub Copilot, allowing supported Copilot experiences to run the coding model on a device instead of relying solely on cloud inference. The rollout is planned to begin with a limited audience by the end of October 2026, covering Copilot CLI, the Copilot app, and IDE integrations such as Visual Studio Code.

The development matters because it gives developers another route for AI-assisted coding: local model execution for suitable tasks, alongside cloud-hosted models when those are more appropriate. For teams that use Copilot in daily development, the practical value will depend on compatible hardware, the quality of routing between local and cloud models, and the final commercial terms. Microsoft has not disclosed pricing for local inference in its official announcement.

According to Microsoft's official overview of local models and sandboxed tools in GitHub Copilot, MAI Code 1.1 Flash is designed as a local coding model with a 256,000-token reference context window. It has 137 billion total parameters, with 6.8 billion active parameters, and uses quantization and speculative decoding to reduce its on-device footprint.

Microsoft describes two ways to use local inference. In Auto orchestration, Copilot determines whether a request should be handled locally or in the cloud. This routing is based on Microsoft’s HydraFusion orchestration approach, which is intended to coordinate models across edge and cloud environments.

The second option is explicit local-model selection. Users can choose MAI Code 1.1 Flash through the Windows ML provider or connect Copilot to local endpoints. That distinction is important for developers who want direct control over where a coding request is processed, rather than leaving the decision to automatic routing.

Microsoft is also pairing local model execution with sandboxed tool use. Its Microsoft Execution Containers, or MXC, are intended to isolate tool execution. This matters for agentic coding workflows, where a model may need to use tools as part of completing a development task rather than simply generating text in an editor.

The company had already expanded MAI-Code-1-Flash to more Copilot surfaces in June 2026, according to a GitHub Changelog entry. MAI Code 1.1 Flash extends that broader Copilot presence with a specifically announced local-coding path.

Local inference is not equivalent to running a lightweight autocomplete tool on any laptop. Microsoft’s published reference measurements use a Surface Laptop Ultra with NVIDIA RTX Spark. In that setup, MAI Code 1.1 Flash reaches approximately 75.5GB of peak memory usage at a 256,000-token context.

Microsoft reports the following decode throughput in that reference configuration:

These figures show why hardware will be central to adoption. The official announcement does not provide a general minimum specification or a complete supported-device list. Businesses should therefore avoid assuming that every existing developer machine will be able to run the model locally at the reported context sizes or performance levels.

For developers already working in Copilot CLI, the Copilot app, or supported IDE integrations, local inference could become part of the existing Copilot workflow rather than a separate coding assistant to install and learn. The explicit selection option may be useful when a developer wants to work with a local endpoint, while automatic orchestration is designed to reduce the need to decide manually for every task.

For businesses, the immediate question is less about replacing cloud AI entirely and more about matching work to the right environment. Local processing may be relevant when teams have compatible machines and want a local option within their existing development tools. Cloud inference remains part of Microsoft’s stated routing model, so the announcement points to a hybrid workflow rather than a fully local-only Copilot experience.

Cost is still an open detail. Although an originating social post described local calls as having no inference charge, Microsoft’s official announcement does not disclose local-inference pricing, subscription treatment, usage limits, or whether every local workflow will carry no additional charge. Teams should wait for rollout and product documentation before making budget assumptions based on that claim.

For companies evaluating where AI coding assistance fits into their software delivery process, implementation details matter as much as model performance. Scalevise can help map practical development tasks, connect AI tools to reliable workflows, and reduce repetitive operational work through AI workflow automation services. A focused assessment can identify where local and cloud AI capabilities may fit your current tools without disrupting how developers already work. Request a consultation to discuss an AI automation project.

What is MAI Code 1.1 Flash in GitHub Copilot?

MAI Code 1.1 Flash is Microsoft’s coding model introduced for local inference in GitHub Copilot. Microsoft says it will work across Copilot CLI, the Copilot app, and IDE integrations.

When will local MAI Code 1.1 Flash be available?

Microsoft plans to begin a limited rollout by the end of October 2026. The official announcement does not provide a broader availability date.

Can users choose local inference instead of cloud inference?

Yes. Microsoft describes explicit local-model selection through the Windows ML provider or by connecting to local endpoints. Copilot can also automatically route requests between local and cloud inference.

Does Microsoft disclose the price of local Copilot inference?

No. Microsoft’s official announcement does not disclose pricing, usage limits, or subscription treatment for local inference. Claims that local calls have no inference charge are not confirmed in the official announcement.

MAI Code 1.1 Flash gives GitHub Copilot a planned local-inference option built around hybrid routing, explicit local selection, and sandboxed tool execution. The announced performance figures are substantial, but so are the reference memory requirements. Its real-world value will depend on the rollout, supported hardware, and commercial details Microsoft has yet to publish.

Originaltitel: Microsoft Brings MAI Code 1.1 Flash Local Inference to GitHub CopilotQuelle: dev.to (dev.to). Original öffnen