iConference AG
Souverän in der Schweiz gehostet, falsch bestätigt: reloaded

Sind in der Schweiz gehostete KI-Modelle leistungsfähig genug für den Betriebsalltag?

Ergebnisse: zwei Testrunden, derselbe Fehler

Im August haben wir drei in der Schweiz gehostete KI-Modelle (glm5, llama4-maverick, qwen3-vl-235b) an einem fiktiven KMU-Dossier geprüft. Alle drei bestätigten einer Kundin eine Zahl, die um CHF 427.50 falsch ist. Im Oktober haben wir den Test mit drei neueren Modellen (Kimi-K2.6, Qwen3.5-397B, Mistral-Small-4) wiederholt, wortgleich und mit demselben Dossier. Das Ergebnis ist dasselbe: drei von drei bestätigten die falsche Zahl. Claude Opus von Anthropic (Opus 5 im August, Opus 5.5 im Oktober) bestand alle 18 Läufe beider Runden.

Was das für die Geschäftsleitung heisst

Lassen Sie sich vom Hype um lokale KI nicht irreführen. Lokal oder in der Schweiz gehostete Modelle können sinnvoll sein, etwa für eng umrissene Aufgaben, bei denen der Auftrag genau sagt, was zu tun und zu prüfen ist. In den ersten beiden Testfragen (unten) haben zwei der drei neuen Modelle solche Aufgaben gut gelöst.

Soll ein Modell aber ein Thema aus dem Betriebsalltag beurteilen, eine Offerte, eine Kundenanfrage, eine Zahl vor der Unterschrift, dann ist das Bild aus beiden Testrunden eindeutig: Dafür empfehlen wir ein Frontier-Modell wie Claude. Bei der dritten Testfrage, der Bitte um Bestätigung, hat Claude in jedem Lauf beider Runden den Fehler gefunden, obwohl niemand eine Prüfung verlangt hatte.

Dürfen in Ihrem Betrieb Frontier-Modelle aus den USA oder aus China nicht genutzt werden, etwa wegen eines Berufsgeheimnisses oder wegen Kundenvorgaben, empfiehlt sich eine Anonymisierungs-Schleuse. Namen, Konten und Identifikationsnummern werden vor dem Versand ersetzt und verlassen das Haus nicht, die Zahlen bleiben voll prüfbar. Das Frontier-Modell sieht nur pseudonymisierte Daten. So arbeitet unser Sovereign Cockpit.

Der Test

Das Dossier enthält die Offerte einer Schreinerei für einen Gastraum-Umbau und drei Mails der Kundin. Dazu kommen drei Fragen mit steigender Schwierigkeit, jede in einem frischen Chat und wortgleich an alle Modelle:

  1. Rechenprüfung: «Prüfen Sie die Offerte rechnerisch. Stimmen alle Beträge?» In Position 4 stimmt Menge mal Preis nicht.
  2. Terminkette: Ist das Jubiläumsfest am 19. September haltbar? Aus Auftragsbestätigung, Lieferfrist und Ausführungsdauer ergibt sich der 25. September.
  3. Bestätigung: Die Kundin rechnet mit 5% Zusatzrabatt neu mit CHF 41'040 und bittet um Bestätigung. Die Multiplikation stimmt, die Basis nicht: Im Netto steckt der Fehler aus Position 4. Richtig wären CHF 40'612.50.

Die erste Runde steht ausführlich im Standpunkt vom 4. August. Dort liegen auch das Testdossier und der Lösungsschlüssel als PDF, damit Sie den Test mit Ihrer eigenen KI nachfahren können.

Das Resultat beider Runden

Runde 1, 4. August 2026: drei in der Schweiz gehostete Modelle gegen Claude Opus 5 und Claude Fable 5, beide mit höchster Reasoning-Tiefe (Effort «max»).

Frageglm5llama4-maverickqwen3-vl-235bClaude Opus 5Claude Fable 5
1 Rechenprüfungbestandenbestandenverfehltbestanden (3/3 Läufe)nicht getestet
2 Terminkettebestandenbestandenbestandenbestanden (3/3)nicht getestet
3 Bestätigungverfehlt (2/2 Läufe)verfehltverfehltbestanden (3/3)bestanden

Runde 2, 18. Oktober 2026: drei neuere, in der Schweiz gehostete Modelle gegen Claude Opus 5.5 mit der zweithöchsten Reasoning-Tiefe (Effort «xhigh»).

FrageKimi-K2.6Qwen3.5-397BMistral-Small-4Claude Opus 5.5
1 Rechenprüfungbestandenbestandenverfehltbestanden (3/3 Läufe)
2 Terminkettebestandenbestandenbestandenbestanden (3/3)
3 Bestätigungverfehltverfehltverfehltbestanden (3/3)

Unter den neuen Modellen ist mit Kimi-K2.6 das grösste offene Modell beider Runden, rund eine Billion Parameter. Wer es im eigenen Haus für fünf gleichzeitige Nutzer betreiben will, braucht rund 650 GB Grafikspeicher, also einen Server mit acht H200-GPUs (gerechnet mit 32'000 Tokens Kontext je Nutzer). Bei Frage 1 und 2 schlagen sich zwei der drei neuen Modelle ordentlich. Bei Frage 3 hat sich nichts bewegt.

Frage 3 im Wortlaut

Die Antworten der zweiten Runde, jeweils der erste Satz:

Alle drei rechnen den letzten Schritt nach, 43'200 mal 0.95 gleich 41'040. Keines prüft, ob die 43'200 stimmen.

Was der Fall Kimi zeigt. In Frage 1 lautete der Auftrag ausdrücklich: «Prüfen Sie die Offerte rechnerisch.» Kimi-K2.6 fand den Fehler in Position 4. Es merkte sogar von sich aus an, die Nachkalkulation der Kundin auf CHF 41'040 «ist arithmetisch korrekt, bezieht sich aber auf den noch fehlerhaften Nettobetrag». Das Modell wusste also alles, was es für Frage 3 braucht.

In Frage 3 kam dieselbe Zahl als freundliche Bitte der Kundin, in einem neuen Chat und ohne Prüfauftrag. Kimi bestätigte die CHF 41'040.

Es fehlt dem Modell also an Eigeninitiative, das Wissen wäre da. Es prüft, wenn man es dazu auffordert. Fragt niemand danach, prüft es nicht. Im Betriebsalltag kommt eine falsche Zahl selten mit dem Hinweis «bitte nachrechnen». Ein solches Modell ist darum nur so verlässlich wie die Person, die schon vorher weiss, wo sie es prüfen lassen muss.

Claude Opus 5.5 lehnte in allen drei Läufen ab, nannte Position 4 als Ursache und lieferte die richtige Zahl: «In dieser Form nicht bestätigen», «CHF 41'040 sollten wir nicht bestätigen», «Nein, in dieser Form nicht.»

Frage 3, Echtzeit (63 Sekunden): links bestätigt Kimi-K2.6 die falsche Zahl, rechts lehnt Claude Opus 5.5 ab und korrigiert auf CHF 40'612.50.
Qwen3.5-397B gegen Claude Opus 5.5 (54 Sekunden)
Mistral-Small-4 gegen Claude Opus 5.5 (81 Sekunden)

Die Aufzeichnungen der ersten Runde stehen im Standpunkt vom 4. August.

Claude Opus 5 gegen Opus 5.5

Weil wir die Frontier-Seite in der zweiten Runde auf das heute verfügbare Opus 5.5 umgestellt haben, ergibt sich nebenbei ein Vergleich der beiden Opus-Generationen an denselben neun Aufgaben.

Opus 5, Effort «max»Opus 5.5, Effort «xhigh»
Ergebnis9 von 9 bestanden9 von 9 bestanden
Ausgegebene Tokens, alle 9 Läufe52'27548'112 (−8%)
Kosten, alle 9 Läufe111 Rappen82 Rappen (−26%)
Listenpreis pro Million Tokens (Eingabe / Ausgabe)USD 5 / 25USD 4 / 20

Das Ergebnis ist gleich, die Kosten liegen ein Viertel tiefer. Der grössere Teil davon kommt vom Listenpreis: Opus 5.5 ist pro Token 20% günstiger als Opus 5. Der Rest kommt von 8% weniger ausgegebenen Tokens.

Was eine Frage kostet

Kosten pro Frage in Rappen, gemessen mit dem Zähler des Testwerkzeugs zu den Listenpreisen der Anbieter (US-Dollar umgerechnet zu 0.80 Franken):

ModellFrage 1 (Rappen)Frage 2 (Rappen)Frage 3 (Rappen)
glm5 (August)1.370.870.37 bis 0.62
llama4-maverick (August)0.140.0730.054
qwen3-vl-235b (August)0.350.260.22
Kimi-K2.6 (Oktober)0.921.060.44
Qwen3.5-397B (Oktober)1.490.910.65
Mistral-Small-4 (Oktober)0.0810.110.039
Claude Opus 5 (August)7.33 bis 10.5013.42 bis 15.2011.16 bis 16.57
Claude Fable 5 (August)nicht getestetnicht getestet34.17
Claude Opus 5.5 (Oktober)7.33 bis 8.469.89 bis 10.387.54 bis 11.93

Die in der Schweiz gehosteten Modelle kosten pro Frage einen Bruchteil. Mistral-Small-4 bestätigte die falsche Zahl für 0.039 Rappen.

Wie der Zugriff über die API funktioniert

Wer KI privat nutzt, kennt meist das Chat-Abo: eine Monatsgebühr, eine App, ein Chatfenster. Für diesen Test haben wir die API benutzt, die Programmierschnittstelle der Anbieter. So sprechen auch Firmenanwendungen mit einem Modell.

Methodik und Grenzen

Wir begleiten Schweizer KMU auf diesem Weg: menschlich, kompetent, ganzheitlich.

Der KI-Fundament-Check zeigt in fünf Minuten, wo Ihr Betrieb steht. Oder buchen Sie direkt ein Erstgespräch.

Dieser Beitrag ist eine allgemeine Einordnung, keine Rechtsberatung. Alle Testunterlagen sind fiktiv. Stand Oktober 2026.

Weiterlesen

10. Oktober 2026

Der neue Motor an der alten Welle

Als der Elektromotor in die Fabriken kam, setzte man ihn meist an die alten Transmissionswellen. Mit KI geschieht im Betrieb leicht dasselbe: Sie beschleunigt das Schreiben von Mails, und die Anfrage läuft danach über dieselben Stationen wie vorher.

Lesen →
30. August 2026

Graph Engineering mit KI: Ein Fall aus dem eigenen Betrieb

Unsere KI-News-Seite publiziert seit dem 26. August zweimal täglich ohne menschliche Freigabe. Welcher Knoten eine KI braucht, welcher deterministisch bleibt und was die Freigabe ersetzt hat.

Lesen →
22. August 2026

Vreni macht die Post. Ein KI-Agent im Outlook-Posteingang.

Ein KI-Agent geht unseren Outlook-Posteingang durch, liest Anhänge samt gescanntem Papier, prüft den Verlauf und legt Antworten als Entwurf ab. Wie wir ihn gebaut haben und wo seine Grenzen liegen.

Lesen →