Was gemessen wird
Fünf getrennte Signale
Codingqualität, erste sichtbare Text- oder Reasoning-Ausgabe, Toollatenz, Queuezeit und verifiziertes Endergebnis werden nicht zu einer erfundenen Gesamtzahl vermischt.
Modell-Labor
Alle 137 gelisteten NVIDIA- und Gemini-Modelle vom 2026-09-14, gemessen am Anbieterstream. Das ist ein Screening mit je einem Versuch pro Aufgabe: es zeigt Erreichbarkeit und ein erstes Ergebnis, keine Rangliste.
Grenzen: one attempt per task: a screening, not a ranking; availability is what this key reached on this day. Ob ein Modell für dein Konto aufrufbar ist, prüft plug setup mit deinem eigenen Schlüssel.
Screening q1-20260914, Katalog vom 2026-09-14 (catalog-2026-09-14T17-40-40-298Z), ausgewertet 2026-09-14 18:49 UTC.
Q1: streamed request for a small JavaScript function, checked by 6 hidden cases in a permission-restricted process. Q2: streamed request offering one read_file tool; passes on a valid call with the requested path.
direct provider endpoint, one owner developer key per provider, no fallback, no key rotation; 10 requests per minute per rate domain through the fleet governor. Zeiten: milliseconds from dispatch on one monotonic clock; null values carry a reason; thought signatures and empty chunks are not output.
124 Anbieteranfragen; 18 von 75 Coding-Kandidaten haben beide Aufgaben bestanden, 40 waren gelistet, aber mit diesem Schlüssel nicht aufrufbar.
39 mit diesem Schlüssel nicht aufrufbar · 6 nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) · 26 nicht für allgemeines Coding · 9 beide Aufgaben bestanden · 1 Aufgabe nicht bestanden
| Modell | Ergebnis | Q1 Code (Stream) | Q2 Toolaufruf (Stream) | erstes sichtbares Reasoning |
|---|---|---|---|---|
google/gemma-4-31b-itGEMMA_OPEN_MODEL | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 51.320 ms · geprüft 52.107 ms | bestanden gültiger Aufruf 49.610 ms | nicht ausgegeben |
meta/llama-3.2-11b-vision-instructMULTIMODAL_TEXT | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 521 ms · geprüft 3.030 ms | bestanden gültiger Aufruf 796 ms | nicht ausgegeben |
meta/muse-glimmer-30bTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 11.989 ms · geprüft 12.511 ms | bestanden gültiger Aufruf 8.436 ms | 2.706 ms |
mistralai/mistral-nemotronTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 37.122 ms · geprüft 40.742 ms | bestanden gültiger Aufruf 2.570 ms | nicht ausgegeben |
nvidia/nemotron-3-super-120b-a12bTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 12.585 ms · geprüft 12.928 ms | bestanden gültiger Aufruf 745 ms | 515 ms |
nvidia/nemotron-3-ultra-550b-a55bTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 45.958 ms · geprüft 46.176 ms | bestanden gültiger Aufruf 47.589 ms | 45.083 ms |
nvidia/nemotron-3.5-lightning-30b-a3bTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 29.340 ms · geprüft 30.115 ms | bestanden gültiger Aufruf 1.934 ms | 530 ms |
openai/gpt-oss-20bTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 3.491 ms · geprüft 4.345 ms | bestanden gültiger Aufruf 1.963 ms | 462 ms |
z-ai/glm-5.3-flashTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 105.213 ms · geprüft 105.837 ms | bestanden gültiger Aufruf 94.922 ms | 89.940 ms |
nvidia/ising-calibration-1.5-31bTEXT_GENERATION | Aufgabe nicht bestanden | bestanden · Orakel 6/6 Antwort 784 ms · geprüft 2.276 ms | ORACLE_FAIL · HTTP 200 | nicht ausgegeben |
deepseek-ai/deepseek-v4-flash-0731TEXT_GENERATION | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | TIMEOUT | TIMEOUT | nicht ausgegeben |
google/diffusiongemma-26b-a4b-itGEMMA_OPEN_MODEL | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | TIMEOUT | TIMEOUT | nicht ausgegeben |
meta/llama-3.2-90b-vision-instructMULTIMODAL_TEXT | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | TIMEOUT | bestanden gültiger Aufruf 65.217 ms | nicht ausgegeben |
moonshotai/kimi-k3TEXT_GENERATION | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | TIMEOUT | TIMEOUT | nicht ausgegeben |
nvidia/nemotron-3-nano-omni-30b-a3b-reasoningMULTIMODAL_TEXT | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | PROVIDER_ERROR · HTTP 200 | bestanden gültiger Aufruf 2.709 ms | 407 ms |
poolside/laguna-xs-2.1TEXT_GENERATION | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | PROVIDER_ERROR · HTTP 200 | PROVIDER_ERROR · HTTP 200 | nicht ausgegeben |
01-ai/yi-largeTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
adept/fuyu-8bMULTIMODAL_TEXT | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
ai21labs/jamba-1.5-large-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
aisingapore/sea-lion-7b-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
bigcode/starcoder2-15bCODE_SPECIALIST | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
databricks/dbrx-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
deepseek-ai/deepseek-coder-6.7b-instructCODE_SPECIALIST | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
google/codegemma-1.1-7bCODE_SPECIALIST | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
google/codegemma-7bCODE_SPECIALIST | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
google/gemma-2bGEMMA_OPEN_MODEL | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
google/gemma-3-12b-itGEMMA_OPEN_MODEL | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
google/gemma-3-4b-itGEMMA_OPEN_MODEL | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
google/recurrentgemma-2bGEMMA_OPEN_MODEL | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
ibm/granite-3.0-3b-a800m-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
ibm/granite-3.0-8b-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
ibm/granite-34b-code-instructCODE_SPECIALIST | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
ibm/granite-8b-code-instructCODE_SPECIALIST | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
meta/codellama-70bCODE_SPECIALIST | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
meta/llama2-70bTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
microsoft/kosmos-2MULTIMODAL_TEXT | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
microsoft/phi-3-vision-128k-instructMULTIMODAL_TEXT | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
microsoft/phi-3.5-moe-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
mistralai/codestral-22b-instruct-v0.1CODE_SPECIALIST | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
mistralai/mistral-7b-instruct-v0.3TEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
mistralai/mistral-largeTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
mistralai/mistral-large-2-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
mistralai/mixtral-8x22b-v0.1TEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
moonshotai/kimi-k2.6TEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nv-mistralai/mistral-nemo-12b-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/cosmos-reason2-8bMULTIMODAL_TEXT | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/llama-3.1-nemotron-51b-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/llama-3.1-nemotron-70b-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/llama-3.1-nemotron-ultra-253b-v1TEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/mistral-nemo-minitron-8b-8k-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/nemotron-4-340b-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/nemotron-nano-3-30b-a3bTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/neva-22bMULTIMODAL_TEXT | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
nvidia/vilaMULTIMODAL_TEXT | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
zyphra/zamba2-7b-instructTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
google/deplot · NOT_APPLICABLE_FOR_GENERAL_CODING: document / OCR / chart parsingmeta/llama-guard-4-12b · NOT_APPLICABLE_FOR_GENERAL_CODING: safety / guard classifiernvidia/ai-synthetic-video-detector · NOT_APPLICABLE_FOR_GENERAL_CODING: detector or classifiernvidia/embed-qa-4 · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelnvidia/llama-3.1-nemoguard-8b-content-safety · NOT_APPLICABLE_FOR_GENERAL_CODING: safety / guard classifiernvidia/llama-3.1-nemoguard-8b-topic-control · NOT_APPLICABLE_FOR_GENERAL_CODING: safety / guard classifiernvidia/llama-3.1-nemotron-safety-guard-8b-v3 · NOT_APPLICABLE_FOR_GENERAL_CODING: safety / guard classifiernvidia/llama-3.2-nemoretriever-1b-vlm-embed-v1 · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelnvidia/llama-3.2-nv-embedqa-1b-v1 · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelnvidia/llama-nemotron-embed-vl-1b-v2 · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelnvidia/llama3-chatqa-1.5-70b · separate category: text model tuned for one domain (translation, medicine, finance, creative writing)nvidia/nemotron-3-embed-1b · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelnvidia/nemotron-3.5-content-safety · NOT_APPLICABLE_FOR_GENERAL_CODING: safety / guard classifiernvidia/nemotron-4-340b-reward · NOT_APPLICABLE_FOR_GENERAL_CODING: reward modelnvidia/nemotron-parse · NOT_APPLICABLE_FOR_GENERAL_CODING: document / OCR / chart parsingnvidia/nemotron-parse-2.0 · NOT_APPLICABLE_FOR_GENERAL_CODING: document / OCR / chart parsingnvidia/nv-embedqa-mistral-7b-v2 · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelnvidia/nvclip · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelnvidia/riva-translate-4b-instruct · separate category: text model tuned for one domain (translation, medicine, finance, creative writing)nvidia/riva-translate-4b-instruct-v1.1 · separate category: text model tuned for one domain (translation, medicine, finance, creative writing)nvidia/riva-translate-4b-instruct-v2 · separate category: text model tuned for one domain (translation, medicine, finance, creative writing)snowflake/arctic-embed-l · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelwriter/palmyra-creative-122b · separate category: text model tuned for one domain (translation, medicine, finance, creative writing)writer/palmyra-fin-70b-32k · separate category: text model tuned for one domain (translation, medicine, finance, creative writing)writer/palmyra-med-70b · separate category: text model tuned for one domain (translation, medicine, finance, creative writing)writer/palmyra-med-70b-32k · separate category: text model tuned for one domain (translation, medicine, finance, creative writing)9 beide Aufgaben bestanden · 1 mit diesem Schlüssel nicht aufrufbar · 36 nicht für allgemeines Coding · 5 nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) · 5 Kontingent dieses Projekts erschöpft (429 auch nach Wiederholung)
| Modell | Ergebnis | Q1 Code (Stream) | Q2 Toolaufruf (Stream) | erstes sichtbares Reasoning |
|---|---|---|---|---|
gemini-2.5-flashTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 533 ms · geprüft 946 ms | bestanden gültiger Aufruf 1.440 ms | 1.408 ms |
gemini-2.5-flash-liteTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 763 ms · geprüft 912 ms | bestanden gültiger Aufruf 632 ms | nicht ausgegeben |
gemini-3-flash-previewTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 2.326 ms · geprüft 2.457 ms | bestanden gültiger Aufruf 927 ms | 1.694 ms |
gemini-3.1-flash-liteTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 1.979 ms · geprüft 2.117 ms | bestanden gültiger Aufruf 3.381 ms | nur Signatur, kein Text |
gemini-3.1-flash-lite-previewTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 2.544 ms · geprüft 2.811 ms | bestanden gültiger Aufruf 2.326 ms | nur Signatur, kein Text |
gemini-3.5-flash-liteTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 666 ms · geprüft 776 ms | bestanden gültiger Aufruf 753 ms | nur Signatur, kein Text |
gemini-3.6-flashTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 2.761 ms · geprüft 2.955 ms | bestanden gültiger Aufruf 1.370 ms | 1.977 ms |
gemini-flash-lite-latestTEXT_GENERATION | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 726 ms · geprüft 888 ms | bestanden gültiger Aufruf 691 ms | nur Signatur, kein Text |
gemma-4-26b-a4b-itGEMMA_OPEN_MODEL | beide Aufgaben bestanden | bestanden · Orakel 6/6 Antwort 6.852 ms · geprüft 7.526 ms | bestanden gültiger Aufruf 1.020 ms | 785 ms |
gemini-3.5-flashTEXT_GENERATION | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | PROVIDER_ERROR · HTTP 503 | bestanden gültiger Aufruf 6.758 ms | nicht ausgegeben |
gemini-3.7-flashTEXT_GENERATION | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | PROVIDER_ERROR · HTTP 503 | PROVIDER_ERROR · HTTP 503 | nicht ausgegeben |
gemini-3.8-flashTEXT_GENERATION | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | PROVIDER_ERROR · HTTP 503 | PROVIDER_ERROR · HTTP 503 | nicht ausgegeben |
gemini-flash-latestTEXT_GENERATION | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | PROVIDER_ERROR · HTTP 503 | bestanden gültiger Aufruf 11.534 ms | nicht ausgegeben |
gemma-4-31b-itGEMMA_OPEN_MODEL | nicht auswertbar (Zeitüberschreitung oder Anbieterfehler) | PROVIDER_ERROR · HTTP 500 | PROVIDER_ERROR · HTTP 500 | nicht ausgegeben |
gemini-3.1-pro-previewTEXT_GENERATION | Kontingent dieses Projekts erschöpft (429 auch nach Wiederholung) | RATE_LIMITED · HTTP 429 | RATE_LIMITED · HTTP 429 | nicht ausgegeben |
gemini-3.1-pro-preview-customtoolsTEXT_GENERATION | Kontingent dieses Projekts erschöpft (429 auch nach Wiederholung) | RATE_LIMITED · HTTP 429 | RATE_LIMITED · HTTP 429 | nicht ausgegeben |
gemini-omni-1.1-flashMULTIMODAL_TEXT | Kontingent dieses Projekts erschöpft (429 auch nach Wiederholung) | RATE_LIMITED · HTTP 429 | RATE_LIMITED · HTTP 429 | nicht ausgegeben |
gemini-omni-flash-previewMULTIMODAL_TEXT | Kontingent dieses Projekts erschöpft (429 auch nach Wiederholung) | RATE_LIMITED · HTTP 429 | RATE_LIMITED · HTTP 429 | nicht ausgegeben |
gemini-pro-latestTEXT_GENERATION | Kontingent dieses Projekts erschöpft (429 auch nach Wiederholung) | RATE_LIMITED · HTTP 429 | RATE_LIMITED · HTTP 429 | nicht ausgegeben |
gemini-2.5-proTEXT_GENERATION | mit diesem Schlüssel nicht aufrufbar | NOT_FOUND_OR_NOT_ENABLED · HTTP 404 | nicht gesendet | nicht ausgegeben |
gemini-2.5-flash-preview-tts · NOT_APPLICABLE_FOR_GENERAL_CODING: speech recognition or synthesisgemini-2.5-pro-preview-tts · NOT_APPLICABLE_FOR_GENERAL_CODING: speech recognition or synthesisgemini-2.5-flash-image · NOT_APPLICABLE_FOR_GENERAL_CODING: image generationgemini-3-pro-image-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: image generationgemini-3-pro-image · NOT_APPLICABLE_FOR_GENERAL_CODING: image generationnano-banana-pro-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: image generationgemini-3.1-flash-image-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: image generationgemini-3.1-flash-image · NOT_APPLICABLE_FOR_GENERAL_CODING: image generationgemini-3.1-flash-lite-image · NOT_APPLICABLE_FOR_GENERAL_CODING: image generationgemini-3.5-transcribe · NOT_APPLICABLE_FOR_GENERAL_CODING: speech recognition or synthesislyria-3-clip-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: music generationlyria-3-pro-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: music generationlyria-3.5 · NOT_APPLICABLE_FOR_GENERAL_CODING: music generationgemini-3.1-flash-tts-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: speech recognition or synthesisgemini-robotics-er-2-preview · separate category: agent product or agent-specific model (computer use, robotics, deep research, IDE agent)gemini-2.5-computer-use-preview-10-2025 · separate category: agent product or agent-specific model (computer use, robotics, deep research, IDE agent)antigravity-preview-05-2026 · separate category: agent product or agent-specific model (computer use, robotics, deep research, IDE agent)antigravity-preview-09-2026 · separate category: agent product or agent-specific model (computer use, robotics, deep research, IDE agent)deep-research-max-preview-04-2026 · separate category: agent product or agent-specific model (computer use, robotics, deep research, IDE agent)deep-research-preview-04-2026 · separate category: agent product or agent-specific model (computer use, robotics, deep research, IDE agent)deep-research-pro-preview-12-2025 · separate category: agent product or agent-specific model (computer use, robotics, deep research, IDE agent)gemini-embedding-001 · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelgemini-embedding-2-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelgemini-embedding-2 · NOT_APPLICABLE_FOR_GENERAL_CODING: embedding modelaqa · separate category: agent product or agent-specific model (computer use, robotics, deep research, IDE agent)veo-3.1-generate-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: video / world generationveo-3.1-fast-generate-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: video / world generationveo-3.1-lite-generate-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: video / world generationgemini-3.5-transcribe-live · NOT_APPLICABLE_FOR_GENERAL_CODING: live bidirectional session modelgemini-2.5-flash-native-audio-latest · NOT_APPLICABLE_FOR_GENERAL_CODING: live bidirectional session modelgemini-2.5-flash-native-audio-preview-09-2025 · NOT_APPLICABLE_FOR_GENERAL_CODING: live bidirectional session modelgemini-2.5-flash-native-audio-preview-12-2025 · NOT_APPLICABLE_FOR_GENERAL_CODING: live bidirectional session modelgemini-3.1-flash-live-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: live bidirectional session modelgemini-robotics-er-2-streaming-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: live bidirectional session modelgemini-3.5-live-translate-preview · NOT_APPLICABLE_FOR_GENERAL_CODING: live bidirectional session modellyria-realtime-exp · NOT_APPLICABLE_FOR_GENERAL_CODING: music generationWas gemessen wird
Codingqualität, erste sichtbare Text- oder Reasoning-Ausgabe, Toollatenz, Queuezeit und verifiziertes Endergebnis werden nicht zu einer erfundenen Gesamtzahl vermischt.
Wie verglichen wird
Kleine Screeningwelle zuerst. Nur zulässige Kandidaten gehen in Budgetwellen mit denselben fortsetzbaren Aufgaben. Provider, Modell und Fehlermeldung bleiben sichtbar.
Was nicht behauptet wird
Kein versteckter Fallback, keine Keyrotation und keine Rangliste ohne Run-Daten. Nicht-Coding-Modalitäten erscheinen getrennt statt als Codingvergleich.
Zur Download- und Releasegrenze →