Local model vs. cloud modelsLokales Modell gegen Cloud-Modelle
A locally hosted open-weight model, the "lane", competes against cloud models on real tickets: the same brief, isolated clones, a blind review, hidden tests.Ein lokal betriebenes Open-Weight-Modell, die "Lane", tritt auf echten Tickets gegen Cloud-Modelle an: gleiches Briefing, isolierte Klone, blinder Review, versteckte Tests.
EditionsAusgaben
Pilot, October 2026Pilot, Oktober 2026
2 tasks (medium, hard)2 Aufgaben (mittel, schwer) · Lane (Qwen3.8-Flash-Next), Claude Haiku/Sonnet/Opus 5.5, GPT-6.1-Sol, GPT-6-Luna
Harness comparisonsHarness-Vergleiche
opencode 1.19 vs. 2, October 2026opencode 1.19 gegen 2, Oktober 2026
Same model, different agent harness: sandbox behaviour, micro benchmark, one real ticket replayed. Not an arena edition; the rules below do not apply.Gleiches Modell, anderer Agent-Harness: Sandbox-Verhalten, Mikro-Benchmark, ein echtes Ticket wiederholt. Keine Arena-Ausgabe; die Spielregeln unten gelten nicht. · Lane (Qwen3.8-Flash-Next), opencode 1.19.0 / 2.0.25
RulesSpielregeln
- The same brief and a separate, isolated clone for every participant
- A fresh reviewer per round who does not learn who wrote the solution
- Hidden tests, frozen before the first run
- Passed: the review returns
acceptoraccept_with_notes, at most 3 rounds
- Gleicher Brief und eigener, isolierter Klon für jeden Teilnehmer
- Frischer Reviewer pro Runde, der nicht erfährt, von wem die Lösung stammt
- Versteckte Tests, vor dem ersten Lauf eingefroren
- Bestanden: Der Review liefert
acceptoderaccept_with_notes, höchstens 3 Runden