KI-News. Unternehmerisch, bayerisch, ohne Hype.
← Alle Episoden

Wenn Coding-Agenten die falschen Dateien lesen

29. Juli 2026 · 11 Min. · 1251 Wörter

Agent Retrieval BenchSol-AttnClaude CryptographyOneCLICountify

Transcript

Servus, ich bin Lissy. Heute geht es um eine ziemlich praktische Frage: Warum scheitern Coding-Agenten manchmal nicht am Code, sondern daran, dass sie im Repository die falschen Dateien finden? Dazu kommen schnellere Video-KI, KI als Kryptografie-Prüfer, ein Schlüssel-Tresor für Agenten und ein kleines Labor-Tool für Computer Vision.

Agent Retrieval Bench

Fangen wir mit Agent Retrieval Bench an. Das Paper schaut nicht darauf, ob ein Coding-Agent am Ende irgendwie einen Patch erzeugt. Es isoliert eine frühere Frage: Findet der Agent überhaupt die richtigen Dateien im Repository?

In einem großen Codeprojekt ist der eigentliche Trick oft nicht, drei Zeilen Code zu schreiben. Der Trick ist zu wissen, wo diese drei Zeilen hingehören. In welchem Modul liegt die Logik. Welche Tests hängen dran. Welche zweite Datei bricht, wenn du die erste anfasst.

Der Benchmark ist dafür ziemlich konkret. Er enthält 427 Samples aus 25 Repositories. Dahinter liegen 308 eingefrorene Base-Commit-Snapshots, 392.000 Dateien und sieben Komma neun Millionen Chunks. Also kein Spielzeug mit drei Python-Dateien.

Die Aufgaben heißen zum Beispiel code2test, comment2context, trace2code und edit2ripple. Übersetzt: Finde den Test zum Code. Finde den Kontext zu einem Kommentar. Folge einem Trace zurück zur richtigen Stelle. Erkenne, welche Dateien von einer Änderung mitbetroffen sind.

Das Spannende: Kein Retrieval-Ansatz gewinnt alles. Embeddings sind bei manchen Fragen stark. RepoMaps, also strukturierte Karten des Projekts, liefern in knappen Kontextbudgets bessere Treffer. Lexikalische Suche findet wieder andere Dinge. Der Agent braucht also mehrere Suchwerkzeuge und ein Gefühl dafür, wann er noch nicht genug weiß.

Für mich ist das der Satz des Tages: Ein schlechter Patch ist manchmal kein Schreibfehler, sondern ein Suchfehler. Der Agent wirkt dumm, obwohl das Modell vielleicht gar nicht das Hauptproblem ist. Er hat einfach die falsche Akte aus dem Schrank gezogen.

Wenn Coding Agents in einer Firma ständig danebenliegen, musst du nicht automatisch zum teuersten Modell wechseln. Vielleicht brauchst du bessere Repo-Indizes, klarere Seed-Kontexte, Dateiranking und Tests, die prüfen, ob der Agent die relevanten Dateien gesehen hat. Mei, das ist weniger sexy als ein Frontier-Modell. Aber genau solche Infrastruktur entscheidet, ob ein System im Alltag nervt oder hilft.

Sol-Attn

Das zweite Thema passt zum gleichen Muster: Sol-Attn beschleunigt Video-KI, ohne das Modell neu zu trainieren. Der Ansatz heißt On-the-Fly Attention Sparsification. Grob gesagt rechnet das Verfahren nicht mehr jeden Attention-Block vollständig aus, sondern entscheidet während des Softmax-Durchlaufs, welche Blöcke wichtig sind.

Warum ist das relevant? Video-Modelle erzeugen absurd viele Tokens. Ein Bild ist schon groß. Ein Video ist Bild, Bild, Bild, und dazu kommen Bewegung, Zeit und Bearbeitung. Attention wird teuer, weil jedes Stück Kontext mit vielen anderen Stücken verglichen wird.

Sol-Attn nutzt Block-Proxy-Scores, vergleicht sie während der Berechnung mit einem Schwellenwert und berechnet nur die wichtigen Key-Value-Blöcke vollständig. Nicht ausgewählte Blöcke werden angenähert. Das ist der clevere Teil, weil man Tempo gewinnt, ohne die Qualität einfach wegzuwerfen.

Die gemeldeten Zahlen sind ordentlich: 2,1-facher End-to-End-Speedup bei Videogenerierung und 2,3-facher Speedup bei Videoediting. Bei generativer Videoarbeit heißt doppelt so schnell: Du probierst mehr Varianten. Du wirfst schlechte Ideen früher weg.

Ich finde solche Effizienzarbeiten fast immer unterschätzt. Alle reden über neue Modelle, aber im Alltag gewinnt oft die Technik, die Wartezeit halbiert. Gerade bei Video-KI ist Geduld ein Produktfaktor.

Claude findet kryptografische Schwächen

Bei Anthropic gab es noch ein Forschungsstück, das ich nicht als Jubelmeldung erzählen will, aber als Signal spannend finde. Der Bericht heißt "Discovering cryptographic weaknesses with Claude". Anthropic beschreibt darin, dass Claude Mythos Preview Schwächen in kryptografischen Algorithmen finden konnte.

Wichtig: Das ist ein Anbieterbericht. Also ja, ein bisschen Salz dazu. Anthropic zeigt hier natürlich die starke Seite des eigenen Modells. Trotzdem ist das Thema relevant, weil Kryptografie kein Spielplatz ist. Kleine Denkfehler können echte Folgen haben.

Für mich ist die interessante Frage nicht: Kann Claude jetzt Kryptografen ersetzen? Nein. Die bessere Frage ist: Wird KI zu einem zusätzlichen Prüfwerkzeug für sehr formale, sehr genaue Arbeit? Also zu einem zweiten Blick, der andere Muster sieht als ein Mensch.

Das passt zu Security insgesamt. Modelle werden für echte Analyse eingesetzt: Schwachstellen suchen, Codepfade verfolgen, verdächtige Annahmen markieren. Der Vorteil ist klar. Gute Security-Leute sind knapp, und jedes Werkzeug, das ihnen Vorarbeit abnimmt, ist wertvoll.

Die Kehrseite gehört dazu. Wenn ein Modell Verteidigern hilft, kryptografische Schwächen zu finden, dann bleibt diese Fähigkeit nicht automatisch brav. Bessere Analysewerkzeuge wandern irgendwann auch in weniger nette Hände. Capability-Fortschritt in Security macht Schutzwerkzeuge besser und erhöht gleichzeitig den Druck, Systeme robuster zu bauen.

OneCLI

Damit sind wir beim praktischsten kleinen Tool des Tages: OneCLI. Das Projekt beschreibt sich als Open-Source Credential Gateway mit eingebautem Vault. Die Idee ist simpel: KI-Agenten sollen auf Services zugreifen können, ohne dass API-Keys direkt im Agentenkontext landen.

Wenn du schon einmal einen Agenten mit echten Tools verbunden hast, kennst du diese innere Alarmglocke. Irgendwo müssen Tokens, Passwörter oder Schlüssel liegen. Und ein Agent, der Dateien lesen, Shell-Befehle ausführen oder Prompts an andere Systeme schicken kann, ist nicht der Ort, an dem man Geheimnisse gemütlich herumliegen lässt.

OneCLI macht daraus ein Infrastrukturproblem. Der Agent bekommt nicht den Schlüssel selbst, sondern geht über ein Gateway. Das ist ein bisschen wie ein Passwortmanager für Agenten. Nicht perfekt, aber eine viel gesündere Grundidee als "kopier den Key halt in die Tool-Konfiguration".

Laut Research hatte der Hacker-News-Launch 110 Punkte, und das GitHub-Repo lag beim Check bei 2.919 Sternen. Sterne beweisen keine Wahrheit. Aber sie zeigen, dass viele Builder genau diesen Schmerz kennen.

Der Punkt geht über OneCLI hinaus. Wenn Agenten in echte Workflows kommen, brauchen sie Grenzen, Rollen und Schlüsselverwaltung. Sonst bauen wir lauter kleine Praktikanten mit Generalschlüssel. Das kann eine Weile gutgehen. Bis einer aus Versehen die falsche Tür öffnet.

Countify

Zum Schluss noch ein kleiner Grassroots-Hit: Countify. Das ist ein No-Code-Computer-Vision-Tool für Labore. Der Hacker-News-Titel positioniert es als kollaboratives Werkzeug, mit dem Laborteams Zähl- und Auswertungsaufgaben über Computer Vision erledigen können.

Die Datenlage ist dünn, deshalb mache ich daraus kein großes Segment. Beim Check hatte der Launch nur 2 Hacker-News-Punkte, und belastbare Leistungszahlen fehlen. Aber als Richtung ist es schön. Ein Laborproblem ist selten: "Schreib mir einen netten Absatz." Es ist eher: "Zähl diese Zellen zuverlässig, mach es reproduzierbar, und lass mehrere Leute daran arbeiten."

Da merkt man, warum KI für Domänenarbeit so stark werden kann. Ein Modell muss nicht alles wissen. Entscheidend ist, dass jemand den Arbeitsablauf gut genug kennt, um es an die richtige Stelle zu setzen. Viele Aufgaben sind visuell, wiederholbar und trotzdem mühsam. Wenn ein No-Code-Werkzeug Fachleuten solche Arbeit ohne eigene Modellpipeline ermöglicht, ist das kein Hype. Das ist Werkzeugbau.

Und damit schließt sich der Kreis zur ersten Meldung. Gute KI im Alltag heißt: richtiger Kontext, kürzere Wartezeit, sichere Zugriffe und genug Domänenwissen, damit das Werkzeug wirklich in den Arbeitsfluss passt.

Was bleibt heute übrig? Für mich ist es diese ganz nüchterne Erkenntnis: KI wird nicht automatisch besser, nur weil das Modell größer wird. Sie wird besser, wenn der Kontext stimmt, wenn die Rechnung schneller wird, wenn Schlüssel sauber verwaltet werden und wenn Fachleute Werkzeuge bekommen, die zu ihrer Arbeit passen. Das ist vielleicht weniger glänzend als die nächste Modellankündigung. Aber es ist der Unterschied zwischen Demo und Alltag. Wenn euch die Folge geholfen hat, schreibt mir gern eine Mail, die Adresse steht in den Shownotes. Oder hinterlasst eine Bewertung auf Spotify oder Apple Podcasts. Morgen schauen wir weiter, was aus dem KI-Chaos wirklich brauchbar wird. Pfiat euch.