Artikel für Leute, die
den Stack ausliefern
Beiträge zu React, Node.js, TypeScript und AI. Ein übersetzter Text wird gezeigt, wenn er existiert. Sonst sehen Sie den englischen Text und einen Hinweis.
Tag: Benchmarking
RAG oder Wissensgraphen? 2.160 bewertete Antworten und der Einfluss des Modells
RAG gegen Wissensgraph, gemessen an: 2.160 bewerteten Antworten aus drei Modellfamilien und 120 Fragen. Der Gewinner wechselt je nach Modell, und das Modell ist am wichtigsten.
9 Min. LesezeitWie viele Anfragen kann ein Node.js-Server wirklich verarbeiten?
Wie viele Anfragen kann ein Node.js-Server wirklich verarbeiten? Express-Lasttests auf Heroku und AWS im Vergleich zu Django, eine Schätzung der Kapazität von 40.000 Anfragen pro Sekunde sowie Faktoren, die APIs verlangsamen.
6 Min. LesezeitToolCallingAgent gegen CodeAgent bei lokalen Qwen2.5-14B-Modellen
ToolCallingAgent gegen CodeAgent in smolagents auf einem M4-Mac: Geschwindigkeit und Routinggenauigkeit mit lokalen Qwen2.5 14B-Instruct- und Coder-Modellen bei verschiedenen Temperaturen.
4 Min. LesezeitWenn ein Modell nie fertig wird: stille Ausfälle, die Halluzinationswerte verschweigen
Zwei Checkpoints, zwei Quantisierungen und zwei Runtimes, getestet an erfundenen Namen: Ein Modell schweigt minutenlang, und ein sorgfältiger Grader zeigt, was Scores übersehen.
11 Min. LesezeitLohnt sich ein größeres LoRA? Genauigkeit gegen Kosten messen statt nach Gefühl
Ein kleines Test-Harness, das LoRA-Rezepte als Daten behandelt und Genauigkeit, Trainingszeit, Latenz und Speicher ausgibt, damit Entscheidungen über Rang und Iterationen auf Zahlen beruhen.
5 Min. LesezeitPraktische Hinweise: MTG Bench – Warum das Testen von LLMs auf Magic: The Gathering sinnvoll ist
Schritt-für-Schritt-Anleitung zu den Praktischen Hinweisen: MTG-Bench – Warum das Testen von LLMs in Magic: The Gathering sinnvoll ist, sowie Verträge, Überprüfungen und Code-Blöcke für Teams, die dieses Muster einsetzen.
11 Min. LesezeitNode.js gegen Go für eine JSON-API: Derselbe Durchsatz, 2,6-mal weniger Speicher
Ein side-by-side-Lasttest identischer Node.js- und Go-HTTP-Dienste zeigt, wo eine Umschreibung Vorteile bringt (Resident-Memory-Verbrauch) und wo nicht (Durchsatz sowie Latenz).
8 Min. LesezeitFugu Ultra: Wie ein KI-Orchestrationsmodell GPT und Claude in Frage stellt
Erklärt, wie Sakana AI’s Fugu Ultra v2 Aufgaben über spezialisierte Modelle statt über ein einziges großes LLM verteilt, und wie es sich in Bezug auf Benchmarks, Preise und Transparenz schneidet.
10 Min. Lesezeit
Über diese Artikel
Angebot in 24 Stunden
Denselben Stack in einer Operator-Schicht? Brief schicken — Angebot in 24 Stunden.