LLM-Evaluierungsingenieur AI Skill - Ingrid
Bewerte LLM-Apps: Golden Sets, LLM-as-Judge, RAG- und agent-Metriken sowie ein CI-Gate, das Regressionen verhindert.
Claude-Skill-Paket Sofort-Download
Skill plus 2.500+ weitere holen
$9/Monat oder $59 pro Jahr
Library holen · $9/MonatLibrary holenEs wird nichts abgebucht. 2 Tage vor dem Ende der Testphase kommt ein −30%-Code für deine erste Zahlung.
Brauchst du nur diese Datei (Skill)?
Eine Datei, einmal bezahlt. Keine Updates, kein Connector.
Kostet etwa so viel wie 2 Monate Library.
In deinem Plan enthalten
Frag deine KI einfach nach dem Namen oder wähle es in deinem Dashboard. Du musst die Datei nicht kaufen.
In deiner KI nutzenEinmal zahlen, für immer behaltenSofort-Download30 Tage Geld-zurück-Garantie
Bekannt ausProduct HuntFazierKittyLaunch
Sicherer Checkout über Stripe
Marken ihrer jeweiligen Inhaber. KissMySkills steht in keiner Verbindung zu ihnen und wird nicht von ihnen unterstützt.
So funktioniert's
Ask it something hard.
Oder jeden Skill direkt in deiner KI.
Fragen vor dem Kauf? Ein Mensch antwortet, meist am selben Tag: hello@kissmyskills.com
// die Datei selbst
Die ersten Zeilen der Datei, die deine KI lesen wird, genau so, wie sie geliefert wird. Nichts für die Seite umgeschrieben.
Du bist Ingrid, eine Senior-Ingenieurin für die Bewertung von LLMs. Du erstellst den Golden Set, kalibrierst einen LLM-as-a-Judge anhand menschlicher Bewertungen und berichtest eine Differenz mit einem Konfidenzintervall. Du wurdest aktiviert, um zu belegen, dass eine Änderung tatsächlich besser ist.
// was drin ist
Teams veröffentlichen prompt- und Modelländerungen ohne ausreichende Prüfung und benötigen vor dem Release ein echtes Evaluations-Gate.
// zwei Wege, es zu bekommen
$9/Monat jederzeit kündbar, oder $59 pro Jahr
$19 einmalige Zahlung
Schon bei Library oder Both? Dieser Artikel ist enthalten, du musst die Datei nicht kaufen.
// frag deinen Assistenten
Öffne kissmyskills.com/pages/connector und richte den Skill "LLM-Evaluierungsingenieur AI Skill - Ingrid" (handle: ingrid-llm-evaluation-engineer) für mich ein
Füge ihn in Claude, ChatGPT, Claude Code, Cursor oder Codex ein. Deine KI führt dich durch die Verbindung mit KissMySkills (etwa 3 Minuten, 7 Tage kostenlos testen) und lädt den Skill. Was deine KI lesen wird →
Füge Ingrid in Claude ein und erhalte eine Senior-LLM-Evaluierungsingenieurin, deren Regel einfach ist: Kein Release ohne Eval-Gate.
Ingrid evaluiert LLM-Anwendungen und agenten: Erstellung von Golden Datasets (Abdeckung, Sonderfälle, kein Datenleck, Versionierung), Auswahl von Metriken, LLM-as-judge (Entwurf von Bewertungsrubriken, paarweiser Vergleich vs. punktweise Bewertung, Bias- und Positionseffekte mit Gegenmaßnahmen, Kalibrierung anhand menschlicher Labels), RAG-Metriken (Faithfulness, Relevanz von Kontext und Antwort), Bewertung von agent-Trajektorien (Korrektheit von Tool-Aufrufen, Aufgabenerfüllung), Offline-Harnesses und CI-Regressions-Gates, Online-Evaluierung (A/B, Guardrail-Metriken, Stichprobenprüfung durch Menschen) sowie statistische Stringenz (Konfidenzintervalle, Signifikanz). Tools wie Ragas, promptfoo, DeepEval, LangSmith und Braintrust, ohne Lock-in. Bewerte immer anhand eines zurückgehaltenen Datensatzes, bevor du auslieferst.
Das bekommst du
So installierst du es
Lade das .skill-Paket herunter → öffne Claude → füge SKILL.md in deine Projektanweisungen oder deinen System-prompt ein → beschreibe deine Anforderungen → Ingrid erstellt die Antwort. Enthält ein vollständiges, durchgearbeitetes Beispiel, damit du genau siehst, was du bekommst.
Nach dem Kauf kommt der Download-Link per E-Mail. Speichere die .skill-Datei: Claude übernimmt sie so, wie sie ist.
Jeder KI-Chat, den du bereits nutzt: Claude, ChatGPT, Gemini, Grok, Copilot oder ein anderer.
Claude: unter Settings → Capabilities → Skills die .skill-Datei hochladen. ChatGPT, Gemini und andere: die .skill-Datei wie ein .zip-Archiv öffnen und SKILL.md in die benutzerdefinierten Anweisungen oder Projektanweisungen einfügen.
Deine KI ist jetzt als Spezialist konfiguriert. Frag sie alles innerhalb ihres Fachgebiets.
Keine technischen Kenntnisse erforderlich.
Mit Library gibt es nichts herunterzuladen. Verbinde deine KI einmal und bitte sie dann einfach: „Lade LLM-Evaluierungsingenieur AI Skill von KissMySkills.“
LLM-Apps evaluieren: Golden Sets, LLM-as-Judge, RAG- und agent-Metriken sowie ein CI-Gate, das Regressionen blockiert. Lade ihn einmal in Claude Projects und du erhältst einen konfigurierten LLM Evaluation Engineer, ohne den Kontext zu Beginn jeder Sitzung erneut erklären zu müssen. Erstelle einen Testdatensatz mit zurückgehaltenen Daten und evaluiere anhand dieses Datensatzes in einer Entwicklungs- oder Staging-Umgebung, füge Guardrails, Kosten- und Ratenlimits sowie eine menschliche Prüfung hinzu und führe alles erst nach Evals und Monitoring für den produktiven Einsatz von agents oder LLM-Features aus.
Lade das .skill-Paket herunter (es enthält SKILL.md), füge den Inhalt in die Anweisungen von Claude Projects oder in den System-Prompt deiner AI ein, ergänze deinen eigenen Kontext und starte deine erste Sitzung. Funktioniert mit Claude, ChatGPT oder jedem AI-Chat, der System-Prompts akzeptiert.
Funktioniert mit Claude (empfohlen), ChatGPT, Gemini, Perplexity und Copilot sowie jedem AI-Chat, der System-Prompts akzeptiert. Mit Claude Projects erhältst du die besten Ergebnisse.
Ein .skill-Paket, das nach dem Kauf sofort bereitgestellt wird: die vollständige SKILL.md-Rollenkonfiguration sowie eine Datei mit einem ausgearbeiteten Beispiel und einem realen Szenario, damit du die Qualität siehst, bevor du dich darauf verlässt. Kein Abonnement, dauerhaft dein Eigentum.
Dieser und 2.500+ weitere, direkt in Claude, ChatGPT, Claude Code, Codex oder Cursor. Jederzeit kündbar.