Bibliothek / Bausteine & Hilfsmittel
Bausteine & Hilfsmittel
LLMs an juristischen Dokumenten mit Google Sheets benchmarken
Bei manuellem Start oder per Webhook stellt er OpenRouter- und OpenAI-Modellen anhand von Drive-Dokumenten juristische Testfragen und speichert bewertete Ergebnisse in Google Sheets.
Was sie bewirkt
## Data format Our Tests Sheet contains the following columns: - ID: A unique identifier for each row - Test No.: The test that the LLM was given - AI Platform: The LLM that was given the test. - Relevant Source: The file name of the source document that was given to the LLM. - URL: The Google Drive URL where the file is stored. - Input: The input prompt that the LLM was given. - Output: The response that the LLM gave.
Die Schritte
- When clicking ‘Test workflow’
- Webhook
- Merge1
- Get Tests
- Is PDF?
- Structured Output Parser2
- Basic LLM Chain1
- Google Drive
- Extract from File
- Save Input/Output
- Execute Subworkflow
- OpenRouter Chat Model
- Keep Original Data
- Limit (for testing)
Insgesamt 15 Schritte.
Ähnliche Automatisierungen
KI-Agenten & AssistentenLLMs mit OpenRouter und Google Sheets vergleichen14 SchritteBausteine & HilfsmittelLLMs mit OpenRouter anhand juristischer Fragen bewerten12 SchritteKI-Agenten & AssistentenLLMs mit OpenAI und OpenRouter in Google Sheets vergleichen17 SchritteTexterstellung & Content-Generierungllms.txt-Dateien aus Screaming-Frog-Crawls mit OpenAI erzeugen16 Schritte