Valuterò e systemerò le allucinazioni del tuo chatbot rag e l'accuratezza del recupero


Informazioni su questo servizio
Traduzione automatica.
Scopri di più su Mahmoud Refaey
AI Engineer building RAG systems, LLM agents and Arabic NLP
- DaEgitto
- Membro danov 2024
Lingue
Arabo, Inglese
Traduzione automatica.
Il mio portfolio
FAQ
Traduzione automatica.
Hai bisogno di accesso al mio codice?
Per l'audit basta un endpoint API funzionante o accesso in lettura. Per fare le correzioni ho bisogno del codice, idealmente un repository privato Git a cui tu mi inviti. Non servono password di produzione.
Puoi promettere un numero di accuratezza specifico?
No, e starei attento con chiunque lo faccia. Dipende dai tuoi documenti e dalle domande. Quello che prometto sono punteggio onesto prima/dopo sullo stesso set di test, così puoi vedere esattamente cosa è migliorato.
Quali strumenti usi per la valutazione?
Per lo più DeepEval con un giudice LLM, oltre a controlli se i pezzi giusti sono stati recuperati. Se già usi RAGAS o il tuo setup, posso lavorarci su.
La lingua dei miei documenti influisce?
Il processo è lo stesso. La lingua riguarda principalmente OCR, suddivisione del testo e qualità della ricerca, e controllo questi aspetti specifici. Ho lavorato spesso con arabo e inglese. Dimmi la tua e dirò onestamente se è adatta.
E se la correzione reale è un'architettura diversa?
Allora il rapporto lo dice, con una stima approssimativa, prima che scriva qualsiasi codice. Decidi tu cosa succede dopo.
