Sfoglia categorie
Esplora
Fiverr Pro
Italiano
$
USD
Costruirò test di valutazione LLM e app AI red team per prompt injection
Muhammad A
Informazioni su questo servizio
Traduzione automatica.
Distribuire una funzione AI senza test di solito si risolve in due modi: si deteriora silenziosamente dopo una modifica al prompt, o un utente la induce a fare qualcosa che non dovrebbe. Io creo i test che catturano entrambi.
Sono uno sviluppatore con 3 anni di esperienza nella creazione di app AI. Testo chatbot, sistemi RAG e agenti basati su OpenAI, Claude, Gemini o modelli open.
Ciò che ottieni
- Un set di test costruito sui tuoi casi d'uso reali, con le risposte che ti aspetti
- Valutazione automatica di accuratezza, groundedness, tono e formato
- Test red-team per prompt injection, jailbreak, leak di prompt di sistema e leak di dati, mappati ai Top 10 OWASP per applicazioni LLM
- Un rapporto classificato per gravità, con passaggi per riprodurre e correzioni suggerite
- In Premium, test che vengono eseguiti nel tuo CI con promptfoo, Langfuse o Braintrust, così ogni modifica al prompt o al modello viene valutata
Testo su staging o una copia della tua app, mai contro utenti reali. Tu paghi i costi API, che stimo in anticipo.
Nessun suite di test può promettere un'app che non commette mai errori. Quello che ti dà è un numero da monitorare e una lista di cosa sistemare prima.
Inviami cosa fa la tua funzione AI, un modo per provarla e i fallimenti di cui sei più preoccupato.
Scopri di più su Muhammad A
Muhammad A
arehman
- DaPakistan
- Membro dagen 2024
- Ultima consegna5 mesi
Lingue
Inglese
I'm a software developer with 3+ years of experience, mostly designing and building large scalable software systems, AI apps and trading bots. That work taught me where things break once real users or real money are involved, so that's what I test for. Here I set up AI agents and local LLMs, build n8n, Make and Zapier automations, make chatbots, autonomous systems and voice agents that answer from your own content, fix apps built with Lovable, Bolt or Base44, and code trading bots in Pine Script, MQL5 and Python. You get the source code, documentation. Reach out and tell me what you need.
Traduzione automatica.
Altri servizi della categoria Sviluppo AI offerti da me
FAQ
Traduzione automatica.
Hai bisogno del mio codice sorgente?
Non per Basic; basta un URL di test o accesso API. Standard e Premium richiedono accesso al repo per aggiungere i test al tuo progetto.
Quali strumenti usi?
promptfoo, Langfuse, Braintrust o Ragas, a seconda del tuo stack. Se ne usi già uno, costruisco su quello.
Questo fermerà tutte le allucinazioni?
Nessun test può farlo. Misura quanto spesso accadono, mostra dove e verifica che ogni correzione sia effettivamente utile.
Chi paga le chiamate API che fanno i test?
Tu, con le tue chiavi. Stimo il costo prima di iniziare e mantengo i test piccoli.
Puoi testare agenti che usano strumenti?
Sì. Controllo che l'agente scelga lo strumento giusto, passi gli input corretti e rifiuti azioni pericolose. Agenti con molti strumenti sono adatti a Premium o all'extra agente.
Puoi risolvere i problemi che trovi?
Premium include correzioni ai prompt, impostazioni di retrieval e guardrail, più un retest. Su Basic e Standard, le correzioni si possono aggiungere tramite un'offerta personalizzata.
Terrò i miei dati privati?
Sì. Uso dati di test quando possibile, firmo un NDA se necessario e cancello le copie dei tuoi dati quando abbiamo finito.
