Qualità

Come testiamo i risultati

Cosa controlliamo prima di mostrare un risultato e dopo ogni esecuzione, così come lo fa oggi il nostro codice. I numeri di questa pagina vengono letti dai nostri dati di test al caricamento.

Risultati di esempio, controllati due volte

Molte pagine degli strumenti offrono un «Risultato di esempio»: l’output reale del prompt dello strumento per un input di esempio, generato una volta e salvato. Prima di essere pubblicato supera due controlli.

  • Un controllo automatico scarta gli output troppo brevi, che rifiutano o chiedono altri dati, nella lingua sbagliata, che sembrano troncati, che rivelano il prompt o che lasciano segnaposto del modello.
  • Poi un revisore IA valuta il resto per utilità, lingua, completezza e sicurezza, e i punteggi bassi vengono scartati.

Sono pubblicati 4169 risultati di esempio in 18 lingue. Negli ultimi controlli sono stati valutati 3795 nuovi output e 568 sono stati scartati.

Controllato dopo ogni esecuzione

  • Quando uno strumento di scrittura risponde, un controllo fisso senza una seconda chiamata all’IA rimuove le frasi di riempimento dell’assistente come “Certainly! Here is your post:” e i saluti finali, e registra ognuno dei 15 cliché dell’IA elencati rimasti in un testo inglese.
  • Gli strumenti di scrittura con l’interruttore «Verifica i fatti con le fonti» cercano il tuo argomento sul web una volta, citano ciò che usano come [1], [2] ed elencano le fonti alla fine. Un’affermazione senza fonte viene segnata come «(non verificato)» e nessun link può essere inventato.

Il modello giusto per ogni strumento

Conductor invia ogni strumento a una di 6 famiglie di modelli (Claude, GPT, Gemini, Cerebras, Grok, Mistral) e passa a un’altra quando un fornitore non risponde. Ogni risultato indica la famiglia che lo ha scritto.

Ogni modifica viene testata prima del rilascio

Una modifica arriva sul sito solo tramite una pull request che supera un controllo automatico: verifiche del codice, test di contratto, copertura delle traduzioni in tutte le 18 lingue e una ricerca di segreti. Dopo ogni rilascio, suite di test nel browser girano sul sito in produzione.

Cosa i test non possono promettere

L’IA può ancora sbagliare. Verifica fatti, cifre e affermazioni legali, mediche o finanziarie prima di farci affidamento.