Amazon SageMaker Clarify ora supporta la valutazione dei modelli di fondazione. Puoi valutare, confrontare e selezionare i migliori modelli di fondazione per il tuo caso d'uso specifico. Basta scegliere il modello che desideri valutare per una determinata attività, ad esempio la risposta alle domande o il riepilogo dei contenuti. Quindi seleziona i criteri di valutazione (ad esempio, accuratezza, equità e solidità) e carica il tuo set di dati pronto o scegli tra set di dati integrati e disponibili al pubblico. Per criteri soggettivi e contenuti delicati che richiedono un giudizio umano sofisticato, puoi decidere di sfruttare la tua forza lavoro o utilizzarne una gestita fornita da AWS per valutare le risposte. Una volta terminato il processo di configurazione, SageMaker Clarify esegue le valutazioni e genera un report, in modo da poter comprendere facilmente le prestazioni del modello in base ai criteri chiave. È possibile valutare i modelli di fondazione in SageMaker JumpStart utilizzando la procedura guidata di valutazione o qualsiasi modello di fondazione che non è ospitato su AWS utilizzando la libreria open source.