Posso ChatGPT accedere all'esame di avvocato?

ChatGPT e l'esame di avvocato

L'esame da avvocato è una prova rigorosa che valuta la conoscenza e la capacità di ragionamento attraverso saggi, test di performance e domande a scelta multipla. È un test standardizzato utilizzato da molte giurisdizioni degli Stati Uniti come parte del loro processo di ammissione all'avvocatura. Consiste in tre parti che valutano la conoscenza di principi di common law, la capacità di applicare principi legali a specifici casi di fatto e la capacità di completare compiti legali.

Questo esame è progettato per consentire agli avvocati di essere autorizzati in più stati senza dover rifare l'esame di abilitazione per ogni stato. Il punteggio di superamento è stabilito da ciascuna giurisdizione e i punteggi degli esami possono essere trasferiti alle giurisdizioni di altri stati, nel rispetto delle regole e dei requisiti di ciascuna giurisdizione.

GPT-3.5 e GPT-4, i modelli di linguaggio di grandi dimensioni di OpenAI su cui è basato ChatGPT, hanno la capacità di realizzare compiti difficili che richiedono una vasta conoscenza legale, comprensione della lettura e competenza nella scrittura, fino al punto in cui possono raggiungere lo standard degli avvocati umani in quasi tutte le giurisdizioni degli Stati Uniti. La National Conference of Bar Examiners, che ha creato la sezione a risposta multipla, ha notato che gli avvocati possiedono abilità uniche che si acquisiscono attraverso la formazione e la pratica, che attualmente l'intelligenza artificiale non può eguagliare.

Come si è comportato ChatGPT nell'esame di avvocato?

All'inizio di quest'anno una ricerca condotta dai professori dell'Illinois Tech e del College di Giurisprudenza del Michigan, ChatGPT 3.5 è stato in grado di ottenere una percentuale di successo in due categorie dell'esame multistatale per l'avvocatura (MBE) e ha ottenuto risultati simili a quelli di test di esseri umani in un'altra categoria, dimostrando la sua comprensione generale del dominio legale. In un'altra ricerca condotta dai ricercatori di OpenAI stessi, ChatGPT ha ottenuto un buon punteggio all'esame di abilitazione professionale e si è posizionato nel percentile 90 in quella ricerca. Ha risposto correttamente a quasi il 76% delle domande a scelta multipla, rispetto al 50% precedente di ChatGPT, e ha superato del 7% la media dei rispondenti umani.

ChatGPT è stato in grado di generare risposte per saggi e test di performance in gran parte pertinenti e logicamente collegate. La soglia per superare l'esame d'accesso alla professione legale varia da uno stato all'altro e nello stato di New York è richiesto un punteggio di 266, che corrisponde approssimativamente al 50° percentile, per superarlo. I risultati di ChatGPT suggeriscono che le capacità dei grandi modelli del linguaggio si estendono a compiti complessi che richiedono significative conoscenze legali, comprensione e abilità di scrittura. Questi modelli raggiungono il livello di competenza richiesto per gli avvocati umani in quasi tutte le giurisdizioni degli Stati Uniti.

ChatGPT ha superato un esame da avvocato?

ChatGPT ha superato l'Esame Barunifo.

Che punteggio occorre ottenere per stare al top dell'esame di avvocato?

300 è approssimativamente il 90° percentile superiore mentre un punteggio di 330 è intorno all'1% superiore.