Pwede bang pumasa ang ChatGPT sa Bar Exam?

ChatGPT at ang Bar Exam

Ang bar exam ay isang pagsusulit na mahigpit na sumusuri ng kaalaman at kakayahan sa pamamagitan ng mga sanaysay, mga performance test, at mga multiple-choice na katanungan. Ito ay isang standardisadong pagsusulit na ginagamit ng maraming hurisdiksyon sa Estados Unidos bilang bahagi ng proseso ng pagtanggap sa bar. Ito ay binubuo ng tatlong bahagi na nagtatasa ng kaalaman ng isang kandidato sa mga pangkalahatang simulain ng batas, kakayahan na mag-aplay ng legal na simulain sa partikular na mga halimbawa, at kakayahan na matapos ang mga legal na gawain.

Ang pagsusulit na ito ay dinisenyo upang payagan ang mga abogado na mabigyan ng lisensya sa iba't ibang mga estado nang hindi kailangang kumuha muli ng bar exam para sa bawat estado. Ang kailangang score para makapasa ay itinatakda ng bawat hurisdiksyon, at ang mga score ng pagsusulit ay maaaring ilipat sa iba pang hurisdiksyon ng mga estado, ayon sa mga patakaran at kahilingan ng bawat hurisdiksyon.

GPT-3.5 at GPT-4, ang mga malalakinong modelo sa wika ng OpenAI na ginamit sa pagtatayo ng ChatGPT, ay may kakayahang magawa ang mga mahihirap na gawain na nangangailangan ng malawak na kaalaman sa batas, pag-unawa sa binabasa, at husay sa pagsusulat, hanggang sa puntong maaaring matugunan nila ang pamantayan ng mga tao na mga abogado sa halos lahat ng mga hurisdiksyon sa Estados Unidos. Ang National Conference of Bar Examiners, na lumikha ng seksyon ng maraming pagpipilian, ay nagpuna na ang mga abogado ay may mga natatanging kakayahan na natutuhan sa paaralan at sa praktis, na hindi pa kayang pantayan ng artificial intelligence sa kasalukuyan.

Paano nagperform ang ChatGPT sa Bar Exam?

Noong maagang bahagi ng taon, ginawa ng mga propesor mula sa Illinois Tech at Michigan State College of Law ang isang pananaliksik. Nagawa ng ChatGPT 3.5 ang makakuha ng isang pumapasa na porsyento sa dalawang kategorya ng multistate bar exam (MBE) at kapareho rin ang pagganap nito sa mga tao sa isa pang kategorya, na nagpapakita ng pangkalahatang pagkaunawa nito sa larangang legal. Sa isa pang pananaliksik na ginawa ng mga mananaliksik mismo ng OpenAI, nagpakita ng magandang pagganap si ChatGPT sa bar exam at umiskor sa ika-90 percentile sa pananaliksik na iyon. Nakakuha ito ng halos 76% ng tamang mga tanong sa multiple-choice, na tumaas mula sa 50% ng ChatGPT, at lumampas sa pangkaraniwang tao na nagnanais na pumasa ng higit sa 7%.

Ang ChatGPT ay kaya ng lumikha ng mga sagot sa pagsusulit sa pagkakaugnay at malapit sa punto. Ang pamantayan para sa pumasa sa bar exam ay nag-iiba-iba mula estado hanggang estado, at sa New York, ang minimum na score na kinakailangan para sa pagsusulit ay 266, na katumbas ng ika-50 percentile. Ang mga resulta ng ChatGPT ay nagpapahiwatig na ang kakayahan ng malalaking modelo ng wika ay umaabot sa mga kumplikadong gawain na nangangailangan ng malalim na kaalaman sa batas, pagkaunawa, at kahusayan sa pagsusulat. Ang mga modelo na ito ay tumutugma sa pamantayan na ipinapataw sa mga abogado sa halos lahat ng hurisdiksyon sa US.

Passado ba ng ChatGPT ang bar exam?

Pumasa ang ChatGPT sa Uniform Bar Examination.

Ano ang pinakamataas na score sa bar exam ng top 1%?

Ang 300 ay halos nasa ika-90 na percentile habang isang score na 330 ay nasa ika-1 na percentile.