AI lulus ujian pengacara, model perusahaan teknologi hukum mendapat 70% jawaban benar = Korea

Sekretaris hukum dengan kecerdasan buatan (AI) yang dikembangkan sendiri oleh perusahaan teknologi hukum Law & Company, "Super Lawyer", meraih tingkat jawaban benar sebesar 74% dalam ujian pilihan ganda pada Ujian Pengacara Republik Korea ke-14.
Dan diumumkan bahwa saya lulus. Rekor tertinggi perusahaan sebelumnya adalah 53,3% pada tahun 2023, tetapi kali ini jauh melampaui itu. Dari total 150 pertanyaan, 111 dijawab dengan benar. ini
Angka ini melebihi jumlah rata-rata jawaban benar (103) yang diberikan oleh kandidat yang berhasil dalam ujian pilihan ganda Ujian Advokat selama lima tahun terakhir. Hasil ini dipublikasikan oleh OpenAI dalam sebuah studi AS berjudul "GPT-4.5 Claude
Ini melampaui tingkat akurasi model AI terkini, termasuk "3.7 Sonnet." "GPT-4.5 Claude 3.7
Ketika pertanyaan tes yang sama dimasukkan ke dalam "Soneta" dan dievaluasi, tingkat jawaban yang benar hanya 49,3%.
Super Lawyer adalah layanan sekretaris hukum AI generatif yang mulai ditawarkan perusahaan kepada pengacara pada bulan Juli 2024. Menggunakan model bahasa skala besar (LLM)
Ia menggunakan sistem yang menggunakan arsitektur yang dikembangkan oleh Law & Company. Berisi sejumlah besar data hukum, termasuk 4,95 juta preseden dan data hukum yang dimiliki perusahaan. Baru-baru ini,
Saya mempelajari sekitar 600 buku hukum yang diterbitkan oleh Hakueisha, penerbit buku-buku hukum.