poles.id – Penelitian terbaru mengenai penggunaan kecerdasan buatan (AI) generatif dalam analisis hukum menyoroti pentingnya pelatihan pengguna untuk memaksimalkan produktivitas teknologi ini. Dalam studi yang melibatkan 164 mahasiswa hukum, peneliti melakukan eksperimen acak untuk mengevaluasi dampak pelatihan terhadap kinerja pengguna AI dalam menyelesaikan ujian spotting masalah.
Fokus Penelitian
Dalam penelitian ini, mahasiswa hukum dibagi ke dalam tiga kelompok berdasarkan akses mereka terhadap model bahasa besar (LLM). Grup pertama tidak diberikan akses sama sekali, grup kedua diberikan akses secara opsional, dan grup ketiga dijadwalkan untuk mendapatkan akses dengan intervensi pelatihan singkat. Hasil dari eksperimen ini menunjukkan bahwa pengguna yang tidak menjalani pelatihan ternyata mengalami penurunan kinerja. Mereka yang menggunakan LLM tanpa pelatihan menghasilkan jawaban yang lebih pendek, lebih banyak membuat kesalahan pernyataan kasus, dan memperoleh nilai yang sedikit lebih rendah.
Dampak Pelatihan Terhadap Penggunaan AI
Menariknya, ketika peserta dilatih, pola ini berubah drastis. Partisipan yang menerima pelatihan beradaptasi dengan LLM lebih baik dibandingkan dengan yang tidak dilatih, dengan tingkat adopsi mencapai 41%, sementara kelompok tanpa pelatihan hanya 26%. Selain itu, mereka yang dilatih mendapatkan nilai lebih tinggi rata-rata sebesar 0.27 poin, yang setara dengan satu tingkat nilai ujian. Dalam hal akurasi, peserta yang menjalani pelatihan juga lebih sukses dalam mengidentifikasi aturan yang relevan dengan konteks masalah yang dihadapi.
Analisis Stratifikasi Utama
Analisis lebih lanjut menunjukkan bahwa keberhasilan pelatihan lebih berfokus pada tingkat adopsi LLM, bukan semata-mata pada efektivitasnya. Dengan kata lain, peserta yang menjalani pelatihan cenderung merasa lebih nyaman dan percaya diri untuk menggunakan teknologi AI dalam pekerjaan mereka, meskipun tingkat efektivitas penggunaan LLM mungkin bervariasi. Ini menjadi sinyal bahwa untuk mencapai manfaat maksimal dari penggunaan teknologi AI generatif, tidak hanya diperlukan akses, tetapi juga investasi dalam pelatihan.
Respons Terhadap Penelitian
Temuan ini menggugah pemikiran di kalangan akademisi dan praktisi hukum mengenai batasan penggunaan teknologi terbaru. Banyak yang mempertanyakan apakah pemanfaatan AI harus difokuskan pada tenaga kerja dengan keterampilan yang lebih rendah, atau sebaliknya, justru semua kalangan perlu mendapat pelatihan untuk memaksimalkan potensi AI dalam pekerjaan mereka. Pendekatan ini mencerminkan kebutuhan untuk menciptakan lingkungan yang inklusif, di mana semua profesional dapat mengambil keuntungan dari teknologi yang ada.
Adopting AI in legal analysis has far-reaching implications, and this research highlights a crucial component: training. Ensuring that practitioners are equipped with the necessary skills to utilize these tools effectively may redefine productivity standards in the legal sector.
Kesimpulan
Penelitian ini menunjukkan bahwa pelatihan pengguna LLM adalah faktor kunci dalam meningkatkan produktivitas melalui penggunaan AI generatif. Hasil yang diperoleh menjadi dorongan bagi institusi pendidikan hukum dan perusahaan untuk mempertimbangkan kebijakan pelatihan yang lebih komprehensif untuk para profesional di bidang hukum. Investasi dalam pelatihan dan akses teknologi harus dipandang sebagai langkah penting untuk meraih keuntungan produktivitas dari teknologi canggih ini.