Penilaian adalah yang membedakan profesional senior dari rekan junior mereka. Membangun penilaian membutuhkan ribuan jam belajar di tempat kerja, biasanya melalui keterlibatan yang membosankan namun formatif dengan pekerjaan rutin di bawah pengawasan terbimbing. Tetapi AI sudah mengubah cara belajar di tempat kerja bekerja. Di satu sisi, studi empiris menunjukkan bahwa ketika alat AI ditanamkan secara bijaksana ke dalam alur kerja pelatihan, pekerja yang kurang berpengalaman dapat meningkatkan kinerja independen mereka. Di sisi lain, eksperimen terbaru menunjukkan bahwa sementara AI berfungsi sebagai eksoskeleton sementara yang meningkatkan output langsung, keuntungan tersebut sering kali tidak bertahan setelah alat tersebut dihapus.
Dalam "Apakah Bantuan AI Meningkatkan atau Mengikis Keahlian? Bukti dari Eksperimen Lapangan Tiga Bulan dalam Penulisan Paten", yang diterbitkan oleh Biro Riset Ekonomi Nasional, kami menjelaskan eksperimen lapangan yang menangkap perubahan dalam produktivitas jangka pendek dan pembangunan keterampilan jangka panjang dari penggunaan AI dalam hukum kekayaan intelektual. Kami mengacak akses ke alat asisten penulisan paten AI Google Labs yang saat itu belum dirilis di antara 133 pengacara di sebelas firma hukum kekayaan intelektual. Dua pertiga pengacara di setiap firma (kelompok "perlakuan") diberikan akses awal ke alat tersebut, sementara sisanya (kelompok "kontrol") dicegah menggunakan alat tersebut hingga setelah studi.
Setelah 10 hari bantuan AI, kami mengirim semua pengacara paket bahan penemu untuk penemuan hipotetis dan meminta mereka untuk menulis paten. Kami melakukan hal yang sama setelah 90 hari. Akses alat AI meningkatkan skor penulisan sebesar 0,34 standar deviasi pada 10 hari, setara dengan kenaikan 10 poin dalam peringkat persentil di antara skor kelompok kontrol; pada 90 hari, peningkatan ini naik menjadi 0,38 SD, menyiratkan peningkatan 11 poin persentil. Kinerja yang lebih baik berasal dari frekuensi skor buruk yang lebih rendah dan frekuensi skor baik yang lebih tinggi, tanpa perubahan dalam frekuensi skor sangat baik. Pola ini sangat jelas bagi pengacara junior, yang peningkatannya diimbangi dengan penghematan waktu yang signifikan.
Tetapi pengacara paten juga meninjau pekerjaan satu sama lain untuk kesalahan kritis yang dapat membuat paten tidak dapat ditegakkan di pengadilan. Kami menambahkan tugas lain pada 90 hari yang mengharuskan subjek untuk menandai merah paten hipotetis yang ada yang mengandung banyak kesalahan. Tugas ini mencerminkan jenis penilaian profesional yang diharapkan dari pekerja yang lebih senior, menguji apakah bantuan AI meningkatkan atau mengikis keahlian yang lebih dalam.
Sumber: Google AI Blog · Diringkas oleh HeadlinesBriefing