Penggunaan kecerdasan buatan (AI) generatif telah meledak popularitasnya sejak ChatGPT diluncurkan pada November 2022, tetapi efisiensi teknologi tersebut kini dipertanyakan karena uji coba pemerintah menemukan AI berpotensi menciptakan lebih banyak pekerjaan bagi manusia.
Dengan perusahaan-perusahaan di seluruh dunia yang berusaha keras untuk menggunakan AI agar tetap menjadi yang terdepan, teknologi ini telah menjadi topik utama di dunia korporat. Mulai dari kekhawatiran tentang pengambilalihan pekerjaan oleh AI hingga penggunaannya yang semakin umum secara umum (ChatGPT telah mencapai 200 juta pengguna mingguan), uji coba tersebut bertujuan untuk melihat bagaimana alat tersebut benar-benar bekerja di lingkungan tempat kerja dan dengan tugas-tugas yang terkait dengan bisnis.
Amazon dan regulator perusahaan Australia, Komisi Sekuritas dan Investasi (ASIC), menjalankan uji coba tersebut pada awal tahun ini dan hasilnya telah dibagikan dalam rapat panitia seleksi.
Pengujian tersebut mencakup penggunaan model AI generatif dari Meta, Llama2-70B sumber terbuka. Teknologi tersebut diminta untuk meringkas kiriman dengan fokus pada penyebutan ASIC, rekomendasi, dan referensi terhadap regulasi.
Alat tersebut juga diminta untuk menyertakan konteks dan referensi halaman. Anggota staf dari badan regulasi, yang berjumlah total 10 orang, kemudian diberi tugas yang sama dengan perintah yang serupa.
Tanggapan dari baik karyawan AI maupun manusia kemudian dinilai secara membabi buta oleh sekelompok pengulas yang mencari koherensi, panjang, referensi ASIC, referensi regulasi, dan untuk mengidentifikasi rekomendasi. Pada saat itu, para pengulas tidak menyadari bahwa AI terlibat.
Hasil uji coba pemerintah Australia yang mengadu AI dengan karyawan manusia
Ringkasan manusia mengalahkan ringkasan AI dalam setiap kriteria, memberi mereka skor 81% dibandingkan 47% yang diberikan teknologi.
AI khususnya kurang berhasil dalam menemukan referensi ke ASIC dalam dokumen pengajuan. Di bagian hasil dalam laporan uji coba, tim yang melakukan eksperimen mengatakan: “Menemukan referensi dalam dokumen yang lebih besar merupakan tugas yang sangat sulit bagi LLM karena keterbatasan jendela konteks dan strategi penyematan.
“Referensi halaman tidak disimpan secara tradisional dalam model penyematan karena konten dokumen PDF diserap sebagai teks biasa. Untuk mencapai akurasi yang lebih baik dengan masalah ini, kemajuan substansial telah dibuat dengan membagi dokumen menjadi beberapa halaman dan memperlakukan halaman sebagai potongan dengan metadata terkait.”
Beberapa dari Respon AI juga dideskripsikan sebagai “tidak jelas” dan “bertele-tele,” dengan kurangnya format dan kurang memuaskan dalam mengikuti permintaan yang diminta.
Para peninjau harus “merujuk kembali ke materi sumber untuk mengonfirmasi rincian ringkasan AI,” dan “para penilai secara umum sepakat bahwa keluaran AI berpotensi menciptakan lebih banyak pekerjaan jika digunakan (dalam kondisi saat ini), karena kebutuhan untuk memeriksa fakta keluaran, atau karena materi sumber menyajikan informasi dengan lebih baik.”
Gambar Pilihan: Via Ideogram
Pos AI justru dapat menambah pekerjaan manusia, bukan menguranginya – sebuah studi muncul pertama kali di BacaTulis.
Mohon maaf, Foto memang tidak relevan. Jika keberatan atau harus diedit baik Artikel maupun foto Silahkan Klik Laporkan. Terima Kasih
