ASK+: Solusi Cerdas untuk AI di Tengah Ketidakpastian

Kamu pernah ngebayangin gimana rasanya kalau AI harus beraksi tanpa semua info yang dibutuhin? Nah, di dunia AI, ada yang namanya reinforcement learning, di mana agen AI harus bertindak meski cuma punya sebagian informasi. Ini bikin mereka butuh bantuan dari model bahasa kecil (SLM) yang punya kemampuan berpikir luas. Tapi, ngintegrasiin SLM ke dalam situasi ini ternyata nggak semudah itu.

Masalahnya, banyak pendekatan yang ada sekarang ini, khususnya yang berbasis ketidakpastian, sering gagal. Kenapa? Soalnya, mereka hampir nggak pernah bisa memberikan aksi independen yang berarti. Semua ini terjadi karena prompt yang digunakan terlalu sederhana dan nggak memberikan konteks yang cukup untuk berpikir secara mendalam. Jadi, ini lebih ke masalah konteks daripada masalah kapasitas.

Di sinilah ASK+ muncul sebagai solusi! ASK+ memberikan konteks yang lebih kaya untuk SLM, seperti peta yang sebagian terbuka, posisi yang sudah dikunjungi, dan sejarah aksi. Dengan cara ini, SLM bisa berfungsi sebagai konsultan yang lebih informatif dan bisa sesekali memperbaiki kebijakan yang ada. Ini bikin AI bisa lebih cerdas dan responsif terhadap situasi yang kompleks.

Satu hal yang menarik dari ASK+ adalah sinyal entropi prediktif yang digunain untuk memilih pertanyaan. Ini mengukur ketidakpastian aksi, bukan ketidakpastian keadaan. Jadi, meski dalam situasi yang nggak sepenuhnya terlihat, ASK+ tetap bisa memberikan bantuan yang berguna. Ini bikin pendekatan berbasis ketidakpastian jadi lebih viable.

Hasilnya? Di berbagai lingkungan uji, ASK+ menunjukkan hasil yang jauh lebih baik dibandingkan metode sebelumnya. Misalnya, di DoorKey, ASK+ berhasil meraih tingkat keberhasilan 93%, sementara metode lama cuma 89%. Di FourRooms, keberhasilannya melonjak dari 53% jadi 70%. Dan di HigherLower, akurasinya mencapai 73,7%, yang sama dengan batas atas SLM saja.

Jadi, bisa dibilang, desain prompt dan pemilihan gating yang tepat lebih berpengaruh daripada ukuran model itu sendiri. Dengan ASK+, kita bisa mendapatkan panduan yang lebih baik tanpa harus mengandalkan model yang besar. Ini adalah langkah besar untuk membuat AI lebih pintar dan adaptif di tengah ketidakpastian.