Pada November 2016, tiga rekan saya dan saya di IBM mengajukan permohonan paten berjudul "Real-Time Analysis of a Musical Performance Using Analytics" (dipublikasikan sebagai US 2018/0137425 A1). Skenarionya adalah konser rock: instrumen gitaris membawa sensor tertanam, kamera membaca wajah dan bahasa tubuh penonton, dan penggemar mengirimkan suka dan tidak suka dari ponsel mereka. Sebuah sistem menggabungkan semua ini secara real time menjadi satu penilaian tentang apakah penampilan berjalan baik, dan memberi tahu penampil selagi masih ada waktu untuk memperbaikinya. Dalam satu implementasi, LED di leher gitar menyala hijau untuk permainan yang benar, kuning saat tempo goyah, dan merah saat nada salah. Kami menyebut intinya "mesin analitik kecerdasan buatan" karena itulah kosakata yang kami miliki pada 2016.
Sepuluh tahun kemudian, saya merancang arsitektur data untuk sistem AI agentik di lingkungan produksi. Ketika membaca ulang paten itu, saya terkejut betapa dekat kesamaannya dengan anatomi agen AI: persepsi multimodal, agregasi konteks, inferensi yang berlandaskan memori episodik dan semantik, fungsi evaluasi, dan tindakan melalui manusia dalam lingkaran, semuanya di bawah batasan waktu nyata yang ketat. Kami tidak punya bahasanya, tetapi kami punya lingkarannya.
Spesifikasinya memiliki tujuh bagian. Persepsi bekerja dalam tiga modalitas: sensor pada instrumen melaporkan waktu, nada, intonasi, dan volume; kamera menangkap sinyal tidak disengaja dari penonton; dan jalur jaringan membawa umpan balik yang disengaja seperti penilaian dan komentar. Agregator umpan balik memberi tag, mengurutkan, dan memformat ulang masukan ini, yang saat ini disebut rekayasa konteks. Mesin analitik kemudian menyimpulkan karakteristik penampilan, berlandaskan repositori penampilan masa lalu yang diarsipkan dan basis pengetahuan yang memberi makna semantik pada umpan balik.
Pemetaannya tidak sempurna. Desainnya tepat dalam struktur agen, tetapi melewatkan masalah lain, dan celah-celah itu tetap mengajarkan pelajaran berguna bagi pembangun agen hari ini.
Sumber: Towards Data Science · Diringkas oleh HeadlinesBriefing