Jarvis AI dari Google Hampir Pasti Merupakan Agen AI Berbasis Web

Apa Itu Jarvis AI?

Satu-satunya hal yang kita ketahui tentang Jarvis AI adalah bahwa pada awal November lalu, sebuah ekstensi Chrome bernama Jarvis sempat dirilis untuk waktu singkat. Meski hanya muncul sebentar, deskripsi ekstensi di halaman toko menyebutnya sebagai "pendamping yang membantu menjelajah web untuk Anda." Deskripsi ini selaras dengan fungsi Jarvis sebagai AI agent yang dirancang untuk mengotomatisasi tugas berbasis web.

Dalam pidato keynote mereka awal tahun ini, Google memamerkan AI agent yang belum dirilis dengan kemampuan mengendalikan browser untuk melakukan beragam tugas. Saya berspekulasi bahwa Jarvis AI mungkin adalah produk nyata di balik presentasi tersebut.

Dalam presentasi mereka, mereka memberi contoh pengembalian sepatu. Dengan AI agent, yang perlu kita lakukan hanyalah menyatakan bahwa kita ingin mengembalikan sepatu tersebut, dan agen akan secara otonom melakukan semua langkahnya.

Terintegrasi dengan browser dan produk Google lainnya, seperti Gmail, agen dapat menyelesaikan proses pengembalian dengan mengikuti langkah-langkah berikut:

1. Menelusuri kotak masuk untuk menemukan struk.
2. Menemukan nomor pesanan di email.
3. Mengisi formulir pengembalian.
4. Menjadwalkan penjemputan.

Bagaimana Cara Kerja Jarvis AI?

Jarvis AI dapat mengotomatisasi tugas-tugas web sehari-hari bagi pengguna, seperti melakukan riset, berbelanja online, serta memesan penerbangan atau reservasi.

Jarvis kemungkinan memanfaatkan versi khusus dari keluarga model bahasa besar Gemini milik Google. Ini menunjukkan bahwa Jarvis menggunakan model "berpikir" atau penalaran, yang mendukung kemampuannya menangani tugas kompleks dan memberikan respons yang lebih personal. Selain itu, ia diperkirakan akan terintegrasi secara mendalam dengan layanan Google yang sudah ada seperti Gmail, Maps, dan Search.

Integrasi ini dapat meningkatkan kapabilitas Jarvis dengan menyediakan akses ke data pengguna dan menyederhanakan berbagai proses, seperti mengambil struk dari Gmail untuk pengembalian online atau menggunakan data lokasi dari Maps untuk perencanaan perjalanan.

Model Gemini bersifat multimodal dan dapat memproses berbagai jenis data (teks, gambar, video, audio, dll.), serta menemukan keterkaitan di antara jenis data tersebut. Kemungkinan agen akan memiliki akses ke konten browser, memungkinkannya melihat, menafsirkan, dan berinteraksi dengan elemen yang ditampilkan di layar.

Perlu dicatat bahwa informasi mengenai cara kerja internal dan ketergantungan pada teknologi tertentu ini bersifat spekulatif.

Jarvis AI vs. AI Agent Lainnya

Seperti yang telah saya sebutkan, saya yakin Jarvis dirancang untuk mengotomatisasi tugas-tugas web sehari-hari. Jarvis membedakan dirinya melalui integrasi yang erat dengan browser Google Chrome. Namun, Jarvis bukan satu-satunya di area ini.

Computer use dari Anthropic

Anthropic, perusahaan di balik Claude, juga membuat kemajuan dengan AI agent mereka sendiri yang dikenal sebagai computer use. Agen ini mampu berinteraksi dengan berbagai aplikasi di luar browser web. Agen Anthropic memasuki fase beta publik pada Oktober 2024, menunjukkan kemampuannya menggerakkan kursor, mengeklik tombol, dan mengetik teks, layaknya pengguna manusia.

Terlepas dari perbedaan tahap pengembangan dan cakupan operasinya, baik Jarvis maupun computer use dari Anthropic memiliki tujuan yang sama: mengotomatisasi tugas dengan meniru interaksi manusia dengan komputer. Keduanya kemungkinan bergantung pada mekanisme canggih untuk menangkap dan menafsirkan layar guna memahami konteks permintaan pengguna dan mengeksekusi tindakan yang sesuai.

Operator dari OpenAI

OpenAI akan memperkenalkan "Operator," sebuah AI agent otonom yang dirancang untuk melakukan tugas atas nama pengguna, seperti menulis kode dan memesan perjalanan. Menurut Bloomberg, Operator dijadwalkan untuk rilis pratinjau riset pada Januari 2025.

Sam Altman menjawab AMA di Reddit

Toolformer dari Meta

Meta AI Research memperkenalkan Toolformer, model bahasa yang mampu secara otonom menggunakan alat eksternal untuk meningkatkan performanya pada berbagai tugas. Dirinci dalam makalah “Toolformer: Language Models Can Teach Themselves to Use Tools,” model ini dilatih untuk menentukan API mana yang akan dipanggil, kapan memanggilnya, argumen apa yang harus diberikan, dan bagaimana mengintegrasikan hasilnya ke dalam prediksi token berikutnya.

Pendekatan swasupervisi ini hanya memerlukan beberapa contoh untuk setiap API, memungkinkan model menggunakan alat seperti kalkulator, sistem tanya jawab, mesin pencari, sistem penerjemahan, dan kalender secara efektif.

Tantangan AI Agent

Secara umum, AI agent menghadirkan berbagai tantangan dan pertimbangan, khususnya terkait privasi, akurasi, dan implikasi etis.

Kekhawatiran privasi

Meskipun terdengar menarik untuk mengotomatisasi tugas-tugas yang membosankan dan memakan waktu, kenyamanan ini datang dengan rasa tidak nyaman. Apakah saya ingin Google atau perusahaan lain memiliki akses penuh ke komputer saya? Ada sesuatu dari gagasan itu yang membuat saya sangat gelisah.

Kekhawatiran privasi sangat penting. Google perlu meyakinkan pengguna bahwa data mereka akan ditangani dengan aman dan bertanggung jawab. Mereka perlu menerapkan langkah-langkah keamanan yang kuat dan praktik penanganan data yang transparan untuk mengurangi potensi risiko kebocoran atau penyalahgunaan data. Menetapkan pedoman yang jelas tentang akses, penyimpanan, dan penggunaan data serta memberikan kontrol terperinci kepada pengguna atas preferensi berbagi data mereka akan krusial untuk membangun kepercayaan dan memastikan adopsi pengguna.

Akurasi dan keandalan

Apa yang terjadi ketika AI agent saya membuat kesalahan? Ketika chatbot AI membuat kesalahan, ia mungkin memberikan informasi yang tidak tepat, tetapi tidak ada tindakan yang dilakukan secara langsung. Jika saya meminta chatbot AI membantu merencanakan perjalanan, ia menawarkan rencana berbasis teks, tetapi saya tetap bertanggung jawab membuat reservasi, menangani pembayaran, dan sebagainya. Ada lapisan manusia untuk mencegah hasil yang tidak diinginkan. Namun, ketika AI agent mengambil tindakan di dunia nyata, tindakan tersebut dapat menimbulkan konsekuensi nyata yang tidak diinginkan.

Siapa yang bertanggung jawab ketika AI agent memesan penerbangan yang salah atau mengembalikan sepatu yang keliru? Saya membayangkan agen-agen ini akan meminta persetujuan pengguna sebelum mengambil setiap tindakan, tetapi saya tidak yakin apakah itu saja cukup untuk mencegah kesalahan dalam skenario yang lebih kompleks.

Perusahaan seperti Google harus memprioritaskan proses pengujian dan validasi yang ketat untuk meminimalkan ketidakakuratan ini. Menerapkan mekanisme pemeriksaan fakta, silang-referensi informasi, dan memberikan penafian yang jelas kepada pengguna tentang potensi kesalahan akan sangat penting.

Implikasi etis

Implikasi etis dari Jarvis dan AI agent secara umum melampaui privasi dan akurasi. Perusahaan juga harus mempertimbangkan dampak sosial yang lebih luas dari agen-agen ini, termasuk potensi pengurangan lapangan kerja dan terciptanya ketergantungan baru pada sistem AI.

Kesimpulan

Semua yang kami sampaikan tentang Jarvis AI bersifat spekulatif. Hingga dirilis, kita tidak akan tahu pasti apa yang dilakukannya. Namun, satu hal yang pasti: AI agent akan hadir, dan mereka mewakili langkah berikutnya dalam revolusi AI. 

Walaupun saya mengakui bahwa mengotomatisasi tugas sangat bermanfaat dan berpotensi menghemat banyak waktu, saya merasa tidak nyaman dengan gagasan memberikan kendali atas komputer saya kepada AI (atau siapa pun, dalam hal ini).

Dalam beberapa tahun terakhir, banyak diskusi tentang potensi bahaya AI. Saya percaya selama AI terbatas pada chatbot dan tidak dapat melakukan tindakan di dunia nyata, risikonya minimal. Ya, AI mungkin menginstruksikan seseorang untuk membuat sesuatu yang berbahaya, tetapi orang itu tetap harus bertindak. Jika seseorang benar-benar ingin mempelajarinya, mereka tetap bisa mendapatkan pengetahuan itu, dengan waktu yang cukup. Dengan AI agent, kita kehilangan lapisan perlindungan tersebut dan itu terdengar sangat berbahaya saat kita memberikan semakin banyak kapabilitas kepada agen-agen ini.

Saya merasa bahwa pergeseran menuju AI agent tidak terelakkan, tetapi harus didekati dengan sangat hati-hati.