Fitur beta baru Gemini memberikan respons proaktif berdasarkan foto, email, dan lainnya

Google mengumumkan pada hari Rabu bahwa mereka meluncurkan fitur beta baru di aplikasi Gemini yang memungkinkan asisten AI menyesuaikan responsnya dengan terhubung ke seluruh ekosistem Google Anda, dimulai dengan Gmail, Foto, Penelusuran, dan riwayat YouTube.

Meskipun Gemini sudah dapat mengambil informasi dari aplikasi ini, Gemini kini dapat mempertimbangkan seluruh data Anda untuk memberikan hasil yang proaktif, seperti menghubungkan rangkaian pesan di email Anda ke video yang Anda tonton. Google mengatakan ini berarti Gemini memahami konteks tanpa diberi tahu di mana mencarinya.

Raksasa teknologi ini mencatat bahwa pengalaman beta ini, yang disebut Personal Intelligence, dinonaktifkan secara default, karena pengguna memiliki opsi untuk memilih apakah dan kapan mereka ingin menghubungkan aplikasi Google mereka ke Gemini. Tentu saja, tidak semua orang ingin AI melihat foto dan riwayat YouTube mereka. Jika Anda memutuskan untuk menghubungkan aplikasi Anda, Gemini hanya akan menggunakan Kecerdasan Pribadi ketika dianggap bahwa hal itu akan membantu, kata Google.

“Kecerdasan Pribadi memiliki dua kekuatan inti: penalaran melalui sumber yang kompleks dan mengambil detail spesifik dari, misalnya, email atau foto untuk menjawab pertanyaan Anda,” tulis Josh Woodward, VP, aplikasi Gemini, Google Labs, dan AI Studio, dalam sebuah postingan blog. “Seringkali hal ini digabungkan, melalui teks, foto, dan video untuk memberikan jawaban yang dirancang secara unik.”

Woodward menceritakan contoh saat dirinya sedang mengantri di toko ban dan tidak ingat ukuran ban mobilnya. Meskipun sebagian besar chatbot AI dapat menentukan ukuran ban mobil, Woodward mengatakan Gemini dapat melangkah lebih jauh dengan menawarkan respons yang dipersonalisasi. Dalam kasusnya, Gemini menyarankan ban segala cuaca setelah mengidentifikasi foto perjalanan keluarga di Google Foto. Woodward juga mengaku lupa nomor platnya, namun Gemini berhasil mengambil nomor tersebut dari gambar di Foto.

“Saya juga mendapatkan tip bagus untuk buku, pertunjukan, pakaian, dan perjalanan,” tulis Woodward. “Baru minggu ini, perencanaan liburan musim semi yang akan datang merupakan hal yang luar biasa. Dengan menganalisis minat keluarga kami dan perjalanan sebelumnya di Gmail dan Foto, kami melewatkan jebakan turis. Sebaliknya, kami menyarankan perjalanan kereta semalaman dan permainan papan tertentu yang dapat kami mainkan sepanjang perjalanan.”

Google mengatakan pihaknya memiliki batasan untuk topik sensitif, karena Gemini akan menghindari membuat asumsi proaktif tentang data sensitif seperti kesehatan. Namun, raksasa teknologi itu juga mencatat bahwa Gemini akan mendiskusikan data ini jika Anda memintanya.

Selain itu, Gemini tidak berlatih langsung di kotak masuk Gmail atau perpustakaan Google Foto Anda. Sebaliknya, ia melatih perintah spesifik di Gemini dan respons model. Pada contoh di atas, foto perjalanan, gambar plat nomor di Foto, dan email di Gmail tidak langsung digunakan untuk melatih model. Mereka hanya direferensikan untuk menghasilkan respons, kata Google.

Personal Intelligence diluncurkan ke pelanggan Google AI Pro dan AI Ultra di AS. Google berencana memperluas fitur ini ke lebih banyak negara dan tingkat gratis Gemini.

Google memberikan daftar contoh perintah untuk dicoba, termasuk “Bantu saya merencanakan akhir pekan saya di (kota, misalnya New York) berdasarkan hal-hal yang ingin saya lakukan”, “Rekomendasikan beberapa film dokumenter berdasarkan hal yang membuat saya penasaran”, atau “Berdasarkan tanda terima pengiriman dan belanjaan saya di Gmail, riwayat Penelusuran, dan riwayat tontonan YouTube, rekomendasikan 5 saluran YouTube yang cocok dengan gaya memasak atau suasana persiapan makan saya.”