Sekitar setahun terakhir, Google telah melihat beberapa fitur AI bermerek Gemini dan lainnya di seluruh aplikasi yang digunakan pengguna. Inilah semua yang telah diumumkan dan kapan akan tersedia.
Piksel
Di akhir Made by Google 2023, Zoom Enhance yang “mengisi celah antar piksel dan memprediksi detail halus” dengan cerdik digoda untuk Pixel 8 Pro. Dengan memanfaatkan “model gambar AI generatif khusus” pada perangkat, Google mengatakan ini berguna ketika Anda lupa melakukan zoom.
Ini adalah aplikasi AI generatif yang luar biasa, membuka banyak kemungkinan untuk membingkai dan mengedit gambar Anda. Jadi jenis peningkatan zoom yang biasa Anda lihat dalam fiksi ilmiah—benar-benar ada di ponsel di tangan Anda.
Pada bulan Oktober, Google mengatakan hal ini akan terjadi nanti. Setelah tiga kali Penurunan Fitur Piksel, fitur tersebut masih belum tiba. Tidak jelas apakah model yang dimaksud Google adalah Gemini Nano dengan Multimodality. Pada titik ini, bahkan mungkin muncul dengan Pixel 9 Pro sebagai fitur foto andalan ponsel.
Beranda Google
Di aplikasi Google Home, AI generatif akan digunakan untuk meringkas peristiwa menjadi “tampilan sederhana tentang apa yang terjadi baru-baru ini”. “Ringkasan cepat dan mudah” ini akan menggunakan poin-poin penting, sementara Anda juga dapat mengucapkan “Tanyakan tentang rumah Anda” untuk menemukan klip riwayat video dan mendapatkan otomatisasi. “Fitur eksperimental” akan hadir bagi pelanggan Nest Aware pada tahun 2024.
Fitbit
Fitbit Labs akan memungkinkan pengguna Fitbit Premium untuk menguji dan memberikan umpan balik mengenai kemampuan AI eksperimental.
Salah satu fitur tersebut adalah chatbot yang memungkinkan Anda mengajukan pertanyaan tentang data Fitbit Anda dengan cara yang alami dan percakapan. “Panduan yang dipersonalisasi” yang mempertimbangkan sasaran kebugaran ini bertujuan untuk menghasilkan “pesan dan panduan yang dapat ditindaklanjuti”, dengan respons yang dapat mencakup bagan yang disesuaikan.
- “Misalnya, Anda dapat menggali lebih dalam berapa menit zona aktif (AZM) yang Anda peroleh dan korelasinya dengan tingkat pemulihan tidur Anda.”
- “…model ini mungkin dapat menganalisis variasi pola tidur dan kualitas tidur Anda, lalu membuat rekomendasi tentang bagaimana Anda dapat mengubah intensitas olahraga berdasarkan wawasan tersebut.”
Di balik layar, ini didukung oleh LLM Kesehatan Pribadi baru dari Fitbit dan Google Research yang dibangun di atas Gemini. Mulai bulan Maret, program ini akan hadir “akhir tahun ini” untuk “sejumlah pengguna Android yang terdaftar di program Fitbit Labs di aplikasi seluler Fitbit”.
Foto Google
Ask Photos memungkinkan Anda mengajukan pertanyaan tentang gambar dan video di perpustakaan Anda. Selain menemukan gambar, ia dapat mengekstrak informasi dan memberi Anda jawaban teks. Didukung oleh Gemini, contoh pertanyaannya mencakup “Tunjukkan foto terbaik dari setiap taman nasional yang pernah saya kunjungi” dan “Tema apa yang sebaiknya kita adakan untuk pesta ulang tahun Lena?” Ini dapat digunakan untuk “menyarankan foto teratas” dan membuat keterangan untuk foto tersebut. Ask Photos adalah “fitur eksperimental” yang akan segera diluncurkan, dan Google sudah memberikan lebih banyak kemampuan di masa depan.
Gmail + Google Ruang Kerja
Di Gmail untuk Android dan iOS, Anda akan menemukan tombol Gemini di sudut kanan atas yang memungkinkan Anda menampilkan panel samping yang setara dengan perangkat seluler untuk masuk ke perintah lengkap. Gmail juga mendapatkan Balasan Cerdas Kontekstual yang menawarkan saran yang lebih disesuaikan, mendetail, dan bernuansa. Ini akan diluncurkan ke Workspace Labs pada bulan Juli.
Di Cloud Next 2024 pada bulan April, Google juga mempratinjau kemampuan perintah suara untuk Bantu saya menulis di Gmail seluler. Sementara itu, fitur “semir instan” akan “mengubah catatan kasar menjadi email lengkap dengan satu klik”.
Di web desktop, panel samping tersedia di Gmail, Google Drive, dan Dokumen/Spreadsheet/Slide. Gemini akan datang ke Google Chat selanjutnya untuk merangkum percakapan dan menjawab pertanyaan.
Google Peta
Pada bulan Februari lalu, Google mengumumkan bahwa Maps akan menggunakan LLM untuk mendukung chatbot “Tanyakan tentang”. Anda dapat menggunakannya untuk menemukan tempat yang sesuai dengan permintaan Anda dengan dukungan untuk pertanyaan lanjutan. Ini didukung oleh rincian tentang 250 juta tempat dan foto, video, dan ulasan yang dikirimkan pengguna.
krom
Gemini Nano hadir di Chrome desktop untuk mendukung fitur browser seperti “Bantu saya menulis.” Ini harus tersedia di sebagian besar laptop dan desktop modern.
pencarian Google
Selain meluncurkan Ikhtisar AI, Google juga meninjau beberapa fitur mendatang yang akan hadir di Search Labs untuk pertama kalinya:
- Anda akan dapat mengambil Ikhtisar AI Asli dan menjadikannya “Sederhana” (hanya untuk beberapa kalimat) atau “Rusak” (respons lebih panjang).
- Kemampuan penalaran multi-langkah akan memungkinkan Anda mengajukan pertanyaan kompleks sekaligus alih-alih memecahnya menjadi beberapa pertanyaan.
- Perencanaan makan dan perjalanan
- Halaman hasil pencarian terorganisir AI
- Pencarian video: Rekam video dan ajukan pertanyaan tentangnya
Android
Gemini Nano dengan Multimodalitas akan diluncurkan di Pixel “akhir tahun ini” dan fitur-fitur canggih seperti narasi TalkBack dalam perangkat/offline dan peringatan penipuan real-time yang mendengarkan panggilan untuk pola cerita. Google akan membagikan detail lebih lanjut akhir tahun ini.
Pada I/O 2024, Google juga melihat bagaimana Gemini di Android akan segera menjadi panel overlay alih-alih membuka UI layar penuh untuk menampilkan hasil. Selain menjaga konteks, ini memungkinkan Anda menarik dan melepas gambar yang dihasilkan ke dalam percakapan. Untuk pelanggan Gemini Advanced, tombol “Tanyakan video ini” dan “Tanyakan PDF ini” masing-masing akan menampilkan video ringkasan dan dokumen Gemini. Ini akan diluncurkan “dalam beberapa bulan mendatang.” Selain itu, Saran Dinamis akan menggunakan Gemini Nano dengan Multimodalitas untuk memahami apa yang ada di layar Anda:
Misalnya, jika Anda mengaktifkan Gemini dalam percakapan yang membahas tentang Pickleball, sarannya mungkin mencakup “Temukan klub Pickleball di dekat saya” dan “Peraturan Pickleball untuk pemula”.
Tambahan lain yang sangat berguna di perangkat seluler adalah Ekstensi Gemini untuk Google Kalender, Tasks, dan Keep. Ini akan memungkinkan Anda mengambil cuplikan halaman dengan beberapa tanggal mendatang yang dapat diubah Gemini menjadi acara Kalender. Dalam beberapa bulan mendatang, “Utility” akan memungkinkan ponsel Gemini mengakses aplikasi Jam Android.
Kami juga menunggu ponsel Gemini hadir di Tablet Pixel musim panas ini.
Gemini
Live akan memungkinkan Anda melakukan percakapan dua arah dengan Gemini. Untuk membuat pengalaman lebih natural, Gemini akan membalas respons sederhana yang dapat Anda interupsi untuk menambahkan informasi baru atau meminta klarifikasi. Anda dapat memilih dari 10 suara berbeda, dengan Google membayangkan Gemini Live berguna untuk persiapan wawancara atau latihan pidato. Ini akan tersedia dalam “bulan-bulan mendatang” untuk anggota Gemini Advanced.
“Akhir tahun ini,” Gemini Live akan mengizinkan Anda meluncurkan mode kamera langsung. Cukup tunjuk sesuatu di dunia nyata dan ajukan pertanyaan tentangnya. Ini didukung oleh Project Astra.
Permata adalah versi khusus Gemini yang memungkinkan Anda memiliki “teman olahraga, sous chef, mitra coding, atau panduan menulis kreatif”. Anggota Gemini Advanced akan dapat membuat Permata khusus, sementara semua pengguna akan memiliki akses ke Permata yang telah dibuat sebelumnya, seperti Pelatih Pembelajaran.
Cukup jelaskan apa yang Anda ingin Permata Anda lakukan dan bagaimana Anda ingin Permata tersebut meresponsnya — seperti “Anda adalah pelatih lari saya, berikan saya rencana lari harian dan jadilah positif, bahagia, dan termotivasi.” Gemini akan mengikuti instruksi tersebut dan, dengan satu klik, menyempurnakannya untuk menciptakan Permata yang memenuhi kebutuhan spesifik Anda.
Pengguna Gemini Advanced juga akan mendapatkan “perencana mendalam” yang lebih dari sekadar menyarankan aktivitas tetapi juga memperhitungkan waktu perjalanan dan pemberhentian, serta minat orang, untuk membuat rencana perjalanan yang terperinci. Gemini akan menggunakan detail penerbangan/perjalanan di Gmail, rekomendasi Google Maps untuk makanan dan museum di dekat hotel Anda, dan Temukan aktivitas lainnya.
