“SAM dapat mengambil perintah input dari sistem lain, seperti di masa mendatang mengambil pandangan pengguna dari headset AR/VR untuk memilih objek,” jelas Meta AI.
Contoh lainnya yang diberikan adalah, ketika menulis kata ‘kucing’, maka detector akan menemukan objek kucing tersebut dalam bentuk kotak-kotak.
“Permintaan kotak pembatas dari detektor objek dapat mengaktifkan segmentasi teks-ke-objek,” jelas Meta AI.
Output yang dapat Diperluas
Meta AI menjelaskan bahwa topeng output dapat digunakan sebagai input ke sistem AI lainnya. Sehingga objek yang dilacak dapat digunakan ke berbagai bentuk seperti 3D.
“Misalnya, topeng objek dapat dilacak dalam video, mengaktifkan aplikasi pengeditan pencitraan, diangkat ke 3D. Atau digunakan untuk tugas kreatif seperti membuat kolase,” jelas Meta AI.
Generalisasi Zero-Shot
Meta AI menjelaskan bahwa SAM telah mempelajari secara umum tentang apa saja bentuk-bentuk objek yang ada. Sehingga memungkinkan untuk mendeteksi gambar asing tanpa pelatihan.
“Pemahaman ini memungkinkan generalisasi zero-shot ke objek dan gambar asing tanpa memerlukan pelatihan tambahan,” jelas Meta AI. (lfr/fau)
