Platform For AI：Segmentasi dan pra-label gambar

Informasi latar belakang

Grounded SAM adalah salah satu model visi zero-shot terbaik. Model ini dapat mendeteksi, melakukan segmentasi, dan menghasilkan gambar berdasarkan teks input. Grounded SAM dikembangkan oleh tim profesional Tiongkok yang dipimpin oleh IDEA, berdasarkan model SAM dari Meta dan tiga model zero-shot kuat lainnya.

Grounded SAM terdiri dari dua model: Grounding DINO dan SAM. SAM adalah model segmentasi zero-shot yang dapat menghasilkan masker untuk objek arbitrer dalam gambar atau video, termasuk objek dan gambar yang tidak muncul selama proses pelatihan. Grounding DINO adalah detektor zero-shot canggih yang dapat menemukan objek arbitrer dalam gambar berdasarkan deskripsi teks.

Pergi ke halaman detail model

1. Pergi ke halaman Model Gallery.

   1. Masuk ke Konsol PAI.

   2. Di panel navigasi di sebelah kiri, klik Workspaces. Di halaman Workspaces, temukan ruang kerja yang ingin Anda kelola dan klik nama ruang kerja tersebut. Halaman Detail Workspace akan muncul.

   3. Di panel navigasi di sebelah kiri pada halaman Detail Workspace, klik Model Gallery.

2. Di halaman Model Gallery, klik image-segmentation di bagian CV. Dalam daftar model yang ditampilkan di sebelah kanan, temukan dan klik model modelscope_segment-anything untuk pergi ke halaman detail model.

   

Terapkan model sebagai layanan model

Model Gallery mengintegrasikan fitur Elastic Algorithm Service (EAS). Anda dapat langsung menerapkan Grounded SAM sebagai layanan online dan menghasilkan antarmuka web untuk model tersebut. Anda dapat menggunakan antarmuka web untuk dengan mudah mencoba fitur segmentasi gambar Grounded SAM. Untuk menerapkan model sebagai layanan online, lakukan langkah-langkah berikut:

1. Di halaman detail model, klik Deploy di pojok kanan atas.

   

2. Verifikasi pengaturan parameter di bagian Basic Information dan Resource Information.

   Model Gallery menentukan nama layanan dan mengatur sumber daya komputasi yang diperlukan untuk menerapkan model berdasarkan karakteristik model. Dalam contoh ini, pengaturan parameter default digunakan. Anda juga dapat memodifikasi pengaturan parameter berdasarkan kebutuhan bisnis Anda. Untuk informasi lebih lanjut tentang cara mengonfigurasi parameter, lihat bagian "Menerapkan dan men-debug model" dari topik Menerapkan dan Melatih Model.

   

3. Klik Deploy. Di pesan Billing Notification, klik OK.

   Halaman detail layanan muncul. Di tab Service details, Anda dapat melihat status penerapan layanan model di bagian Basic information. Proses penerapan memakan waktu sekitar 10 menit karena ukuran model yang besar. Jika nilai parameter Status berubah menjadi In operation, layanan model telah diterapkan. Anda juga dapat melihat layanan yang diterapkan di tab Inference gateway pada halaman Elastic Algorithm Service (EAS). Untuk informasi lebih lanjut tentang cara pergi ke halaman EAS-Layanan Model Online, lihat Penyebaran Kustom.

Kemudian, Anda dapat memulai antarmuka web model untuk mencoba fitur inferensi Grounded SAM. Untuk informasi lebih lanjut, lihat bagian Gunakan Grounded SAM dari topik ini.

Gunakan Grounded SAM

1. Di bagian Web Application dari tab Service details, klik View Web App untuk memulai antarmuka web.

2. Di antarmuka web, lakukan inferensi model.

   Grounded SAM menyediakan beberapa mode. Di bagian Image di sebelah kiri halaman, unggah gambar yang ingin Anda segmentasi. Di bagian bawah halaman, pilih mode dari daftar drop-down task_type, atur parameter Text Prompt, dan kemudian klik Run untuk memsegmentasi gambar.

   Dalam contoh ini, mode berikut digunakan: otomatis dan coretan. Kedua mode memungkinkan Anda mencoba fitur Grounded SAM dalam segmentasi gambar.

   • otomatis

     Pilih automatic dari daftar drop-down task_type. Biarkan parameter Text Prompt kosong. Unggah gambar dan klik Run untuk secara otomatis memsegmentasi gambar tanpa interaksi.

   • coretan

     Pilih scribble dari daftar drop-down task_type. Klik bagian gambar yang ingin Anda segmentasi dan biarkan parameter Text Prompt kosong. Kemudian, klik Run. Gambar tersebut akan disegmentasi.