Model & implementasi

CLIP

CLIP mempelajari embedding gambar dan teks dari pasangan yang cocok. Tujuan kontrasif menghubungkan kedua modalitas dalam ruang representasi bersama.

AI & otomasi1 rujukanProfil diperbarui
Model & implementasi
Peta fungsi teknologi: CLIPMasukan: Pasangan gambar-teks atau kandidat label bahasa. Bagian: Encoder gambar; Encoder teks; Loss kontrasif. Keluaran: Embedding dan skor kesamaan lintas modalitas. Bagian dikelompokkan menurut fungsi, bukan urutan perakitan.MASUKANPasangan gambar-teks ataukandidat label bahasa.BAGIAN FUNGSIONALEncoder gambarMerepresentasikan visual.Encoder teksMerepresentasikan bahasa.Loss kontrasifMenyelaraskan pasangan.KELUARANEmbedding dan skor kesamaanlintas modalitas.
Peta fungsi teknologi

Diagram konseptual dari masukan, fungsi bagian, dan keluaran dalam profil. Susunan kotak tidak menunjukkan urutan perakitan atau posisi fisik.

Teknologi · CC BY 4.0 · Sumber data

Bagaimana cara kerjanya?

Encoder gambar dan teks menghasilkan vektor yang dinormalisasi. Kesamaan pasangan dalam minibatch menjadi skor untuk mengenali caption yang sesuai; pelatihan mendorong pasangan cocok mendekat dan pasangan lain memiliki skor lebih rendah.

Rujukan penjelasan

Bagian penyusun

  1. 01

    Encoder gambar

    Merepresentasikan visual.

  2. 02

    Encoder teks

    Merepresentasikan bahasa.

  3. 03

    Loss kontrasif

    Menyelaraskan pasangan.

Masukan dan keluaran

01 / Masukan

Pasangan gambar-teks atau kandidat label bahasa.

02 / Keluaran

Embedding dan skor kesamaan lintas modalitas.

Parameter teknis

Informasi dengan rujukan belum tersedia untuk bagian ini. Profil ini tidak menyajikan spesifikasi angka untuk model tertentu atau nilai yang berlaku bagi seluruh keluarga teknologi.

Versi dan status

Profil membahas konsep atau kategori teknologi; versi implementasi tertentu belum ditetapkan.

Status terbit profil berbeda dari status produksi, dukungan, atau sertifikasi perangkat.

Penerapan dan keterbatasan

  • Temu kembali gambar-teks
  • Klasifikasi dengan deskripsi

Batas cakupan

Bias dan cakupan pasangan pelatihan memengaruhi hasil; kesamaan embedding tidak sama dengan pemahaman seluruh detail gambar.

Teknologi yang terhubung

Hubungan terverifikasi belum tersedia untuk profil ini. Kedekatan topik tidak membuktikan kompatibilitas atau ketergantungan.

Buka peta teknologi

Dasar penjelasan

Penjelasan asli bahasa Indonesia disusun dengan pemeriksaan rujukan primer oleh agen AI. Belum ditinjau ahli. Baca metodologi dan batas pemeriksaan. Ringkasan standar tidak menggantikan teks normatif; ilustrasi konseptual tidak menjadi bukti konfigurasi model.