Menjamin Visibilitas AI Itu Mustahil: Inilah yang Seharusnya Diukur oleh Merek

Penulis, yang bekerja dalam visibilitas merek AI, menerima tiga tawaran komersial yang menjanjikan untuk menempatkan merek di puncak jawaban ChatGPT, bahkan dengan posisi tertentu dalam 30 hari. Ia menjelaskan bahwa jaminan semacam itu secara fisik mustahil karena model AI menghasilkan teks secara probabilistik, kata demi kata, dan bahkan dengan temperatur diatur ke 0 dan seed tetap, sedikit variasi dalam komputasi server dan batching menghasilkan keluaran yang berbeda. Selain itu, model modern adalah ansambel model yang lebih kecil, menambah lapisan ketidakpastian lain. Lebih lanjut, jawaban AI bergantung pada data pelatihan model dan pencarian web langsung, yang keduanya berubah secara independen dan tidak dapat dikendalikan oleh merek. Sebaliknya, penulis menyarankan untuk mengukur Share of Model, persentase prompt terkontrol di mana model menyebut merek tanpa petunjuk langsung, dengan menjalankan sampel 15-20 prompt nyata sebelum dan setelah optimasi konten. Ia merujuk pada studi 2024 oleh Aggarwal dan rekan-rekan yang menunjukkan peningkatan 30-115% dalam frekuensi kutipan dari optimasi yang tepat. Ia juga memperingatkan tentang tanda bahaya pada kontraktor, seperti menjanjikan posisi spesifik atau persentase pertumbuhan yang seragam di berbagai platform, dan menyarankan untuk meminta pengukuran yang dapat direproduksi daripada jaminan posisi.