KERNEL dalam Lima Menit: Mengapa Prompt yang Baik Terlihat Seperti Spesifikasi Teknis
SYNTX.AI
Artikel ini menjelaskan kerangka KERNEL untuk rekayasa prompt, yang oleh penulis digambarkan sebagai resep sederhana: tetap sederhana, mudah diverifikasi, hasil yang dapat direproduksi, cakupan yang sempit, batasan yang eksplisit, dan struktur yang logis. Meskipun KERNEL berguna untuk prompt sehari-hari, artikel ini berpendapat bahwa produksi LLM yang sebenarnya membutuhkan lebih dari sekadar prompt yang baik—termasuk evaluasi, rekayasa konteks, dan integrasi alat. Penulis berbagi wawasan pribadi dari penggunaan SYNTX.AI untuk membandingkan model.
Penulis menjelaskan KERNEL, sebuah kerangka kerja komunitas untuk menulis prompt, kepada ibunya dalam lima menit, menyadari bahwa hal itu terdengar seperti spesifikasi teknis. KERNEL adalah singkatan dari Keep it simple (Jaga kesederhanaan), Easy to verify (Mudah diverifikasi), Reproducible results (Hasil yang dapat direproduksi), Narrow scope (Lingkup yang sempit), Explicit constraints (Batasan yang eksplisit), dan Logical structure (Struktur logis). Kerangka kerja ini dibuat oleh seorang penulis yang menganalisis lebih dari seribu prompt dan mengklaim bahwa tingkat keberhasilan percobaan pertama naik dari 72% menjadi 94%, penggunaan token turun 58%, dan waktu hingga hasil yang berguna turun 67%, meskipun penulis artikel ini skeptis terhadap angka-angka tersebut tanpa metodologi yang dipublikasikan. Artikel tersebut mencatat bahwa prompt yang baik sering kali terlihat seperti tugas teknis yang ditulis dengan baik, dan bahwa meskipun teknik seperti 'berpikir langkah demi langkah' mungkin membantu, model penalaran modern sudah menangani hal itu secara internal. Huruf yang paling kontroversial adalah R untuk Reproducible results, yang oleh penulis ditafsirkan ulang bukan sebagai keluaran yang identik, melainkan sebagai persyaratan yang dapat direproduksi, sehingga memungkinkan perbandingan lintas versi model dan prompt. Dalam produksi, prompt saja tidak cukup; diperlukan evals (tes yang telah ditentukan) untuk mengukur perilaku model, dan sebagian logika prompt (seperti memaksakan struktur JSON) lebih baik dipindahkan ke kode melalui skema. Pilihan model juga penting: model LLM yang berbeda berperforma berbeda pada prompt yang sama, sehingga membandingkan model pada kriteria tertentu sangatlah penting. Penulis menggunakan SYNTX.AI untuk menjalankan beberapa LLM dari satu ruang, dan artikel tersebut menyimpulkan bahwa KERNEL masih berguna sebagai daftar periksa cepat, tetapi sistem LLM yang sesungguhnya memerlukan rekayasa konteks, termasuk RAG, penggunaan alat, dan manajemen status. Bagian akhir berisi catatan promosi untuk SYNTX.AI dan kode promo.
Sumber: Habr — хаб ИИ —
asli
