Prompt kalitesi nasıl ölçülür? Güçlü bir promptun yapı taşları

Çoğu kişi yazdığı promptun kalitesini, aldığı cevabı beğenip beğenmediğine göre değerlendirir. Bu yöntem bir sonraki seferde ne yapacağınızı söylemez. Aynı iş için yazılmış iki prompt arasındaki fark çoğunlukla yapısaldır: biri modele arka plan verir, ne istediğini açıkça söyler, sınırlarını çizer. Diğeri tek cümlelik bir istekle yetinir ve sonucu şansa bırakır.

Bu yazıda güçlü bir promptu oluşturan yapı taşlarını ve prompt kalitesini ölçmenin neden işe yaradığını anlatıyoruz. Sonda kendi promptunuza bakmak için üç soru bulacaksınız.

Neden bir ölçüye ihtiyaç var?

Prompt yazmak öğrenilebilir bir beceridir ve beceriler ancak ölçülebildikleri ölçüde gelişir. Ölçü olmadığında üç şey kaybolur. Birincisi tekrarlanabilirlik: bir kez iyi sonuç almak, o sonucu nasıl aldığınızı öğretmez. İkincisi karşılaştırılabilirlik: ekipte kimin nerede zorlandığını, hangi alışkanlığın yaygın olduğunu göremezsiniz. Üçüncüsü hedefli gelişim: "daha iyi prompt yaz" genel bir tavsiyedir, "istediğin çıktının biçimini hiç söylemiyorsun" ise somut bir adımdır.

PAITA bu ihtiyaç için ham promptun yapısına bakan bir olgunluk ölçüsü kullanır. Sonucu bir skor, bir olgunluk seviyesi ve üzerinde çalışılacak somut önerilerle verir.

Güçlü bir promptun yapı taşları

Arka planı verin

Bağlam verilmeyen bir prompt modeli tahmin etmeye zorlar ve tahmin genellikle ortalama bir cevap üretir. "Müşteri şikâyetine cevap yaz" ile "Kargo gecikmesi yaşamış ve ikinci kez yazan öfkeli bir kurumsal müşteriye, samimi ama profesyonel bir dille cevap yaz" arasındaki fark çıktıya aynen yansır. Modelin dayanacağı malzemeyi de burada verin: yapıştırılan bir metin, bir tablo, toplantı notları. Malzeme verilmeden yazılan promptlar uydurmaya en açık olanlardır.

Çıktıyı tarif edin

Bir e-posta mı, maddeler hâlinde bir özet mi, tablo hâlinde bir karşılaştırma mı? Uzunluğu, tonu, mutlaka bulunması ve kaçınılması gerekenleri söyleyin. Çıktıyı tarif etmeden yazılan promptlar çoğunlukla ikinci ve üçüncü turda düzeltilir, bu da sohbeti uzatır.

Bir bakış açısı tanımlayın

"Bir veri analisti gibi düşün" ya da "deneyimli bir hukuk danışmanı gibi değerlendir" cümlesi modelin üslubunu, kullandığı terimleri ve önceliklerini ayarlar. Belirsiz bir rol ("bir uzman gibi") çoğu zaman fark yaratmaz; işin gerektirdiği bakış açısını adıyla söyleyin.

İşi adımlara bölün

Görevi parçalara bölmek, örnek göstermek ya da modelden önce seçenek üretip sonra seçmesini istemek tek seferde daha iyi sonuç getirir. "Önce üç alternatif başlık öner, sonra en iyisini seç ve gerekçesini yaz" gibi bir yönlendirme buna iyi bir örnektir.

Aynı iş için iki prompt

İki prompt da aynı işi istiyor. B modele durumu, beklenen çıktıyı ve sınırları anlattığı için ilk seferde kullanılabilir bir e-posta çıkarır. A'nın çıktısı ise birkaç tur düzeltme gerektirir.

PAITA'da nasıl işliyor?

Demo akışında kullandığınız asistandan (ChatGPT, Claude, Gemini veya Copilot) sohbetinizin yapılandırılmış bir özetini alıp PAITA'ya yapıştırırsınız. PAITA ilk promptunuzun yapısını değerlendirir; olgunluk skorunuzu, seviyenizi, geliştirebileceğiniz noktaları ve yeniden yazılmış bir prompt örneğini verir.

Kurumsal tarafta aynı değerlendirme çalışanların gerçek iş vakalarına uygulanır ve departman bazında bir olgunluk tablosuna dönüşür. Başlangıç noktası yine tek bir promptun yapısıdır.

Kendi promptunuza bakmak için üç soru

1. Promptumu hiç tanımayan biri okusa hangi durum için yazıldığını anlar mı?
2. Çıktının neye benzeyeceğini, yani biçimini, uzunluğunu ve tonunu söyledim mi?
3. Modele neye dayanacağını ve nasıl ilerleyeceğini verdim mi?

Birine hayır diyorsanız promptunuzu güçlendirecek ilk adım orada.