Bir AI Agent'ı Canlıya Aldıktan Sonra Öğrendiğim 7 Şey
## 1. Demo ile ortamında her AI agent kusursuzdur. Sorular düzgün gelir, cevaplar yerinde olur, herkes etkilenir.
Gerçek müşteriler gelmeye başladığında ise başka bir şey öğrenirsiniz: Bir agent'ı kurmak işin yarısıdır. Asıl iş, onu canlıda doğru çalıştırmaktır.
Son haftalarda kendi satış agent'ımızı (Lumen) web sitemizde canlıya aldık ve bir WhatsApp asistanını eğittik. Aşağıdakiler kitaplardan değil, doğrudan loglardan ve müşteri konuşmalarından çıkan dersler.
1. "Hata" her zaman başarısızlık değildir
Bir test sırasında agent müşterinin bilgilerini veritabanına kaydetti, bana Telegram'dan bildirim gönderdi... ve müşteri ekranda "Error in workflow" gördü.
Yani iş yapılmıştı ama müşteri başarısız olduğunu düşündü. Sebep, modelin "düşünme" modu ile araç çağrılarının aynı akışta çakışmasıydı.
Ders: Bir agent'ın sonucu ikili değildir. "Yaptı / yapamadı" yerine "neyi yaptı, kullanıcı ne gördü?" diye ayrı ayrı test edin. En tehlikeli hata, işin yapılıp kullanıcıya başarısız göründüğü hatadır; çünkü müşteri tekrar dener ve kayıt iki kez oluşur.
2. Hafıza, kuralı olmadan sorun üretir
Agent'ın geri dönen ziyaretçiyi tanıması harika bir özellik. Ta ki bir test kullanıcısına şunu söyleyene kadar: "Otelinizin yanında inşaat projelerinizi de yönetmek ister misiniz?" Kullanıcı aslında farklı bir iş için soruyordu.
Agent hatırladı ama yanlış bağladı.
Ders: Hafıza verip "akıllıca kullan" demek yetmez. Ne zaman hatırlayacağını ve ne zaman soracağını açıkça tanımlayın. Bizim kuralımız artık net: Tanıdığın kişiyi adıyla karşıla, ama yeni sorusunun eski konuyla ilgili olduğunu asla varsayma; önce sor.
3. Model güncellemesi sessizce sistemi kırabilir
Bir sorunu çözmek için modelin tek bir ayarını değiştirdim. Sonuç: Yeni model o ayarı desteklemiyordu ve agent birkaç dakika boyunca hiçbir mesaja cevap vermedi.
Ders: Agent'ınız, kontrol etmediğiniz bir parçaya (modele) bağlıdır. Her değişikliği tek tek yapın, hemen gerçek bir konuşmayla test edin ve geri dönüş adımını önceden hazır tutun. Canlı sistemde "bir şey daha deneyeyim" en pahalı cümledir.
4. Agent, sahip olmadığınız bir özelliği satabilir
WhatsApp asistanımız bir müşteriye raporların Excel ve PDF olarak indirilebildiğini söyledi. Böyle bir özellik yoktu.
Model kötü niyetli değildi; sadece "mantıklı görünen" bir cevap üretti.
Ders: Agent'a sadece ne yaptığınızı değil, ne YAPMADIĞINIZI da öğretin. "Bu özellik yok, bunun yerine şunu öneriyoruz" cevapları bilgi tabanının en değerli kısmıdır. Satış agent'ının uydurduğu her özellik, ileride bir müşteri şikâyetidir.
5 . Müşteri mutfağı görmemeli
Asistan, cevaplarında arka planda kullandığımız araçların adını tekrar tekrar söylüyordu. Teknik olarak doğruydu; ticari olarak yanlıştı.
Müşteri "verilerim nerede saklanıyor" diye sormaz. "Verilerim güvende mi" diye sorar.
Ders: Agent'ın dilini, teknik altyapınızın değil müşterinizin diliyle kurun. İç araçların isimleri, açıkça sorulmadıkça cevapta yer almamalı.
6. Yetki, ilk günden en aza indirilmeli
Bir güvenlik kontrolünde, agent'ın kullandığı bağlantının gerektiğinden fazla yetkiye sahip olduğunu fark ettik.
Asıl ders şuydu: Yetkiyi sonradan daraltmak, baştan doğru vermekten çok daha zordur. Çünkü o arada başka otomasyonlar bu yetkiye bağımlı hâle gelir ve "düzeltme" yeni bir arızaya dönüşebilir.
Ders: Her agent'a sadece işini yapacak kadar yetki verin. Okuması gerekmiyorsa okuyamasın, değiştirmesi gerekmiyorsa değiştiremesin. Bunu kurulumun ilk gününde yapın, olay sonrası değil.
7. Agent sadece zekâ değil, aynı zamanda kullanıcı deneyimidir
Sitemizin mobil hız skoru 61'di. Sebebini araştırdığımızda en yavaş yüklenen parçanın... sohbet robotunun kendisi olduğunu gördük. Ziyaretçiyi karşılaması gereken agent, sayfanın açılmasını geciktiriyordu.
Sohbet kodunu ziyaretçi sayfayla etkileşime geçtiğinde yüklenecek şekilde düzenledik. Skor 82'ye çıktı, agent da aynen çalışmaya devam etti.
Ders: Agent'ın maliyeti sadece API faturası değildir. Sayfa hızı, mobil deneyim ve ilk izlenim de bu maliyetin parçasıdır.
Sonuç
Bunların hiçbiri "AI agent kullanmayın" demek değil. Tam tersine: Doğru kurulan bir agent, gece 2'de gelen müşteriyi karşılayan, ihtiyacını anlayan ve size hazır bir fırsat olarak teslim eden en çalışkan ekip arkadaşınızdır.
Ama bu ekip arkadaşının da işe alım süreci, kuralları ve denetimi olmalı.
Siz kendi agent'ınızı canlıya aldığınızda ilk neyle karşılaştınız? Yorumlarda okumayı çok isterim.
#YapayZeka #AIAgent #Otomasyon #Dijitalleşme #KOBİ