Sohbet geçmişini temizlemek uzun süren araştırma ajanlarının sonuçlarını iyileştiriyor

Microsoft Research ekibi, çözüm önerip sınayan ve geri bildirimle düzelten uzun soluklu ajanların neden belirli bir noktada takıldığını inceledi. Aynı ajanın aynı görevdeki sekiz ayrı koşusu 68,3 ile 100 arasında değişen puanlarda durdu ve fark ek hesap gücüyle kapanmadı. Araştırmacılar, biriken sohbet bağlamının ajanı benzer çözümlerin toplandığı dar bir bölgede tuttuğunu tespit etti ve bu bölgelere “fikir havzası” adını verdi.

Önerilen Fork-and-Flush yönteminde ajan paralel kollara ayrılıyor. Her kol sohbet geçmişini siliyor ama kodu, dosyaları ve sonuçları koruyor. 13 uzun görevde, aynı hesap bütçesiyle normalleştirilmiş ortalama puan tek koşudaki 0,47'den 0,78'e çıktı. Yöntem 13 görevin 12'sinde en yüksek ortalamayı verdi. Kollara ayırmadan yalnızca bağlamı temizlemek bile sonuçları yüzde 22 iyileştirdi.