Begonvil-Ajan-1.5B - Begonvil Otel Ajanı

Bootcamp bitirme projesi kapsamında Begonvil Otel için geliştirilmiş, araç çağıran bir resepsiyon ajanıdır. Her yanıtını 🌸 ile bitirir.

Nasıl çalışır?

Model her adımda tek bir JSON üretir: {"dusunce", "arac", "argumanlar"} (araç çağrısı) ya da {"dusunce", "cevap"} (son cevap). Araçlar: oda_bilgisi, oda_listesi, oda_oner, toplam_konaklama, evcil_hayvan_ucreti, hesapla. Rehber bilgisi, her soruda anahtar kelime + anlamsal arama ile bulunup bağlam olarak verilir. Ajan döngüsü; JSON ayıklama, araç doğrulama, cevaptaki sayıların kaynaklarla doğrulanması ve model başarısız olursa kural tabanlı yedek plan içerir.

Eğitim

• Taban model: Qwen/Qwen2.5-1.5B-Instruct, QLoRA (r=16), 2 epoch, kayıp yalnızca asistan çıktısında.
• Veri: 655 örnek; araç çıktıları gerçek odalar.csv verisinden, bağlamlar gerçek rehber aramasından üretildi.
• Test soruları eğitim verisinden hariç tutuldu.

Değerlendirme (otomatik hakem, küçük test kümesi)

Ortalama puan: 0.68 (19 soru) · Yedek plan oranı: 0.00

Taban modelle karşılaştırma (aynı ajan döngüsü)

Metrik	Taban	İnce ayarlı
Ortalama puan	0.39	0.68
Yedek plan oranı	0.21	0.00

Soru	Puan	Beklenen araç	Kullanılan	Yedek plan
Odaya kaçta girebilirim?	1	-	-	False
Rezervasyonumu 3 gün kala iptal edersem ne öderim?	1	-	-	False
Kahvaltı saat kaça kadar?	0.5	-	-	False
Kapalı havuz kışın açık mı?	1	-	-	False
Masaj fiyatları ne kadar?	0.5	-	-	False
Kedimi getirebilir miyim?	1	-	-	False
Havalimanından alıyor musunuz?	1	-	-	False
Balkonda sigara içebilir miyim?	1	-	-	False
Elektrikli aracımı şarj edebilir miyim?	0	-	-	False
Aile Odası kaç kişilik ve gecesi ne kadar?	0	-	oda_bilgisi	False
Deniz Manzaralı Suit'te 3 gece kalırsam ne öderim?	0.5	-	toplam_konaklama	False
Otel kaç yıldızlı?	1	-	-	False
Düğün organizasyonu yapıyor musunuz?	0	-	-	False
Köpeğimle 4 gece konaklayacağım, evcil hayvan için toplam ne kadar temizlik ücreti öderim?	1	evcil_hayvan_ucreti	evcil_hayvan_ucreti	False
Kedimle birlikte 2 gece kalırsak evcil hayvan masrafımız ne olur?	1	evcil_hayvan_ucreti	evcil_hayvan_ucreti	False
Standart Bahçe Odası kaç kişilik ve gecelik fiyatı ne kadar?	0	oda_bilgisi	oda_bilgisi	False
Standart Bahçe Odası'nda 3 gece kalırsam toplam ne öderim?	0.5	toplam_konaklama	toplam_konaklama	False
4 kişiyiz, hangi odada kalabiliriz?	1	oda_oner	oda_oner	False
Standart Bahçe Odası ile Standart Deniz Odası arasındaki gecelik fiyat farkı ne kadar?	1	hesapla	oda_bilgisi, oda_bilgisi, hesapla	False

Sınırlar

• Bilgisi rehber ve oda tablosuyla sınırlıdır; rezervasyon yapamaz, ödeme alamaz.
• Değerlendirme kümesi küçüktür ve otomatik hakem kaba bir ölçüdür; sonuçlar kesin başarı iddiası değildir.