Sohbet Kalitesi sekmesi, Mira'nın misafirlere kendi cümleleriyle yazdığı cevapları otomatik olarak puanlar ve sorunlu olanları size listeler. Amacı tek bir soruya cevap vermektir: "Mira'nın cevapları ne kadar güvenilir, ve nerede tökezliyor?" Bu sayfa, ekranda gördüğünüz her sayının ve etiketin ne anlama geldiğini ve bir sorunu nasıl düzelteceğinizi anlatır.
Ekranda neler var#
Sol menüde Analiz başlığı altındaki, kalkan içinde onay işareti simgeli Sohbet Kalitesi'ne tıklayın. Sayfa yukarıdan aşağıya şöyle dizilir:
- Sohbet Kalitesi başlığı ve altında "AI'ın serbest metin cevaplarının kendi kendine değerlendirdiği kalite skoru." açıklaması.
- Dört özet kartı (geniş ekranda yan yana, telefonda alt alta).
- Değerlendirme kriterleri nedir? başlıklı kısa bir bilgi kutusu.
- Bayraklı Cevaplar listesi: "En az bir kalite kriterini tetikleyen son cevaplar."
Sayfa tamamen salt okunurdur: burada bir şey kaydetmez, silmez ya da işaretlemezsiniz. Düzeltmeyi, cevabın kaynağı olan sayfalarda yaparsınız (aşağıda anlatılıyor).
Özet kartları#
| Kart | Ne gösterir | Not |
|---|---|---|
| Değerlendirilen Cevap | Bugüne kadar puanlanmış Mira cevaplarının toplam sayısı | Yalnızca değerlendirmeye giren cevaplar sayılır (aşağıdaki "Hangi cevaplar değerlendirilir" bölümüne bakın) |
| Ortalama Güven | Değerlendirilen tüm cevapların güven puanlarının ortalaması, yüzde olarak | Hiç cevap yoksa %0 görünür |
| Bayraklı Cevap | En az bir kalite kriterine takılmış cevapların sayısı | Kırmızı renkli kart |
| Bayraksız Oran | Hiçbir kritere takılmamış cevapların, değerlendirilen tüm cevaplara oranı | (Değerlendirilen − Bayraklı) ÷ Değerlendirilen |
Değerlendirme kriterleri kutusu#
Kartların altındaki kutu, kriterleri tek cümleyle özetler: her cevap ek bir yapay zekâ çağrısı yapılmadan, metnin kendisi üzerinden değerlendirilir. Yani bu özellik size ek maliyet getirmez ve misafirin cevabı beklediği süreyi uzatmaz. Kriterlerin ayrıntısı aşağıda.
Bayraklı Cevaplar listesi#
Listede, en az bir bayrak taşıyan cevapların en yeni 100 tanesi yeniden eskiye doğru sıralanır. Her satırda şunları görürsünüz:
- Misafirin adı ve varsa telefonu (ad yoksa İsimsiz misafir),
- cevabın yazıldığı tarih ve saat,
- sağda amber renkli Güven: rozeti (o cevabın yüzde puanı),
- sağda Görüşmeyi Gör düğmesi: o görüşmenin detay sayfasını açar,
- kırmızı küçük bayrak rozetleri (cevabın takıldığı her kriter için bir tane),
- altta cevabın ilk 220 karakteri (daha uzunsa sonunda "…" vardır).
Mira'nın iletişim kartını çağırmak için cevaba eklediği görünmez işaret bu önizlemede gösterilmez; yalnızca misafirin okuduğu metni görürsünüz.
Boş durumlar#
- Henüz hiç değerlendirilmiş cevap yoksa Henüz değerlendirilmiş bir cevap yok yazar. Bu özellik eklenmeden önce yazılmış eski cevaplar geriye dönük puanlanmaz; misafirler sohbet ettikçe liste dolar.
- Cevaplar değerlendirilmiş ama hiçbiri bayrak taşımıyorsa Bayraklı bir cevap yok yazar: "Değerlendirilen tüm cevaplar şu an için herhangi bir kalite bayrağı taşımıyor."
Hangi cevaplar değerlendirilir#
Mira'nın cevaplarının bir kısmı doğrudan panelinizdeki kayıtlardan hazır şablonla üretilir (fiyat, müsaitlik kartları, Tesis Olanakları, Ekstra Hizmetler, İşletme Bilgileri alanları, rezervasyon akışı, tek kayıtla birebir eşleşen Bilgi Bankası cevabı, selamlaşma vb.). Bu cevaplar zaten sizin yazdığınız veriden geldiği için uydurma riski taşımaz ve puanlanmaz.
Puanlanan iki tür cevap vardır:
| Cevap türü | Ne zaman oluşur | Notu |
|---|---|---|
| Serbest metin cevap | Mira, Bilgi Bankası ve işletme bilgilerinizden yararlanarak cevabı kendi cümleleriyle yazdığında | Altı kriterin hepsine bakılır |
| "Doğrulanmış bilgi yok" cevabı | Misafir işletmeyle ilgili bir şey sordu ama panelde bununla eşleşen hiçbir bilgi yok; Mira iletişim kartını gösterdi | Her zaman Bilgi eksikliği bayrağı alır. Bilerek değerlendirmeye katılır, çünkü sizin için asıl soru "misafir gerçek bir cevap alabildi mi?"dir |
Konu dışı sorulara ("Türkiye'nin başkenti neresi?") verilen kapsam cevabı puanlanmaz; bu bir arıza değil, bilinçli bir sınırdır.
Kriterler tek tek#
Her cevap %100 güvenle başlar. Takıldığı her kriter için aşağıdaki kadar puan düşülür. Birden fazla kritere aynı anda takılabilir; puan hiçbir zaman %5'in altına inmez.
| Bayrak (panelde) | Ne zaman işaretlenir | Düşüş |
|---|---|---|
| Bilgi eksikliği | Mira "Bu konuda şu anda doğrulanmış bir bilgim bulunmuyor" dedi ya da iletişim kartını (Bizi Arayın / WhatsApp / E-posta Gönderin) gösterdi | −30 |
| Çeviri sorunu | Mira cevabı misafirin dilinde değil, başka bir dilde (ör. İngilizce konuşan misafire Türkçe) yazdı; sistem cevabı çevirmeyi denedi ama başaramadı ve misafire çevrilmiş cevap yerine iletişim kartı gitti | −40 |
| Çok kısa cevap | Cevap, baştaki ve sondaki boşluklar atıldıktan sonra 12 karakterden kısa | −30 |
| Çok uzun cevap | Cevap 1600 karakterden uzun | −15 |
| Belirsiz ifade | Cevapta en az iki farklı tereddüt ifadesi geçiyor. Türkçe: "sanırım", "galiba", "emin değilim", "olabilir", "tahmin ediyorum"; İngilizce: "i think", "i'm not sure", "might be", "probably", "i guess"; Almanca ve Rusça karşılıkları da aranır | −20 |
| Tekrarlayan metin | En az 20 karakterlik aynı cümle cevapta üç ya da daha fazla kez birebir tekrarlanıyor | −30 |
Güven puanı nasıl okunur#
| Puan | Anlamı |
|---|---|
| %100 | Cevap hiçbir kritere takılmadı. Listede görünmez. |
| %85 | Yalnızca uzun bir cevap. Çoğu zaman sorun değildir. |
| %80 | Cevapta tereddüt ifadeleri var. Bilginin net olmadığını gösterebilir. |
| %70 | Tek bir ciddi sorun: çoğunlukla Bilgi eksikliği. |
| %30 ve altı | Birden fazla sorun bir arada. Önce bunlara bakın. |
Bu bir yaklaşık ölçümdür: kurallar metne bakar, cevabın içeriğinin doğru olup olmadığını anlamaz. Kesin olarak yakaladığı şeyler şunlardır: misafirin cevapsız kaldığı sorular, yanlış dilde giden cevaplar ve bozuk, kendini tekrar eden metinler.
Görüşme detayında kalite bilgisi#
Aynı değerlendirme Görüşmeler sayfasında da görünür. Bir görüşmeyi açtığınızda puanlanmış her Mira cevabının altında, sağda:
- AI • Güven: satırı (o cevabın puanı),
- bayrak varsa küçük amber renkli bayrak rozetleri (Bilgi eksikliği, Belirsiz ifade vb.)
görünür. Hazır şablon cevaplarda ve bu özellikten önce yazılmış mesajlarda bu satırlar yoktur. Ayrıntı için Görüşmeler sayfasına bakın.
Bayrak etiketleri panelin dilinde gösterilir (Türkçe ya da İngilizce). Misafirin konuştuğu dil (TR/EN/DE/RU) bundan bağımsızdır; değerlendirme dört dilde de çalışır.
Adım adım: Bayraklı bir cevabı düzeltme#
- Sohbet Kalitesi sekmesini açın ve Bayraklı Cevaplar listesine inin.
- En düşük Güven: puanlı ya da aynı bayrağın tekrar tekrar göründüğü satırlarla başlayın.
- Satırdaki Görüşmeyi Gör düğmesine basın. Misafirin ne sorduğunu ve Mira'nın ne cevap verdiğini birlikte okuyun; liste yalnızca cevabı gösterir, soruyu görüşmede görürsünüz.
- Bayrağa göre aşağıdaki tablodan doğru sayfayı bulun ve bilgiyi ekleyin ya da düzeltin.
- Kendiniz test edin: Widget → Misafir Linki'ni açıp aynı soruyu (gerekirse aynı dilde) sorun. Yeni cevabın bayraksız olduğunu Sohbet Kalitesi listesinde ya da görüşme detayında kontrol edin.
Bayrağa göre ne yapmalı#
| Bayrak | Muhtemel sebep | Nerede düzeltilir |
|---|---|---|
| Bilgi eksikliği | Sorulan konu panelde hiç yok ya da kayıtta istenen ayrıntı (saat, fiyat, mesafe) yazılmamış | Sabit konular (giriş/çıkış, evcil hayvan, iptal, Wi-Fi, iletişim) için İşletme Bilgileri; havuz, kahvaltı gibi olanaklar için Tesis Olanakları; ücretli hizmetler için Ekstra Hizmetler; diğer her şey için Bilgi Bankası. En kolay yol: Bilgi Bankası → Eksik Konular |
| Çeviri sorunu | Mira, içerik dilinizdeki bir kaydı misafirin diline çeviremeden aktarmaya çalıştı | İlgili Bilgi Bankası kaydını kısa ve sade cümlelerle yeniden yazın; İşletme Bilgileri → Bölgesel Ayarlar → İçerik dili'nin doğru seçili olduğunu kontrol edin. Tek seferlik bir kesintiyse aynı soruyu tekrar deneyince düzelir |
| Çok kısa cevap | Cevabın dayandığı kayıt çok kısa ya da tek kelime | İlgili kaydı tam bir cümleyle yazın: "Evet" yerine "Evet, havuzumuz 08:00-20:00 arası açıktır." |
| Çok uzun cevap | Bir Bilgi Bankası kaydı birden fazla konuyu kapsıyor ya da çok sayıda kayıt aynı soruyla eşleşiyor | Uzun kayıtları tek konulu, kısa kayıtlara bölün |
| Belirsiz ifade | Kayıttaki bilgi muğlak ("genelde", "duruma göre") ya da birbiriyle çelişen iki kayıt var | Net bilgi yazın, çelişen kayıtlardan birini AI Kullanımını Kapat ile devre dışı bırakın ya da silin |
| Tekrarlayan metin | Modelin nadiren yaşadığı bir bozulma | Tek seferlikse önemli değildir. Aynı soruda sürekli tekrar ediyorsa ilgili kaydı sadeleştirin ve bize support@airoomier.com adresinden bildirin |
Eksik Konular ile ilişkisi#
Sohbet Kalitesi ve Bilgi Bankası → Eksik Konular aynı sorunu iki farklı açıdan gösterir:
| Eksik Konular | Sohbet Kalitesi | |
|---|---|---|
| Neyi listeler | Mira'nın cevaplayamadığı soruları | Mira'nın sorunlu cevaplarını |
| Gruplama | Aynı soru tek satırda, N kez soruldu sayacıyla | Her cevap ayrı satır |
| Kapsam | Yalnızca bilgi eksikliği | Altı kriter (bilgi eksikliği, çeviri, uzunluk, belirsizlik, tekrar) |
| İşlem | Bilgi Bankasına Ekle, Çözüldü İşaretle, gece hazırlanan öneriler | Salt okunur; Görüşmeyi Gör |
Pratikte Bilgi eksikliği bayraklı cevapların çoğunun karşılığı Eksik Konular'da bir satırdır. Bu yüzden önerilen çalışma düzeni şöyledir:
- Bilgi eksikliklerini Eksik Konular'dan kapatın: orada sorular gruplanmış, en çok sorulan en üstte ve hazır bir taslak başlıkla gelir.
- Sohbet Kalitesi'ni, Eksik Konular'ın göstermediği sorunları bulmak için kullanın: Çeviri sorunu, Belirsiz ifade, Çok uzun cevap, Tekrarlayan metin. Bunlar, Mira'nın bir cevap verdiği ama cevabın iyi olmadığı durumlardır.
İki liste arasındaki farklar:
- Çeviri sorunu yüzünden iletişim kartı gösterilen cevaplar Bilgi eksikliği bayrağı da alır, ama Eksik Konular'a yazılmaz.
- Mira'nın serbest cevabında "bilgim yok" dediği bir soru konu dışı sayılırsa Eksik Konular'a yazılmaz, ama cevap yine Bilgi eksikliği bayrağıyla listelenir.
- Eksik Konular'da bir konuyu Çözüldü İşaretle ile kapatmak, Sohbet Kalitesi'ndeki eski bayraklı cevapları silmez. Liste geçmişi gösterir; düzeltmenin etkisini yeni cevaplarda görürsünüz.
Kim görebilir, plan kısıtı#
- Sohbet Kalitesi sekmesi Basic ve Pro planlarda aynıdır; ayrı bir limit ya da Pro'ya özel bölüm yoktur.
- Personel rolü dışındaki her kullanıcı bu sayfayı görür ve açabilir; Personel yalnızca Misafir Talepleri panosunu görür (Ekip ve Roller).
- Kurulum sihirbazını bitirmediyseniz bu sekme de sizi önce sihirbaza yönlendirir (Hızlı Başlangıç).
- Değerlendirme ek bir yapay zekâ çağrısı yapmadığı için aylık AI kotanızdan da harcamaz.
Örnek senaryo: 30 odalı bir otel#
Antalya'da 30 odalı bir otel işletiyorsunuz. Bir haftanın sonunda Sohbet Kalitesi sekmesinde şunları görüyorsunuz: Değerlendirilen Cevap 120, Ortalama Güven %86, Bayraklı Cevap 24, Bayraksız Oran %80.
Listeye indiğinizde:
- 14 satırda yalnızca Bilgi eksikliği var, hepsi Güven: %70. Görüşmeyi Gör ile baktığınızda misafirlerin "spa", "masaj" ve "otopark ücreti" sorduğunu görüyorsunuz. Bilgi Bankası → Eksik Konular'da aynı konular zaten 5 kez soruldu, 4 kez soruldu sayaçlarıyla duruyor. Spa ve masaj için bir Tesis Olanağı, otopark ücreti için bir Bilgi Bankası kaydı ekleyip konuları Çözüldü İşaretle ile kapatıyorsunuz.
- 4 satırda Çeviri sorunu ve Bilgi eksikliği birlikte var (Güven: %30). Hepsi Almanca konuşan misafirlerin "Frühstück" sorusu. Kahvaltı bilginizin uzun, tek paragraflık bir Bilgi Bankası kaydında olduğunu fark ediyorsunuz. Bilgiyi "Kahvaltı" adlı bir Tesis Olanağı'na kısa cümlelerle taşıyorsunuz.
- 5 satırda Belirsiz ifade var: Mira geç çıkış sorularına "sanırım mümkün olabilir" diye cevap vermiş. Bilgi Bankası'ndaki "Geç çıkış duruma göre ayarlanabilir" kaydını "Geç çıkış 14:00'e kadar ücretsizdir, sonrası için resepsiyona danışın." olarak netleştiriyorsunuz.
- 1 satırda Çok uzun cevap var; tek seferlik, görmezden geliyorsunuz.
Sonraki hafta yeni cevaplar geldikçe Ortalama Güven ve Bayraksız Oran yükselir; eski 24 bayraklı cevap ise listede kalmaya devam eder.
İpuçları ve sık yapılan hatalar#
- "Düzelttim ama bayraklı cevap hâlâ listede": Normaldir. Liste geçmiş cevapları gösterir ve hiçbir cevap sonradan yeniden puanlanmaz. Aynı soruyu Misafir Linki'nden tekrar sorup yeni cevaba bakın.
- "Değerlendirilen Cevap sayısı Görüşmeler'deki mesaj sayısından çok az": Normaldir. Fiyat, müsaitlik, olanak, hizmet ve rezervasyon cevapları hazır şablonla üretilir ve puanlanmaz. Paneliniz ne kadar iyi doluysa Mira o kadar çok hazır cevap verir.
- Yüksek Ortalama Güven her şeyin yolunda olduğu anlamına gelmez. Kurallar cevabın içeriğinin doğru olup olmadığını denetlemez. Görüşmeleri ara sıra okumaya devam edin.
- Önce tekrar edenleri düzeltin. Aynı konu birden fazla satırda görünüyorsa, tek bir kayıt eklemek onlarca gelecekteki cevabı düzeltir.
- Bilgi eksikliğini Eksik Konular'dan kapatın. Orada sorular gruplanmış ve öneri taslaklarıyla gelir; bu iş için daha hızlıdır (Bilgi Bankası).
- Çeviri sorunlarında kayıtlarınızı sadeleştirin. Kısa, net cümleler daha güvenilir çevrilir. Çok dilli çalışmanın ayrıntısı için Mira Nasıl Çalışır sayfasına bakın.
- Haftada bir bakın. Eksik Konular ile birlikte bu sekmeye haftalık göz atmak, Mira'nın cevap kalitesini sürekli yukarıda tutar.