Apple ‘ın yenilenen Siri asistanı, Super Bowl tarihine ilişkin bilgi sorularında yapılan bir testte beklenmedik bir performans sergiledi. Testte, 58 Super Bowl şampiyonunun doğru yanıtlanması beklenirken, Siri yalnızca 20 doğru cevap vererek %34 doğruluk oranına ulaştı. Hatta bununla da kalmayıp, kullanıcıya ChatGPT’ye danışmasını önerdi. İlginçtir ki ChatGPT sorulara doğru yanıt verdi. Ayrıntılar haberimizde…
Apple’ın yeni Siri asistanı Super Bowl bilgi testinde yalnızca %34’lük doğruluğa ulaşabildi
Öncelikle bu testin, Paul Kafasis tarafından tasarlanıp uygulandığını belirtelim. Kafasis, Siri’ye Super Bowl’un ilk yılından 60. yılına kadar olan şampiyonları sordu ve yanıtları kaydetti. Ancak Siri’nin yanıtları, sık sık yanlış bilgiler içerdi. Örneğin Siri, 33. Super Bowl’un şampiyonu olarak Philadelphia Eagles’ı gösterdi, ancak bu takım tarihte yalnızca bir kez şampiyon oldu. Ayrıca bazı yanıtlar, soruyla alakasız futbol bilgileri içerdi ya da yanlış Super Bowl numaralarına atıfta bulundu.
Siri’nin başarısız olduğu 17. ve 32. Super Bowl yılları arasındaki 15 ardışık hata, bilgi tabanındaki eksikliği net bir şekilde ortaya koydu. Hatta bir soruda Siri, kullanıcılara ChatGPT’ye danışmalarını önerdi. İlginç bir şekilde, ChatGPT doğru cevap verdi. Daring Fireball’dan John Gruber, Siri’nin performansını diğer yapay zeka sistemleriyle karşılaştırdı.
Google, ChatGPT ve DuckDuckGo gibi platformlar doğru yanıtlar verirken, Siri hem yanlış yanıtlar verdi hem de yanıtlarında tutarsızlık sergiledi. Gruber, eski Siri’nin en azından kullanıcılara doğru bilgi içeren bağlantılar sunduğunu, ancak yenilenen Siri’nin bu özelliği kaybettiğini belirtti.
Gruber, Siri’nin yanlış yanıtlarının “makul gibi görünse de tamamen hatalı” olduğunu vurgulayarak, bu tür hataların yapay zeka sistemleri için en kötü hata türlerinden biri olduğunu ifade etti. Öte yandan Apple, Siri’yi daha ileri bir seviyeye taşımayı planlıyor. Gelişmiş bir dil modeli (LLM) üzerinde çalışan Apple, yeni Siri’nin daha iyi diyalog yetenekleri ve bilgi doğruluğu sunacağını söylüyor. Bahsedilen gelişmiş sürümün ise en erken 2025’teki WWDC etkinliğinde duyurulması ve iOS 19 ile piyasaya sürülmesi bekleniyor.
Sizce Siri’nin bu performans eksiklikleri Apple’a zarar verir mi? Görüşlerinizi aşağıdaki yorumlar kısmına yazabilirsiniz…
