ChatGPT’nin seyahat, iş ve sınır ötesi iletişim gibi çeşitli ihtiyaçlar için başvurulacak çeviri hizmeti olarak Google Translate’in yerini alıp alamayacağını belirlemek için PCMag en iyi dil çeviri aracını ortaya çıkarmak için bir test yaptı.
Bu kapsamda İngilizce dışındaki yedi dili akıcı konuşanlar, yapay zekâ sohbet robotlarının çevirilerini Google Translate aracıyla karşılaştıran kör bir teste katıldı.
İki dilli konuşmacılara Google Çeviri, ChatGPT ve Microsoft Bing kullanılarak kendi dillerine çevirmeleri için İngilizce paragraflar verildi. Alıştırmayı tamamladıktan sonra, katılımcılara her çeviriyi hangi hizmetin ürettiği hakkında bilgi verildi.
Test edilen diller arasında Lehçe, Fransızca, Korece, İspanyolca, Arapça, Tagalogca ve Amharca yer aldı. Bu çalışma kapsamlı olmasa da ve istatistiksel olarak anlamlı bir değerlendirme için daha fazla titiz testler gerekli olsa da sonuçlar yapay zeka modellerinin performansına ilişkin değerli bilgiler sunuyor.
Seçilen paragraflar, her bir çeviri hizmetinin sınırlamalarını ortaya çıkarmak için özenle hazırlandı.
Yapay zeka sohbet robotları (ChatGPT, Google Bard ve Microsoft Bing) şaşırtıcı bir şekilde, katılımcılara gönderilen 12 örneğin tamamında Google Translate aracından daha iyi performans gösterdi. ChatGPT genel olarak en yüksek sıralamaları aldı.
ChatGPT bağlamı yakalamada daha başarılı
Google Çeviri’nin dikkate değer bir zayıflığı, bağlamsal nüansları gözden kaçırarak gerçek çeviriler sağlama eğilimiydi. Buna karşılık, sohbet robotları incelikleri ve bağlamı yakalamada mükemmeldi. Daha fazla miktarda eğitim verisine ve belirli bir dilde daha fazla kullanıcı etkileşimine sahip modeller, kültürel ifadelerin daha iyi anlaşıldığını gösterdi ve daha uygun çeviriler üretti.
ChatGPT’nin başarısı, kullanıcı tercihlerine dayalı olarak kültürel olarak uygun yanıtların seçilmesine izin veren insan geri bildirimiyle pekiştirmeli öğrenme (RLHF) yaklaşımına bağlanabilir.
Öte yandan, Google Bard ve Google Translate, Google Translate’in çeviri görevleri için özel olarak optimize edilmesiyle farklı temel teknolojiler kullanıyor.
Google Çeviri, 100’den fazla dile hızlı, kolay çeviriler sunuyor ve kullanıcılar aracılığıyla iyileştirme olanaklarına sahip. ChatGPT gibi büyük dil modelleri ise birden çok dilde tutarlı ve insana benzer cümleler oluşturmak için çok miktarda eğitim verisinden ve gerçek zamanlı kullanıcı geri bildiriminden yararlanıyor.
Chatbot’lar, Google Translate kıyasla daha iyi çeviriler sunsalar da, kusursuz değillerdi ve zaman zaman garip veya yanlış kelime seçimleri yapıyorlardı. Yine de her dilde daha fazla eğitim ve daha fazla veri ile Google Translate’in yeteneklerini aşma potansiyellerini gösterdiler.
Google ayrıca, sorgulara ChatGPT tarzı yanıtlar sunan arama üretici deneyimleri (SGE) ile deneyler yapıyor. Ancak bu deneyler devam ediyor ve Google, gelecekte Google Translate’in yerini alma olasılığı hakkında herhangi bir bilgi sağlamadı.
Yapay zeka çeviri modellerinin yetenekleri ilerledikçe nihai hedef, web’i küresel ölçekte daha erişilebilir hale getirebilecek sağlam ve kültürel açıdan hassas modeller geliştirmek. Dil çevirisinin geleceği, yapay zeka modellerinin sürekli olarak iyileştirilmesine ve farklı dillerde doğru ve doğal çeviriler sağlama becerilerine bağlı…
