bir modelin cümledeki hangi kelimelerin birbiriyle daha çok ilişkili olduğunu hesaplamasını sağlayan yöntem. böylece uzun bir cümlede önemli kelimelere daha fazla ağırlık verir ve bağlamı daha iyi korur.
tümü
-
dikkat mekanizması
-
embedding
metin, görsel veya başka bir verinin anlamını sayılardan oluşan bir diziyle temsil etme yöntemi. anlamı yakın içerikler bu sayısal uzayda birbirine yaklaşır; arama, benzer soru bulma ve öneri sistemlerinde işe yarar.
-
halüsinasyon
bir dil modelinin kulağa doğru gelen ama gerçekte yanlış, uydurma veya kaynaksız bilgi üretmesi. model bunu bilerek yalan söylemez; öğrendiği örüntülere göre en olası kelimeleri sıralar. önemli bilgilerde kaynağı kontrol etmek ve emin olmadığı yerde tekrar sormak gerekir.
-
model izleme
yayına alınan bir modelin zaman içinde nasıl çalıştığını takip etme işi. veri değişince hatalar artabilir veya modelin cevapları yavaşlayabilir. düzenli ölçüm yapmak sorunları erken fark etmeye yardım eder.
-
regresyon
sayısal bir sonucu tahmin etmeye çalışan yöntem. ev fiyatı, satış miktarı veya sıcaklık gibi değerleri tahmin etmek için kullanılabilir. model, geçmiş verilerdeki ilişkileri öğrenir; tahminler kesin sonuç değil, birer kestirimdir.
-
çapraz doğrulama
bir modelin başarısını ölçmek için veriyi parçalara ayırıp eğitme ve test etme işlemini farklı bölümlerde tekrarlama yöntemi. böylece sonuç tek bir veri bölümüne bağlı kalmaz. özellikle veri az olduğunda daha güvenilir bir fikir verebilir.
-
sentetik veri
gerçek kişilerden veya olaylardan alınmak yerine bilgisayar tarafından üretilen örnek veri. model eğitmek için daha fazla örnek sağlamak veya kişisel bilgileri korumak amacıyla kullanılabilir. gerçeği yeterince temsil edip etmediği kontrol edilmelidir.
-
doğal dil işleme
bilgisayarların insan dilindeki metin ve konuşmaları anlamaya, sınıflandırmaya veya üretmeye çalıştığı alan. çeviri, arama ve yazım denetimi gibi işlerde kullanılır. dilin bağlama göre değişmesi nedeniyle her zaman doğru sonuç vermeyebilir.
-
veri sızıntısı
test edilmesi gereken bilginin yanlışlıkla modelin eğitim verisine veya eğitim sürecine karışması. böyle bir durumda model gerçek hayatta ne kadar iyi olduğunu olduğundan başarılı gösterebilir. eğitim ve test verilerini ayrı tutmak bu sorunu önlemeye yardım eder.
-
model doğrulama
bir modelin yeni veriler üzerinde ne kadar iyi çalıştığını kontrol etme süreci. eğitim sırasında kullanılmayan örneklerle yapılan testler, modelin sadece ezberleyip ezberlemediğini anlamaya yardım eder. farklı ölçütler kullanmak daha güvenilir sonuç verir.