Doğal dil işleme (NLP), bilgisayarların insan dilini anlaması, yorumlaması ve üretmesiyle ilgilenen yapay zekâ alanıdır.
Doğal Dil İşleme ne demek?
Çeviri, metin özetleme, duygu analizi, soru cevaplama ve sohbet botları doğal dil işlemenin uygulama alanlarıdır. Eskiden bu işlerin her biri için ayrı modeller geliştirilirdi.
Transformer mimarisi ve büyük dil modelleri, NLP'deki görevlerin çoğunu tek bir modelle yapılabilir hâle getirdi. Türkçe gibi eklemeli dillerde kelimelerin çok sayıda biçim alması, NLP için ayrıca zorlayıcı bir durumdur.
Yakın kavramlar
Büyük Dil ModeliLLM · Large Language ModelBüyük dil modeli (LLM), çok büyük miktarda metinle eğitilerek dili anlamayı ve üretmeyi öğrenmiş, milyarlarca parametreli yapay zekâ modelidir.Dil Modelleri & Üretken YZTokenizasyonTokenizationTokenizasyon, metnin dil modelinin işleyebileceği tokenlere bölünmesi işlemidir.Dil Modelleri & Üretken YZTransformerTransformer, dikkat mekanizmasına dayanan ve bugünkü büyük dil modellerinin neredeyse tamamının temelini oluşturan sinir ağı mimarisidir.Dil Modelleri & Üretken YZDuygu AnaliziSentiment AnalysisDuygu analizi, bir metindeki görüşün olumlu, olumsuz ya da nötr olduğunu ve hangi duyguları taşıdığını otomatik olarak belirleme işidir.Temel KavramlarBLEU ve ROUGEBLEU ve ROUGE, yapay zekânın ürettiği çeviri ya da özetin, insan yazımı referans metinle kelime örtüşmesine bakarak puanlanmasını sağlayan otomatik ölçütlerdir.Veri & DeğerlendirmeKonuşma TanımaASR · Speech RecognitionKonuşma tanıma, insan sesini algılayıp yazıya döken yapay zekâ teknolojisidir; konuşmadan metne (speech-to-text) olarak da bilinir.Temel Kavramlar