GPT (Üretken Ön Eğitimli Transformer), OpenAI'ın geliştirdiği ve ChatGPT'ye güç veren büyük dil modeli ailesinin adıdır.
GPT ne demek?
Adındaki üç kelime modelin yapısını özetler: metin üretir (generative), önce çok büyük veriyle genel olarak eğitilir (pre-trained) ve transformer mimarisini kullanır.
GPT-3 ile geniş kitlelerin dikkatini çeken model ailesi, sonraki sürümlerle görsel ve ses anlayabilen çok modlu modellere dönüştü. "GPT" kelimesi günlük dilde zaman zaman tüm sohbet modelleri için genel bir isim gibi kullanılsa da aslında OpenAI'a ait bir model ailesidir.
Yakın kavramlar
TransformerTransformer, dikkat mekanizmasına dayanan ve bugünkü büyük dil modellerinin neredeyse tamamının temelini oluşturan sinir ağı mimarisidir.Dil Modelleri & Üretken YZBüyük Dil ModeliLLM · Large Language ModelBüyük dil modeli (LLM), çok büyük miktarda metinle eğitilerek dili anlamayı ve üretmeyi öğrenmiş, milyarlarca parametreli yapay zekâ modelidir.Dil Modelleri & Üretken YZÖn EğitimPre-trainingÖn eğitim, bir modelin belirli bir göreve uyarlanmadan önce çok büyük ve genel bir veri kümesiyle eğitildiği ilk ve en maliyetli eğitim aşamasıdır.Dil Modelleri & Üretken YZOtoregresif ModelAutoregressive ModelOtoregresif model, çıktısını parça parça üreten ve her yeni parçayı o ana kadar ürettiklerine bakarak tahmin eden modeldir.Dil Modelleri & Üretken YZ