ChatGPT, OpenAI’ın yıllar içinde geliştirdiği GPT dil modellerinin sohbet için özel olarak eğitilmiş bir sürümü olarak 30 Kasım 2022’de herkesin kullanımına açıldı. İlk sürüm GPT-3.5 ailesinden bir model üzerine kuruldu. Ardından insan geri bildirimiyle pekiştirmeli öğrenme (RLHF) adı verilen yöntemle sohbet etmeye uygun hâle getirildi.
Yani ChatGPT bir gecede ortaya çıkmadı. Arkasında önce dil modelleri araştırması, sonra büyük ölçekli ön eğitim ve en son insanların doğrudan katıldığı bir ince ayar aşaması var. Aşağıda bu süreci sırasıyla ele alıyoruz.
ChatGPT’nin Arka Planı: OpenAI ve Transformer Mimarisi
ChatGPT’yi geliştiren OpenAI, 2015 yılının sonunda kâr amacı gütmeyen bir araştırma kuruluşu olarak kuruldu. Sonraki yıllarda yapısını değiştirerek kâr sınırlı bir şirket modeline geçti ve Microsoft ile büyük bir ortaklık kurdu. Bu ortaklık, modellerin eğitildiği bulut altyapısının da temelini oluşturdu.
Teknik açıdan dönüm noktası ise 2017’de Google araştırmacılarının yayımladığı “Attention Is All You Need” makalesiyle tanıtılan Transformer mimarisidir. Bu yapı, bir cümledeki kelimelerin birbiriyle ilişkisini “dikkat” (attention) mekanizmasıyla aynı anda değerlendirebiliyordu. Önceki yöntemlere göre çok daha verimli paralel eğitim yapılmasını sağladı. GPT adındaki “T” harfi de buradan gelir: Generative Pre-trained Transformer, yani üretken ön eğitimli Transformer.
GPT-1’den GPT-3.5’e: ChatGPT Nasıl Oluşturuldu?
ChatGPT’nin oluşturulması, birbirini takip eden model kuşaklarının birikimiyle mümkün oldu. Her sürüm bir öncekinden daha büyük veriyle ve daha fazla parametreyle eğitildi.
| Model | Yıl | Öne çıkan özellik |
|---|---|---|
| GPT-1 | 2018 | Büyük metin üzerinde ön eğitim yapıp sonra göreve göre ince ayar fikrini gösterdi. |
| GPT-2 | 2019 | Akıcı uzun metin üretebildi; kötüye kullanım endişesiyle aşamalı olarak yayımlandı. |
| GPT-3 | 2020 | 175 milyar parametreyle, birkaç örnek verilerek yeni görevleri yapabildiğini gösterdi. |
| InstructGPT | 2022 | Talimatlara uymak için insan geri bildirimiyle eğitildi; ChatGPT’nin doğrudan öncülü oldu. |
| GPT-3.5 / ChatGPT | 2022 | Sohbet formatında eğitilerek geniş kitleye açıldı. |
GPT-3 son derece güçlüydü ama bir sorun vardı: Model yalnızca “bir sonraki kelimeyi tahmin etmek” üzere eğitildiği için kullanıcının ne istediğini her zaman anlamıyor, bazen alakasız ya da zararlı içerik üretebiliyordu. InstructGPT çalışması bu açığı kapatmak için yapıldı ve ChatGPT’nin tarifi büyük ölçüde buradan çıktı.
ChatGPT Nasıl Eğitildi? Üç Aşamalı Süreç
OpenAI’ın ChatGPT’yi duyururken paylaştığı açıklamaya göre eğitim temelde üç adımdan oluşur. Önce ön eğitim, ardından iki aşamalı bir insan destekli ince ayar gelir.
1. Ön eğitim (pre-training)
Model; internetten derlenmiş metinler, kitaplar ve lisanslı kaynaklardan oluşan devasa bir veri kümesi üzerinde eğitilir. Görevi basittir: Bir metin parçasına bakıp sıradaki “token”ı (kelime ya da kelime parçası) tahmin etmek. Milyarlarca kez tekrarlanan bu tahmin işi sırasında model dilbilgisini, olgular arasındaki ilişkileri ve belli bir akıl yürütme kalıbını istatistiksel olarak öğrenir.
Burada önemli bir nokta var: Model bilgiyi bir veritabanı gibi saklamaz. Kelimeler arasındaki olasılıkları öğrenir. Bu yüzden zaman zaman kulağa doğru gelen ama yanlış bilgiler üretebilir.
2. Denetimli ince ayar (supervised fine-tuning)
İnsan eğitmenler hem kullanıcı hem asistan rolüne girerek örnek sohbetler yazdı. Model bu örneklerle eğitilerek soru-cevap formatında, yardımcı bir üslupla konuşmayı öğrendi. Ham dil modelini “asistana” dönüştüren ilk adım budur.
3. İnsan geri bildirimiyle pekiştirmeli öğrenme (RLHF)
ChatGPT’yi öncüllerinden ayıran asıl adım RLHF oldu. Süreç kabaca şöyle işler:
- Model aynı soruya birden fazla cevap üretir.
- İnsan değerlendiriciler bu cevapları en iyiden en kötüye sıralar.
- Bu sıralamalarla, hangi cevabın daha iyi olduğunu tahmin eden bir “ödül modeli” eğitilir.
- Asıl model, ödül modelinden yüksek puan alacak cevaplar üretecek şekilde pekiştirmeli öğrenmeyle (PPO algoritması) güncellenir.
Bu döngü, modelin daha net, daha alakalı ve daha güvenli yanıtlar vermesini sağladı. Örneğin uygunsuz bir talebi reddetmesi ya da belirsiz bir soruda açıklama istemesi büyük ölçüde bu aşamada şekillendi.
ChatGPT Nasıl Yapıldı ve Nasıl Yazıldı? Teknik Altyapı
“ChatGPT hangi dille yazıldı?” sorusu sık sorulur, ama cevabı sanıldığı kadar tek satırlık değildir. Bir dil modelinin “zekâsı” kod satırlarında değil, eğitim sırasında öğrenilen milyarlarca sayısal parametrede (ağırlıkta) bulunur. Kod, bu ağırlıkları eğitmek ve çalıştırmak için kullanılan araçtır.
- Model ve eğitim kodu: Makine öğrenmesinde standart olan Python ağırlıklı yazılır. OpenAI, 2020’de derin öğrenme çatısı olarak PyTorch’u benimsediğini açıklamıştı.
- Donanım: Eğitim, binlerce GPU’dan oluşan ve Microsoft Azure üzerinde kurulan süper bilgisayar kümelerinde yapıldı.
- Ürün tarafı: Web arayüzü, mobil uygulamalar ve API gibi katmanlar farklı yazılım dilleri ve teknolojilerle geliştirilir; bunların ayrıntıları şirket tarafından tam olarak paylaşılmaz.
Kısacası ChatGPT’yi “yazmak” demek, devasa bir modeli eğitmek ve onu milyonlarca kişiye aynı anda hizmet verecek bir sisteme yerleştirmek demektir.
Yayımlandıktan Sonra Neler Oldu?
ChatGPT başlangıçta bir “araştırma önizlemesi” olarak ücretsiz sunuldu. Amaç, gerçek kullanıcılardan geri bildirim toplayarak modelin zayıf noktalarını görmekti. Kısa sürede çok büyük bir kullanıcı kitlesine ulaştı ve üretken yapay zekânın gündelik hayata girişinin simgesi hâline geldi.
Mart 2023’te GPT-4 tanıtıldı ve ChatGPT’nin ücretli sürümünde kullanılmaya başlandı. Sonraki dönemde görsel ve sesli girdi, dosya analizi, web araması gibi yetenekler eklendi; yeni model sürümleri de çıkmaya devam etti. Hangi modelin hangi abonelikte sunulduğu sık değiştiği için güncel durumu OpenAI’ın resmî sitesinden ya da doğrudan ChatGPT’nin kendi sayfasından kontrol etmek en sağlıklısıdır.
Yapay Zeka Ne Zaman Çıktı? ChatGPT’den Çok Önce
ChatGPT yapay zekânın başlangıcı değil, uzun bir sürecin görünür hâle gelen halkasıdır. Kısa bir zaman çizelgesi:
- 1950: Alan Turing, makinelerin düşünüp düşünemeyeceğini sorguladığı ve bugün “Turing testi” olarak bilinen fikri ortaya attığı makalesini yayımladı.
- 1956: Dartmouth Konferansı’nda “yapay zekâ” (artificial intelligence) terimi bir araştırma alanı adı olarak kullanılmaya başlandı. Alanın resmî doğuşu genellikle bu tarihe bağlanır.
- 1960’lar: ELIZA gibi ilk sohbet programları, basit kalıp eşleştirmeyle insanla konuşuyormuş izlenimi verdi.
- 1980’ler-2000’ler: Uzman sistemler, istatistiksel yöntemler ve makine öğrenmesi öne çıktı; ilgi ve finansman zaman zaman azaldı.
- 2010’lar: Derin öğrenme, güçlü GPU’lar ve büyük veri setleri sayesinde görüntü ve ses tanımada büyük sıçrama yaşandı. 2017’de Transformer geldi.
- 2022 ve sonrası: ChatGPT ile büyük dil modelleri geniş kitlelerin kullanımına açıldı.
Bu açıdan bakınca ChatGPT’yi asıl farklı kılan şey, yeni bir bilimsel buluştan çok mevcut tekniklerin ölçeklenmesi ve sohbet arayüzüyle herkesin erişebileceği hâle getirilmesidir.
ChatGPT’yi Kullanırken Akılda Tutulması Gerekenler
Eğitim sürecini bilmek, aracı daha doğru kullanmanızı da sağlar. Model olasılık temelli çalıştığı için şu noktalara dikkat etmek işinize yarar:
- Özellikle sayı, tarih, kaynak ve alıntı içeren cevapları resmî ya da güvenilir kaynaklardan doğrulayın.
- Sağlık, hukuk ve finans gibi konularda verdiği bilgileri genel bir başlangıç noktası olarak görün; karar vermeden önce ilgili uzmana danışın.
- Kişisel, gizli veya şirketinize ait hassas bilgileri sohbete yazmadan önce gizlilik ayarlarını ve veri kullanım koşullarını inceleyin.
- Modelin bilgisi eğitim verisinin kesildiği tarihle sınırlı olabilir; web araması açık değilse güncel olayları bilmeyebilir.
Sıkça Sorulan Sorular
ChatGPT ilk ne zaman çıktı?
ChatGPT, 30 Kasım 2022’de OpenAI tarafından ücretsiz bir araştırma önizlemesi olarak kullanıma açıldı. İlk sürüm GPT-3.5 serisinden bir modele dayanıyordu.
ChatGPT internetteki her şeyi biliyor mu?
Hayır. Model, eğitim verisinden öğrendiği kalıplarla cevap üretir ve internete sürekli bağlı bir arama motoru gibi çalışmaz. Web arama özelliği açık olduğunda güncel sayfalara bakabilir, ancak bu ayrı bir işlevdir.
ChatGPT’yi eğitmek için insanlar gerçekten çalıştı mı?
Evet. Denetimli ince ayar aşamasında insan eğitmenler örnek sohbetler yazdı, RLHF aşamasında ise değerlendiriciler modelin cevaplarını sıraladı. Bu insan katkısı, modelin sohbet üslubunu ve güvenlik davranışını belirleyen temel unsurlardan biridir.
GPT ile ChatGPT aynı şey mi?
Tam olarak değil. GPT, OpenAI’ın dil modeli ailesinin adıdır. ChatGPT ise bu modellerin sohbet için ince ayar yapılmış hâlini kullanan bir üründür. Zaman içinde ChatGPT’nin arkasında çalışan GPT sürümü de değişmiştir.