Geçmişte yapay zeka modeli ne kadar büyük olursa performans da o kadar iyi oluyordu. Örneğin OpenAI modellerinde parametreler 1000 kattan fazla arttı ve performans neredeyse üç katına çıktı.
OpenAI Modeli | Tarihi bırakın | Parametreler, B | MMLU |
---|---|---|---|
GPT2 | 2/14/19 | 1.5 | 0.324 |
GPT3 | 6/11/20 | 175 | 0.539 |
GPT3.5 | 3/15/22 | 175 | 0.7 |
GPT4 | 3/14/23 | 1760 | 0.864 |
Ancak model performansı yakında asimptot olacak; en azından bu ölçümde.
Bu bir birçok yeni yapay zeka modelinin performansının tablosu MMLU adı verilen geniş çapta kabul edilen bir kritere göre. 1 MMLU, bir yapay zeka modelinin performansını bir lise öğrencisiyle karşılaştırarak ölçer.
Modelleri şu şekilde kategorize ettim:
- Büyük: > 100 milyar parametre
- Orta: 15 ila 100b parametre
- Küçük : < 15b parametre
Zaman içinde performans, hem model boyutlarına hem de model satıcılarına göre hızla birbirine yaklaşıyor.
Facebook'un açık kaynak modeli ve Google.com'a güç veren Google'ın kapalı kaynak modeli ve ChatGPT'ye güç veren OpenAI modellerinin hepsi eşit derecede iyi çalıştığında ne olur?
Bilgisayar bilimcileri, bu modellerin göreceli performansını birçok farklı testle ayırt etmekte zorlandılar. Kullanıcılar daha iyisini yapmakta zorlanacaklar.
Bu noktada model katmanındaki değerin çökmesi gerekir. Ücretsiz olarak kullanılabilen bir açık kaynaklı model, ücretli olan kadar iyiyse neden ücretsiz olanı kullanmayasınız? Ve eğer daha küçük, çalıştırması daha ucuz bir açık kaynak modeli neredeyse aynı derecede iyiyse neden onu kullanmayasınız ki?
Yapay zekanın hızlı büyümesi modellere olan ilginin artmasına neden oldu. Ancak altyapı katmanının, tıpkı üç satıcının %65 pazar payına sahip olduğu bulutta olduğu gibi, oldukça hızlı bir şekilde metalaşması gerekir: Amazon Web Services, Azure ve Google Cloud Platform.
Devasa AI emtia komisyoncularının etrafındaki uygulamalar ve geliştirici araçları, geliştirmenin bir sonraki aşamasıdır; ürün farklılaştırma ve dağıtımının parlak, ham teknik ilerlemelerden ziyade farklılaştığı yer.2
1 MMLU 57 farklı görevi ölçer matematik, tarih, bilgisayar bilimi ve diğer konular dahil. Bu, pek çok ölçümden biridir ve herhangi bir kıyaslama gibi mükemmel değildir. Elo sistemi dahil başkaları da var. İşte bir farklılıklara genel bakış.. Her kıyaslama, modeli farklı bir spektrumda derecelendirir: önyargı,
matematiksel akıl yürütme diğer iki örnektir.
- SEO Destekli İçerik ve Halkla İlişkiler Dağıtımı. Bugün Gücünüzü Artırın.
- PlatoData.Network Dikey Üretken Yapay Zeka. Kendine güç ver. Buradan Erişin.
- PlatoAiStream. Web3 Zekası. Bilgi Genişletildi. Buradan Erişin.
- PlatoESG. karbon, temiz teknoloji, Enerji, Çevre, Güneş, Atık Yönetimi. Buradan Erişin.
- PlatoSağlık. Biyoteknoloji ve Klinik Araştırmalar Zekası. Buradan Erişin.
- Kaynak: https://www.tomtunguz.com/what-happens-when-model-performance-asymptotes/
- :vardır
- :dır-dir
- :olumsuzluk
- :Neresi
- 100
- İNDİRİM
- a
- kabul edilen
- Göre
- karşısında
- gelişmeler
- AI
- Türkiye
- Amazon
- Amazon Web Servisleri
- an
- ve
- herhangi
- uygulamaları
- ARE
- etrafında
- AS
- At
- mevcut
- masmavi
- BE
- olmuştur
- kıyaslama
- Daha iyi
- önyargı
- büyük
- Milyar
- her ikisi de
- parlak
- geniş
- broker
- fakat
- by
- denilen
- kategorize
- meydan
- ChatGPT
- bulut
- Bulut Platformu
- Çöküş
- COM
- emtia
- karşılaştırıldığında
- bilgisayar
- Bilgisayar Bilimleri
- yakınlaşan
- Geliştirici
- gelişme
- DID
- farklılıkları
- farklı
- farklılaştırmak
- dağıtım
- do
- her
- eşit olarak
- Eter (ETH)
- örnek
- örnekler
- pahalı
- İçin
- Ücretsiz
- serbestçe
- yakıtlı
- Tercih Etmenizin
- Google Bulut
- Google Bulut Platformu
- Google'ın
- yetişkin
- Büyüme
- olur
- Var
- Yüksek
- tarih
- HTTPS
- if
- görüntü
- in
- Dahil olmak üzere
- Altyapı
- faiz
- IT
- sadece
- tabaka
- en az
- az
- sevmek
- çok
- pazar
- Pazar payı
- masif
- matematik
- matematiksel
- ölçmek
- önlemler
- metrik
- model
- modelleri
- neredeyse
- sonraki
- of
- on
- ONE
- açık kaynak
- işletmek
- Diğer
- Diğer
- ödenmiş
- parametreler
- geçmiş
- MÜKEMMEL OLAN YERİ BULUN
- performans
- faz
- platform
- Platon
- Plato Veri Zekası
- PlatoVeri
- Nokta
- güç kelimesini seçerim
- güçler
- güzel
- PLATFORM
- hızla
- hızlı
- hızla
- daha doğrusu
- Çiğ
- muhakeme
- son
- bağıl
- Okul
- Bilim
- bilim adamları
- Hizmetler
- paylaş
- meli
- boyutları
- daha küçük
- Yakında
- Spektrum
- Öğrenci
- dalgalanma
- sistem
- Teknik
- testleri
- göre
- o
- The
- kendilerini
- Orada.
- Bunlar
- Re-Tweet
- üç
- zaman
- için
- Konular
- iki
- kullanım
- kullanıcılar
- değer
- satıcıları
- Yol..
- ağ
- web hizmetleri
- İYİ
- Ne
- ne zaman
- neden
- irade
- ile
- İş
- zefirnet