OpenAI GPT-4 będzie miał 500 razy więcej parametrów od GPT-3

OpenAI GPT-4 to model językowy, który ma mieć 500 razy więcej parametrów od wersji GPT-3 mającej 175 mld parametrów. Ma on być dostępny już w 2023 roku.

Sam Altman założył OpenAI po to, aby tworzyć sieci neuronowe i oprogramowanie bazujące na sztucznej inteligencji, które ma przynieść korzyści całej ludzkości. Dość ambitny plan, do którego sukcesywnie dąży ta organizacja.

OpenAI i model językowy GPT

Model językowy GPT po raz pierwszy ujrzał światło dzienne w 2018 roku. W kolejnych latach pojawiały się jego rozwinięcia. Oferowały bardzo zaawansowane modelowanie, które wykorzystywano na różne sposoby.

Microsoft w porozumieniu z OpenAI wykorzystał model GPT-3 do analizy i sugerowania programistom najlepszego kodu, który pomoże im szybciej wykonać swoją pracę.

Na rodzimym rynku Cinkciarz.pl wykorzystuje generator tekstu bazujący na GPT-3, który tworzy treści marketingowe.

Nie każde zastosowanie modelu językowego prowadziło do spektakularnych sukcesów. Głośna stała się sprawa systemu, który doradzał pacjentom. Wykorzystano go mimo informacji OpenAI, że do tego się nie nadaje. Potwierdziło się to gdy algorytm czatbota doradził pacjentowi samobójstwo.

Nie mniej praca OpenAI nad rozwijaniem modelu językowego trwa i zapowiedziano już powstanie wersji GPT-4.

Model językowy OpenAI GPT-4

Model językowy GPT-3 dysponował 175 mld parametrów. Nowa wersja, GPT-4 ma mieć 500 razy większą bazę parametrów. To ogromny skok i fachowcy twierdzą, że uda się go stworzyć i udostępnić jeszcze w 2023 roku.

Jest to swego rodzaju odpowiedź na model AI21 Labs Jurassic-1, który okazał się być bardziej zaawansowany niż GPT-3.

Fachowcy zajmujący się tego typu modelami i sztuczną inteligencją twierdzą, że GPT-4 nie będzie stricte modelem językowym. Będzie też najprawdopodobniej operował także na obrazie. Często trudno jest opisać to, co widzimy słowami, a obraz zastępuje często tysiące słów.

Będziemy na bieżąco śledzili rozwój tego typu systemów i dostarczali czytelnikom informacji o nich.

Źródło: Towards Data Science, AIM, OpenAI

Dodaj komentarz