OpenAI е на път да пусне GPT-5 – новата версия на технологията, която задвижва ChatGPT. Двама от първите тестери на модела споделят, че са впечатлени от възможностите му за програмиране и решаване на научни и математически проблеми. Според тях обаче подобрението спрямо GPT-4 не е толкова значително, колкото скокът от GPT-3 към GPT-4.
Досега OpenAI разчиташе на мащабирането – увеличаване на изчислителната мощност и данните – за да подобрява моделите си. Този подход обаче срещна сериозни предизвикателства.
Един от проблемите пред мащабирането е стената от данни, с която се сблъска компанията. Бившият главен учен на OpenAI Иля Суцкевер заяви миналата година, че докато изчислителната мощност нараства, количеството данни не се увеличава със същия темп. Това ограничава възможностите за по-нататъшно усъвършенстване.
Друг проблем е, че „тренировъчните цикли“ за големи модели са по-податливи на хардуерни грешки, предвид сложността на системата. Същевременно тези цикли може да отнемат месеци, а през това време изследователите не знаят какви ще бъдат крайните резултати.
OpenAI не е обявила кога ще бъде пуснат GPT-5, но според медийни съобщения индустрията очаква това да стане всеки момент.
„OpenAI направи толкова голям скок от GPT-3 към GPT-4, че оттогава насам има огромни очаквания към GPT-5“, каза Навин Чадха, управляващ партньор във фонда за рисков капитал Mayfield, който инвестира в компании за изкуствен интелект, но не е инвеститор в OpenAI.
Надеждата е, че GPT-5 ще отключи приложения за изкуствен интелект, които ще надхвърлят чата и ще достигнат до напълно автономно изпълнение на задачи.“
Наред с обучението на големи езикови модели, OpenAI инвестира и в подход, наречен „изчисления по време на тест“. Той насочва повече изчислителна мощност към решаването на конкретни предизвикателства, които изискват човешко мислене, като математически или сложни операции. Според Сам Алтман, изпълнителен директор на OpenAI, GPT-5 ще комбинира и двата подхода.
През последните години, след успеха на GPT-4, други технологични гиганти като Google, Anthropic и Meta пуснаха свои конкурентни модели. Само в рамките на една година се появиха модели с отворен код като Llama 3 на Meta, които са сравними с GPT-4. Този бърз напредък на конкуренцията допълнително засилва очакванията към GPT-5.
Въпреки че все още няма официална дата за пускане, очакванията към GPT-5 са огромни.
Източник: Economic.bg
