GPT-4, najnovšia verzia chatbota ChatGPT s umelou inteligenciou od firmy OpenAI, ktorá bola odprezentovaná v utorok a zatiaľ je dostupná len tým, ktorý si za túto službu zaplatia, dokáže prejsť americkými stredoškolskými testami SAT a tiež skúškami na právnickej fakulte a to v oboch prípadoch takmer so skóre 90%. Taktiež má nové možnosti spracovania údajov, ktoré v predchádzajúcej verzii neboli možné.
Čísla z výsledkov testov GPT-4 odhaľujú, že táto umelá inteligencia dokáže tiež konvertovať obrazové, zvukové a video vstupy na text a okrem toho kreatívnejšie a spoľahlivejšie spracovávať inštrukcie. Jej zásah sa tak rozširuje aj na širšiu oblasť, než doposiaľ holé texty, ktoré vkladali užívatelia na spracovanie.
GPT-4 je tak napríklad na rozdiel od prechodu GPT3.5 schopný nielen pracovať so slovami, ale aj popisovať obrázky v reakcii na jednoduché písané príkazy osoby v súvislosti s nimi.
,,Keď sa napríklad zobrazí fotografia boxerskej rukavice visiacej nad drevenou hojdačkou s loptou na jednej strane, človek sa môže opýtať, čo sa stane, ak rukavica spadne, a GPT-4 odpovie, že by zasiahla hojdačku a spôsobila lopta vyletieť hore,“ vysvetľuje portál Washington Post.
Očakáva sa, že ChatGPT bude schopný vytvárať aj obrázky, či iný multimediálny obsah, avšak OpenAI uviedla, že tento krok ešte odložili, nakoľko má obavy z jej zneužitia.
Tento nástroj by bol napríklad schopný pozrieť sa na obraz veľkej skupiny ľudí a ponúknuť o nich známe informácie vrátane ich identity. To by mohlo byť dokonca zneužité na hromadné sledovanie.
V škole by exceloval
„Prešiel simulovanou advokátskou skúškou so skóre okolo 10% najlepších účastníkov testu. Na druhej strane, skóre GPT-3.5 bolo okolo spodných 10%,“ tvrdí OpenAI.
Čísla ukazujú, že GPT-4 dosiahol na skúške LSA skóre 163, čo je 88%. Túto skúšku musia študenti v USA absolvovať, aby mohli byť prijatí na právnickú fakultu.
GPT4 prešiel testom pre 20 najlepších právnických fakúlt
Skóre GPT4 by mu zaručilo prijatie na 20 najlepších právnických fakúlt. Zároveň mu chýbalo len niekoľko bodov potrebných na prijatie na prestížne školy, ako sú Harvard, Stanford, Princeton alebo Yale. Predchádzajúca verzia ChatGPT dosiahla iba 149 bodov na LSAT, čím sa dostala na spodných 40% škôl.
GPT-4 tiež dosiahol skóre 298 zo 400 v Uniform Bar Exam. Týmto testom prechádzajú absolventi právnických fakúlt a umožňuje im vykonávať právnickú prax v ktorejkoľvek jurisdikcii USA. Stará verzia ChatGPT mala v tomto teste problémy a skončila v spodných 10% so skóre 213 zo 400.
Čo sa týka skúšok SAT, ktoré absolvujú študenti stredných škôl v USA na meranie ich pripravenosti na vysokú školu, GPT-4 dosiahol 93% a 89%. GPT-4 vyniká aj vo vedách, pričom dosiahol výrazne nadpriemerné skóre v biológii (85 – 100 %), chémii (71 – 88 %) a vo fyzike (66 – 84 %).
Avšak jeho skóre z AP Calculus, čo sú matematické skúšky, bolo pomerne priemerné, a dosiahlo 43% a 59%.
Ďalšou oblasťou, kde má GPT-4 nedostatky, boli skúšky z anglickej literatúry, kde bolo zaznamenané skóre 8% a 44% v dvoch samostatných testoch. OpenAI uviedla, že GPT-4 a GPT-3.5 absolvovali tieto testy z praktických skúšok 2022-2023 a že nástroje na spracovanie jazyka neabsolvovali žiadny špecifický tréning.
„Na tieto skúšky sme neabsolvovali žiadny špecifický tréning. Väčšinu problémov na skúškach videl model prvýkrát, ale veríme, že výsledky budú reprezentatívne.“
Výsledky vyvolali obavy
Výsledky vyvolali strach aj v komunite na Twitteri. Nick Almond, zakladateľ FactoryDAO, povedal 14. marca, že GPT4 vystraší ľudí a zrúti globálny vzdelávací systém.
https://twitter.com/DrNickA/status/1635707721231273985?ref_src=twsrc%5Etfw%7Ctwcamp%5Etweetembed%7Ctwterm%5E1635708178435276816%7Ctwgr%5Ef0785132e21117585f0281bc0fc35cb27fbf3d91%7Ctwcon%5Es2_&ref_url=https%3A%2F%2Fcointelegraph.com%2Fnews%2Fchatgpt-v4-aces-the-bar-sats-and-can-identify-exploits-in-eth-contracts
Bývalý riaditeľ Coinbase Conor Grogan povedal, že do GPT-4 vložil ETH smart kontrakt. Chatbot okamžite poukázal na niekoľko bezpečnostných chýb a načrtol, ako možno kód zneužiť.
I dumped a live Ethereum contract into GPT-4.
In an instant, it highlighted a number of security vulnerabilities and pointed out surface areas where the contract could be exploited. It then verified a specific way I could exploit the contract pic.twitter.com/its5puakUW
— Conor (@jconorgrogan) March 14, 2023
Skoršie testy smart kontraktov na ChatGPT zistili, že aj jeho prvá verzia bola schopná v primeranej miere odhaliť chyby kódu.
Rowan Cheung, zakladateľ informačného bulletinu AI The Rundown, zdieľal video, na ktorom GPT prepisuje ručne nakreslenú webovú stránku na kus papiera do kódu.
I just watched GPT-4 turn a hand-drawn sketch into a functional website.
This is insane. pic.twitter.com/P5nSjrk7Wn
— Rowan Cheung (@rowancheung) March 14, 2023
Stále robí aj chyby
OpenAI počas prezentácie uviedla, že ChatGPT4 stále nie je zďaleka dokonalý. Robí veľa chýb predošlých verzii, kde zaradili aj tzv. „halucinácie“, sociálne predsudky či zlé rady.
Novej verzii tiež stále chýbajú dáta po septembri 2021, čo znamená, že nepracuje s najnovšími informáciami. ChatGPT sa taktiež ešte nedokáže učiť zo svojich skúsenosti, čo obmedzuje jeho schopnosť učiť sa nové veci.
OpenAI tiež prezradila, že nová verzia ChatGPT4 bola využívaná už mesiac v prehliadači Bing od Microsoftu.
Zdroj: cointelegraph.com
