Zatiaľ čo ChatGPT je jedným z najpopulárnejších chatbotov AI, už nemusí byť najlepší. Claude AI ponúka niektoré funkcie, ktoré porážajú GPT. Ale čo je lepšie?
Od svojho vydania v novembri 2022 zostal ChatGPT dominantnou silou v priestore chatbotov AI. Napriek ďalekosiahlemu úsiliu niekoľkých spoločností s umelou inteligenciou sa nikomu nepodarilo zostaviť chatbota, ktorý by bol skutočne výzvou pre ChatGPT v celkovej kvalite odozvy. Bard od Googlu? AI Bing od Microsoftu? Nie, fakt nie.
Claude AI, chatbot vytvorený startupom AI Anthropic, však ukazuje kvality chatbota, ktorý dokáže zosadiť ChatGPT z trónu. Značný počet používateľov už hovorí, že Claude je lepšia voľba. Ale je to tak? Pozrime sa na oboch chatbotov.
ChatGPT vs. Claude AI: Zdravý rozum a logické uvažovanie
Pri práci s chatbotmi AI existuje zaujímavý kontrast. Na jednej strane môžu prechádzať zložitými úlohami, na ktorých vyriešenie môžu ľudia pracovať celé dni. Na druhej strane niekedy zápasia s elementárnymi problémami, ktoré si vyžadujú len trochu zdravého rozumu alebo logického uvažovania. Takže sme testovali ChatGPT aj Claude AI, aby sme zistili, ktorý chatbot AI bol lepší v úlohách zdravého rozumu a logického uvažovania.
ChatGPT rozdelil problém na kúsky a vyriešil ho na prvý pokus. Claude AI to tiež vyskúšal a vyriešil problém tiež, ale s iným prístupom.
Pri prvej úlohe sa obom chatbotom podarilo problém rozlúsknuť. Tak sme prešli k inému druhu problému. Obom chatbotom sme dali za úlohu odpovedať na trikovú otázku.
ChatGPT bol schopný okamžite zistiť trik - nemôžete pochovať preživších, pretože nie sú mŕtvi. Na druhej strane Claude AI zrejme pochopil, že ide o trikovú otázku, ale nedokázal odhaliť najbežnejší problém, že preživších nepochovávate.
Namiesto toho túto otázku príliš analyzovala a dospela k záveru, že „nebudú existovať žiadni preživší, ktorých by bolo možné pochovať“, pretože pád z Marsu na Zem by bol smrteľný. Nie je to odpoveď, ktorú sme očakávali, ale ak sa na veci pozriete z iného uhla pohľadu, je na tom niečo pravdy.
V tejto úlohe to dávame ChatGPT, ale nemôžeme úplne vylúčiť prístup Claude AI. V rámci našej poslednej úlohy v tejto metrike sme sa oboch chatbotov spýtali, koľko jabĺk potom zostane na jabloni päť a 10 dní, ak sme začali s 10 jablkami a päť z nich bolo nakrájaných ešte na strome. ChatGPT povedal, že ešte zostane 10 jabĺk.
Claude AI, na druhej strane, dal rozumnejšiu odpoveď, keď uznal, že päť nakrájaných jabĺk pravdepodobne zhnije.
Claude AI to jednoznačne pochopil. Vyskúšali sme niekoľko záludnejších problémov a obaja chatboti mali pri ich riešení poriadny podiel na úspechoch a neúspechoch. Vzhľadom na výsledok, ktorý sme pozorovali, by bolo spravodlivé povedať, že zatiaľ čo ChatGPT má výhodu, obaja chatboti nie sú príliš ďaleko od seba v oblasti zdravého rozumu a schopností logického uvažovania.
ChatGPT vs. Claude AI: Matematické zručnosti
Aj keď nikdy neplánujete použiť ChatGPT alebo Claude AI na vyriešenie domácich úloh z Algebry, ich matematické schopnosti majú ďalekosiahle dôsledky. Pre AI chatbotov je matematika kľúčom k pochopeniu logiky reálneho sveta, identifikácii chybného myslenia a priznaniu chýb.
Znalosť matematiky je v podstate základnou metrikou umelej inteligencie. Takže medzi ChatGPT a Claude AI, ktorý chatbot je zdatnejší v matematike? Obom chatbotom sme dali za úlohu vyriešiť zložitý problém s matematickou produktivitou. Začali sme s Claude AI a chatbot problém rozlúskol.
ChatGPT tiež rozlúštil problém.
Pokračujeme a požiadali sme oboch chatbotov, aby to vyriešili 8/a-1 = 20/3a-1, pomerne jednoduchý matematický problém s prekvapivo vysokou mierou zlyhania medzi AI chatbotmi. ChatGPT to dokázal vyriešiť a poskytol správnu odpoveď -3 pri prvom pokuse.
Claude AI zlyhal na prvý pokus, ale keď sme ho vyzvali, aby problém vyriešil krok za krokom (čo ho núti premýšľať nad každým krokom svojej logiky), dokázalo ho rozlúsknuť.
Skúsili sme ešte niekoľko matematických úloh. Aj keď sa to obom chatbotom v niektorých prípadoch podarilo na prvý pokus, v niekoľkých prípadoch potreboval Claude AI druhý alebo tretí pokus, aby poskytol správnu odpoveď. Čo sa týka matematických zručností, dáme korunu ChatGPT.
ChatGPT vs. Claude AI: Kreativita
Jedným z najväčších humbukov Claude AI sú jej kreatívne schopnosti. Dokáže sa však vyrovnať kreativite ChatGPT? Alebo by to mohlo prekonať ChatGPT? Aby sme oboch chatbotov otestovali, dali sme im za úlohu napísať text pre rapovú skladbu, ktorá sa rýmuje.
Vybrali sme si test rýmovaného rapu, pretože je to niečo, s čím veľa jazykových modelov zápasí. Väčšina modelov sa zvyčajne nebude rýmovať správne alebo sa rýmovať správne, zatiaľ čo samotný text nedáva zmysel. Aby to bolo zaujímavejšie, rapová pieseň bude o pestovaní uhoriek.
Požiadali sme teda ChatGPT aj Clauda AI, aby „napísali rýmovaný rap o pestovaní uhoriek ako farmára a stať sa z toho milionárom." ChatGPT bol na prvom mieste a ako sa očakávalo, priniesol niekoľko vzrušujúcich texty piesní.
Potom sme tú istú výzvu odovzdali Claudovi AI a tiež to dalo slušnú šancu.
Oba texty sú dobré, ale zdá sa, že ChatGPT tu má výhodu. Bolo to lepšie rýmované a mali sme výsledok, ktorý sme potrebovali na prvý pokus. Museli sme to skúsiť trikrát, kým Claude AI dokázal vytvoriť texty, ktoré sa rýmovali. Toto dáme ChatGPT.
Po vyskúšaní niekoľkých ďalších kreatívnych úloh sa Claude AI zdalo, že vyniká v úlohách súvisiacich s písaním a dokázal napísať prirodzenejší obsah, ako by to urobil ľudský spisovateľ. Hoci ChatGPT bol lepší pri prekonávaní zložitejších kreatívnych úloh, niekedy sa nedokázal zbaviť pocitu AI chatbota v texte, ktorý vygeneroval. Náš verdikt? ChatGPT aj Claude AI sú kreatívne samy osebe.
ChatGPT vs. Claude AI: Zručnosti kódovania
Rovnako ako matematické zručnosti, aj kódovacie zručnosti sú ďalšou veľmi dôležitou metrikou na posudzovanie schopností AI chatbota. Zatiaľ čo väčšina používateľov pravdepodobne nikdy nebude na kódovanie použite chatbota, existujú významné základné dôsledky pre schopnosti chatbota písať a rozumieť kódu zdatne.
Zatiaľ čo chatboty sú v súčasnosti sofistikované, sú ďaleko od toho, čím by sa v skutočnosti mohli stať, ak a keď dokážu písať kód zdatne. Aby sa chatboty AI skutočne vyvinuli na výkonných asistentov AI, ktorí dokážu viac než len generovať text, musia byť schopní písať kód, ktorý rieši problémy na požiadanie. Už sme predtým diskutovali o tom, aké dôležité sú zručnosti kódovania pre chatboty AI v našom systéme Vysvetlenie tlmočníka kódu ChatGPT.
To znamená, že sme oboch chatbotov postavili na dve úlohy kódovania. Požiadali sme ChatGPT a Claude AI, aby napísali funkčný kód pre aplikáciu so zoznamom úloh. Počnúc ChatGPT dokázal AI chatbot na prvý pokus dodať funkčnú aplikáciu so zoznamom úloh. Skopírovali sme a spustili sme to v prehliadači a fungovalo to perfektne bez chýb. Tu je výstup z prehliadača.
Po prechode na Claude AI chatbot napísal jasne zrozumiteľný kód. Štruktúra a logika sa zdali byť v poriadku. Bohužiaľ, napriek opakovaným pokusom Claude AI stále chýbala nejaká kritická logika, aby sa kód skutočne spúšťal v prehliadači. V tomto je to zlyhanie.
Keď Claude AI zlyhal v poslednom teste, vyskúšali sme iný druh kódovacej úlohy, ktorá bola viac o analýze kódu a menej o písaní nového kódu. Nahrali sme päť súborov PHP, ktoré predstavujú kompletný backend pre webovú stránku, a spýtali sme sa Claude AI aj ChatGPT kde by sme museli upraviť všetky odovzdané súbory, aby sme zabezpečili, že dostaneme e-mail, keď sa na server zaregistruje nový používateľ stránky.
Prekvapivo, ChatGPT, napriek tomu, že zdanlivo má vynikajúce kódovacie schopnosti, zlyhal napriek opakovaným pokusom. Claude AI, na druhej strane, bol schopný analyzovať kód odborne a zároveň identifikovať správne miesta, ktoré bolo potrebné upraviť, aby sa dosiahli požadované výsledky.
Samozrejme, nebol to ojedinelý prípad, zopakovali sme to s niekoľkými ďalšími súbormi kódu, ale ChatGPT vo väčšine prípadov narazil a zastavil sa, zatiaľ čo Claude AI neustále prinášal pôsobivé výsledky. Čo sa týka kódovacích schopností, víťaz nie je úplne jednoznačný.
ChatGPT je jednoznačne výrazne lepší v písaní nového kódu a dokáže spravovať zložitý kód s pôsobivou odbornosťou. Claude AI je však výrazne lepší v analýze veľkých kódových základní. Takže, ak chcete napísať kód pre nejaký nový nápad, ktorý máte, ChatGPT je nástroj, na ktorý sa môžete obrátiť. Ak chcete analyzovať alebo pochopiť kódovú základňu s tisíckami riadkov v niekoľkých súboroch, potom by sme určite odporučili Claude AI.
Claude AI je silný konkurent v bloku
Claude AI predstavuje silnú konkurenciu pre ChatGPT – konkurenciu, ktorá môže niekedy konkurovať a potenciálne aj prekonať ChatGPT. Vzhľadom na to, že Claude je relatívne nový model AI, je závideniahodné, že dokáže poraziť ChatGPT tak, ako to robí v súčasnosti. Vznik Claude AI a kvalita, ktorú ponúka, sú dôkazom toho, že konkurencia sa zahrieva.