ChatGPT a Google Bard sú výkonné jazykové modely AI, ale ktorý z nich je ten správny pre vaše potreby?
Bard je odpoveďou spoločnosti Google na explóziu AI, ktorá sa rýchlo stáva najprevratnejšou technológiou storočia. Generatívne chatboty AI menia spôsob, akým komunikujeme s technológiou, a tech giganti sa ponáhľajú získať kúsok koláča.
Poďme posúdiť, aké dobré je úsilie spoločnosti Google, keď sme sa postavili proti ChatGPT.
Porovnanie základnej technológie
Predtým, ako porovnáme platformy, je užitočné porozumieť základnej technológii. Obidve sa spoliehajú na veľké jazykové modely (LLM), aby generovali svoje reakcie „podobné ľuďom“.
Jednoduchá definícia pre túto komplexnú tému by mohla znieť – LLM sú typy modelov strojového učenia, ktoré sú navrhnuté na vykonávanie úloh spracovania prirodzeného jazyka (NLP). Úlohy NLP zahŕňajú generovanie konverzačných odpovedí na otázky.
Google Bard a ChatGPT fungujú na rôznych LLM:
- GPT-3.5 (ChatGPT):GPT-3.5 LLM je katalyzátor, ktorý naštartoval generatívne chatboty AI. Jedným z problémov tohto modelu je vek súboru údajov. Hoci dostal niekoľko aktuálnych aktualizácií, súbor údajov modelu je obmedzený na rok 2021.
- LaMDA (Google Bard):Bard používa vlastný LLM spoločnosti Google s názvom LaMDA. Najnovšia verzia súboru údajov obsahuje viac ako 1,56 bilióna slov, čo je takmer štyridsaťkrát viac, ako sa predtým používalo pre LaMDA. Okrem toho, že je Bard aktuálnejší, pristupuje aj k informáciám v reálnom čase prostredníctvom Vyhľadávania Google.
Pozrime sa na oba modely v akcii a analyzujme ich výkon.
Testovanie ChatGPT a Google Bard
Na otestovanie nástrojov sme navrhli cvičenie, ktoré porovná ich výkonnosť v rámci rôznych metrík. Ale predtým, než sa ponoríme do špecifík, najprv spustite nástroje na vašom stroji.
- ChatGPT:Môžete pristupovať ChatGPT prostredníctvom oficiálnej webovej stránky OpenAI. Ak chcete začať, stačí si vytvoriť účet na OpenAI.
- Google Bard: Možno sa budete musieť pridať do zoznamu čakateľov, aby ste získali prístup k službe Google Bard, ktorá vyžaduje účet Google. Môžete sa zaregistrovať alebo pridať do poradovníka na Google Bard oficiálna web stránka.
Registrácia pre oba nástroje je jednoduchá, hoci čakacia listina Google Bard je nepohodlná, ak hľadáte okamžitý prístup.
Porovnanie presnosti Google Bard a ChatGPT
Obaja chatboti rýchlo poukazujú na to, že presnosť ich odpovedí by sa nemala považovať za nominálnu hodnotu. Google Bard by však mal mať výraznú výhodu v tom, že má prístup k informáciám v reálnom čase. Prvý test má za cieľ overiť tento predpoklad.
Aby sme však boli spravodliví, otestujeme ich aj na presnosť v predmete, ktorý nevyžaduje aktuálne informácie.
Začali sme tým, že sme obom nástrojom položili jednoduchú otázku – „Koľko fanúšikov sa zúčastnilo Majstrovstiev sveta 2022 v Katare?
Odpoveď Google Bard nám poskytla presné čísla a pridala niekoľko ďalších štatistík návštevnosti.
ChatGPT nedokázal poskytnúť aktuálne informácie.
Ďalej sme sa pokúsili testovať na neaktuálnych údajoch. Požiadali sme oboch chatbotov, aby odpovedali na túto otázku – „Ako dlho by trvala cesta k slnku?“
Najprv Google Bard; odpovedal s niektorými komplexnými podrobnosťami.
Z odozvy ChatGPT sme boli dosť sklamaní. Toto by sa malo považovať za hypotetickú otázku, ktorej výsledok si vyžaduje iba základnú aritmetiku.
Aby sme dali ChatGPT druhú šancu, preformulovali sme otázku a spýtali sme sa – „Ako dlho by mi trvalo cestovať k slnku rýchlosťou 65 mph?“
Tentoraz priniesol niekoľko zmysluplných čísel, ale zaokrúhlil číslo na 1,5 milióna hodín, čo spôsobilo rozdiel medzi odpoveďami o osem rokov. Príčinou tohto rozdielu však môže byť rozdielna vzdialenosť medzi Zemou a Slnkom.
Tento test ukazuje, že stále musíte byť kreatívni pri zostavovaní svojich otázok získať najlepšie výsledky z ChatGPT. Okrem toho musíte znova skontrolovať integritu dodaných údajov.
Porovnanie kreativity Google Bard a ChatGPT
Testovanie týchto nástrojov na kvalitu ich kreatívneho výstupu je zložitejšie. Neexistuje žiadna posuvná stupnica pre kreativitu, ktorá umožňuje priame porovnania. Stanovíme si teda identickú kreatívnu úlohu a urobíme osobný úsudok o tom, ako sa odpovede porovnávajú.
Požiadali sme oba nástroje, aby zložili krátku báseň o chatbotoch v štýle Williama McGonagalla (škótskeho básnika známeho mizernou poéziou).
Google Bard nám dal toto:
V porovnaní s odpoveďou ChatGPT nižšie je to ploché a neinšpirujúce.
Aj keď to v žiadnom prípade nie je rozsiahly test, tento príklad ukazuje, čo sme zistili ako celok – ChatGPT je v kreatívnych úlohách lepší ako Google Bard.
Čo je pre mňa to pravé: ChatGPT alebo Google Bard?
Rôzne LLM, ktoré poháňajú nástroje, sú základom toho, ako nástroje fungujú. Sú kľúčovým dôvodom rozdielov v testovacích odozvách, pričom každá z nich má svoje silné a slabé stránky. Výber medzi nimi bude pravdepodobne závisieť skôr od úmyslu používateľa ako od preferencií používateľa.
Niektoré z rozhodujúcich faktorov zahŕňajú:
- Presnosť:Ak hľadáte faktické informácie a informácie v reálnom čase, úplným víťazom musí byť Google Bard. Je tiež jednoduchšie overiť si fakty pomocou Google Bard vďaka priamym odkazom na Google Search. Obom nástrojom však chýbali priame prepojenia na citované informácie.
- Kreativita:Zistili sme, že ChatGPT dokázal produkovať kreatívnejšie odpovede. Ak hľadáte návrhy a pomoc pri písaní, ChatGPT je lepší.
- Bezpečnosť a bezpečnosť: Existujú obavy týkajúce sa online bezpečnosti služby ChatGPT, ktorá využíva reaktívny prístup k bezpečnosti. Inými slovami, obavy o bezpečnosť sa riešia tak, ako vznikajú. Google Bard má proaktívnejší prístup, ale stále využíva spätnú väzbu na zlepšenie procesov. Ak máte obavy o bezpečnosť, existujú veľa spôsobov, ako môžu vaše deti bezpečne používať ChatGPT.
- Jednoduchosť použitia: Oba nástroje sa ľahko používajú a spôsob interakcie s nimi je podobný. Neexistujú však žiadne ďalšie návrhy na vaše výzvy, čo je funkcia, ktorú by sme od Google Bard očakávali. Význam tohto nadobúda väčšiu váhu, keď vy porovnajte Bard s Microsoft Bing Chat.
Obe sú zadarmo, takže najlepšia rada je vyskúšať ich a zistiť, čo vám vyhovuje. Naše skúsenosti nám hovoria, že obe platformy majú svoje miesto a ktorú z nich si vyberiete, do značnej miery závisí od rozsahu vášho vyhľadávacieho zámeru.
Na oboch platformách je veľa hrubých hrán, to sa dá očakávať. Ide o novú technológiu a obe sú príkladmi programov na živé testovanie, ktoré robia chyby na verejnosti. Druhou stranou mince je, že takéto rozšírené používanie a spätná väzba, ktorú generuje, urýchli vývoj oboch modelov.
Sme na začiatku technologickej revolúcie, ktorá je taká rušivá, že mnohé z jej dopadov sa ešte musia určiť napriek mnohým špekuláciám. Niet pochýb o tom, že nástroje ako Bard a ChatGPT zmenia veľa z toho, ako pracujeme, odpočívame a hráme sa.