ChatGPT a Google Bard jsou výkonné jazykové modely AI, ale který z nich je ten pravý pro vaše potřeby?

Bard je odpovědí Googlu na explozi AI, která se rychle stává nejničivější technologií století. Generativní chatboti s umělou inteligencí mění způsob, jakým komunikujeme s technologiemi, a techničtí giganti spěchají získat kousek koláče.

Pojďme zhodnotit, jak dobré je úsilí společnosti Google, když jsme se postavili proti ChatGPT.

Porovnání základní technologie

Než porovnáme platformy, je užitečné porozumět základní technologii. Oba se spoléhají na velké jazykové modely (LLM), aby generovaly své „lidské“ reakce.

Jednoduchá definice tohoto složitého tématu by mohla znít – LLM jsou typy modelů strojového učení, které jsou navrženy k provádění úloh zpracování přirozeného jazyka (NLP). Mezi úkoly NLP patří generování konverzačních odpovědí na otázky.

Google Bard a ChatGPT běží na různých LLM:

  • GPT-3.5 (ChatGPT):GPT-3.5 LLM je katalyzátor, který nastartoval generativní chatboty AI. Jedním z problémů tohoto modelu je stáří datové sady. Přestože obdržel některé aktuální aktualizace, datový soubor modelu je omezen na rok 2021.
    instagram viewer
  • LaMDA (Google Bard):Bard používá proprietární LLM společnosti Google s názvem LaMDA. Nejnovější verze datového souboru obsahuje více než 1,56 bilionu slov, což je téměř čtyřicetkrát více, než bylo dříve použito pro LaMDA. Kromě toho, že je Bard aktuálnější, má také přístup k informacím v reálném čase prostřednictvím Vyhledávání Google.

Podívejme se na oba modely v akci a analyzujme jejich výkon.

Testování ChatGPT a Google Bard

Abychom nástroje otestovali, navrhli jsme cvičení, které porovná jejich výkon napříč různými metrikami. Než se však ponoříme do podrobností, nejprve zprovozněte nástroje na vašem stroji.

  • ChatGPT:Můžete přistupovat ChatGPT přes oficiální stránky OpenAI. Abyste mohli začít, stačí si vytvořit účet na OpenAI.
  • Google Bard: Možná se budete muset zapsat do seznamu čekatelů, abyste získali přístup ke službě Google Bard, která vyžaduje účet Google. Můžete se zaregistrovat nebo přidat do pořadníku na Google Bard oficiální webové stránky.

Registrace do obou nástrojů je jednoduchá, i když čekací listina Google Bard je nepohodlná, pokud hledáte okamžitý přístup.

Porovnání přesnosti Google Bard a ChatGPT

Oba chatboti rychle poukazují na to, že přesnost jejich odpovědí by neměla být považována za nominální hodnotu. Nicméně Google Bard by měl mít výraznou výhodu v podobě přístupu k informacím v reálném čase. První test má tento předpoklad ověřit.

Ale abychom byli spravedliví, otestujeme je také na přesnost na předmětu, který nevyžaduje aktuální informace.

Začali jsme tím, že jsme oběma nástrojům položili jednoduchou otázku – „Kolik fanoušků se zúčastnilo mistrovství světa 2022 v Kataru?“

Odpověď Google Bard nám poskytla přesná čísla a přidala některé další statistiky návštěvnosti.

ChatGPT nebyl schopen poskytnout aktuální informace.

Dále jsme zkusili testovat na neaktuálních datech. Požádali jsme oba chatboty, aby odpověděli na tuto otázku – „Jak dlouho by trvala cesta ke slunci?“

Nejprve Google Bard; odpověděl s některými vyčerpávajícími detaily.

Odezvou ChatGPT jsme byli docela zklamáni. To by mělo být uznáno jako hypotetická otázka s výsledkem vyžadujícím pouze základní aritmetiku.

Abychom dali ChatGPT druhou šanci, přeformulovali jsme otázku a zeptali se – „Jak dlouho by mi trvalo cestovat ke slunci rychlostí 65 mph?“

Tentokrát to přineslo několik smysluplných čísel, ale zaokrouhlilo to číslo na 1,5 milionu hodin, což způsobilo rozdíl mezi odpověďmi o osm let. Důvodem tohoto rozdílu by však mohla být proměnlivá vzdálenost mezi Zemí a Sluncem.

Tento test ukazuje, že při sestavování otázek stále musíte být kreativní získat nejlepší výsledky z ChatGPT. Také je třeba znovu zkontrolovat integritu dodaných dat.

Porovnání kreativity Google Bard a ChatGPT

Testování těchto nástrojů na kvalitu jejich kreativního výstupu je složitější. Neexistuje žádné posuvné měřítko pro kreativitu, které umožňuje přímé srovnání. Stanovíme si tedy stejný kreativní úkol a uděláme si osobní úsudek o tom, jak se odpovědi porovnávají.

Požádali jsme oba nástroje, aby složily krátkou báseň o chatbotech ve stylu Williama McGonagalla (skotského básníka proslulého mizernou poezií).

Google Bard nám dal toto:

Ve srovnání s odpovědí ChatGPT níže je to ploché a neinspirativní.

I když se v žádném případě nejedná o rozsáhlý test, tento příklad ukazuje, jak jsme zjistili, že tomu tak je celkově – ChatGPT je v kreativních úkolech lepší než Google Bard.

Co je pro mě to pravé: ChatGPT nebo Google Bard?

Různé LLM, které pohánějí nástroje, jsou zásadní pro to, jak nástroje fungují. Jsou hlavním důvodem rozdílů v testovacích odpovědích, přičemž každá má své vlastní silné a slabé stránky. Výběr mezi nimi bude pravděpodobně určován spíše záměrem uživatele než preferencí uživatele.

Některé z rozhodovacích faktorů zahrnují:

  • Přesnost:Pokud hledáte faktické informace a informace v reálném čase, pak absolutním vítězem musí být Google Bard. S Google Bard je také snazší ověřit si fakta díky přímým odkazům na Google Search. Oba nástroje však postrádaly přímé odkazy na citované informace.
  • Tvořivost:Zjistili jsme, že ChatGPT byl schopen vytvářet kreativnější odpovědi. Pokud hledáte návrhy a pomoc při psaní, ChatGPT je lepší.
  • Zabezpečení a bezpečnost: Existují obavy o online bezpečnost ChatGPT, který používá reaktivní přístup k zabezpečení. Jinými slovy, bezpečnostní problémy jsou řešeny tak, jak vznikají. Google Bard má proaktivnější přístup, ale stále využívá zpětnou vazbu ke zlepšení procesů. Pokud máte obavy o bezpečnost, existují spoustu způsobů, jak mohou vaše děti bezpečně používat ChatGPT.
  • Snadnost použití: Oba nástroje se snadno používají a způsob, jakým s nimi pracujete, je podobný. Neexistují však žádné další návrhy na vaše výzvy, což je funkce, kterou bychom od Google Bard očekávali. Význam tohoto nabývá na váze, když vy porovnejte Barda s Bing Chatem od Microsoftu.

Oba jsou zdarma, takže nejlepší radou je vyzkoušet je a zjistit, co vám vyhovuje. Naše zkušenosti nám říkají, že obě platformy mají své místo a kterou z nich si vyberete, závisí do značné míry na rozsahu vašeho vyhledávacího záměru.

Na obou platformách je spousta hrubých hran, to se dá očekávat. Jedná se o novou technologii a obě jsou příklady programů živého testování, které na veřejnosti dělají chyby. Druhou stranou mince je, že takové rozšířené používání a zpětná vazba, kterou generuje, urychlí vývoj obou modelů.

Jsme na začátku technologické revoluce, která je tak rušivá, že mnohé z jejích dopadů musí být navzdory mnoha spekulacím teprve určeny. Ale není pochyb o tom, že nástroje jako Bard a ChatGPT změní mnohé z toho, jak pracujeme, odpočíváme a hrajeme.