ChatGPT vs Claude AI: Je Claude AI lepší Chatbot?

Od svého vydání v listopadu 2022 zůstal ChatGPT dominantní silou v prostoru chatbotů AI. Navzdory dalekosáhlému úsilí několika společností zabývajících se umělou inteligencí se nikomu ve skutečnosti nepodařilo postavit chatbota, který by byl skutečně výzvou pro ChatGPT v celkové kvalitě odezvy. Bard od Googlu? Microsoft Bing AI? Ne, fakt ne.

Claude AI, chatbot postavený AI startupem Anthropic, však ukazuje kvality chatbota, který dokáže sesadit ChatGPT z trůnu. Značný počet uživatelů již říká, že Claude je lepší volba. Ale je to tak? Podívejme se na oba chatboty.

ChatGPT vs. Claude AI: Zdravý rozum a logické uvažování

Při práci s chatboty AI existuje zajímavý kontrast. Na jedné straně dokážou prosvištět složitými úkoly, na jejichž řešení se lidé mohou namáhat celé dny. Na druhou stranu se někdy potýkají s elementárními problémy, které vyžadují jen trochu zdravého rozumu nebo logického uvažování. Testovali jsme tedy ChatGPT i Claude AI, abychom zjistili, který chatbot s umělou inteligencí je lepší v úlohách zdravého rozumu a logického uvažování.

ChatGPT rozdělil problém na kousky a vyřešil jej na první pokus. Claude AI si to také vyzkoušel a problém vyřešil také, ale s jiným přístupem.

U prvního úkolu oba chatboti dokázali problém rozlousknout. Takže jsme přešli k jinému druhu problému. Oba chatboty jsme pověřili zodpovězením trikové otázky.

ChatGPT byl schopen okamžitě zjistit trik - nemůžete pohřbít přeživší, protože nejsou mrtví. Na druhou stranu Claude AI zřejmě chápal, že to byla triková otázka, ale nepodařilo se mu odhalit nejběžnější problém, že přeživší nepohřbíváte.

Místo toho tuto otázku příliš analyzovala a dospěla k závěru, že „nebudou existovat žádné přeživší, které by bylo možné pohřbít“, protože pád z Marsu na Zemi by byl smrtelný. Není to odpověď, kterou jsme očekávali, ale pokud se na věci podíváte z jiného úhlu, je na tom něco pravdy.

V tomto úkolu to zadáváme ChatGPT, ale nemůžeme úplně vyloučit přístup Clauda AI. V rámci našeho posledního úkolu ohledně této metriky jsme se obou chatbotů zeptali, kolik jablek poté zbude na jabloni pět a 10 dní, pokud jsme začali s 10 jablky a pět z nich bylo nakrájeno ještě na stromě. ChatGPT řekl, že stále zbývá 10 jablek.

Na druhou stranu Claude AI poskytl rozumnější odpověď, když uznal, že pět nakrájených jablek pravděpodobně hnije.

Claude AI to jasně pochopil. Vyzkoušeli jsme pár záludnějších problémů a oba chatboti měli při jejich řešení slušný podíl na úspěších i neúspěších. Vzhledem k výsledku, který jsme pozorovali, by mohlo být spravedlivé říci, že zatímco ChatGPT má výhodu, oba chatboti nejsou příliš daleko od sebe ve zdravém rozumu a schopnostech logického uvažování.

ChatGPT vs. Claude AI: Matematické dovednosti

I když nikdy neplánujete použít ChatGPT nebo Claude AI k vyřešení vašeho domácího úkolu z algebry, jejich matematické schopnosti mají dalekosáhlé důsledky. Pro chatboty s umělou inteligencí je matematika klíčem k pochopení logiky reálného světa, identifikaci chybného myšlení a přiznání chyb.

Matematická znalost je v podstatě základní metrikou umělé inteligence. Takže mezi ChatGPT a Claude AI, který chatbot je zběhlejší v matematice? Pověřili jsme oba chatboty vyřešením složitého problému s matematickou produktivitou. Začali jsme s Claudem AI a chatbot problém rozlouskl.

ChatGPT také problém rozlouskl.

Pokračujeme a požádali jsme oba chatboty, aby to vyřešili 8/a-1 = 20/3a-1, poměrně přímočarý matematický problém s překvapivě vysokou chybovostí mezi AI chatboty. ChatGPT to dokázal vyřešit a poskytl správnou odpověď -3 na první pokus.

Claude AI selhal na první pokus, ale když jsme ji vyzvali, aby problém vyřešila krok za krokem (což ji nutí promyslet každý krok své logiky), dokázala to rozlousknout.

Zkusili jsme ještě pár matematických úloh. Zatímco oba chatboti to v některých případech zvládli hned na první pokus, v několika případech potřeboval Claude AI druhý nebo třetí pokus, aby poskytl správnou odpověď. Pokud jde o matematické dovednosti, dáme korunu ChatGPT.

ChatGPT vs. Claude AI: Kreativita

Jedním z největších humbuků Claude AI jsou její kreativní schopnosti. Může se ale rovnat kreativitě ChatGPT? Nebo by to mohlo překonat ChatGPT? Abychom oba chatboty otestovali, dali jsme jim za úkol napsat text k rapové písni, která se rýmuje.

Zvolili jsme test rýmovaného rapu, protože se s ním potýká mnoho jazykových modelů. Většina modelů se obvykle nebude správně rýmovat nebo se rýmovat správně, zatímco samotný text nedává smysl. Aby to bylo zajímavější, rapová píseň bude o pěstování okurek.

Požádali jsme tedy ChatGPT i Clauda AI, aby „napsali rýmovaný rap o pěstování okurek jako farmáře a stát se z toho milionářem." ChatGPT byl první a jak se očekávalo, přineslo to vzrušující text.

Stejnou výzvu jsme pak předali Claudovi AI a také to dalo dobrou šanci.

Oba texty jsou dobré, ale zdálo se, že ChatGPT zde má výhodu. Mělo to lepší rýmování a měli jsme výsledek, který jsme potřebovali na první zkoušku. Museli jsme to zkusit třikrát, než Claude AI dokázal vytvořit texty, které se rýmovaly. Ten dáme ChatGPT.

Po vyzkoušení několika dalších kreativních úkolů se zdálo, že Claude AI vyniká v úkolech souvisejících s psaním a byl schopen psát přirozeněji znějící obsah, jako by to dělal lidský spisovatel. Ačkoli ChatGPT byl lepší v překonávání složitějších kreativních úkolů, někdy se nemohl zbavit pocitu AI chatbota v textu, který vygeneroval. Náš verdikt? ChatGPT i Claude AI jsou kreativní samy o sobě.

ChatGPT vs. Claude AI: Kódovací dovednosti

Stejně jako matematické dovednosti jsou kódovací dovednosti další velmi důležitou metrikou pro posuzování schopností AI chatbota. Zatímco většina uživatelů pravděpodobně nikdy pro kódování použijte chatbota, existují významné zásadní důsledky pro schopnosti chatbota správně psát a rozumět kódu.

I když jsou chatboti v současné době sofistikovaní, zdaleka nejsou tím, čím by se ve skutečnosti mohli stát, kdyby a kdy byli schopni psát kód zdatně. Aby se chatboti s umělou inteligencí skutečně vyvinuli ve výkonné asistenty umělé inteligence, kteří umí víc než jen generovat text, musí umět psát kód, který řeší problémy na vyžádání. Již dříve jsme diskutovali o tom, jak důležité jsou dovednosti kódování pro chatboty s umělou inteligencí Vysvětlovač ChatGPT Code Interpreter.

To znamená, že jsme oba chatboty postavili na dva úkoly kódování. Požádali jsme ChatGPT a Claude AI, aby napsali funkční kód pro aplikaci se seznamem úkolů. Počínaje ChatGPT dokázal AI chatbot na první pokus dodat funkční aplikaci se seznamem úkolů. Zkopírovali jsme to a spustili v prohlížeči a fungovalo to perfektně bez chyb. Zde je výstup v prohlížeči.

Po přechodu na Claude AI chatbot napsal jasně srozumitelný kód. Struktura a logika se zdály být v pořádku. Naneštěstí, navzdory opakovaným pokusům, Claude AI stále postrádala nějakou kritickou logiku, aby kód skutečně běžel v prohlížeči. V tomhle je to fail.

Poté, co Claude AI neuspěla v posledním testu, zkusili jsme jiný druh úlohy kódování, která byla více o analýze kódu a méně o psaní nového kódu. Nahráli jsme pět souborů PHP, které představují kompletní backend pro web, a zeptali jsme se Clauda AI i ChatGPT kde bychom museli upravit všechny nahrané soubory, abychom zajistili, že obdržíme e-mail, jakmile se nový uživatel zaregistruje na místo.

Překvapivě, ChatGPT, přestože měl zdánlivě vynikající kódovací schopnosti, v tom navzdory opakovaným pokusům selhal. Claude AI na druhou stranu dokázal kód analyzovat a přitom identifikovat správná místa, která bylo potřeba upravit, aby bylo dosaženo požadovaných výsledků.

Samozřejmě to nebyl ojedinělý případ, zopakovali jsme to s několika dalšími soubory kódu, ale ChatGPT ve většině případů narazil a zastavil se, zatímco Claude AI neustále přinášel působivé výsledky. Co se týče kódovacích dovedností, vítěz není úplně jednoznačný.

ChatGPT je zjevně výrazně lepší v psaní nového kódu a dokáže spravovat složitý kód s působivou odborností. Claude AI je však výrazně lepší v analýze velkých kódových základen. Pokud tedy chcete napsat kód pro nějaký nový nápad, který máte, ChatGPT je nástroj, na který se můžete obrátit. Pokud chcete analyzovat nebo porozumět kódové základně s tisíci řádky v několika souborech, pak bychom určitě doporučili Claude AI.

Claude AI je silný konkurent na bloku

Claude AI představuje silnou konkurenci pro ChatGPT – takovou, která může jednou konkurovat ChatGPT a potenciálně ho i překonat. Vzhledem k tomu, že Claude je relativně novým modelem umělé inteligence, je záviděníhodné, že dokáže pojmout ChatGPT tak, jak to v současnosti dělá. Vznik Claude AI a kvalita, kterou nabízí, jsou důkazem toho, že konkurence roste.