ЦхатГПТ вс Цлауде АИ: Да ли је Цлауде АИ бољи цхатбот?

Од свог објављивања у новембру 2022., ЦхатГПТ је остао доминантна сила у простору за чат ботове вештачке интелигенције. Упркос далекосежним напорима неколико компанија са вештачком интелигенцијом, нико заиста није успео да направи цхат бот који заиста изазива ЦхатГПТ у укупном квалитету одговора. Гооглеов Бард? Мицрософтов Бинг АИ? Не баш.

Међутим, Цлауде АИ, цхатбот који је направио АИ стартуп Антхропиц, показује квалитете цхат бота који може да свргне ЦхатГПТ. Знатан број корисника већ каже да је Цлауде боља опција. Али да ли је то случај? Хајде да погледамо оба цхат бота.

ЦхатГПТ вс. Клод АИ: Здрав разум и логично закључивање

Постоји интригантан контраст када радите са АИ цхатботовима. С једне стране, они могу да пролазе кроз сложене задатке које људи могу данима решавају. С друге стране, понекад се боре са елементарним проблемима који захтевају само мало здравог разума или логичког закључивања. Дакле, тестирали смо и ЦхатГПТ и Цлауде АИ да видимо који АИ цхатбот је бољи у задацима здравог разума и логичког закључивања.

ЦхатГПТ је разбио проблем на делове и решио га из првог покушаја. Клод АИ се такође потрудио и решио проблем, али са другачијим приступом.

За први задатак, оба цхат бота су успела да реше проблем. Дакле, прешли смо на другу врсту проблема. Задали смо оба цхат бота да одговоре на трик питање.

ЦхатГПТ је могао одмах да уочи трик – не можете сахранити преживеле јер нису мртви. С друге стране, чинило се да је Клод АИ схватио да је то трик питање, али није успео да уочи најздравије питање да се преживели не сахрањују.

Уместо тога, претерано је анализирало питање и дошло до закључка да "неће бити преживелих за сахрану" јер би пад са Марса на Земљу био фаталан. То није одговор који смо очекивали, али ако погледате ствари из другог угла, у томе има истине.

На овом задатку дајемо га ЦхатГПТ-у, али не можемо потпуно искључити приступ Клода АИ. За наш коначни задатак о овој метрици, питали смо оба цхат бота колико ће јабука остати на стаблу јабуке након пет и 10 дана ако смо почели са 10 јабука и пет их је исечено док су још на дрвету. ЦхатГПТ је рекао да ће још остати 10 јабука.

Клод АИ је, с друге стране, дао здраворазумски одговор препознавши да ће пет исечених јабука вероватно иструнути.

Цлауде АИ је очигледно добио ово. Испробали смо још неколико лукавих проблема, а оба цхат бота су имала прилично успеха и неуспеха у решавању њих. Узимајући у обзир исход који смо приметили, могло би бити поштено рећи да иако ЦхатГПТ има предност, оба цхат бота нису превише удаљени у здравом разуму и способностима логичког закључивања.

ЦхатГПТ вс. Клод АИ: Математичке вештине

Чак и ако никада не планирате да користите ЦхатГПТ или Цлауде АИ за решавање домаћег задатка из алгебре, њихове математичке способности имају далекосежне импликације. За АИ цхат ботове, математика је кључ за разумевање логике у стварном свету, идентификацију погрешног размишљања и признавање грешака.

У суштини, знање математике је кључна метрика вештачке интелигенције. Дакле, између ЦхатГПТ-а и Цлауде АИ-а, који цхат бот је искуснији у математици? Задали смо оба цхат бота да реше уврнути математички проблем продуктивности. Почели смо са Цлауде АИ, а цхатбот је решио проблем.

ЦхатГПТ је такође решио проблем.

Настављајући даље, тражили смо од оба цхат бота да реше 8/а-1 = 20/3а-1, прилично директан математички проблем са изненађујуће високом стопом неуспеха међу АИ цхатботовима. ЦхатГПТ је успео да га реши, дајући тачан одговор на -3 при првом покушају.

Цлауде АИ није успео у првом покушају, али када смо га натерали да реши проблем корак по корак (што га приморава да размисли о сваком кораку своје логике), успео је да га реши.

Пробали смо још неколико математичких задатака. Док су оба цхат бота у неким случајевима успела из првог покушаја, у неколико случајева, Цлауде АИ је требао други или трећи покушај да пружи прави одговор. Што се тиче математичких вештина, круну ћемо дати ЦхатГПТ-у.

ЦхатГПТ вс. Клод АИ: Креативност

Једна од највећих узбуђења Цлаудеа АИ су његове креативне способности. Али може ли се подударати са креативношћу ЦхатГПТ-а? Или, може ли можда надмашити ЦхатГПТ? Да бисмо тестирали оба цхат бота, задужили смо их да напишу текст за реп песму која се римује.

Изабрали смо тест римованог репа јер је то нешто са чиме се многи језички модели боре. Већина модела обично неће правилно римовати или правилно римовати, док сам текст нема смисла. Да ствар буде занимљивија, реп песма ће бити о узгоју краставаца.

Дакле, замолили смо и ЦхатГПТ и Цлауде АИ да „напишу римовани реп о узгоју краставаца као фармера и од тога постати милионер." ЦхатГПТ је био први, и као што се очекивало, произвео је нешто узбудљиво текст.

Затим смо истом брзином дали Клода АИ, и то је такође дало поштену прилику.

Оба текста су добра, али изгледа да ЦхатГПТ овде има предност. Имало је боље римовање, а ми смо имали резултат који нам је био потребан на првом огледу. Морали смо да покушамо три пута пре него што је Клод АИ могао да произведе стихове који се римују. Ово ћемо дати ЦхатГПТ-у.

Након што је испробао још неколико креативних задатака, чинило се да је Клод АИ био изванредан у задацима везаним за писање и био је у стању да напише садржај који природније звучи као што би то урадио људски писац. Мада ЦхатГПТ је био бољи у превазилажењу сложенијих креативних задатака, понекад није могао да се отресе тог осећаја АИ цхатбот-а у тексту који је генерисао. Наша пресуда? И ЦхатГПТ и Цлауде АИ су сами по себи креативни.

ЦхатГПТ вс. Клод АИ: Вештине кодирања

Баш као и математичке вештине, вештине кодирања су још једна веома важна метрика за процену способности АИ цхат бота. Док већина корисника вероватно никада неће користите цхатбот за кодирање, постоје значајне основне импликације на способности цхатбот-а да стручно пише и разуме код.

Иако су цхатботови тренутно софистицирани, далеко су од онога што би заправо могли постати ако и када буду у стању да вешто пишу код. Да би АИ цхат ботови заиста еволуирали у моћне АИ асистенте који могу учинити више од генерисања текста, морају бити у стању да пишу код који решава проблеме на захтев. Раније смо разговарали о томе колико су вештине кодирања важне за АИ цхат ботове у нашој Објашњење ЦхатГПТ Цоде Интерпретер.

Уз то, оба цхат бота смо ставили на два задатка кодирања. Замолили смо ЦхатГПТ и Цлауде АИ да напишу функционални код за апликацију листе обавеза. Почевши од ЦхатГПТ-а, АИ цхатбот је био у могућности да испоручи функционалну апликацију за листу обавеза из првог покушаја. Копирали смо га и покренули га у претраживачу, и радио је савршено без грешака. Ево излаза у претраживачу.

Прелазећи на Цлауде АИ, цхатбот је написао јасно разумљив код. Структура и логика су изгледали добро. Нажалост, упркос поновљеним покушајима, Цлауде АИ је наставио да недостаје нека критична логика да се код заиста покрене у претраживачу. Ово је неуспех.

Након што је Цлауде АИ пао на последњем тесту, испробали смо другу врсту задатка кодирања, онај који се више односио на анализу кода, а мање на писање новог кода. Отпремили смо пет ПХП датотека које представљају комплетну позадину за веб локацију и питали Цлаудеа АИ и ЦхатГПТ где бисмо морали да изменимо све отпремљене датотеке како бисмо били сигурни да ћемо добити пошту када се нови корисник региструје на сајту.

Изненађујуће, ЦхатГПТ, упркос томе што је наизглед имао супериорне вештине кодирања, није успео у томе упркос поновљеним покушајима. Цлауде АИ је, с друге стране, био у стању да вешто анализира код док идентификује права места која је требало уредити да би се постигли жељени резултати.

Наравно, ово није био изолован случај, поновили смо га са неколико других кодних фајлова, али ЦхатГПТ је налетео и застој у већини случајева, док је Цлауде АИ наставио да даје импресивне резултате. Што се тиче вештина кодирања, победник није сасвим јасан.

ЦхатГПТ је очигледно знатно бољи у писању новог кода и може да управља сложеним кодом са импресивном стручношћу. Међутим, Цлауде АИ је знатно бољи у анализи великих база кода. Дакле, ако желите да напишете код за неку нову идеју коју имате, ЦхатГПТ је алатка којој се можете обратити. Ако желите да анализирате или да смислите базу кода са хиљадама линија у неколико датотека, онда бисмо дефинитивно препоручили Цлауде АИ.

Цлауде АИ је моћан конкурент у блоку

Цлауде АИ представља моћну конкуренцију за ЦхатГПТ – ону која може једног дана да се такмичи са ЦхатГПТ и потенцијално га надмаши. С обзиром на то да је Цлауде релативно нов АИ модел, завидно је што може да преузме ЦхатГПТ на начин на који тренутно ради. Појава Цлаудеа АИ и квалитет који нуди доказ су да се конкуренција захуктава.