Suuria kielimalleja (LLM) on kaikenmuotoisia ja -kokoisia, ja ne auttavat sinua parhaaksi katsomallasi tavalla. Mutta mikä on paras? Testasimme Alphabetin, OpenAI: n ja Metan hallitsevat tekoälyt.

Mitä sinun tulee tietää AI Chatboteista

Yleinen tekoäly on ollut tietojenkäsittelytieteilijöiden tavoite vuosikymmeniä, ja tekoäly on toiminut tieteiskirjailijoiden ja elokuvantekijöiden tukipilarina vielä pidempään.

AGI: n älykkyys muistuttaa ihmisen kognitiivisia kykyjä Turingin testi-testi koneen kyvystä osoittaa älykästä käyttäytymistä, jota ei voi erottaa ihmisen käyttäytymisestä - pysyi lähes kiistatta sen seitsemän vuosikymmenen ajan sen ensimmäisestä käyttöönotosta.

Äärimmäisen laajamittaisen tietojenkäsittelyn, valtavien rahamäärien ja hämmästyttävän vapaan tiedon määrän viimeaikainen lähentyminen Avoimessa Internetissä saatavilla olevat teknologiajättiläiset pystyivät kouluttamaan malleja, jotka voivat ennustaa seuraavan sanaosan – tai tunnuksen – peräkkäin rahakkeita.

Kirjoitushetkellä molemmat

instagram viewer
Googlen Bard ja OpenAI: n ChatGPT voit käyttää ja testata niiden verkkokäyttöliittymien kautta.

Metan kielimalli LLaMa ei ole saatavilla verkosta, mutta voit helposti lataa ja suorita LLaMa omalla laitteistollasi ja käytä sitä komentorivin kautta tai aja Dalai omalla koneellasi-yksi useista sovelluksista, joissa on käyttäjäystävällinen käyttöliittymä.

Testiä varten käytämme Stanfordin yliopiston Alpaca 7B -mallia – LLaMa-sovitusta – ja kohtaamme sen Bardia ja ChatGPT: tä vastaan.

Seuraavien vertailujen ja testien ei ole tarkoitus olla tyhjentäviä, vaan ne antavat sinulle viitteen tärkeimmistä kohdista ja ominaisuuksista.

Mikä on helpoin suurikielinen malli käyttää?

Sekä Bard että ChatGPT vaativat tilin palvelun käyttämiseen. Sekä Google- että OpenAI-tilit ovat helppoja ja ilmaisia ​​luoda, ja voit heti alkaa esittää kysymyksiä.

Kuitenkin, jotta voit suorittaa LLaMaa paikallisesti, sinulla on oltava erikoisosaamista tai kyky seurata opetusohjelmaa. Tarvitset myös huomattavan määrän säilytystilaa.

Mikä on yksityisin suuri kielimalli?

Sekä Bardilla että ChatGPT: llä on laajat tietosuojakäytännöt, ja Google korostaa toistuvasti asiakirjoissaan että sinun ei tule sisällyttää tietoja, joita voidaan käyttää tunnistamaan sinut tai muut Bardiisi keskusteluja."

Oletuksena Google kerää keskustelusi ja yleisen sijaintisi IP-osoitteesi, palautteesi ja käyttötietosi perusteella. Nämä tiedot säilytetään Google-tililläsi jopa 18 kuukautta. Vaikka voit keskeyttää Bard-toimintasi tallentamisen, sinun tulee olla tietoinen siitä, että "tuotteidemme laadun parantamiseksi ja parantamiseksi tarkastajat lukevat, kommentoivat ja käsittelevät Bard-keskustelujasi."

Myös Bardin käyttö on standardin alaista Googlen tietosuojakäytäntö.

OpenAI: n tietosuojakäytäntö on suurin piirtein samanlainen ja kerää IP-osoite- ja käyttötietoja. Toisin kuin Googlen aikarajoitettu säilytys, OpenAI "säilyttää henkilötietosi vain niin kauan kuin tarvitsemme tarjotaksemme Palvelua sinulle tai muihin laillisiin liiketoimintatarkoituksiin, kuten riitojen ratkaisemiseen, turvallisuussyistä tai lakisääteisten vaatimusten noudattamiseen. velvoitteet."

Sitä vastoin paikallinen malli omalla koneellasi ei vaadi tiliä tai jaa käyttäjätietoja kenenkään kanssa.

Millä LLM: llä on paras yleinen tietämys?

Testataksemme, millä LLM: llä on paras yleinen tietämys, esitimme kolme kysymystä.

Ensimmäinen kysymys: "Millä kansallisella lipulla on viisi sivua?" Bard vastasi oikein, sillä Nepalin lipulla on viisi sivua.

ChatGPT väitti vakuuttavasti, että "Ei ole kansallista lippua, jolla olisi viisi sivua. Kansallisliput ovat tyypillisesti suorakaiteen tai neliön muotoisia, ja niille on tunnusomaista niiden erilaiset värit, kuviot ja symbolit.

Paikallinen mallimme tuli lähelle ja totesi, että "Intian kansallislipussa on viisi sivua ja se suunniteltiin vuonna 1916 edustamaan Intian lippua. itsenäisyysliike." Vaikka tämä lippu oli olemassa ja sillä oli viisi puolta, se oli Indian Home Rule Movementin lippu - ei kansallislippu.

Yksikään malleistamme ei pystynyt vastaamaan, että oikea termi herneenmuotoiselle esineelle on "pisiform" ChatGPT: n kanssa niin pitkälle, että viittaa siihen, että herneillä on "kolmiulotteinen geometrinen muoto, joka on täysin pyöreä ja symmetrinen."

Kaikki kolme chatbottia tunnistivat oikein Franco Malerban italiaksi astronautiksi ja astronautin jäseneksi Euroopan parlamentti, jossa Bard antoi vastauksen, joka on muotoiltu samalla tavalla kuin Malerban Wikipedian osa sisääntulo.

Mikä LLM on hyvä teknisille ohjeille?

Kun sinulla on teknisiä ongelmia, saatat tuntea houkutusta kääntyä chatbotin puoleen saadaksesi apua. Vaikka tekniikka etenee, jotkut asiat pysyvät ennallaan. BS 1363 -sähköpistoke on ollut käytössä Isossa-Britanniassa, Irlannissa ja monissa muissa maissa vuodesta 1947 lähtien. Kysyimme kielimalleilta, kuinka se kytketään oikein.

Pistokkeeseen kiinnitetyissä kaapeleissa on jännitteellinen johto (ruskea), maadoitusjohto (keltainen/vihreä) ja nollajohto (sininen). Ne on kiinnitettävä oikeisiin liittimiin pistokekotelon sisällä.

Dalai-toteutus tunnisti pistokkeen oikein "englanninkieliseksi", sitten poikkesi kurssista ja antoi sen sijaan ohjeet vanhemmalle pyöreäpintaiselle BS 546 -pistokkeelle yhdessä vanhempien johdotusvärien kanssa.

ChatGPT oli hieman hyödyllisempi. Se merkitsi oikein johdotuksen värit ja antoi materiaaliluettelon ja kahdeksan ohjeen sarjan. ChatGPT ehdotti myös, että ruskea johto asetetaan liittimeen, jossa on merkintä "L" ja sininen johto "N"-liittimeen. liitin ja keltainen johto "E." Tämä olisi oikein, jos BS1363-liittimet olisi merkitty, mutta ne eivät ole.

Bard tunnisti johtojen oikeat värit ja käski meitä kytkemään ne Live-, Neutral- ja Earth-liittimiin. Se ei antanut ohjeita näiden tunnistamiseen.

Meidän mielestämme. mikään chatboteista ei antanut riittäviä ohjeita auttamaan jotakuta kytkemään BS 1363 -sähköpistokkeen oikein. Lyhyt ja oikea vastaus olisi: "Sininen vasemmalla, ruskea oikealla."

Mikä LLM on hyvä koodin kirjoittamiseen?

Python on hyödyllinen ohjelmointikieli joka toimii useimmilla nykyaikaisilla alustoilla. Neuvoimme mallejamme käyttämään Pythonia ja "Rakenna peruslaskinohjelma, joka pystyy suorittamaan aritmeettisia operaatioita, kuten yhteen-, vähennys-, kerto- ja jakolaskuja. Sen pitäisi ottaa käyttäjän syöte ja näyttää tulos." Tämä on yksi parhaat ohjelmointiprojektit aloittelijoille.

Vaikka sekä Bard että ChatGPT palauttivat välittömästi käyttökelpoisen ja perusteellisesti kommentoidun koodin, jonka pystyimme testaamaan ja todentamaan, mikään paikallisen mallimme koodi ei toiminut.

Mikä LLM kertoo parhaat vitsit?

Huumori on yksi ihmisenä olemisen perustekijöistä ja varmasti yksi parhaista tavoista erottaa ihminen ja kone toisistaan. Annoimme jokaiselle mallillemme yksinkertaisen kehotteen: "Luo omaperäinen ja hauska vitsi."

Onneksi koomikoiden kaikkialla ja koko ihmisrodussa yksikään malleista ei kyennyt luomaan alkuperäistä vitsiä.

Bard julkaisi klassikon: "Miksi variksenpelätin voitti palkinnon? Hän oli erinomainen alallaan."

Sekä paikallinen toteutus että ChatGPT tarjosivat huokauksen arvoisen: "Miksi tiedemiehet eivät luota atomeihin? Koska ne muodostavat kaiken!"

Johdannainen mutta alkuperäinen vitsi olisi: "Kuinka suuret kielimallit ovat kuin atomit? Molemmat keksivät asioita!"

Lukekaa se ensin täältä, hyvät ihmiset.

Mikään chatbot ei ole täydellinen

Huomasimme, että vaikka kaikilla kolmella suurella kielimallilla on hyvät ja huonot puolensa, mikään niistä ei voi korvata ihmisen todellista asiantuntemusta erikoistiedolla.

Vaikka sekä Bard että ChatGPT antoivat parempia vastauksia koodauskysymykseemme ja ovat erittäin helppokäyttöisiä, Suuren kielimallin käyttäminen paikallisesti tarkoittaa, että sinun ei tarvitse huolehtia yksityisyydestä tai sensuuri.

Jos haluat luoda upeaa tekoälytaidetta huolehtimatta siitä, että joku katsoo olkapääsi yli, voit helposti käyttää taide-AI-mallia myös paikallisella koneellasi.