Onko Hesarin kynäilypalstalla tekoälystä väitetty totta: LM käytännössä todennäköisyyslaskee ja arpoo sanoja peräkkäin?
Kielimalleihin (LM language model) perustuvat tekoälyt omaavat kerroksia, joissa on kielioppia, sanajärjestystä ja sanastoa, sitten ne laskevat todennäköisyyksien perusteella, mitkä sanat seuraavat toisiaan ja siten muodostavat tekstiä? Käytännössä siis koostaen, jäsentäen ja yhdistäen tietoa, jopa kokonaan keksien sitä.
Tekoälyihin on HS mielipidepalstan kirjoittajien mukaan ladattu jo kaikki ihmisen luoma tieto, ja se on käytetty loppuun. Nyt tekoälyjä on koodattu toimimaan sen itsensä generoiman "tiedon" ja aineiston varassa, joka on johtanut jo nyt tekoälyjen tyhmentymiseen, kun laadukasta aineistoa ei ole enempää saatavilla.
Siis onko tekoäly lopulta vain eräänlainen todennäköisyyksiä kieliopin pohjalta laskeva lausegeneraattori? Missä on sen "äly"?
Väittely näistä aiheista käy kiivaana HS palstalla, mutta mikä on totuus? Ratkaiseeko tekoäly ihmisen kykyjen ulottumattomissa olevia haasteita, vai yhdisteleekö se vain sitä, jonka jo tiedämme?
Kommentit (22)
Vierailija kirjoitti:
Häh?!
Noista pointeista HS palstalla väännetään. Osaatko itse selittää tekoälyn toimintalogiikan paremmin?
LLM on tilastollinen malli joka ennustaa seuraavaa sanaa edellisten, syötteen ja kontekstin perusteella. Älykkyyden harha syntyy siitä että sitä on opetettu massiivisen opetusaineiston perusteella.
Kielimalliin perustuva tekoäly on juurikin tuota. Sanojen arpomista todennäköisyyden perusteella toistensa jatkoksi ennalta opittujen mallien mukaan. Vähän samaan tyyliin sinäkin tekstiä kyselyaukostasi tai näppäimistöstäsi suollat.
Vierailija kirjoitti:
LLM on tilastollinen malli joka ennustaa seuraavaa sanaa edellisten, syötteen ja kontekstin perusteella. Älykkyyden harha syntyy siitä että sitä on opetettu massiivisen opetusaineiston perusteella.
Ennustaa, eli laskee todennäköisyyksiä?
Vierailija kirjoitti:
Kielimalliin perustuva tekoäly on juurikin tuota. Sanojen arpomista todennäköisyyden perusteella toistensa jatkoksi ennalta opittujen mallien mukaan. Vähän samaan tyyliin sinäkin tekstiä kyselyaukostasi tai näppäimistöstäsi suollat.
Täysin perätön väite että ihmisäly toimisi samoin.
Vierailija kirjoitti:
Vierailija kirjoitti:
LLM on tilastollinen malli joka ennustaa seuraavaa sanaa edellisten, syötteen ja kontekstin perusteella. Älykkyyden harha syntyy siitä että sitä on opetettu massiivisen opetusaineiston perusteella.
Ennustaa, eli laskee todennäköisyyksiä?
Kyllä ja valitsee parhaiten sopivan. Virtuaalinen neuroverkko on funktioapproksimaattori syötteiden joukosta tulosteiden joukkoon eikä muuta.
Vierailija kirjoitti:
Vierailija kirjoitti:
Kielimalliin perustuva tekoäly on juurikin tuota. Sanojen arpomista todennäköisyyden perusteella toistensa jatkoksi ennalta opittujen mallien mukaan. Vähän samaan tyyliin sinäkin tekstiä kyselyaukostasi tai näppäimistöstäsi suollat.
Täysin perätön väite että ihmisäly toimisi samoin.
Ihminen pystyy myös oivaltamaan, ja luomaan jotain kokonaan uutta.
Vierailija kirjoitti:
Vierailija kirjoitti:
Häh?!
Noista pointeista HS palstalla väännetään. Osaatko itse selittää tekoälyn toimintalogiikan paremmin?
No en...
Oletteko huomanneet kuinka tekoäly käyttää tämän palstan keskusteluja lähteen?
Kysyin yhtä asiaa ja tekoäly antoi minun palstalle kirjoittamani kommentin lähteeksi 😆
Vierailija kirjoitti:
Oletteko huomanneet kuinka tekoäly käyttää tämän palstan keskusteluja lähteen?
Kysyin yhtä asiaa ja tekoäly antoi minun palstalle kirjoittamani kommentin lähteeksi 😆
Käyttää redditiä myös, ainakin Google Gemini jatkuvasti.
Mistä lähtien sattumanvaraisten anonyymien mielipiteet ja (ehkä jopa fiktiiviset) kokemukset ovat tietoa?
Vierailija kirjoitti:
LLM on tilastollinen malli joka ennustaa seuraavaa sanaa edellisten, syötteen ja kontekstin perusteella. Älykkyyden harha syntyy siitä että sitä on opetettu massiivisen opetusaineiston perusteella.
LLM on käytännössä erittäin älykäs autocomplete.
Siinä ei ole itsessään mitään älyä vaan illuusio älystä syntyy siitä että koulutuksessa käytetyssä aineistossa on käytetty älyä. Toivottavasti.
Tekoälyä uhkaa hullun lehmän tauti kun yli puolet kaikesta nettiin ladatusta materiaalista on jo nyt tekoälyn tuottamaa ja tekoäly puolestaan perustaa tuotoksensa malliin jota on koulutettu netistä löytyvän materiaalin pohjalta.
Oletko koskaan miettinyt, mihin ihmisaivojen toiminta perustuu?
Vierailija kirjoitti:
Vierailija kirjoitti:
Vierailija kirjoitti:
Kielimalliin perustuva tekoäly on juurikin tuota. Sanojen arpomista todennäköisyyden perusteella toistensa jatkoksi ennalta opittujen mallien mukaan. Vähän samaan tyyliin sinäkin tekstiä kyselyaukostasi tai näppäimistöstäsi suollat.
Täysin perätön väite että ihmisäly toimisi samoin.
Ihminen pystyy myös oivaltamaan, ja luomaan jotain kokonaan uutta.
Ihmisälyn toiminnan perusteita ei tunneta kuten ei sitäkään miksi LLM:t toimivat niinkin hyvin kuin toimivat. Molemmat ovat vielä mustia laatikoita siinä suhteessa. Ts. ihminen ei välttämättä ole sen luovempi tai oivaltavampi. Se toki tiedetään ettei LLM kykene loogiseen päättelyyn eikä matematiikkaan ellei sitä löydy opetusaineistosta. Lisäksi LLM ei opi reaaliaikaisesti vaan se opetetaan opetusaineistolla.
Vierailija kirjoitti:
Oletko koskaan miettinyt, mihin ihmisaivojen toiminta perustuu?
Olen kyllä ja minua paljon fiksummatkin ovat tuota tutkineet ja pohtineet, mutta kaikkia vastauksia ei vieläkään ole.
Vierailija kirjoitti:
Vierailija kirjoitti:
Vierailija kirjoitti:
Kielimalliin perustuva tekoäly on juurikin tuota. Sanojen arpomista todennäköisyyden perusteella toistensa jatkoksi ennalta opittujen mallien mukaan. Vähän samaan tyyliin sinäkin tekstiä kyselyaukostasi tai näppäimistöstäsi suollat.
Täysin perätön väite että ihmisäly toimisi samoin.
Ihminen pystyy myös oivaltamaan, ja luomaan jotain kokonaan uutta.
Hyvin, hyvin harvoin. Tällaiset ihmiset ovat ihmiskunnan historiassa poikkeuksellisia ja legendaarisia visionäärejä. Ja kyllä kaikki "uusikin" lopulta perustuu vanhojen tietojen yhdistelyyn, vaikeustaso ja luovuusaste tässä prosessissa vain vaihtelee. Emme me pysty edes ajattelemaan mitään sellaista, joka ei jollain tavalla ainakin rakennu meillä jo olevasta tiedosta.
Vierailija kirjoitti:
Vierailija kirjoitti:
Oletteko huomanneet kuinka tekoäly käyttää tämän palstan keskusteluja lähteen?
Kysyin yhtä asiaa ja tekoäly antoi minun palstalle kirjoittamani kommentin lähteeksi 😆
Käyttää redditiä myös, ainakin Google Gemini jatkuvasti.
Mistä lähtien sattumanvaraisten anonyymien mielipiteet ja (ehkä jopa fiktiiviset) kokemukset ovat tietoa?
Jos satut tietämään jonkin erittäin yleisen mutta totaalisen väärän "tiedon" niin pääset hyvin helposti testaamaan tekoälyn todellista toimintaa.
Se ei ymmärrä eikä edes yritä ymmärtää mikä on oikein tai väärin vaan toistaa ylivoimaisesti yleisimmän vastauksen joka koulutukseen käytetystä materiaalista löytyy.
Jos miljoonassa reddit ym-viestissä toistellaan faktana asiaa joka ei pidä paikkansa ja oikea tieto löytyy vain jostain akateemisesta paperista, tekoäly toistelee kuuliaisesti "faktaa" totuutena.
Valokin perustuu todennäköisyyksiin. Näkö on yleensä tärkein aisti. Kannattaa muistaa kaikki kehitys on ollut olemassa aina. Ne pitää vain löytää tavalla tai toisella. Moni on löytynyt arvaamalla.
Vierailija kirjoitti:
Vierailija kirjoitti:
LLM on tilastollinen malli joka ennustaa seuraavaa sanaa edellisten, syötteen ja kontekstin perusteella. Älykkyyden harha syntyy siitä että sitä on opetettu massiivisen opetusaineiston perusteella.
LLM on käytännössä erittäin älykäs autocomplete.
Siinä ei ole itsessään mitään älyä vaan illuusio älystä syntyy siitä että koulutuksessa käytetyssä aineistossa on käytetty älyä. Toivottavasti.
Tekoälyä uhkaa hullun lehmän tauti kun yli puolet kaikesta nettiin ladatusta materiaalista on jo nyt tekoälyn tuottamaa ja tekoäly puolestaan perustaa tuotoksensa malliin jota on koulutettu netistä löytyvän materiaalin pohjalta.
Puhumattakaan siitä että kaivoa myrkytetään jo tarkoituksellisesti.
Häh?!