AI- ja ML-uutisia suomeksi

Muistin ja maadoituksen leikkauspiste tekoälyjärjestelmissä

Kielimallien muistissa tarkoitetaan tekoälyn järjestelmien kykyä pitää ja muistaa tärkeää tietoa, mikä edistää sen kykyä päättää ja oppia jatkuvasti kokemuksista. Muistin kategorioita on neljä: lyhytaikainen muisti, keskipitkä muisti, pitkäaikainen muisti ja työmuisti. Lyhytaikainen muisti pitää tietoa erittäin lyhyen ajan, yleensä sekunteja tai minuutteja, ja sitä käytetään viimeksi lähetettyjen viestien referointiin ja relevanttien vastausten generointiin. Keskipitkä muisti pitää tietoa kohtuullisen ajan, esimerkiksi minuutteja tai tunteja, ja sitä käytetään istuntojen hallintaamiseen ja keskusteluhistorian ajan tasalle pitämiseen. Pitkäaikainen muisti pitää tietoa rajattoman pitkän ajan ja sitä käytetään ymmärtämään oppilaiden hyvin menestyviä aineita ja niitä, joissa he kärsivät. Työmuisti on kielimallin osa, mikä mahdollistaa mallin pitämän tietoa, manipuloimisen ja hienosäätämisen, parantaen mallin kykyä päättää. Päättämä on kyky tuottaa tulos, joka on kontekstuaalisesti relevantti ja merkityksellinen. Kielimallin päättämäprosessi voi olla yhdistelmä kielimallin koulutusta, hienosäätämistä ja ulkoisia prosesseja, mukaan lukien muisti.
favicon
towardsdatascience.com
The Intersection of Memory and Grounding in AI Systems
Create attached notes ...