Sõnastik — Keelemudelid
Vektor ehk embedding
Vektor on arvude rida, mis esindab teksti tähendust nii, et sarnase tähendusega tekstid satuvad üksteise lähedale.
4 tokenitVektorehkembedding
Lihtsalt öeldes#
Mudel muudab lause arvude reaks — tavaliselt mõnesaja kuni mõne tuhande arvuni. Lähedased arvuread tähendavad lähedast tähendust, isegi kui sõnad on täiesti erinevad.
Näide#
„Kui palju see maksab?“ ja „Mis on hind?“ on sõnadena erinevad, aga vektoritena peaaegu samas kohas. Just see teeb võimalikuks tähenduspõhise otsingu.
Miks see sinu jaoks oluline on#
See on mootor RAG-i sees. Kui su otsing peab leidma asju tähenduse, mitte täpse sõna järgi, siis vektorid on see, mis seda teevad.