Què és un embedding?

Un embedding és una llista de números que captura el que significa un fragment de text, no només quines paraules conté. Dues frases que parlen del mateix, com ara "compensació per vacances" i "permís retribuït", acaben properes en els números, tot i que no comparteixen cap paraula.

És la tecnologia que fa que la cerca es converteixi en comprensió en lloc de coincidència de paraules. Quan preguntes "què cal tenir en compte quan estic de vacances?", el sistema pot trobar la secció de la política sobre vacances, malgrat que la teva pregunta no contingui aquesta paraula.

A la pràctica, els embeddings s'utilitzen com a índex: els vostres documents es divideixen en fragments, cada fragment rep els seus números, i quan arriba una pregunta es comparen els números de la pregunta amb els dels fragments. Les coincidències més properes s'envien al model de llenguatge com a base. Així és com el biblioteques de coneixement i la cerca de documents d'EuroWork troben el paràgraf adequat en un manual de cent pàgines, i el cost de la indexació apareix al registre de costos com qualsevol altra cosa.