Що таке ембедінг?

Ембедінг, це список чисел, який фіксує, що саме означає фрагмент тексту, а не просто які слова в ньому містяться. Два тексти, що розповідають про одне й те саме, наприклад, «компенсація за відпустку» і «оплачувана відпустка», опиняться поруч у цих числах, навіть якщо не мають жодного спільного слова.

Саме ця технологія дозволяє пошуку перетворитися на розуміння, а не просто на підбір слів. Коли ви питаєте «що діє, коли я у відпустці?», система знаходить розділ про відпустки в політиці компанії, хоча у вашому запитанні цього слова й не було.

На практиці ембедінги використовують як індекс: ваші документи ділять на частини, кожній частині присвоюють свої числа, а коли надходить запит, числа запиту порівнюють з числами частин документів. Найближчі збіги передаються мовній моделі як основа для відповіді. Так у EuroWork працюють бібліотека знань і пошук у документах, вони знаходять потрібний абзац у посібнику на сотню сторінок, а вартість індексації відображається у журналі витрат, як і все інше.