임베딩
Embedding
글이나 그림의 뜻을 숫자 묶음으로 바꾼 것이에요. 뜻이 비슷하면 숫자도 비슷해져요.
조금 더 자세히
컴퓨터는 낱말의 뜻을 바로 알지 못해요. 임베딩은 글을 수백~수천 개의 숫자로 바꿔서, 뜻이 가까운 글끼리 숫자도 가깝게 놓이도록 해요. '강아지'와 '멍멍이'는 가깝고 '강아지'와 '세금'은 멀어요.
이렇게 해 두면 낱말이 달라도 뜻이 비슷한 문서를 찾을 수 있어요. 이것을 벡터 검색이라고 하고, RAG에서 관련 자료를 찾는 데 주로 써요.
예를 들면
도서관에서 비슷한 주제의 책을 가까운 책장에 꽂아 두는 것과 같아요. 책 제목이 달라도 옆에 있으면 찾기 쉬워요.
왜 알아 둘 만한가요
검색, 추천, 비슷한 글 묶기 같은 기능의 바탕이에요. LastAI도 같은 소식을 다룬 기사를 한데 묶을 때 이런 방식을 써요.
이렇게도 불러요벡터