🧠 FastText의 확장 – 부분 단어 정보까지 활용하다

🧠 13.FastText의 확장 – 부분 단어 정보까지 활용하다

기존 임베딩은 사전에 없는 단어를 이해하지 못했습니다. 파스트텍스트는 단어를 문자 단위의 조각으로 나누어 벡터를 학습해, 새로운 단어와 희귀 단어까지 의미를 추론할 수 있었습니다.

✨ 핵심 포인트

사전에 없는 단어 문제와 한계

부분 단어 단위의 임베딩 아이디어

희귀 단어와 신조어 처리 개선

여전히 남은 문맥 이해의 한계

👉 다음 에피소드: 14. 도크투벡 – 문서 전체를 하나의 벡터로

🏷️ #자연어처리 #파스트텍스트 #단어임베딩 #NLPOdyssey #AI역사

Up next

🌍 12 GloVe의 글로벌 관점 – 전역 통계와 지역 문맥의 결합 #자연어처리 #글로브 #단어임베딩 #NLPOdyssey #AI역사

🧠 FastText의 확장 – 부분 단어 정보까지 활용하다 #자연어처리 #파스트텍스트 #단어임베딩 #NLPOdyssey #AI역사 - AI Odyssey NLP