20. GloVe Word Vectors
2023. 9. 27. 15:30ㆍGoogle ML Bootcamp/5. Sequence Models
Notation
- X(i,j) : i(target)가 j(context)와 함께 등장한 횟수.
GloVe : np.dot( theta(T), e(j) )
- 우리가 설정한 feature가 행렬곱으로 생성된 matrix에서 무엇을 설명하는지 해석하기가 어렵다.
- 하지만 이전에 vector끼리의 유사도를 계산하거나, loss를 계산하는 등 학습은 잘 이루어짐이 관찰됐다....
'Google ML Bootcamp > 5. Sequence Models' 카테고리의 다른 글
| 22. Debiasing Word Embeddings (0) | 2023.09.27 |
|---|---|
| 21. Sentiment Classification (0) | 2023.09.27 |
| 19. Negative Sampling (0) | 2023.09.27 |
| 18. Word2Vec (0) | 2023.09.27 |
| 17. Learning Word Embeddings (0) | 2023.09.27 |