Embedding matrix

前言

如何透過Embedding matrix找到一個單字對應的Embedding Vector。

內容

• Embedding matrix

  

• row: 300，表示某個單字的features。
• column: 10000，表示字典中有10000個單字。
• 如何透過一個單字的one-hot vector，從Embedding matrix找到對應Embedding Vector？ 就是簡單做個內積。
• 實作上，這樣的做法是很耗計算量，所以會用一個專有的function(Embedding)來進行處理。
• Embedding matrix，其實是透過模型不斷訓練出來的結果。

該學到的

• Embedding matrix是什麼。
• 如何透過Embedding matrix找出Embedding Vector。