Basic Models
前言
先了解什麼是Sequence to sequence model,是如何建立Basic Model來對應 不同的Sequence之間的關係。再進一步給不同的例子mage captioning來感覺這樣的model是如何建立的。
內容
Sequence to sequence model
- 如何從法語(5個詞)翻譯成英語(6個詞)。
- 分成兩大塊
- encode(可以是GRU或LSTM模型): 給法語句子輸出word embedding vector。
- decode: 給word embedding vector依序生成翻譯後的英文單字(y)。
Image captioning
- 給一張圖片,可以根據這個圖片進行描述。
- 分成兩大塊
- encode(CNN模型): 給圖片輸出feature vector。
- decode: 給feature vector依序生成將要描述此圖片的單字(y)。
該學到的
- ecode跟decode的組合。