果洛州公司網(wǎng)站建設(shè)電商培訓(xùn)班
整體框架

機器翻譯流程(Transformer)
通過機器翻譯來做解釋
給一個輸入,給出一個輸出(輸出是輸入的翻譯的結(jié)果)
“我是一個學(xué)生” --》(通過 Transformer) I am a student
流程 1
編碼器和解碼器
編碼器:把輸入變成一個詞向量(Self-Attetion)
解碼器:得到編碼器輸出的詞向量后,生成翻譯的結(jié)果
流程 2

Nx 的意思是,編碼器里面又有 N 個小編碼器(默認 N=6)
通過 6 個編碼器,對詞向量一步又一步的強化(增強)
流程 3

說了這么多,了解 Transformer 就是了解 Transformer 里的小的編碼器(Encoder)和小的解碼器(Decoder)
FFN(Feed Forward):w2((w1x+b1))+b2
流程 4
