bert的雙向理解:本質上來講就是高層(輸入層為最底層)的每個隱藏單元能接受上一層的所有信息(并非只是左邊或者右邊);類似DNN神經網絡,每個隱藏神經元都能接受到上一層的所有信息;雙向比單向功能更加強大,因為單向是雙向的子集;

bert的深度理解:深層必然比淺層要好;原理類似;深層包含著淺層;

總結

以上是生活随笔為你收集整理的bert本质理解记录一的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。