深度学习的一点学习笔记(机器翻译相关)

前沿 本次笔记主要会描述NLP的相关知识,包括RNN,GRU,LSTM等模型;以及机器翻译的相关技术;Seq2Seq等。 由于对RNN接触不多,尝试记一些笔记会很凌乱,但是可以顺着知识线,按照给出的链接去自行阅读相关知识。 下一章,CNN的一些笔记 RNN的基础知识 关于RNN,也是老生常谈的网络结构了,为了提醒自己,补充一点小观点。下面是一些博客上讲解RNN的链接。 RNN 这篇文章比较概述性的讲解了RNN的一些基本知识。 除此之外,RNN是一个序列形的结构,在实现机器翻译的时候,或者句子简单的预测,都是有多个RNN构成的长序列。 上图显示了RNN的结构,在pytorch中有如下代码: