NLP神经网络之一维卷积的处理【Conv1D】和GLU层

NLP神经网络之一维卷积的处理【Conv1D】和GLU层_第1张图片

 之后,我们将这个embedding层连接到一个Conv1D。事实上,该层的主要思想与我们在图像分类任务中常用的Conv2D完全相同。Conv1D的不同处在于它的过滤器沿着单个轴而不是两个轴移动。下面是另一张图,显示了一维卷积层的过滤器(以蓝色突出显示)如何跨步。此外,我将针对这种情况使用 32 种不同的过滤器(尽管这可能有点矫枉过正)。

NLP神经网络之一维卷积的处理【Conv1D】和GLU层_第2张图片

 NLP神经网络之一维卷积的处理【Conv1D】和GLU层_第3张图片

【看不懂的可以看链接里面的卷积动画:Convolutional Models for Text】 

NLP神经网络之一维卷积的处理【Conv1D】和GLU层_第4张图片

 

NLP神经网络之一维卷积的处理【Conv1D】和GLU层_第5张图片

你可能感兴趣的:(机器学习,NLP,深度学习算法,神经网络,自然语言处理,深度学习)