在窗口字嵌入中启动标记

问题描述 投票:1回答:1

我正在使用经过预先训练的SENNA嵌入并将3个字窗口输入到Dense神经网络中。

塞纳有开始或结束标记嵌入吗?或者我创建一个随机向量?

Sentence:  'McDonalds sells fries'
input 1:  ['<s>', 'McDonalds', 'sells']

但是<s>没有嵌入......我是否创建了自己的? (例如所有-1)?

neural-network nlp nltk lstm named-entity-recognition
1个回答
0
投票

阅读qazxsw poi上的主页似乎是标记化(包括特殊句子边界标记)在内部处理。

你有没有理由想要加入它们?从网站上看,它们似乎隐含在输入上下文(单句)上。

摘自网站:

https://ronan.collobert.com/senna/
© www.soinside.com 2019 - 2024. All rights reserved.