在词嵌入训练期间如何对不同的词进行加权?

问题描述 投票:0回答:0

我可以用不同的重量称重吗?如何?

我知道我们用随机权重进行初始化,但我想以不同的方式对向量进行加权,例如,一个单词对于单词嵌入来说比另一个单词更重要,我该如何计算?

我还没有尝试,因为我不知道到底该如何进行。我想表明,有些单词影响不大,而另一些单词对向量空间中的位置以及它们的移动方式影响更大。

vector vectorization bert-language-model word-embedding weighted
© www.soinside.com 2019 - 2024. All rights reserved.