如何在网页上训练我自己的自定义词嵌入?

我在多个网页上有大量关于我有兴趣出售给客户的产品的文本数据。我尝试使用在 Wikipedia 上训练的预训练 fasttext 词嵌入,但它没有给我分类任务的好结果。可能是因为网站上的文本数据包含很多技术细节,与维基百科中的文本数据不同。所以我想做一些词嵌入的迁移学习,以预训练的 fasttext 词嵌入为基础。

  1. 如何使用 Keras 在这些网页上训练我自己的自定义词嵌入?

  2. 如何使用 fasttext 预训练嵌入和训练初始化自定义词嵌入?这种初始化真的有助于提供更好的词嵌入吗?

我更喜欢使用 Keras 来训练词嵌入的解决方案。
我知道 Embedding 有 trainable=True 选项不知道如何使用它。

Embedding(voc_size, emb_dim, weights=[embedding_matrix], input_length, trainable=True)

为这个 Keras 或 Gensim 推荐哪个框架,为什么?


白猪掌柜的
浏览 217回答 2
2回答
打开App,查看更多内容
随时随地看视频慕课网APP

相关分类

Python