文本嵌入解释：AI 如何理解单词

太長; 讀書

大型语言模型。 你以前一定听过这些话。它们代表一种特定类型的基于机器学习的算法，可以理解并生成语言，这个领域通常称为自然语言处理或 NLP。 您肯定听说过最著名和最强大的语言模型：GPT-3。 正如我在介绍它的视频中所描述的那样，GPT-3 能够获取语言、理解它并生成语言作为回报。但在这里要小心；它并不真正理解它。其实，离理解还差得很远。 GPT-3 和其他基于语言的模型只是使用我们所说的单词词典将它们表示为数字，记住它们在句子中的位置，仅此而已。 让我们深入研究那些强大的机器学习模型，并尝试理解它们看到的不是单词，称为词嵌入，以及如何使用 Cohere 提供的示例生成它们。