词向量:国王 − 男人 + 女人
计算机处理词语时,需要把词变成数。词向量就是用一组数表示一个词,意思相近的词在空间中位置也相近。本实验演示经典的类比例子“国王 − 男人 + 女人”,让你通过向量加减,观察结果落在哪个词附近。
在实验室中查看
实验目的
理解词向量的含义,体会词语之间的关系可以用向量运算表示。
实验原理
词向量把每个词表示为一组数(高维向量),训练后,意思或用法相近的词在空间中距离较近。词之间的某些关系表现为相近的方向,因此 vec(国王) − vec(男人) + vec(女人) 得到的向量,与 vec(女王) 较为接近。这是经典示例,具体结果取决于所用的模型和词表。
实验器材
- 词向量空间图(二维投影)
- 词语列表
- 向量加减运算操作
- 与结果最接近的词的显示区
实验步骤
- 观察空间图,找出意思相近的词聚在哪里。
- 选中“国王”,再减去“男人”,观察向量的变化。
- 再加上“女人”,得到运算结果的位置。
- 查看离结果最近的词,是否是“女王”。
- 换其他词对(如国家与首都)再试一试。
实验现象与结论
意思相近的词在空间中彼此靠近。“国王 − 男人 + 女人”的结果落在“女王”附近。结论:词向量能把词义和词间关系编码成数值。需注意,二维图是高维空间的投影,会损失部分信息,结果也只是近似。
常见问题
- 为什么运算结果不一定恰好是“女王”?
- 向量运算得到的是一个点,只能找到离它最近的词,结果是近似的,与模型和词表有关。
- 词向量和大语言模型有什么关系?
- 大语言模型会先把词元转换成向量(嵌入),再对这些向量做后续计算。
同一课题的其他实验 ·
生活里的人工智能在日常生活场景中找一找人工智能,认识语音助手、人脸识别、导航等常见 AI 应用,并体会它们…
图灵测试小游戏:猜猜对面是人还是机器通过文字交流判断对面是真人还是机器,体验图灵测试的思路,思考机器表现得“像人”是否就等于有…
机器怎么“看”一张图把一张图片放大到像素,观察每个小格对应的数字,了解计算机是如何把图像变成数据来“看”的。
规则与学习:让机器变聪明的两种方法对比“人工编写规则”和“从数据中学习”两种方法,体会机器是如何完成分类、判断等任务的。
人工智能发展简史按时间顺序浏览人工智能发展中的重要事件,了解它的起步、起伏与近年快速发展的原因。
AI 能做什么、不能做什么通过判断一系列任务是否适合交给人工智能,认识 AI 的擅长之处与局限,学会理性看待它。
给图片贴标签:认识数据标注动手给图片贴上类别标签,体会机器学习需要“带答案”的数据,了解标签对机器识别的作用。
声音变成波形观察声音在屏幕上显示成的波形,了解响度、音调与波形的关系,理解声音如何变成计算机能处理的数…
相关搜索:词向量是什么 · 国王减男人加女人 · 词嵌入 高中人工智能 · word2vec 词向量类比 · 词向量运算 · 词向量 女王 · 词向量:国王 − 男人 + 女人互动课件 · 词向量:国王 − 男人 + 女人虚拟仿真实验