GPT-4は語の意味についてどのような情報を持っているか?

【 GPT-4は「語の意味」についてどのような情報を持っているか? 】

このセッションでは、GPT-4が「語の意味」についてどのような情報を持っているかを探ります。

作ってみたのは、ある語を与えるとその語の「辞書項目」を出力するプロンプトです。(

「歩く」を与えると、こんなふうに動きます。

 【「歩く」の意味 】:
 動詞1: 両足を交互に前に進めて移動する。(例:彼は公園を歩いた。)
 動詞2: 一定の目的や方向に進む。(例:彼は成功へと歩いている。)

 【「歩く」のSemantic Category 】:
 [同義語] 歩行する; 徒歩で行く; 徘徊する; 散歩する; 闊歩する; 行進する; 練り歩く; 遊歩する; 步く; うろつく
 [類義語] 走る; ジョギングする; 進む; 旅する; 移動する; 歩みを進める; 旅行する; 遊ぶ; 散策する; 探検する
 [上位概念] 移動 < 行動 < 生物の活動 < 生物
 [下位概念] 歩く > 超高層ビルを歩く > 空中を歩く > ワイヤーを歩く

 【「歩く」のLexical Category 】:
 [近接語] 道; 公園; 散歩; ペース; 歩幅; 速度; 歩数; 遠く; 距離; 目的地; 環境; 風景; エリア; 足元; 自然
 [直前語] ゆっくりと; 速く; 楽しく; 遠くまで; 道を; 一緒に; 独りで; 公園を; 自然を; 環境を
 [直後語] を開始する; を終える; を続ける; と感じる; のスピード; の距離; のペース; で移動する; で旅行する; で探検する

「King」だとこうなります。

 【「King」の意味 】:
 名詞1: 一国を治める男性の君主を指す。(例: The king signed the decree.)
 名詞2: チェスやカードゲームなどで最も重要な役割を果たすピースまたはカード。(例: He moved his king.)
 名詞3: ある分野や領域で最も優れた、または支配的な人や物を指す。(例: He is known as the king of pop.)

 【「King」のSemantic Category 】:
 [同義語] Monarch; Ruler; Sovereign; Emperor; Tsar
 [類義語] Queen; Prince; Duke; Lord; Leader; Emperor; Tsar; Baron; Count; Sultan
 [上位概念] King < Monarch < Ruler < Human < Mammal < Animal
 [下位概念] King > Country's King > King's Subjects

 【「King」のLexical Category 】:
 [近接語] rule; reign; throne; kingdom; queen; prince; royal; crown; sovereign; authority
 [直前語] the; a; his; her; this; old; young; great; powerful; beloved
 [直後語] of; is; was; has; rules; reigned; orders; declared; ascended; died

この「辞書項目」の選択には、モデルがあります。プリンストンが公開しているWordNetという英語の大規模な語彙データベースです。最近はご無沙汰していたのですが、以前、このデータベースに憧れていました。今回作成したプロンプトの 「上位概念」はWordNetのhypernymを、「下位概念」はWordNetのhyponymをパクったものです。

WordNetが素晴らしいのは、「語の意味」というのは、それ自身で独立して存在するわけではなく、階層的な概念の一部として存在し、かつまた、それぞれの意味は、相互にリンクしてネットワークを構成していることを表現しているからです。

プロンプトで、こうしたミニWordNet-likeな情報を引き出すことが出来るということは、GPT-4は、こうした情報を保持し「語の意味」の階層とそのネットワークをキチンと把握していることを示しているのだと思います。

-------------------------------------

ショートムービー「 語の意味 」を公開しました。
https://youtu.be/yKnqUE3Gq4c?list=PLQIrJ0f9gMcMZkwx9VXm46JJ57pNpix1b

資料 pdf「 語の意味 」https://drive.google.com/file/d/1cebaii9RP2qBFH9foNdiOLq96HYD-O_u/view?usp=sharing

blog:「 GPT-4は「語の意味」についてどのような情報を持っているか? 」 
https://maruyama097.blogspot.com/2023/06/gpt-4_0832493384.html

「プロンプトで遊ぶ -- GPT-4 との対話 」まとめページ
https://www.marulabo.net/docs/prompt/

コメント

このブログの人気の投稿

マルレク・ネット「エントロピーと情報理論」公開しました。

初めにことばありき

人間は、善と悪との重ね合わせというモデルの失敗について