手元で測る
公開されているモデルをノートパソコンで実際に動かして、出てきた数字をそのまま並べた記事。「そう言われている」ではなく「測ったらこうだった」のほうを集めています。スクリプトは記事に載せてあるので、語や文を差し替えれば手元でも同じことができます。
9本。カテゴリはバラバラですが、同じ関心で並べています。
- ミディアム小さいLLMも「平社員が社長を解雇した」はあり得ないと知っていた——ただし言葉で聞くと、答えられなかったLLMと自然言語深掘り実践日本語処理手元で測る
- ミディアム「社長が部長を解雇した」と「部長が社長を解雇した」が、ほとんど同じ文として扱われた——語順も助詞も、意味ベクトルには残らなかったLLMと自然言語深掘り実践日本語処理手元で測る
- ミディアム「走る」も「走った」も「走」から始まっていた——LLMの区切り方は、日本語と英語で正反対だったLLMと自然言語深掘り日本語処理手元で測る
- ミディアム「飲んではいけない」が、「飲んでよい」の検索で1位になった——否定は、意味ベクトルをほとんど動かさなかったLLMと自然言語深掘り実践日本語処理手元で測る
- ミディアム「喜ぶ」と「嬉しい」は、品詞が違うのに近かった——名詞・動詞・形容詞の区別は、意味ベクトルに残っていなかったLLMと自然言語深掘り実践日本語処理手元で測る
- ミディアム犬と猫は、思ったほど近くなかった——意味ベクトルで測ると、犬に近いのは牛・馬・豚だったLLMと自然言語深掘り実践手元で測る
- ミディアムクジラのほうが、人間より哺乳類だった——意味ベクトルが見ているのは、分類ではなく使われ方LLMと自然言語深掘り実践手元で測る
- ミディアム「犬」と「いぬ」は、別の語として扱われている——表記を変えるだけで、意味ベクトルは遠くなったLLMと自然言語深掘り実践日本語処理手元で測る
- ミディアム人間はチンパンジーよりマグロに近かった——LLMの意味空間は、生き物の分類でできていないLLMと自然言語深掘り実践手元で測る