セマンティック検索｜LLMO用語集

セマンティック検索とは、検索する人が何を知りたいのかをコンピュータが分析して、答えを探し出す仕組みのことです。

これまでの検索では、入力した言葉がそのまま入っているページを探すだけでした。

セマンティック検索では、入力された言葉の意味や、言葉の裏にある目的をコンピュータが推測します。

例えば「アップル」と検索したときに、果物のりんごについて知りたいのか、コンピュータの会社について知りたいのかを状況から判断します。

入力した言葉が間違っていたり、別の言い方になっていたりしても、探している情報を見つけることができます。

セマンティック検索では、自然言語処理という技術を使い、文章を単語に分解してそれぞれの意味や関連性をデータ化します。

言葉を数値のデータに変換することで、文字の並びが違う「スマートフォン」と「スマホ」を同じ意味の言葉として扱います。

また、ナレッジグラフと呼ばれる、物事の関係性をまとめたデータベースを使用することもあります。

言葉と言葉のつながりを体系的に整理した情報を参照することで、検索された単語から連想される別の情報を提供できます。

これらの技術によって、概念的な一致度を計算して検索結果を決定しています。

LLMが文章を生成する際、セマンティック検索を組み合わせることで、回答に客観的な情報を含めることができます。

LLM単体では、学習した時点の情報しか持っていないため、事実とは異なる内容を出力する可能性があります。

そこで、ユーザーの質問の意図をセマンティック検索で解析し、外部のデータベースから関連する情報を引き出します。

その情報をLLMに与えることで、事実に基づく回答を作成する仕組みが構築できます。

この技術の組み合わせは、社内文書の検索システムなど、正確な回答が求められる場面で活用されています。