株式会社トドオナダは、LLM認知確認ツール「ディギディギ」に新機能「RAG発火測定」と「RAGシミュレーター」を搭載しました。LLMが質問に対して事前学習の記憶で答えるかWEB検索（RAG）を利用するかを測定し、検索時のクエリや参照先、回答内容を実測できます。自社の関心カテゴリにおけるLLMの検索行動や想起状況の把握を可能にします。

開発の背景とLLMの検索行動

トドオナダが実施した調査（2026年8月31日発表および追加調査）によると、LLMは多くのカテゴリでWEB検索を行わず想起記憶で回答しており、検索を実行するのは想起集合が不安定なカテゴリに偏ることが分かっています。また、検索が実行された場合でも、検索クエリの85.8%は「人気 ランキング」「おすすめ 2024」などの現行確認型であり、検索前からLLMが想起しているメーカー名や商品名、型番がクエリに含まれる傾向があります。

同社は、検索クエリが想起集合から作られ、想起集合に入っていないブランドはクエリに現れないという特性を踏まえ、サイテーション獲得などのRAG対策の前に自社カテゴリでの検索の有無や自社名の含有状況を実測で確かめる手段として今回の機能を開発しました。

搭載された2つの新機能

今回追加された新機能の詳細は以下の通りです。

• RAG発火測定：ディギディギのチャットでカテゴリについて質問すると、想起集合や想起強度に加え、RAG発火回数が結果カードに表示されます。検索ツールを与えた試行を並行して実行し、検索の呼び出し回数を測定することで、想起の強さと検索依存度を同時に確認できます。
• RAGシミュレーター：RAG発火回数のチップから起動し、検索ツールを与えた状態で複数回の試行を実行します。発火の有無をカラーボールで一覧表示するほか、生成された検索クエリを発行順に表示して4つ（現行確認、語義確認、比較評価、その他）に分類します。さらに、回答生成までの往復ログの追跡、参照記事のドメインにおけるrobots.txt判定（AIクローラーのブロックまたは許可）、GPTおよびClaudeによるモデル間比較に対応しています。

想定される用途と提供条件

本機能は、自社の主要カテゴリにおいてLLMがWEB検索を行うかや検索時のクエリ内容を確認し、想起集合対策の効果とRAG経由の露出機会を実測で把握する用途を想定しています。また、質問文を言い換えて検索回数やクエリの変化を比較することにも利用できます。

RAGシミュレーターは「ディギディギ」の機能として提供されます。利用料金は月額10,000円で、同社のPR効果測定ツール「Qlipper」の利用者はプラン制限付きで無料となります。なお、RAGシミュレーターの実行回数には上限が設けられています。

関連サービスと運営会社概要

ディギディギは、LLMが特定カテゴリで何を想起するか、自社ブランドが想起集合に含まれるか、ハルシネーションが発生していないかを測定するツールです。関連サービスとして、ビューティー領域84カテゴリを対象に想起集合とRAG発火率を記録・公開するサイト「ディギコのチャピりログ」も展開しています。

開発・運営を行う株式会社トドオナダの概要は以下の通りです。

• 社名：株式会社トドオナダ
• 所在地：東京都台東区上野7-11-13 弥彦ビル302
• 代表者：代表取締役 松本泰行
• 事業内容：PR Tech（Qlipper、ディギディギの開発・提供）
• 所属：公益社団法人日本パブリックリレーションズ協会 会員

本記事は株式会社トドオナダの発表をもとに作成しました。