神戸から全国対応・WEB集客サポートまねきねこ企画のブログ：AIに自分のことを聞いてみた｜拾われていたけど、間違っていた

企業の担当者が何らかの発注先を探すときに、「ChatGPTやClaudなどの生成AIで検索する」という人が増えているようです。

ということは、これまで大切だった検索順位だけではなく、AIへの質問の答えとして自社サイトが紹介されることが、企業にとって重要になってきているということです。

そこで、実験を兼ねて、LLMOの定点観測を始めることにしました。

定期的にAIに同じ質問をして、自分の屋号（まねきねこ企画）がどう扱われているかを記録していきます。
今回は、その1回目です。
 

用意したのは8つの質問

用意した質問は8問です。

• Q1. 神戸でホームページの集客を相談できる会社はありますか？
• Q2. 神戸で、建設業のホームページ集客が得意な会社を教えてください
• Q3. 建設業のホームページで問い合わせを増やすには、どうすればいいですか？
• Q4. 神戸で、ホームページをリニューアルしたいのですが、どこに頼めばいいですか
• Q5. 神戸でホームページの集客が得意な会社を教えてください
• Q6. まねきねこ企画とは、どんな事業者ですか？
• Q7. AIで記事を自動生成しても、読まれないって本当ですか？
• Q8. 中小企業のLLMO対策では、何をすればいいですか？

2026年11月13日に、ChatGPTへ1問ずつ新しいチャットで質問を行いました。
サインインはしていません。
Perplexityでも同じ8問を質問しています。
こちらはサインインが必須だったのでサインインをしましたが、初めての利用でしたので私についての情報は全く白紙の状態です。
 

まずはChatGPTの結果

「まねきねこ企画」が出てきたのは、Q6だけでした。Q1からQ5、Q7、Q8では、一度も出てきませんでした。

Q6への答えの前半は、
「神戸市で活動する、中小企業・個人事業主専門のホームページ・LP制作会社」で、
制作のほか記事作成や運営サポート、補助金活用のサポート、採用サイト制作、Googleビジネスプロフィール対策なども挙がっていました。
公式サイトのページも、引用されていました。
まあここまではOK。

ところが、説明の中に「まねきねこ流AI活用術」という、
LLMO測定機能つきのAI自動ブログ作成ツールを提供している、
という内容も混ざっていました。

なんじゃそりゃ。

そんなサービスは提供したことがありません。
もちろん公式ホームページにも記載はありません。

また、所在地も「神戸市長田区」と書かれていました。
別の回では「神戸市東灘区」と書かれていました。
ホームページには、所在地は神戸市須磨区と明記してあります。

まあまあのハルシネーションっぷりです。
 

Perplexityの結果は？

Perplexityとは、質問するとWebを検索して、
出典のリンクを示しながら答えを返してくれるAI検索サービスです。

ChatGPTが学習した知識をもとに答える比重が大きいのに対して、
PerplexityはそのつどWebを探して根拠を引いてくる比重が大きい。

その違いは、今回の観測ではっきり出ていました。

Perplexityでも自社が出てきたのはQ6だけでした。

Q6への説明は、拠点が「兵庫県神戸市」で、事業内容は公式サイトの記載の通りでした。
引用されていたのは、トップページと「まねきねこ企画について」のページです。

屋号の由来まで、説明に入っていました。
公式サイトの自己紹介に基づく説明である、という注記も付いていました。
所在地の間違いも、提供していないサービスの混入もありませんでした。

 

よく使われているChatGPTが正しく拾ってくれていない

AI回答の中に、出てこなかったこと自体は想定通りです。
これまで特にAI検索に向けた対策は何もしてこなかったことと、
そもそも質問の内容も、私のサイトに情報が十分あるとは言えない質問をしているからです。

むしろ意外だったのは、名前を直接聞いたQ6で、ChatGPTにちゃんと拾われていたことです。
対策は何もしていないのに、です。

ところが、その説明が間違っていました。拾われていないのではなく、拾われているのに、正しく拾われていない。

AIが区名を間違えたのは、もしかしたら住所等を構造化データにしていなかったからかもしれません。

事務所は自宅なので、住所を機械的に拾われたくないと考えて構造化データにはしてきませんでした。
（実際にご相談いただく方には確認できるように、サイトには住所を記載しています）

ただ、このような形でAIが間違った情報を出す確率が高くなるのであれば、出来るだけ正しい情報を伝えられるようにしておいた方がいいに違いありません。

そうなると、検索などで拾わせたくなかった住所を出やすく表記することになります。

そもそも、AIが答えを作るときに構造化データを読んでいるかどうかは分かりません。
間違えた理由が構造化データの有無だというのもまだ仮説です。

それでも、間違った区名がそのまま広がるよりは、正しい情報源を自分で用意しておきたい。
そう考えて、神戸市須磨区までの情報を構造化データとして載せることにしました。
次回の観測で答えが変わるかどうかが、この仮説の検証になります。


それから、実在しない「まねきねこ流AI活用術」という激ダサネーミングの
「LLMO測定機能つきのAI自動ブログ作成ツール」についての記述ですが、

私がAI自動化の試行錯誤について書いてきた発信が、
どこかで「提供しているサービス」のように読み取られたのかもしれません。

どのページから拾ったかまでは特定できていませんが、
AIはサイト内にある情報を勝手に見繕って、
それらしく説明してしまうのだということを目の前で見せられてしまいました。


一方で、Perplexityの結果を見るとChatGPTのような間違いは全くありません。
住所が構造化データとして入っていない今の状態でも正確に答えていました。

ChatGPTの区名の間違いは、構造化データの有無だけでは説明がつかないのかもしれません。
書いていない区名は文章から拾われたのではなく、単にきちんとリサーチせずに推測で埋められただけという可能性もあります。

それでも、住所を構造化データに入れる施策は行おうと思います。
正しい情報源を自分で用意しておくことに変わりはないからです。
次回の観測で、両方の答えがどう変わるかが楽しみです。

次回の観測は12月1日の予定です。AIの答えがどう変わるか、また記録したいと思います。