ハルシネーション０のWeb検索ツール Eikos-search を公開しました

きれいなお姉さんは、好きですか？
どうも、Mas-sensyn です。
Web 記事の中から、質問の答えになっている一文をそのまま抜き出す検索ツール eikos-search を作り、公開しました。

eikos-search とは

eikos-search は、オープンソースの Jev である Eikos を使った Web 検索ツールです。

1. 質問で Web 検索し、上位 8 件の記事本文を取得します（検索エンジンは Bing・Yahoo・DuckDuckGo）。
2. 本文を一文ずつに分け、質問と単語が近い 64 文に絞ります。
3. 64 文それぞれについて「質問の答えになっているか」を Eikos が確率で評価し、一番よい一文を返します。

Eikos は文章を生成せず、与えられた選択肢に確率を付けるだけのモデルです。そのため、返ってくる答えは必ず既存のページにある原文そのままです。答えが見つからないときは「どの記事にも書かれていない」と返します。

「ハルシネーション 0」の範囲

ここでいう「ハルシネーション 0」は、返す文がどこにも存在しない作り話になることはない、という意味です。返す文は必ず実在するページの原文で、出典リンクから確かめられます。

一方、どの文を答えに選ぶかは Eikos の判断なので、質問の解釈が意図どおりとは限りません。

LLM や Google 検索との違い

	返すもの	弱いところ
eikos-search	答えになっている原文の一文 + 出典リンク	一文で答えられない質問は苦手。質問の解釈を外すことはある
LLM・AI 検索（ChatGPT など）	生成した文章	もっともらしい嘘をつくことがある
Google 検索	ページへのリンク一覧	答えを探すにはページを自分で読む必要がある

結果

例 1: 世界で一番安い RTX 5080 マシンは？

what is the most cheap RTX5080 machine in the world?

	答え	問題点
eikos-search	"The cheapest in-stock card is the Gigabyte model at $1,699.99." + 出典リンク	なし。ページの原文そのままの価格
Google AI 検索	"GIGABYTE GAMING A16 PRO (specifically the DYHG5JPC64SP variant)."	製品名だけで、知りたかった価格がない
Google 検索の 1 位	GeForce RTX 5080 Tier list? (but mid-price range) : r/nvidia	リンクだけ。ページを開いても、どこに答えがあるか分からない

例 2: 世界で一番あぶないでかは？

世界で一番あぶないでかは？

普通の Google 検索では舘ひろしさんと柴田恭兵さんが出てきます。一方、eikos-search では次のようにロバート・パーシング・ワドローが出ました。

死亡時の身長は272cmという前例のないものであり、体重は約200kgであった。
（出典: ロバート・ワドロー - Wikipedia）

	答え	問題点
eikos-search	「死亡時の身長は272cmという前例のないものであり、体重は約200kgであった。」+ 出典リンク	なし。ページの原文そのまま
Google AI検索	日本が世界に誇る大ヒットアクション刑事シリーズ『あぶない刑事』（あぶデカ）のことを指していると考えられます。タイトル自体がもっとも「あぶない」のは、1989年に公開された劇場版第3作の映画『もっともあぶない刑事』です。	世界一の「でか」は出てこない
Google検索	もっともあぶない刑事 - FOD - フジテレビ	世界一の「でか」は出てこない

返ってきた文はウィキペディアの原文そのままで、作り話ではありません。ただ、「でか」を刑事ではなく「デカい人」と解釈したのは Eikos の判断です。とはいえ、身長 272 cm、体重約 200 kg とのことなので、舘ひろしさんよりも危ないでしょう。世界は広いです。

まとめ

• eikos-search は、Web 記事の中から答えになっている一文をそのまま返す検索ツールです。
• 答えを生成しないので作り話をせず、出典リンクで元のページをすぐ確かめられます。質問の解釈を外すことはあるので、そこは出典で確かめてください。
• MIT ライセンスで公開しています。ぜひ試してみてください。