copilot-cliがローカルの画像ファイルを読み取れるか検証

はじめに

copilot-cli がローカルの画像ファイルを読み取り、内容を説明できるかを検証しました。

公式docによればビジュアル参照は可能と書いていますが、ドラッグアンドドロップするということを書いていて、ローカルのファイルを読ませる方法がわからなかったので、一応試しました。

実施内容

1. 以下の Wikipedia 画像をローカルに image.jpg という名前で保存しました。
   https://ja.wikipedia.org/wiki/%E3%82%A2%E3%82%A4%E3%82%B6%E3%83%83%E3%82%AF%E3%83%BB%E3%83%8B%E3%83%A5%E3%83%BC%E3%83%88%E3%83%B3#/media/%E3%83%95%E3%82%A1%E3%82%A4%E3%83%AB:Portrait_of_Sir_Isaac_Newton,_1689_(brightened).jpg

2. copilot-cli の新規セッションを開始しました。

3. image.jpg について「何が書いているか説明して」と依頼しました。

観測結果

• read image のようなログが表示されました。
• 回答として「ニュートンらしい」といった趣旨の説明が返ってきました。

おわりに

読めていそうです。